Firma Meta, amerykański konglomerat technologiczny, do którego należy między innymi Facebook, jak każda duża korporacja inwestuje niemałe pieniądze w sztuczną inteligencję. Najnowszym owocem tych prac jest zaprezentowany niedawno Meta Movie Gen AI, zestaw narzędzi pozwalający tworzyć, ale też edytować filmy i muzykę za pośrednictwem komend tekstowych. Magia dzieje się dzięki sztucznej inteligencji i uczeniu maszynowemu, a efekty już teraz są zdumiewające.
Meta Movie Gen AI prawie ukończona
Meta Movie Gen AI to wykorzystujący około 30 miliardów parametrów model AI, potrafiący generować 16-sekundowe klipy HD na podstawie promptów, czyli komend tekstowych. Sztuczną inteligencję wstępnie wyszkolono na miliardzie obrazów i 100 milionach filmów. Jak widać baza jest ogromna, a pochodzenie nagrań… Cóż, nieznane. Wiemy tylko tyle, iż filmy zostały wybrane z dużo większej „kolekcji”.
Mając zdjęcie osoby i opis tej osoby w scenie, AI może wygenerować realistyczne wideo animowanego aktora i sceny. AI została wyszkolona w 22 typach ruchu i pozycji kamery, takich jak szeroki kąt, pochylenie w górę i lewa ciężarówka. Ma to pozwolić filmowcom określić rozmieszczenie w przestrzeni i ruchy kamery jak w prawdziwej sesji zdjęciowej. Movie Gen ma unikalną zdolność do dokładnego i realistycznego edytowania filmów. Inne AI w tej chwili nie są w stanie tworzyć edycji tak dobrych, jak Movie Gen Edit.
Tutaj znajdziecie obszerną playlistę od AI at Meta z 80 przykładowymi filmami. Wiele robi spore wrażenie.
Meta Movie Gen Audio AI to z kolei model AI bazujący na 13-miliardach parametrów, który potrafi generować na życzenie efekty dźwiękowe i muzykę w „jakości” 48 kHz. AI wyszkolono na milionie godzin dźwięku. Do dostrojenia sztucznej inteligencji wykorzystano opinie ludzkie oraz wysokiej jakości próbki audio i wideo. SI potrafi tworzyć muzykę o długości kilku minut. Ze względu na zasoby, których to wymaga, stworzono ograniczenie do 16-sekundowych klipów.
- Sprawdź: Ardour 8.8 wydany. To darmowy program opensource do muzyki
Meta pracuje w tej chwili nad dodaniem stosownych zabezpieczeń i „limiterów” do Movie Gen AI. Firma udostępni projekt publicznie, gdy tylko ukończy nad nimi prace.
Uprzedzam: o ile spróbujecie uzyskać dostęp do Meta AI z terytorium Polski, ujrzycie komunikat o treści: „Sztuczna inteligencja Meta AI nie pozostało dostępna w Twoim kraju”.
Źródło: AI at Meta
