Runway AI przerobi wideo w efektowną produkcję

sztucznainteligencjablog.pl 2 tygodni temu

Runway wzbogaca swoje możliwości w zakresie tworzenia i edytowania wideo, wprowadzając na platformę Gen-3 Alpha upragnioną funkcję przekształcania wideo na wideo. Nowe narzędzie pozwala użytkownikom na przesyłanie istniejących materiałów wideo oraz podawanie tekstowych wskazówek, które umożliwiają modyfikację tych nagrań. Umożliwia to dostosowanie scenerii, postaci oraz innych elementów filmu, tak aby harmonizowały z opisanymi sugestiami stylistycznymi.

Gen-3 Alpha Video to Video is now available on web for all paid plans. Video to Video represents a new control mechanism for precise movement, expressiveness and intent within generations. To use Video to Video, simply upload your input video, prompt in any aesthetic direction… pic.twitter.com/ZjRwVPyqem

— Runway (@runwayml) September 13, 2024

Nowe możliwości przetwarzania wideo w Runway

Funkcja przekształcania wideo na wideo to ostatni istotny dodatek do bogatego repertuaru opcji tworzenia wideo w Runway. Poprzednio użytkownicy mogli wcześniej definiować wygląd i ruch filmu, zaczynając od tekstu lub obrazów. Teraz, korzystając z rzeczywistych wideo jako punktu wyjścia, można precyzyjnie określić ruch i wykorzystać sztuczną inteligencję do zmiany estetyki. Jak zaznacza Runway, „

Video to Video reprezentuje nowy mechanizm kontrolny dla precyzyjnego ruchu, ekspresji i intencji w generacjach”.

Szeroki zakres zastosowań

Aby skorzystać z funkcji przekształcania wideo, wystarczy przesłać swój klip filmowy, podać wskazówki estetyczne lub wybrać jeden z predefiniowanych stylów. Runway doskonale przeszkolił swoje modele przy użyciu dużej bazy wideo i obrazów ze szczegółowymi opisami, co umożliwiło AI lepsze zrozumienie przesyłanych materiałów oraz intencji zmian. Połączenie opcji przekształcania wideo z istniejącymi możliwościami Gen-3 Alpha, które obsługują skomplikowane przejścia i emocje ludzkie, pozwala uzyskać zaskakujące rezultaty.

W ostatnich aktualizacjach Runway wprowadził także wersję Turbo Gen-3 Alpha, która, mimo iż pewne funkcjonalności zostały ograniczone, charakteryzuje się zwiększoną prędkością działania. Oprócz nowego narzędzia przekształcania wideo, platforma oferuje również ochronę Motion Brush, zaawansowane sterowanie kamerą, tryb reżysera oraz inne funkcje edycyjne o szczegółowej kontroli.

Wyzwania i konkurencja na rynku

Mimo iż Gen-3 Alpha pokazuje się jako bardziej wszechstronny i przyjazny dla użytkownika niż jego poprzednik, istnieją pewne ograniczenia, takie jak maksymalna długość generowanych klipów wynosząca 10 sekund, co nie jest wystarczające dla pełnometrażowych filmów. Niemniej jednak, jakość i prędkość generowanych materiałów mogą zrekompensować te niedociągnięcia, przynajmniej do czasu, gdy platforma poszerzy swoje możliwości.

Runway stoi przed rosnącą konkurencją w dziedzinie sztucznej inteligencji wideo. Wśród największych rywali znajduje się model Sora firmy OpenAI, ale nie jest on jedynym graczem. Także Stability AI, Pika i Dream Machine od Luma Labs przyspieszają rozwój AI wideo, a choćby twórcy TikToka, Bytedance, pracuje nad własnym narzędziem, Jimeng.

Dla tych, którzy chcą przetestować funkcję przekształcania wideo, Gen-3 Alpha dostępny jest dla użytkowników z płatnymi planami zaczynającymi się od 12 dolarów miesięcznie.

Źródło: techradar.com: This AI can turn your mundane video into a special effects spectacular.

Idź do oryginalnego materiału