Firma wypuściła model Gen-4, który już wzbudził spore zainteresowanie.
Tworzenie filmów przy użyciu sztucznej inteligencji właśnie poczyniło ogromny krok naprzód. Runway, startup zajmujący się sztuczną inteligencją, wspierany przez dużych inwestorów, w tym Google, Nvidia i Salesforce, wprowadził na rynek Gen-4, swój najbardziej zaawansowany model generowania wideo. Jakie są funkcje i charakterystyki Runway Gen-4?
MigNews opowie Ci wszystko, co musisz wiedzieć o tym wydaniu i dlaczego jest to prawdziwy przełom w technologii.
Czym jest Runway i nowy projekt Runway Gen-4?
Runway ma na celu zrewolucjonizowanie sztuki, rozrywki i ludzkiej kreatywności. Jako firma skupiająca się na badaniach nad sztuczną inteligencją stosowaną, Runway oferuje zestaw narzędzi, których celem jest zwiększenie kreatywności za pomocą sztucznej inteligencji. Niezależnie od tego, czy jesteś filmowcem, artystą cyfrowym czy profesjonalistą kreatywnym, Runway upraszcza złożone zadania, pozwalając szybko i sprawnie tworzyć treści wideo z precyzją i kontrolą.
Runway wydał pierwszą publiczną wersję swojego produktu do syntezy wideo w lutym 2023 r. Pierwsza generacja kreacji była zazwyczaj bardziej ciekawostką niż czymś przydatnym dla twórców. Jednak dalsze optymalizacje pozwoliły na wykorzystanie narzędzia na ograniczoną skalę w rzeczywistych projektach.
Runway Gen-4 to zupełnie nowy model zaprojektowany w celu rozwiązania kilku kluczowych problemów związanych z tworzeniem filmów z wykorzystaniem sztucznej inteligencji.
Czym wyróżnia się Gen-4?
Runway twierdzi, że jego nowy model ma następujące zalety:
- Realistyczne ruchy – film pokazuje płynne i realistyczne ruchy.
- Spójność sceny – obiekty i postacie pozostają stabilne w całym kadrze.
- Wydajność – sztuczna inteligencja wykonuje instrukcje użytkownika z dużą dokładnością.
- Symulacja fizyki – model jest lepszy od poprzednich wersji i symuluje fizykę świata rzeczywistego.
Pas startowy Gen-4: kluczowe cechy i specyfikacje
Główną cechą jest koncepcja kolejności znaków i obiektów we wszystkich klatkach. Jeśli oglądałeś krótkie filmy stworzone przy pomocy sztucznej inteligencji, prawdopodobnie zauważyłeś, że zazwyczaj są to oniryczne sekwencje obrazów powiązanych tematycznie, ale nierealistycznie. Są to raczej fragmenty pewnego nastroju, niż spójne opowieści.
Runway twierdzi, że Gen-4 może obsługiwać spójność znaków i obiektów, pod warunkiem że w ramach interfejsu Runway w projekcie zostanie udostępniony pojedynczy obraz referencyjny danej postaci lub obiektu. Konkurencyjne narzędzia, takie jak Sora firmy OpenAI, również próbowały wyeliminować te niedociągnięcia, lecz z ograniczonymi rezultatami.
Firma opublikowała przykłady filmów, na których ta sama kobieta pojawia się w różnych klatkach i różnych scenach.
A ta sama statua pojawia się w zupełnie innych kontekstach i wygląda niemal tak samo w różnych warunkach i przy różnym oświetleniu.
Pas startowy Gen-4, co jest znane, Źródło: Pas startowy
Podobnie Gen-4 zaprojektowano tak, aby umożliwić reżyserom filmowanie tego samego otoczenia lub obiektu z różnych kątów w wielu ujęciach tej samej sekwencji. W przypadku Gen-2 i Gen-3 było to praktycznie niemożliwe. W przeszłości narzędzie to sprawdzało się w zachowaniu spójności stylistycznej, ale nie w przypadku ujęć z różnych ujęć w ramach jednej sceny.
Ostatnią dużą aktualizacją modelu Runway była aktualizacja Gen-3, która została ogłoszona niecały rok temu, w czerwcu 2024 r. Aktualizacja ta znacznie wydłużyła długość filmów, jakie użytkownicy mogli tworzyć, z dwóch do 10 sekund, a także zapewniła większą spójność i koherentność niż jej poprzednik Gen-2.
Funkcje Runway Gen-4: ciągłość wersji reżyserskiej
- Główną innowacją Gen-4 jest to, co Runway nazywa „spójnością świata”, pozwalającą reżyserom zachować spójność wizualną w wielu tworzonych scenach.
- Postacie zachowują swój wygląd, ubiór i atrybuty w różnych warunkach środowiskowych i oświetleniowych.
- Obiekty pochodzące z obrazów referencyjnych (w tym fotografie rzeczywistych obiektów) można sekwencyjnie umieszczać w różnych generowanych sceneriach.
- Środowisko pozostaje rozpoznawalne w wielu ujęciach, co pozwala na ustalenie ujęć i zachowanie ciągłości sceny.
- System obsługuje sterowanie ruchem w scenach, podczas gdy postacie poruszają się po wyznaczonych trajektoriach.
Cechy Runway Gen-4: Wykazuje zaawansowane zrozumienie fizyki, oświetlenia i elementów opowiadania historii za pomocą obrazu
Prezentacje pokazują, jak Gen-4 radzi sobie ze złożonymi scenariuszami wizualnymi, które wcześniej wymagały rozległych prac nad efektami wizualnymi lub po prostu nie mogły zostać skutecznie wdrożone.
- Wizualizacje są teraz prawidłowo wyświetlane na powierzchniach (w tym renderowanie postaci w oczach zwierząt).
- Ogień i inne żywioły charakteryzują się realistyczną fizyką i efektami świetlnymi.
- Ciężar i ruch postaci/obiektów są fizycznie dokładne w wygenerowanym środowisku.
- Zdjęcia ze świata rzeczywistego można włączać do nowych scen jako punkty odniesienia dla sztucznej inteligencji.
Rewolucjonizowanie procesu efektów wizualnych: Gen-4 kompresuje to, co wcześniej wymagało wielu specjalistycznych narzędzi
Przykłady z pasów startowych pokazują, w jaki sposób Gen-4 może służyć jako pojedyncze narzędzie do realizacji wielu etapów procesu produkcyjnego.
- Projektowanie postaci, koncepcje otoczenia i ruch mogą być obsługiwane w ramach tego samego systemu.
- Narzędzie pozwala na szybkie tworzenie wariantów tych samych elementów.
- W ciągu zaledwie kilku godzin powstało kilka filmów krótkometrażowych, co znacznie skróciło tradycyjny czas produkcji.
- System działa jako partner kreatywny, umożliwiając szybką wizualizację koncepcji w trakcie rozwoju.
Pas startowy Gen-4: Kto ma dostęp i cena
Wiadomo już, że Gen-4 AI będzie dostępna dla wszystkich użytkowników Runway, którzy zapłacili za usługę. Runway oferuje jednorazową bezpłatną opcję na początek, a także plany zaczynające się od 12 USD miesięcznie.
Dostęp do Gen-4 Image to Video jest już dostępny w ramach płatnych planów, a wkrótce pojawią się linki i interfejs API Runway.
WAŻNE: Niektórzy użytkownicy zalogowali się dziś (1 kwietnia) na swoje płatne konta, a model Gen-4 pojawił się na liście modeli, ale oznaczono go jako „Wkrótce dostępny” i nie można go było jeszcze wybrać. Runway może stopniowo udostępniać ten model użytkownikom, aby uniknąć problemów z obciążeniem serwera. Nie ma powodu do obaw, to normalne. Poczekaj i sprawdź ponownie, czy opcja Gen-4 jest dostępna.
Niedawno pisaliśmy także o tym, czym jest Manus AI i dlaczego jest nazywany dobrą alternatywą dla ChatGPT.
