Nový model Marey od Moonvalley predstavuje významný pokrok v oblasti AI generovaného videa, zameraný najmä na potreby profesionálnych filmárov a dizajnérov.
Čím sa Marey odlišuje, je jeho schopnosť premieňať skice v kombinácii s textovými zadaniami na fyzikálne presné videá, ktoré zachovávajú realistický pohyb a interakcie s prostredím. Objekty sa pohybujú s uveriteľnou váhou, hybnosťou a načasovaním, ktoré zodpovedajú reálnej fyzike, takže každý záber pôsobí dojmom, akoby bol naozaj natočený, nie vygenerovaný. Systém produkuje kvalitné 5-sekundové klipy v rozlíšení 1080p a 24 snímkach za sekundu, čo spĺňa priemyselné štandardy pre profesionálnu videoprodukciu.
Vizuálne zadania umožňujú umelcom dávať modelu špecifickejšie a jemnejšie pokyny. Marey reaguje nielen na text, ale aj na storyboardy, skice, fotografie či videoklipy – kľúčová vlastnosť pre vizuálne zmýšľajúcich tvorcov, ktorá im poskytuje presnú kontrolu, akú potrebujú. Tento systém zadávania cez storyboardy a skice robí nástroj pre profesionálov intuitívnejším v porovnaní so systémami založenými len na texte a zároveň je citlivejší na podnety ako kresby či referencie pohybu.
Na rozdiel od mnohých AI generátorov videa bol Marey trénovaný výhradne na licencovanom materiáli, vrátane B-roll záberov od nezávislých filmárov a archívov získaných prostredníctvom partnerstiev s platformami ako Vimeo. Vďaka tomu je jedným z prvých komerčne bezpečných AI video systémov pre produkčné prostredie, čím sa znižuje riziko sporov o autorské práva – čo je v Hollywoode čoraz väčšia téma po žalobách zo strany veľkých štúdií.
Generálny riaditeľ Moonvalley Naeem Talukdar demonštroval, ako môže byť Marey využitý v pre-produkcii aj post-produkcii, či už na testovanie scén pred natáčaním alebo na úpravu uhlov kamery po ňom. Model má pochopenie fyzikálneho sveta, ktoré mu umožňuje napodobňovať pohyb pri rešpektovaní fyzikálnych zákonov. Napríklad video bizóna bežiaceho po savane možno pretransformovať na Cadillac preháňajúci sa tým istým prostredím, pričom tráva a prach reagujú realisticky na pohyb auta.
Kým mnohé AI modely ponúkajú generovanie na základe promptov s minimálnou možnosťou úprav, Marey poskytuje to, čo Moonvalley nazýva „hybridná filmárčina“. Umožňuje presnú kontrolu kamery, 3D vedomú manipuláciu so scénou, editovateľné zábery po vygenerovaní a nástroje špeciálne navrhnuté pre pre-vizualizáciu, storyboardovanie a generovanie B-roll záberov.
Pre nezávislých filmárov je najväčším lákadlom Marey to, že demokratizuje prístup k špičkovým AI nástrojom pre rozprávanie príbehov, najmä pre tvorcov, ktorí sa dlhodobo cítili vylúčení z tradičnej filmovej tvorby. „Doma sme museli žiadať o povolenie rozprávať naše príbehy,“ hovorí filmár Ángel Manuel Soto. „AI vám dáva možnosť urobiť to po svojom, bez toho, aby ste museli povedať nie svojim snom len preto, že vám niekto odmietol financovanie.“
Ako Moonvalley pokračuje vo vývoji Marey, plánujú v najbližších mesiacoch zaviesť nové ovládacie prvky, ako je riadenie osvetlenia, pokročilé trajektórie objektov a knižnice postáv. Táto technológia by mohla zásadne premeniť procesy pre-produkcie tým, že tvorcom umožní rýchlo vizualizovať koncepty s fyzikálne presným pohybom, čím potenciálne ušetrí značné množstvo času a zdrojov.