Новият модел Marey на Moonvalley представлява значителен напредък в AI-генерирането на видео, насочен специално към нуждите на професионални режисьори и дизайнери.
Това, което отличава Marey, е способността му да преобразува скици, комбинирани с текстови подсказки, във видеа с физически реализъм, които запазват естествено движение и взаимодействие с околната среда. Обектите се движат с убедителна тежест, инерция и тайминг, следвайки законите на реалната физика, което кара всеки кадър да изглежда заснет, а не генериран. Системата създава висококачествени 5-секундни клипове с резолюция 1080p и 24 кадъра в секунда, отговаряйки на индустриалните стандарти за професионално видео производство.
Визуалните подсказки позволяват на артистите да дават на модела по-специфични и нюансирани инструкции. Marey реагира не само на текст, но и на сторибордове, скици, снимки и видеоклипове – ключова функция за визуално мислещите, която предоставя на режисьорите прецизен контрол. Тази система за въвеждане чрез сторибордове и скици прави инструмента по-интуитивен за професионалисти в сравнение с текстовите системи, като същевременно е по-чувствителен към входове като рисунки и референции за движение.
За разлика от много AI видео генератори, Marey е обучен изцяло върху лицензирани материали, включително B-roll кадри от независими режисьори и архиви, осигурени чрез партньорства с платформи като Vimeo. Това го прави един от първите търговски безопасни AI видео системи за продукционна среда, намалявайки риска от авторскоправни спорове – нарастващ проблем в Холивуд след съдебни дела от големи студиа.
Главният изпълнителен директор на Moonvalley, Наим Талукдар, демонстрира как Marey може да се използва както в предпродукция, така и в постпродукция – било за тестване на сцени преди снимки или за промяна на ъглите на камерата впоследствие. Моделът разбира физическия свят и може да имитира движение, спазвайки законите на физиката. Например, видео с бизон, който тича през пасища, може да бъде преобразувано в кадър с Cadillac, който се движи през същата среда, като тревата и прахта реагират реалистично на движението на колата.
Докато много AI модели предлагат генериране само по подсказка с малко възможности за доработка, Marey предоставя това, което Moonvalley нарича „хибридно кино“. Той позволява прецизен контрол на камерата, 3D-осъзната манипулация на сцената, редактиране на кадри след генериране и инструменти, специално създадени за предварителна визуализация, сторибордове и генериране на B-roll.
За независимите режисьори най-голямото предимство на Marey е, че демократизира достъпа до водещи AI инструменти за разказване на истории, особено за създатели, които дълго са били изключени от традиционното кино. „У дома трябваше да искаме разрешение, за да разкажем историите си“, казва режисьорът Анхел Мануел Сото. „AI ти дава възможност да го направиш по свои условия, без да се отказваш от мечтите си, защото някой е отказал да ги финансира.“
Докато Moonvalley продължава да развива Marey, се планира въвеждането на нови контроли като осветление, дълбоки траектории на обекти и библиотеки с персонажи през следващите месеци. Тази технология може значително да трансформира процесите по предпродукция, като позволява на създателите бързо да визуализират концепции с физически коректно движение, което потенциално спестява значително време и ресурси.