Недавно выпущенная модель Marey от Moonvalley представляет собой значительный шаг вперёд в области генерации видео с помощью искусственного интеллекта, ориентированный на профессиональных кинематографистов и дизайнеров.
Главное отличие Marey — способность превращать эскизы в сочетании с текстовыми подсказками в физически достоверные видеоролики, сохраняющие реалистичное движение и взаимодействие с окружающей средой. Объекты движутся с правдоподобным весом, инерцией и таймингом, соответствующим законам реальной физики, благодаря чему каждый кадр выглядит снятым на камеру, а не сгенерированным. Система создаёт 5-секундные клипы высокого качества с разрешением 1080p и частотой 24 кадра в секунду, соответствуя отраслевым стандартам профессионального видеопроизводства.
Визуальные подсказки позволяют художникам задавать модели более точные и тонкие направления. Marey реагирует не только на текст, но и на раскадровки, эскизы, фотографии и видеоролики — это ключевая функция для визуальных мыслителей, предоставляющая кинематографистам необходимый уровень контроля. Система ввода на основе раскадровок и эскизов делает инструмент более интуитивным для профессионалов по сравнению с системами, работающими только с текстом, а также более чувствительным к управляющим вводам, таким как рисунки и ссылки на движение.
В отличие от многих генераторов видео на базе ИИ, Marey обучалась исключительно на лицензированных материалах, включая B-roll независимых кинематографистов и архивы, полученные в партнёрстве с такими платформами, как Vimeo. Это делает Marey одной из первых коммерчески безопасных систем ИИ для видеопроизводства, снижая риск споров по авторским правам — что становится всё более актуальным в Голливуде на фоне судебных исков от крупных студий.
Генеральный директор Moonvalley Наим Талукдар продемонстрировал, как Marey может использоваться как на этапе препродакшена, так и постпродакшена — будь то для тестирования сцен до съёмки или корректировки ракурсов после. Модель обладает пониманием физического мира, что позволяет ей имитировать движение с учётом законов физики. Например, видео с бизоном, бегущим по прериям, может быть преобразовано в кадр с Cadillac, мчащимся по той же местности, при этом трава и земля будут реалистично реагировать на движение автомобиля.
В то время как многие ИИ-модели предлагают генерацию по подсказкам с минимальными возможностями доработки, Marey реализует так называемый «гибридный подход к кинопроизводству». Он обеспечивает точный контроль камеры, 3D-осознанную манипуляцию сценой, редактируемые кадры после генерации, а также инструменты, специально разработанные для превизуализации, раскадровки и создания B-roll.
Для независимых кинематографистов главное преимущество Marey — демократизация доступа к передовым инструментам ИИ-сторителлинга, особенно для тех, кто долгое время был отстранён от традиционного кинопроизводства. «Дома нам приходилось просить разрешения, чтобы рассказать свои истории», — говорит режиссёр Анхель Мануэль Сото. — «ИИ даёт возможность делать это на своих условиях, не отказываясь от мечты только потому, что кто-то отказался её финансировать».
По мере дальнейшей разработки Marey Moonvalley планирует в ближайшие месяцы внедрить новые элементы управления, такие как освещение, сложные траектории объектов и библиотеки персонажей. Эта технология может существенно изменить процессы препродакшена, позволяя создателям быстро визуализировать концепции с физически достоверным движением, что потенциально экономит значительные ресурсы и время.