O recém-lançado modelo Marey da Moonvalley representa um avanço significativo na tecnologia de geração de vídeo por IA, voltado especialmente para as necessidades de cineastas e designers profissionais.
O diferencial do Marey é sua capacidade de converter esboços combinados com comandos de texto em vídeos com física precisa, mantendo movimentos realistas e interações ambientais fiéis à realidade. Os objetos se movem com peso, impulso e tempo críveis, seguindo as leis da física do mundo real, fazendo com que cada quadro pareça filmado, e não gerado. O sistema gera clipes de alta qualidade com 5 segundos de duração, em resolução 1080p e 24 quadros por segundo, atendendo aos padrões da indústria para produção profissional de vídeo.
Com comandos visuais, artistas podem direcionar o modelo de forma mais específica e detalhada. O Marey responde não apenas a texto, mas também a storyboards, esboços, fotos e trechos de vídeo — um recurso essencial para pensadores visuais, que oferece aos cineastas o controle preciso de que precisam. Esse sistema de entrada baseado em storyboards e esboços torna a ferramenta mais intuitiva para profissionais, em comparação com sistemas baseados apenas em texto, além de ser mais responsiva a condicionamentos como desenhos e referências de movimento.
Diferente de muitos geradores de vídeo por IA, o Marey foi treinado inteiramente com material licenciado, incluindo B-roll de cineastas independentes e arquivos obtidos por meio de parcerias com plataformas como o Vimeo. Isso faz dele um dos primeiros sistemas de IA para vídeo comercialmente seguros em ambientes de produção, reduzindo o risco de disputas de direitos autorais — uma preocupação crescente em Hollywood após processos movidos por grandes estúdios.
O CEO da Moonvalley, Naeem Talukdar, demonstrou como o Marey pode ser usado tanto na pré quanto na pós-produção, seja para testar cenas antes das filmagens ou ajustar ângulos de câmera posteriormente. O modelo possui compreensão do mundo físico, permitindo simular movimentos respeitando as leis da física. Por exemplo, um vídeo de um bisão correndo pelas pradarias pode ser traduzido em um Cadillac acelerando no mesmo ambiente, com a grama e a terra reagindo de forma realista ao movimento do carro.
Enquanto muitos modelos de IA oferecem geração baseada em comandos com pouca possibilidade de refinamento, o Marey proporciona o que a Moonvalley chama de "cinema híbrido". Ele permite controle preciso de câmera, manipulação de cena com consciência 3D, edição dos takes após a geração e ferramentas específicas para pré-visualização, storyboarding e geração de B-roll.
Para cineastas independentes, o maior atrativo do Marey é democratizar o acesso a ferramentas avançadas de narrativa por IA, especialmente para criadores que sempre se sentiram excluídos do cinema tradicional. "Em casa, precisávamos pedir permissão para contar nossas histórias", diz o cineasta Ángel Manuel Soto. "A IA te dá a possibilidade de fazer isso nos seus próprios termos, sem precisar desistir dos seus sonhos porque alguém se recusou a financiar."
À medida que a Moonvalley continua desenvolvendo o Marey, a empresa planeja lançar novos controles, como iluminação, trajetórias profundas de objetos e bibliotecas de personagens nos próximos meses. Essa tecnologia pode transformar significativamente os processos de pré-produção, permitindo que criadores visualizem rapidamente conceitos com movimentos fisicamente precisos, potencialmente economizando tempo e recursos substanciais.