O recém-lançado modelo Marey da Moonvalley representa um avanço significativo na tecnologia de vídeo gerado por IA, direcionado especialmente para as necessidades de cineastas e designers profissionais.
O que distingue o Marey é a sua capacidade de converter esboços combinados com instruções de texto em vídeos com física realista, mantendo movimentos e interações ambientais autênticas. Os objetos movem-se com peso, impulso e temporização credíveis, seguindo as leis da física do mundo real, fazendo com que cada frame pareça filmado, e não gerado. O sistema produz clipes de alta qualidade com 5 segundos de duração, resolução 1080p e 24 fotogramas por segundo, cumprindo os padrões da indústria para produção profissional de vídeo.
Os prompts visuais permitem aos artistas dar indicações mais específicas e subtis ao modelo. O Marey responde não só a texto, mas também a storyboards, esboços, fotografias e clipes de vídeo — uma funcionalidade essencial para pensadores visuais, que oferece aos cineastas o controlo preciso de que necessitam. Este sistema de entrada baseado em storyboards e esboços torna a ferramenta mais intuitiva para profissionais, em comparação com sistemas baseados apenas em texto, sendo também mais sensível a entradas condicionadas como desenhos e referências de movimento.
Ao contrário de muitos geradores de vídeo por IA, o Marey foi treinado exclusivamente com material licenciado, incluindo B-roll de cineastas independentes e arquivos obtidos através de parcerias com plataformas como a Vimeo. Isto faz dele um dos primeiros sistemas de vídeo por IA comercialmente seguros para ambientes de produção, reduzindo o risco de disputas de direitos de autor — uma preocupação crescente em Hollywood após processos judiciais de grandes estúdios.
O CEO da Moonvalley, Naeem Talukdar, demonstrou como o Marey pode ser utilizado tanto na pré-produção como na pós-produção, seja para testar cenas antes das filmagens ou ajustar ângulos de câmara posteriormente. O modelo possui uma compreensão do mundo físico que lhe permite imitar movimentos respeitando as leis da física. Por exemplo, um vídeo de um bisão a correr pelas pradarias pode ser transformado num Cadillac a atravessar o mesmo ambiente, com a relva e a terra a reagirem de forma realista ao movimento do carro.
Enquanto muitos modelos de IA oferecem geração baseada em prompts com pouca capacidade de refinamento, o Marey proporciona o que a Moonvalley chama de abordagem "filmmaking híbrido". Permite controlo preciso da câmara, manipulação de cenas com consciência 3D, edição dos planos após a geração e ferramentas especificamente desenhadas para pré-visualização, storyboard e criação de B-roll.
Para cineastas independentes, o maior trunfo do Marey é democratizar o acesso a ferramentas avançadas de storytelling por IA, especialmente para criadores que sempre se sentiram excluídos do cinema tradicional. "Em casa, tínhamos de pedir permissão para contar as nossas histórias", afirma o cineasta Ángel Manuel Soto. "A IA dá-te a possibilidade de o fazeres nos teus próprios termos, sem teres de abdicar dos teus sonhos porque alguém recusou financiá-los."
À medida que a Moonvalley continua a desenvolver o Marey, planeiam lançar novos controlos como iluminação, trajetórias profundas de objetos e bibliotecas de personagens nos próximos meses. Esta tecnologia poderá transformar significativamente os processos de pré-produção, permitindo aos criadores visualizar rapidamente conceitos com movimento fisicamente preciso, potencialmente poupando tempo e recursos consideráveis.