El nuevo modelo Marey de Moonvalley representa un avance significativo en la tecnología de video generada por IA, enfocado específicamente en las necesidades de cineastas y diseñadores profesionales.
Lo que distingue a Marey es su capacidad para convertir bocetos combinados con indicaciones de texto en videos precisos en cuanto a física, que mantienen movimientos realistas e interacciones ambientales auténticas. Los objetos se mueven con un peso, impulso y sincronización creíbles que siguen la física del mundo real, haciendo que cada cuadro parezca filmado y no generado. El sistema genera clips de alta calidad de 5 segundos en resolución 1080p y 24 cuadros por segundo, cumpliendo con los estándares de la industria para la producción profesional de video.
Las indicaciones visuales permiten a los artistas dar instrucciones más específicas y matizadas al modelo. Marey responde no solo a texto, sino también a storyboards, bocetos, fotos y clips de video, una característica clave para pensadores visuales que brinda a los cineastas el control preciso que necesitan. Este sistema de entrada basado en storyboards y bocetos hace que la herramienta sea más intuitiva para profesionales en comparación con los sistemas que solo aceptan texto, y es más receptiva a insumos como dibujos y referencias de movimiento.
A diferencia de muchos generadores de video con IA, Marey fue entrenado completamente con material licenciado, incluyendo B-roll de cineastas independientes y archivos asegurados mediante alianzas con plataformas como Vimeo. Esto lo convierte en uno de los primeros sistemas de video con IA seguros para uso comercial en entornos de producción, reduciendo el riesgo de disputas por derechos de autor, una preocupación creciente en Hollywood tras demandas de grandes estudios.
El CEO de Moonvalley, Naeem Talukdar, demostró cómo Marey puede usarse tanto en preproducción como en postproducción, ya sea para probar escenas antes de filmar o ajustar ángulos de cámara posteriormente. El modelo tiene una comprensión del mundo físico que le permite imitar el movimiento respetando las leyes de la física. Por ejemplo, un video de un bisonte corriendo por las praderas puede transformarse en un Cadillac atravesando el mismo entorno, con el pasto y la tierra reaccionando de manera realista al movimiento del auto.
Mientras que muchos modelos de IA ofrecen generación basada en indicaciones con poca capacidad de refinamiento, Marey proporciona lo que Moonvalley denomina un enfoque de "cine híbrido". Permite un control preciso de la cámara, manipulación de escenas con conciencia 3D, edición de tomas tras la generación y herramientas diseñadas específicamente para previsualización, creación de storyboards y generación de B-roll.
Para cineastas independientes, el mayor atractivo de Marey es que democratiza el acceso a herramientas de narración impulsadas por IA de primer nivel, especialmente para creadores que durante mucho tiempo se han sentido excluidos del cine tradicional. "En casa, teníamos que pedir permiso para contar nuestras historias", dice el cineasta Ángel Manuel Soto. "La IA te da la posibilidad de hacerlo en tus propios términos, sin tener que renunciar a tus sueños porque alguien se negó a financiarlos."
A medida que Moonvalley continúa desarrollando Marey, planean lanzar nuevos controles como iluminación, trayectorias profundas de objetos y bibliotecas de personajes en los próximos meses. Esta tecnología podría transformar significativamente los procesos de preproducción al permitir a los creadores visualizar rápidamente conceptos con movimiento físicamente preciso, lo que potencialmente ahorraría tiempo y recursos sustanciales.