2 de octubre de 2024
Meta Movie Gen es un modelo de IA innovador desarrollado por Meta que representa un avance significativo en la tecnología de IA generativa. Está diseñado para empoderar tanto a usuarios casuales como a creadores profesionales con la capacidad de generar videos y audio de alta calidad a partir de simples indicaciones de texto, mejorando la narrativa digital y la expresión creativa.
Movie Gen es un conjunto de modelos que incluye capacidades de generación de video y audio. Se basa en la investigación anterior de Meta, combinando todas las modalidades previas en un sistema único y cohesivo que ofrece un control granular sobre el proceso de generación. Esta tercera ola de trabajo de IA generativa por parte de Meta significa el compromiso de la empresa de expandir los límites de la generación de medios.
El módulo de generación de video de Movie Gen es capaz de crear clips de video que parecen realistas y que tienen una duración de hasta 16 segundos a 16 cuadros por segundo, basándose en indicaciones de texto. También puede generar videos de IA personalizados utilizando una sola foto, lo que permite un nuevo nivel de personalización y creatividad en la creación de videos.
El modelo de generación de audio de Movie Gen puede producir audio de alta calidad y alta fidelidad de hasta 45 segundos de duración, incluyendo sonido ambiental, efectos de sonido y música de fondo instrumental, todo sincronizado con el contenido del video. Esta característica enriquece las capacidades narrativas del modelo al agregar una dimensión auditiva a las narrativas visuales.
Bajo el capó, Movie Gen utiliza una combinación de tecnologías de vanguardia, como la arquitectura Transformer, los objetivos de entrenamiento de Flow Matching y un proceso de entrenamiento en múltiples etapas que involucra un entrenamiento inicial en tareas de texto a imagen seguido de un entrenamiento conjunto en tareas de texto a imagen y texto a video. Este enfoque asegura que el contenido generado no solo sea visualmente atractivo, sino también contextual y diverso.
Si bien Movie Gen se encuentra actualmente en la fase de investigación y aún no está disponible para uso público, Meta imagina un futuro en el que podría convertirse en una parte integral de su ecosistema, ofreciendo nuevas formas de crear y compartir contenido atractivo en plataformas como Instagram. La empresa se centra en refinar la tecnología y abordar cualquier limitación existente para que sea más accesible y fácil de usar.
Meta tiene la intención de colaborar con creadores y cineastas para refinar las características de Movie Gen, asegurándose de que satisfaga las necesidades de su diversa base de usuarios. La visión a largo plazo de la empresa para Movie Gen refleja un objetivo más amplio de democratizar el acceso a herramientas de edición de video sofisticadas, mejorando el trabajo de artistas y animadores profesionales en lugar de reemplazarlos.