¿Para qué necesitas Sora si tienes Meta Movie Gen?
Meta presentó el viernes su inteligencia artificial Movie Gen, capaz de generar videos de 16 segundos que incluyen efectos de sonido y ruido ambiental.
Meta ha presentado su nueva herramienta Movie Gen, una inteligencia artificial de video multimodal de tercera generación, que tiene la capacidad de “crear videos y sonidos personalizados, editar videos existentes y transformar imágenes personales en un video único”. Este nuevo modelo promete superar a otras tecnologías similares, como Runway’s Gen-3 y OpenAI’s Sora.
Movie Gen se basa en el trabajo previo de la compañía, que incluye los modelos multimodales Make-A-Scene y los modelos de imagen Llama. La nueva herramienta combina tecnologías de generación de video, edición precisa de video y generación de audio, brindando a los creadores un mayor control sobre los detalles de su contenido. Según la compañía, estos modelos facilitarán el desarrollo de nuevos productos que impulsarán la creatividad.
El sistema de generación de video de Movie Gen se apoya en un modelo de 30 millones de parámetros, capaz de producir clips de hasta 16 segundos a una velocidad de 16 cuadros por segundo. Según Meta, estos modelos son avanzados en su categoría, ya que pueden razonar sobre el movimiento de objetos e interacciones. Además, Movie Gen permite crear videos personalizados a partir de imágenes estáticas, utilizando entradas de texto y video para editar el contenido de manera precisa.
Para la generación de audio, Movie Gen utiliza un modelo separado de 13 millones de parámetros, que puede generar hasta 45 segundos de sonido, incluidos ruidos de fondo, efectos especiales y partituras instrumentales, sincronizando automáticamente este contenido con el video. Según un documento técnico de Meta, Movie Gen ha obtenido resultados superiores en pruebas comparativas con otras inteligencias artificiales avanzadas en la categoría de generación de video.
La compañía ha tenido éxito no solo en la generación de video, sino también en la creación de videos personalizados y generación de audio, superando a otros competidores en estas áreas. Aunque se ha destacado por su capacidad, Meta se ha comprometido a trabajar de la mano con cineastas y creadores, enfatizando que su objetivo no es reemplazar a los humanos, sino ayudar a las personas a expresar su creatividad de nuevas formas.
Meta expresa su esperanza de que, en el futuro, todos puedan llevar sus visiones artísticas a la realidad utilizando Movie Gen para crear videos y audio en alta definición.