Meta amplía los límites de la inteligencia artificial con el lanzamiento de Meta Movie Gen, su último modelo de aplicaciones de IA basadas en los medios de comunicación. Movie Gen permite crear vídeos, sonidos y experiencias multimedia personalizadas a partir de simples entradas de texto. Con estas capacidades, Meta Movie Gen se posiciona como una herramienta que ofrece muchas posibilidades diferentes de creación de contenidos y no es sólo un modelo de puro texto a vídeo.
🎥 Today we’re premiering Meta Movie Gen: the most advanced media foundation models to-date.
— AI at Meta (@AIatMeta) October 4, 2024
Developed by AI research teams at Meta, Movie Gen delivers state-of-the-art results across a range of capabilities. We’re excited for the potential of this line of research to usher in… pic.twitter.com/NDOnyKOOyq
El núcleo de Movie Gen
Movie Gen se desarrolló para crear vídeos de alta calidad y resolución a partir de texto. Permite a los usuarios crear vídeos desde cero o modificar material existente con sólo introducir unos pocos datos. Este nuevo modelo ofrece diversas funciones que llevan las posibilidades creativas a un nuevo nivel, como la edición de vídeo, la creación de vídeos personalizados y las bandas sonoras sincronizadas.
Generación de texto a vídeo
En el centro de Movie Gen se encuentra el transformador de parámetros 30B, una potente herramienta que crea vídeos largos de alta resolución con relaciones de aspecto personalizadas a partir de descripciones de texto. Esto representa un avance significativo respecto a los estándares actuales del sector, que a menudo tienen problemas con la longitud o la calidad de los vídeos. Desde animaciones conceptuales hasta cortometrajes realistas.
Edición de vídeo con texto
Otra característica especial de Movie Gen es la posibilidad de editar vídeos mediante texto. Los usuarios pueden introducir instrucciones precisas para editar vídeos a varios niveles: desde eliminar o añadir elementos hasta cambios más extensos como cambiar el fondo o aplicar efectos de estilo. Estas funciones permiten ajustar con precisión los elementos del vídeo, todo ello controlado mediante la simple introducción de texto.
Creación de vídeos personalizados
El modelo también brilla cuando se trata de crear vídeos personalizados. Subiendo su propia imagen, los usuarios pueden crear vídeos que reflejen su identidad y sus movimientos. Movie Gen es ideal para proyectos personales, avatares o contenidos interactivos. Las avanzadas funciones de captura de movimiento de la IA garantizan que estos vídeos personalizados tengan un flujo natural y un aspecto muy realista.
Generación de bandas sonoras y efectos de sonido
El modelo de audio de Movie Gen (con parámetros 13B) también ofrece aquí muy buenos resultados. Combinando vídeo e instrucciones de texto opcionales, el usuario puede crear un sonido de alta calidad que se adapte perfectamente a su vídeo. El modelo produce una gran variedad de efectos de sonido, desde ruido ambiental y música instrumental de fondo hasta sonido Foley, lo que garantiza que la banda sonora no sólo encaje, sino que realce la atmósfera del vídeo.
El potencial de Meta Movie Gen
Movie Gen ha sido desarrollada por los equipos de investigación en IA de Meta y podría tener una enorme repercusión en un amplio abanico de sectores, sobre todo en el de los medios de comunicación, el entretenimiento y el marketing.
Aunque Meta Movie Gen se encuentra todavía en fase de investigación, el equipo está trabajando estrechamente con los profesionales creativos para integrar sus comentarios y ampliar su funcionalidad antes de un lanzamiento más amplio. Es evidente que Movie Gen podría cambiar las reglas del juego de la narrativa digital, ofreciendo a los creativos una forma totalmente nueva de dar vida a sus ideas con el poder de la IA.
Fuente: https://x.com/aiatmeta/status/1842188252541043075?s=12
