En Resumen
- Meta llevará Movie Gen a Instagram, permitiendo editar videos con texto para cambiar fondos, atuendos y más.
- Movie Gen incorpora inpainting de video, manteniendo elementos intactos mientras altera otros, como fondos o estilos visuales.
- La herramienta competirá con soluciones de IA de video como Sora de OpenAI y Veo2 de Google.
Meta traerá sus trucos de video con IA a Instagram, con nuevas funciones que permitirán a los usuarios modificar sus videos simplemente usando texto para modificar imágenes—desde agregar objetos hasta cambiar fondos, y hacer prácticamente cualquier cosa que puedas imaginar.
"Estoy muy emocionado con Movie Gen, nuestro modelo de investigación de IA temprano que te permitirá cambiar casi cualquier aspecto de tus videos con un simple comando de texto", dijo el director de Instagram Adam Mosseri en un video de anuncio.
En el video, Mosseri aparece con su ropa y ubicación original—una chaqueta gris y un dormitorio de aspecto normal—y el escenario comienza a cambiar aleatoriamente, mostrándolo en París, Nueva York y una piscina, y cambiando su ropa a diferentes elementos como una chaqueta de cuero o un suéter abultado mientras está en el Himalaya.
"Deberías poder cambiar tu atuendo o cambiar el contexto en el que estás sentado, agregar una cadena, o lo que se te ocurra", explicó Mosseri, mostrando demos donde cambiaba sin problemas los fondos y transformaba su apariencia.
Meta anunció Movie Gen hace unos meses, mostrando algunas generaciones que superaron las salidas de otros modelos en calidad y adherencia a las instrucciones. La compañía también mostró algunos reels de Instagram generados por IA creados por influencers como Paige Piskin y las cuentas de la marca de redes sociales 10pm Curfew's Girls y K5sh.
Más allá del video generativo, Movie Gen maneja el inpainting de video—alterando cosas específicas dentro de un video mientras mantiene intactos todos los demás elementos. Esto hace que el modelo sea extremadamente versátil y brinda a los usuarios la capacidad de realizar diferentes manipulaciones visuales—desde cambiar el atuendo de una persona hasta intercambiar fondos, e incluso transformar a las personas en versiones de dibujos animados tipo marioneta manipulando el estilo general de la escena.
La tecnología parece basarse en el modelo de IA Movie Gen de Meta, el cual Decrypt reportó el año pasado. Es la respuesta de la compañía a herramientas similares de rivales, como el generador de video Sora recientemente anunciado por OpenAI, la función de inpainting de Runway e incluso algunas herramientas de código abierto como Propainter.
Para Instagram, esta es la primera vez que Meta lleva sus capacidades de IA de video directamente a los usuarios. Movie Gen puede crear videos completamente nuevos de 16 segundos o modificar los existentes, con efectos de sonido y música sincronizados.
La escena del video generativo ha estado en auge últimamente, con desarrollos muy importantes anunciados en los últimos meses después de un año algo tranquilo con lanzamientos espaciados.
Sora ya está disponible, pero ha habido muchas alternativas interesantes—como Invideo V3 (capaz de generar scripts completos, escenas y videos de 10 minutos de duración a partir de una sola idea), Dream Machine (que puede generar videos coherentes y realistas incluso en escenarios surrealistas), Veo2 de Google (capaz de generar videos muy realistas con gran adherencia a los prompts) y Showrunner (que puede generar pequeños sketches de dibujos animados).
Meta no ha anunciado una fecha de lanzamiento específica, pero Mosseri dijo que llegará en 2024.
Editado por Andrew Hayward