Google presentó Lumiere, una nueva IA fenomenal para generar videos

Google ha presentado su nueva IA para la creación de vídeos, Lumiere. Este no es un producto comercial, sino un proyecto de investigación para desarrollar tecnologías innovadoras. En la etapa actual, no tiene las restricciones que la legislación y las normas sociales imponen al funcionamiento de las redes generativas, por lo que el resultado es sorprendentemente bueno.

Lumiere se basa en la “arquitectura espacio-temporal de U-net”, que forma la estructura del vídeo en toda su longitud. Esto es fundamentalmente diferente del enfoque clásico, donde la IA genera los fotogramas inicial y final y luego intenta adivinar qué llenar el espacio entre ellos. Lumiere crea vídeos que duran sólo 5 segundos, pero son sorprendentemente realistas o surrealistas, dependiendo de la configuración inicial.

El modelo de lenguaje de Lumiere le permite interpretar instrucciones de texto del usuario con alta precisión de comprensión. Puede animar imágenes estáticas, agregar o eliminar objetos y personajes de videos y adivinar partes ocultas de imágenes. La IA puede copiar los estilos o tramas del contenido fuente y crear muchas versiones diferentes del mismo.