Google Lumiere: La nueva tecnología de Google que genera vídeos utilizando IA

Generacion de video con IA a raiz de una imagen de referencia - Google Lumiere

Esta innovadora tecnología de Google, basada en IA es capaz de generar vídeos a raíz de tu descripción (prompt). Conoce Google Lumiere.

Google Lumiere: modelo de difusión espacio-temporal para la generación de vídeos

La semana pasada, Google presentó Google Lumiere, un modelo de inteligencia artificial para generar videos al que denomina «modelo de difusión espacio-temporal». ¿De qué se trata? Pues es que esta innovadora tecnología es capaz de crear vídeos de animales en diversas situaciones divertidas o realmente imposibles, lo que la convierte en uno de los generadores de vídeos de texto a animales más avanzados disponibles en la actualidad.

A diferencia de otros modelos de vídeo convencionales, Lumiere crea la duración completa del vídeo a la vez, abordando aspectos espaciales y temporales simultáneamente: este diseño permite la generación fluida de vídeos de principio a fin en un solo paso.

¿Qué videos es posible crear con Google Lumiere?

Acorde a la documentación en el repositorio oficial de Google Lumiere en Github, esta tecnología puede realizar una variedad de tareas, como convertir texto en videos, animar imágenes, generar videos en estilos específicos, editar videos con indicaciones basadas en texto, crear “cinemagraphs” y ofrecer capacidades de pintura de video.

Generación de texto a vídeo con IA

Generacion de videos con IA - texto a video - Google Lumiere

Generación de vídeo con IA utilizando una imagen de referencia

Generacion de video con IA a raiz de una imagen de referencia - Google Lumiere

También es posible con Google Lumiere generar un breve vídeo utilizando además de tu prompt una imagen de referencia. Esto ya ha sido ofrecido al mercado durante el año 2023, pero los resultados de Lumiere parecen ser superiores.

Generación de video estilizado con IA

Generacion de video estilizado con IA - Google Lumiere

El algoritmo de Google Lumiere también puede identificar el estilo de una imagen fuente y utilizarlo para aplicarlo al vídeo generado.

¿Cómo funciona Google Lumiere y los generadores de vídeo IA?

El desarrollo de la generación de vídeo artificialmente inteligente ha progresado positivamente en calidad durante los últimos años. En octubre de 2022, Google presentó su primer modelo de síntesis de imágenes disponible públicamente, Imagen Video, que generaba breves videoclips de 1280 × 768 a partir de indicaciones escritas a 24 fotogramas por segundo. Sin embargo, los resultados no fueron consistentemente coherentes.

En junio del año anterior, Meta presentó su generador de vídeo con IA, Make-A-Video, mientras que el modelo de síntesis de vídeo Gen2 de Runway permitió la creación de videoclips de dos segundos a partir de mensajes de texto en noviembre, facilitando la producción de comerciales de parodia surrealistas.

Las empresas de inteligencia artificial a menudo hacen demostraciones de generadores de video que utilizan animales lindos debido a los desafíos actuales en la creación de figuras humanas coherentes y no deformadas.

¿Qué resolución tienen los vídeos generados por Google Lumiere?

Al momento, Lumiere produce vídeos de 1024×1024 píxeles de cinco segundos de duración, clasificados como de «baja resolución» por los investigadores de Google. Pero a pesar de estas limitaciones, un estudio de usuarios demostró que los resultados de Lumiere eran preferidos a los modelos de síntesis de vídeo con IA existentes.

Generacion de video estilizado con Google Lumiere

¿Cómo puedo utilizar Google Lumiere para generar videos con IA?

Desafortunadamente, de momento no es posible utilizar Google Lumiere. Los ejemplos mostrados en el repositorio oficial sólo son muestras de sus capacidades, pero no está disponible al público (aún).

Según los ejemplos de Google Lumiere, los resultados parecen superar a otros modelos de generación de vídeo con IA. Dada la tendencia de Google a mantener sus modelos de investigación de IA patentados, sigue siendo incierto si el público tendrá la oportunidad de utilizarlos en el futuro.

Será cuestión de tiempo para el momento en que podamos empezar a crear vídeos con IA utilizando Google Lumiere.

Fuente

Guido De Marco - Consultor SEO Freelance, experto en SEO tecnico

Escrito por

Guido De Marco

Consultor SEO freelance, especialista en estrategia digital y SEO técnico.
Fundador y director de la agencia SEO Celestium.

Últimos artículos en el blog de Celestium SEO