"DeepMind" de Google genera música para videos y bandas sonoras completas

Google ha presentado avances en su IA DeepMind, capaz de generar música personalizada para videos. Conocida como V2A, esta tecnología utiliza los píxeles del video y texto en lenguaje natural para crear paisajes sonoros adaptados. Combinada con Veo, DeepMind puede sincronizar partituras dramáticas, efectos de sonido realistas y diálogos con el video.

Mejora del control creativo para ingenieros de audio

Una ventaja clave es el control mejorado para ingenieros de audio, permitiendo generar bandas sonoras infinitas a partir de cualquier video y ajustar la música según indicaciones específicas. Esto facilita la personalización del audio para que coincida con la visión del creador.

Generación de audio con enfoque de difusión

La tecnología utiliza un enfoque de difusión para crear audio, comenzando con una versión comprimida del video. Luego, el modelo refina el audio guiado por el video y las indicaciones textuales, resultando en un audio sincronizado y realista.

Aplicaciones y desafíos

DeepMind AI puede aplicarse tanto a videos nuevos como antiguos, incluyendo películas mudas, facilitando la restauración de contenido. Sin embargo, la calidad del video afecta directamente la calidad del audio, y aún existen desafíos en el doblaje, como la desincronización de labios.

Esta innovación promete revolucionar la producción audiovisual, ofreciendo nuevas posibilidades creativas.