VideoGigaGAN es el nuevo modelo IA de Adobe que mejora videos y los convierte en HD

El modelo de inteligencia artificial generativa llega a Adobe para simplificar la vida de editores y programadores, hace poco se supo cómo eliminar y añadir objetos en los videos. Ahora, con VideoGigaGAN será posible convertir un archivo borroso en un producto audiovisual de la más alta calidad.

Los investigadores de la compañía estadounidense presentaron esta herramienta capaz de aumentar el muestreo de video hasta ocho veces sin olvidar los detalles, la estabilidad temporal y la coherencia de los fotogramas.

VideoGigaGAN es una opción avanzada del GigaGAN muestreador de imágenes. Esta versión no genera contenido, sino que maximiza la resolución de los ya existentes. Su dinámica de mejoramiento consiste en reconstruir la imagen para hacer los videos más nítidos, incluso convierte un 128×128 en un 1024×1024.

¿Cómo funciona VideoGigaGAN?

Es común que los videos pierdan calidad, se tornen borrosos o aparezca ruido en la imagen al escalar su tamaño. La función de este modelo VSR (Video Super Resolution) es generar detalles de alta frecuencia a través de módulos temporales.

Adobe estudió cómo inflar la GigaGAN con capas de atención temporal y cómo mejorar la coherencia entre fotogramas. Según Maginative, esta IA funciona a través de técnicas avanzadas de suavizado en las capas de resolución, módulos de propagación guiada por flujo y transferencias directas de entidades de altas frecuencias.

Este método de trabajo garantiza que no existan parpadeos temporales y que el video mantenga la mejor fluidez posible.

Esta herramienta no solo representa un avance en la forma que producimos, procesamos y consumimos videos, también representa un reto para la inteligencia artificial generativa y el desarrollo de otros VSR con más y mejores propuestas.

Este modelo todavía está en fase de desarrollo por lo que se desconoce cuándo estará listo para probarse. Lo que sí es seguro es que pueda añadirse pronto a Premiere Pro.

Adobe ha presentado VideoGigaGAN, un rescalador de vídeo espectacular.pic.twitter.com/qgcSkjn1u3

— Hilario Abad – IA verás (@iaveras) April 22, 2024

Inteligencia Artifical