NVIDIA Research ha dado un paso significativo en el mundo de la inteligencia artificial con el desarrollo de DiffusionRenderer, una innovadora técnica que permite cambiar la iluminación en vídeos de manera sorprendente. Esta herramienta puede transformar escenas diurnas en paisajes nocturnos, convertir tardes soleadas en días nublados y suavizar la luz fluorescente intensa en una iluminación natural más suave.
DiffusionRenderer combina dos procesos que tradicionalmente han sido distintos: el renderizado inverso y el renderizado directo. Esto lo convierte en un motor de renderizado neural unificado que supera a los métodos más avanzados disponibles hasta el momento. Esta técnica proporciona un marco para el control de iluminación en vídeos, la edición y la mejora de datos sintéticos, siendo una herramienta potente para las industrias creativas y el desarrollo de inteligencia artificial aplicada a entornos físicos.
Para los creadores en publicidad, cine y desarrollo de videojuegos, DiffusionRenderer permite agregar, eliminar y editar iluminación tanto en vídeos del mundo real como generados por inteligencia artificial. Además, los desarrolladores de inteligencia física pueden utilizarlo para diversificar conjuntos de datos sintéticos y entrenar modelos destinados a la robótica y vehículos autónomos bajo diversas condiciones de iluminación.
Presentado en la conferencia de Computer Vision and Pattern Recognition (CVPR) en Nashville, este avance es uno de más de 60 trabajos de NVIDIA Research aceptados. DiffusionRenderer aborda el desafío de modificar la iluminación de una escena utilizando solo datos de vídeo en 2D, permitiendo cambios en sombras y reflejos, edición de materiales e incluso la inserción de nuevos objetos en una escena manteniendo una iluminación realista.
Desde su desarrollo inicial, el equipo de investigación ha integrado DiffusionRenderer con Cosmos Predict-1, un conjunto de modelos de mundo fundamentales para la generación de futuros estados del mundo con conciencia física. Gracias a esta integración, se ha observado una mejora significativa en la calidad de los resultados, lográndose efectos más nítidos y consistentes a través del tiempo.
En el CVPR, NVIDIA también presenta decenas de trabajos en diversas áreas como la automoción, la salud y la robótica. Tres de sus trabajos han sido nominados para el premio al Mejor Artículo del año, destacándose por sus innovaciones en la estimación de flujo de escenas y la calidad mejorada de las representaciones 3D. Además, NVIDIA ha sido nombrada ganadora del Autonomous Grand Challenge por segundo año consecutivo.
Este logro de NVIDIA Research refleja su compromiso permanente con la innovación en inteligencia artificial y tecnología gráfica, posicionándolos a la vanguardia en varias disciplinas científicas y de ingeniería.
Fuente: Zona de blogs y prensa de Nvidia