Generative World Renderer: Renderizado de mundos virtuales mediante IA generativa | Síntesis interactiva de entornos 3D consistentes con modelos de difusión | Motor de mundo generativo para creación de contenidos virtuales y simulación

Abstract

PROBLEMA: La generación de contenidos 3D y mundos virtuales tradicionalmente requiere procesos manuales de modelado o simuladores rígidos que no capturan la diversidad y el realismo de los datos visuales del mundo real. SOLUCIÓN: El paper presenta el 'Generative World Renderer', una arquitectura que permite renderizar mundos virtuales completos de forma puramente generativa. Este modelo puede sintetizar vistas consistentes de una escena desde cualquier ángulo y posición de cámara, actuando como un motor gráfico impulsado por IA. METODOLOGÍA: Combina representaciones latentes de escenas con mecanismos de atención espacial y temporal para garantizar la persistencia de los objetos en el espacio 3D mientras la cámara se desplaza. RESULTADOS: El sistema produce entornos visualmente impactantes con una consistencia geométrica significativamente mayor que los modelos de 'video-to-video' estándar, permitiendo la navegación interactiva. RELEVANCIA: Representa un cambio de paradigma hacia la creación de videojuegos, entornos de entrenamiento de robots y metaversos generados totalmente por IA sin necesidad de activos 3D tradicionales.