Výzkumný tým NVIDIA vyvinul průlomovou AI technologii, která slibuje zásadně změnit způsob tvorby vizuálních efektů ve filmovém i herním průmyslu. DiffusionRenderer, představený na konferenci CVPR 2025, představuje zásadní posun v počítačové grafice tím, že spojuje dva tradičně oddělené procesy—inverzní a přímé renderování—do jednotného neuronového rámce.
Systém funguje ve dvou fázích, které využívají video difuzní modely. Nejprve neuronový inverzní renderer analyzuje běžné RGB video a inteligentně odhaduje vnitřní vlastnosti scény, čímž generuje klíčové datové buffery (G-buffery) popisující geometrii (hloubka, normály) a materiály (barva, drsnost, kovovost) na úrovni jednotlivých pixelů. Poté neuronový přímý renderer z těchto G-bufferů vytváří fotorealistické snímky, aniž by bylo nutné explicitně simulovat šíření světla.
To, co činí DiffusionRenderer revolučním, je odstranění potřeby přesných 3D reprezentací scény a výpočetně náročného path tracingu, který vyžaduje tradiční fyzikálně založené renderování (PBR). „Klasické PBR spoléhá na explicitní 3D geometrii, vysoce kvalitní materiálové vlastnosti a světelné podmínky, které je v reálných scénářích často obtížné získat,“ vysvětluje Sanja Fidler, viceprezidentka pro AI výzkum ve společnosti NVIDIA.
Pro nezávislé filmaře a menší studia tato technologie znamená demokratizaci špičkových vizuálních efektů. Tvůrci nyní mohou natočit obyčejné RGB video a pomocí DiffusionRendereru do něj přidat CGI prvky, které vrhají realistické stíny a odrazy—bez drahých světelných scén, LiDAR skenů či specializovaného vybavení. Systém také umožňuje dynamicky přisvětlovat celé scény, měnit materiály a bezproblémově vkládat virtuální objekty do reálných záběrů.
Od svého vzniku NVIDIA integrovala DiffusionRenderer se základními modely Cosmos Predict-1, čímž dosáhla výrazně vyšší kvality výsledků. Technologie je dostupná pod licencemi Apache 2.0 a NVIDIA Open Model License, přičemž kód i modelové váhy jsou volně přístupné na GitHubu. S rostoucím rozlišením a dynamickým rozsahem má DiffusionRenderer potenciál stát se klíčovým nástrojem pro tvůrce všech rozpočtových kategorií a zásadně změnit přístup k vizuálnímu vyprávění ve filmu, reklamě i vývoji her.