NVIDIA Research a dezvoltat o tehnologie AI revoluționară care promite să transforme modul în care sunt create efectele vizuale în industria filmului și a jocurilor video. DiffusionRenderer, prezentat la CVPR 2025, reprezintă o schimbare fundamentală în grafica pe calculator prin combinarea a două procese tradițional separate—randarea inversă și cea directă—într-un cadru neural unificat.
Sistemul funcționează printr-o abordare în două etape, alimentată de modele de difuzie video. Mai întâi, un renderer neural invers analizează secvențe video RGB standard și estimează inteligent proprietățile intrinseci ale scenei, generând buffere esențiale (G-buffere) care descriu geometria (adâncime, normale) și materialele (culoare, rugozitate, metalicitate) la nivel de pixel. Apoi, un renderer neural direct generează imagini fotorealiste din aceste G-buffere, fără a necesita simularea explicită a transportului de lumină.
Ceea ce face ca DiffusionRenderer să fie revoluționar este faptul că elimină necesitatea reprezentărilor 3D precise ale scenei și a urmăririi de raze (path tracing) costisitoare din punct de vedere computațional, cerute de randarea fizică tradițională (PBR). „PBR-ul clasic se bazează pe geometrie 3D explicită, proprietăți de material de înaltă calitate și condiții de iluminare care sunt adesea imposibil de obținut în scenarii reale”, explică Sanja Fidler, VP AI Research la NVIDIA.
Pentru cineaștii independenți și studiourile mici, această tehnologie reprezintă o democratizare a efectelor vizuale de înaltă clasă. Creatorii pot filma acum un simplu video RGB și pot folosi DiffusionRenderer pentru a adăuga elemente CGI care proiectează umbre și reflexii realiste—fără sisteme scumpe de iluminare, scanări LiDAR sau echipamente specializate. Sistemul poate, de asemenea, să reilumineze dinamic întreaga scenă, să modifice materialele și să insereze fără probleme obiecte virtuale în filmări reale.
De la dezvoltarea sa inițială, NVIDIA a integrat DiffusionRenderer cu modelele de bază Cosmos Predict-1, obținând rezultate de calitate semnificativ superioară. Tehnologia este disponibilă sub licențele Apache 2.0 și NVIDIA Open Model License, cu codul sursă și greutățile modelelor accesibile pe GitHub. Pe măsură ce rezoluția și gama dinamică continuă să crească, DiffusionRenderer se profilează ca un instrument esențial pentru creatorii de conținut de orice nivel bugetar, schimbând fundamental modul în care este abordată povestirea vizuală în film, publicitate și dezvoltarea de jocuri.