Polaroid budućnosti: NVIDIA-ina nova neuronska mreža pretvara 2D slike u 3D modele

Tvrtka NVIDIA uveo svoju novu neuronsku mrežu, nazvanu Instant NeRF. Ona odmah lijepi seriju 2D fotografija i dovršava sliku na trodimenzionalni prizor. Kao rezultat, objekt s ravne slike postaje trodimenzionalan.

Ova neuronska mreža nazvana je "Polaroidom budućnosti" jer se gotovi 3D model dobiva za nekoliko sekundi. Kao počast brendu Polaroid, NVIDIA Research je rekreirala kultnu fotografiju Andyja Warhola u 3D.

Napomena programera: Instant NeRF koristi inverzno renderiranje za aproksimaciju ponašanja svjetla u stvarnom svijetu, dopuštajući rekonstrukciju 3D scene iz više 2D slika snimljenih pod različitim uglovima.

Potrebno je samo nekoliko sekundi da model nauči iz desetaka fotografija. Također živčana mreža treba uzeti u obzir podatke o kutovima kamere iz kojih su snimljene slike.

Tehnologija najbolje funkcionira s okvirima u kojima postoji minimum kretanja i samo jedan glavni objekt. Inače, 3D scena stvorena umjetnom inteligencijom može biti mutna.

Instant NeRF se može koristiti za stvaranje avatara ili scena za virtualne svjetove, snimanje sudionika video konferencije i njihovog okruženja u 3D te rekonstrukciju scena za digitalne 3D karte. Iako je nemoguće testirati tehnologiju, u budućnosti bi NVIDIA mogla otvoriti pristup njoj.