Polaroidul viitorului: noua rețea neuronală a NVIDIA transformă imaginile 2D în modele 3D

Compania NVIDIA introdus noua sa rețea neuronală, numită Instant NeRF. Lipește instantaneu o serie de fotografii 2D și termină imaginea într-o scenă tridimensională. Ca rezultat, un obiect dintr-o imagine plată devine tridimensional.

Această rețea neuronală a fost denumită „Polaroidul viitorului” deoarece modelul 3D finit este obținut în câteva secunde. Ca un omagiu adus mărcii Polaroid, NVIDIA Research a recreat fotografia emblematică a lui Andy Warhol în 3D.

Dezvoltatorii notează: Instant NeRF utilizează randarea inversă pentru a aproxima comportamentul luminii în interior lumea reală, permițând reconstrucția unei scene 3D din mai multe imagini 2D realizate sub diferite colțuri.

Este nevoie de doar câteva secunde pentru ca un model să învețe din zeci de fotografii statice. De asemenea Retea neurala ar trebui să țină cont de datele privind unghiurile camerei din care au fost făcute fotografiile.

Tehnologia funcționează cel mai bine cu ramele în care există un minim de mișcare și un singur obiect principal. În caz contrar, scena 3D creată de inteligența artificială poate fi neclară.

Instant NeRF poate fi folosit pentru a crea avatare sau scene pentru lumi virtuale, pentru a captura participanții la conferințe video și mediul lor în 3D și pentru a reconstrui scene pentru hărți digitale 3D. Deși este imposibil să testați tehnologia, dar în viitor NVIDIA poate deschide accesul la ea.