NeRF AI di NVIDIA trasforma istantaneamente le foto 2D in oggetti 3D

NVIDIA ha notevolmente migliorato la tecnica NeRF per la creazione quasi istantanea di oggetti 3D da fotografie 2D.

Una nuova tecnologia chiamata Neural Radiance Field (NeRF) utilizza algoritmi di apprendimento dell’intelligenza artificiale per creare oggetti 3D da fotografie 2D. NeRF ha la capacità di colmare le lacune, per così dire, interpolando ciò che le foto 2D non possono catturare. Si tratta di un risultato molto interessante che potrebbe portare a significativi progressi in settori diversi come i videogiochi o la guida autonoma. Ora NVIDIA ha sviluppato una nuova tecnologia, NeRF, che secondo l’azienda è la più veloce fino ad oggi, impiegando solo pochi secondi per imparare a creare una scena 3D.

NVIDIA migliora significativamente la tecnica NeRF

Bastano pochi secondi per studiare il modello Instant NeRF utilizzando dozzine di fermo immagine e angoli di ripresa. Successivamente, il sistema è in grado di generare una scena 3D in “diverse decine di millisecondi”. Come con qualsiasi altro metodo NeRF, è necessario scattare foto in posizioni diverse. E per le foto con più scene, è meglio avere immagini senza movimenti inutili, altrimenti il ​​risultato sarà sfocato.

creare quasi istantaneamente oggetti 3D da foto 2D

NVIDIA spiega che i primi modelli NeRF stanno producendo risultati abbastanza rapidamente. Bastano pochi minuti per creare una scena 3D, anche se l’oggetto è nascosto in alcune immagini da una colonna o da un mobile. La formazione dura diverse ore. Nella versione NVIDIA, questo passaggio dura solo pochi secondi, poiché utilizza una tecnologia sviluppata dall’azienda denominata “Multi-Resolution Hash Grid Encoding”, ottimizzata per prestazioni ottimali sulle GPU di questo marchio. Il sistema può persino funzionare su una singola GPU, anche se i risultati più rapidi si ottengono su schede con Tensor Core, fornendo aumenti delle prestazioni per tutte le attività di intelligenza artificiale.

L’azienda ritiene che Instant NeRF possa essere utilizzato per addestrare robot e aiutare i sistemi di guida autonoma a comprendere le dimensioni e le forme degli oggetti nel mondo reale. NVIDIA vede anche opportunità per le tecnologie nell’intrattenimento e nell’architettura. Questo può essere utilizzato per creare modelli 3D di ambienti reali che i creatori possono modificare durante il processo di pianificazione.