NVIDIA NeRF AI acumirklī pārvērš 2D fotoattēlus 3D objektos

NVIDIA ir ievērojami uzlabojusi NeRF tehniku, lai gandrīz acumirklī izveidotu 3D objektus no 2D fotogrāfijām.

Jaunā tehnoloģija ar nosaukumu Neural Radiance Field (NeRF) izmanto mākslīgā intelekta mācīšanās algoritmus, lai no 2D fotogrāfijām izveidotu 3D objektus. NeRF ir iespēja aizpildīt nepilnības, tā sakot, interpolējot to, ko 2D fotoattēli nevar uzņemt. Tas ir ļoti interesants sasniegums, kas varētu novest pie ievērojama progresa tādās jomās kā videospēles vai autonomā braukšana. Tagad NVIDIA ir izstrādājusi jaunu tehnoloģiju NeRF, kas, pēc uzņēmuma domām, ir līdz šim ātrākā un aizņem tikai dažas sekundes, lai uzzinātu, kā izveidot 3D ainu.

NVIDIA ievērojami uzlabo NeRF tehniku

Lai izpētītu Instant NeRF modeli, izmantojot desmitiem fiksētu kadru un kameras leņķus, nepieciešamas tikai dažas sekundes. Pēc tam sistēma spēj ģenerēt 3D ainu “vairākos desmitos milisekundēs”. Tāpat kā ar jebkuru citu NeRF metodi, jums ir jāuzņem attēli dažādās pozīcijās. Un fotoattēliem ar vairākiem sižetiem labāk ir iegūt attēlus bez nevajadzīgas kustības, pretējā gadījumā rezultāts būs izplūdis.

gandrīz acumirklī izveidojiet 3D objektus no 2D fotoattēliem

NVIDIA skaidro, ka pirmie NeRF modeļi dod rezultātus diezgan ātri. 3D ainas izveidošana aizņem tikai dažas minūtes, pat ja objekts dažos attēlos ir paslēpts ar kolonnu vai mēbelēm. Apmācība ilgst vairākas stundas. NVIDIA versijā šis solis ilgst tikai dažas sekundes, jo tajā tiek izmantota uzņēmuma izstrādāta tehnoloģija ar nosaukumu “Multi-Resolution Hash Grid Encoding”, kas ir optimizēta optimālai veiktspējai šī zīmola GPU. Sistēma var darboties pat ar vienu GPU, lai gan ātrākie rezultāti tiek sasniegti, izmantojot paneļus ar Tensor Cores, nodrošinot veiktspējas uzlabojumus visiem AI uzdevumiem.

Uzņēmums uzskata, ka Instant NeRF var izmantot, lai apmācītu robotus un palīdzētu autonomajām braukšanas sistēmām izprast objektu izmērus un formas reālajā pasaulē. NVIDIA saskata tehnoloģiju iespējas arī izklaidē un arhitektūrā. To var izmantot, lai izveidotu reālas vides 3D modeļus, kurus veidotāji var modificēt plānošanas procesa laikā.