NVIDIA NeRF AI muudab 2D-fotod koheselt 3D-objektideks

NVIDIA on oluliselt täiustanud NeRF-tehnikat 2D-fotodest 3D-objektide peaaegu koheseks loomiseks.

Uus tehnoloogia nimega Neural Radiance Field (NeRF) kasutab tehisintellekti õppimisalgoritme, et luua 2D-fotodest 3D-objekte. NeRF-il on võime nii-öelda lünki täita, interpoleerides seda, mida 2D-fotod ei suuda jäädvustada. See on väga huvitav saavutus, mis võib kaasa tuua märkimisväärseid edusamme nii erinevates valdkondades nagu videomängud või autonoomne sõit. Nüüd on NVIDIA välja töötanud uue tehnoloogia NeRF, mis on ettevõtte sõnul seni kiireim ja võtab 3D-stseeni loomise õppimiseks vaid mõne sekundi.

NVIDIA parandab oluliselt NeRF tehnikat

Instant NeRF mudeli uurimiseks kulub kümneid külmkaadreid ja kaameranurki kasutades vaid mõni sekund. Pärast seda on süsteem võimeline looma 3D-stseeni “mõnekümne millisekundi jooksul”. Nagu kõigi teiste NeRF-meetodite puhul, peate pildistama erinevates asendites. Ja mitme stseeniga fotode puhul on parem, kui pildid on ilma tarbetu liikumiseta, vastasel juhul jääb tulemus udune.

saate peaaegu koheselt luua 2D-fotodest 3D-objekte

NVIDIA selgitab, et esimesed NeRF-mudelid annavad tulemusi üsna kiiresti. 3D-stseeni loomiseks kulub neil vaid mõni minut, isegi kui objekt on mõnel pildil veeru või mööbli poolt peidetud. Koolitus kestab mitu tundi. NVIDIA versioonis kestab see samm vaid paar sekundit, kuna see kasutab ettevõtte väljatöötatud tehnoloogiat nimega “Multi-Resolution Hash Grid Encoding”, mis on optimeeritud selle kaubamärgi GPU-de optimaalseks jõudluseks. Süsteem võib töötada isegi ühe GPU-ga, kuigi kiireimad tulemused saavutatakse Tensor Coresiga plaatidel, mis suurendavad jõudlust kõigi tehisintellekti ülesannete jaoks.

Ettevõte usub, et Instant NeRF-i saab kasutada robotite koolitamiseks ja autonoomsetel juhtimissüsteemidel reaalses maailmas objektide suuruse ja kuju mõistmisel. NVIDIA näeb tehnoloogiate võimalusi ka meelelahutuses ja arhitektuuris. Seda saab kasutada reaalsetest keskkondadest 3D-mudelite loomiseks, mida loojad saavad planeerimisprotsessi käigus muuta.