NVIDIA NeRF AI okamžitě změní 2D fotografie na 3D objekty

NVIDIA výrazně zlepšila techniku ​​NeRF pro vytváření 3D objektů z 2D fotografií téměř okamžitě.

Nová technologie nazvaná Neural Radiance Field (NeRF) využívá učební algoritmy umělé inteligence k vytváření 3D objektů z 2D fotografií. NeRF má schopnost vyplnit mezery, abych tak řekl, interpolací toho, co 2D fotografie zachytit nemohou. Jde o velmi zajímavý počin, který by mohl vést k výraznému pokroku v tak různorodých oblastech, jako jsou videohry nebo autonomní řízení. Nyní NVIDIA vyvinula novou technologii, NeRF, o které společnost říká, že je dosud nejrychlejší a zabere jen pár sekund, než se naučíte, jak vytvořit 3D scénu.

NVIDIA výrazně zlepšuje techniku ​​NeRF

Studium modelu Instant NeRF pomocí desítek zmrazených snímků a úhlů kamery zabere jen několik sekund. Poté je systém schopen vygenerovat 3D scénu během „několika desítek milisekund“. Stejně jako u jakékoli jiné metody NeRF je potřeba pořizovat snímky v různých pozicích. A u fotek s více scénami je lepší mít snímky bez zbytečného pohybu, jinak bude výsledek rozmazaný.

téměř okamžitě vytvářet 3D objekty z 2D fotografií

NVIDIA vysvětluje, že první modely NeRF přinášejí výsledky poměrně rychle. Vytvoření 3D scény jim zabere jen pár minut, i když je objekt na některých snímcích skryt sloupem nebo nábytkem. Školení trvá několik hodin. Ve verzi NVIDIA tento krok trvá jen několik sekund, protože využívá technologii vyvinutou společností s názvem „Multi-Resolution Hash Grid Encoding“, která je optimalizována pro optimální výkon na GPU této značky. Systém může dokonce běžet na jediném GPU, i když nejrychlejších výsledků je dosaženo na deskách s jádry Tensor Cores, které poskytují zvýšení výkonu pro všechny úkoly AI.

Společnost věří, že Instant NeRF lze použít k výcviku robotů a pomoci systémům autonomního řízení pochopit velikosti a tvary objektů v reálném světě. NVIDIA také vidí příležitosti pro technologie v zábavě a architektuře. Toho lze využít k vytvoření 3D modelů reálných prostředí, které mohou tvůrci upravovat během procesu plánování.