NVIDIA の NeRF AI は 2D 写真を瞬時に 3D オブジェクトに変換します

NVIDIA は、2D 写真からほぼ瞬時に 3D オブジェクトを作成するための NeRF 技術を大幅に改良しました。

Neural Radiance Field (NeRF) と呼ばれる新しいテクノロジーは、人工知能学習アルゴリズムを使用して 2D 写真から 3D オブジェクトを作成します。NeRF には、2D 写真ではキャプチャできないものを補間することで、いわばギャップを埋める機能があります。これは非常に興味深い成果であり、ビデオゲームや自動運転などの多様な分野で大きな進歩をもたらす可能性があります。NVIDIA は現在、NeRF という新しいテクノロジを開発しました。同社によれば、これはこれまでで最速であり、3D シーンの作成方法を習得するのにわずか数秒しかかかりません。

NVIDIA が NeRF 技術を大幅に改善

数十のフリーズ フレームとカメラ アングルを使用してインスタント NeRF モデルを調べるのにかかる時間はわずか数秒です。その後、システムは「数十ミリ秒」で 3D シーンを生成できます。他の NeRF 手法と同様に、さまざまな位置で写真を撮影する必要があります。また、複数のシーンが含まれる写真の場合は、不必要な動きがない画像が望ましいです。そうしないと、結果がぼやけてしまいます。

2D 写真からほぼ瞬時に 3D オブジェクトを作成

NVIDIA は、最初の NeRF モデルはかなり早く結果を生み出していると説明しています。画像によってはオブジェクトが柱や家具によって隠れている場合でも、3D シーンの作成には数分しかかかりません。トレーニングには数時間かかります。NVIDIA バージョンでは、このブランドの GPU で最適なパフォーマンスが得られるように最適化された「マルチ解像度ハッシュ グリッド エンコーディング」と呼ばれる同社が開発したテクノロジーを使用しているため、このステップは数秒しかかかりません。このシステムは単一の GPU 上でも実行できますが、Tensor コアを搭載したボードで最速の結果が得られ、すべての AI タスクのパフォーマンスが向上します。

同社は、Instant NeRF を使用してロボットを訓練し、自動運転システムが現実世界の物体のサイズと形状を理解できるようにできると考えています。NVIDIA は、エンターテインメントと建築におけるテクノロジーにもチャンスがあると考えています。これを使用して、作成者が計画プロセス中に変更できる実際の環境の 3D モデルを作成できます。