NVIDIA的Instant NeRF技術利用AI將2D照片轉換為3D

在GTC 2022上NVIDIA研究團隊推出了一項名為Instant NeRF的令人印象深刻的技術，該技術可以在幾秒鐘內將2D照片轉換為3D。

為此研究人員利用了人工智慧的力量，更具體地說是透過所謂的神經輻射場。NeRFs使用神經網路透過預測在任何方向輻射的光的顏色來從影像中重建場景。NVIDIA聲稱Instant NeRF是同類技術中速度最快的技術，在某些情況下可實現超過1,000倍的倍增加速，因此1080p的渲染只需幾ms。

正如首席研究科學家Thomas Muller在名為Instant Neural Graphics Primitives的GDC 2022演講中所討論的那樣，這種複合效果是三個主要改進的結果：渲染/訓練算法的特定任務GPU實現，它使用GPU的細粒度控制能力比密集張量快得多；小型神經網路的完全融合實現，而且比通用矩陣乘法例程更快；最後NVIDIA開發了一種稱為Multiresolution Hash Grid Encoding的技術，該技術與任務無關，並且比現有工作具有更好的速度/品質。

不出所料，Instant NeRF是使用CUDA工具包和Tiny CUDA神經網路庫開發的。根據NVIDIA的說法，神經網路足夠輕巧可以在單個GPU上輕鬆執行，特別是如果它配備了Tensor Cores。

消息來源