NVIDIA Gamescom 更新：DLSS 3.5 光線重塑、Half-Life 2 RTX 光追版、NeMo SteerLM 智能 NPC

NVIDIA 在今年 Gamescom 2023 中雖沒發表新的 RTX GPU，但也帶來不少技術更新，主要是讓遊戲開發者能有效的應用 AI、光線追蹤等技術，並且帶來《Half-Life 2 RTX》光追重製版。

首先 NVIDIA DLSS 3.5 肯定是這次消息的重點，DLSS 早期一代的尷尬到 DLSS 2 的升級，讓玩家真的可借住 AI 加速獲得相當於原生渲染的畫質，接著 RTX 40 的 DLSS 3 透過 AI 補幀讓效能翻倍，再加上 Reflex 補足延遲等問題，而 DLSS 3.1 小更新則強化 UI 穩定性與高速移動物件的畫質。

而 DLSS 3.5 則要用 AI 來強化光線追蹤 Pipeline 的 Denoiser 降噪處理。






首先傳統光線追蹤的工作流程，先是由引擎生成幾何與材料，在通過光線追蹤處理反射（reflections）與全局漫射照明（diffuse global illumination），接著需要借住 Hand-tuned denoiser 去填充幾何遺失的像素，最終完成的 RT 影像再透過畫質提升才算完成。




其中處理 Hand-tuned denoiser 的方法，有著利用 Temporal Accumulation 藉助前面的影像來計算，以及 Spatial Interpolation 藉由多個取樣點的混合計算方式。

只不過 Hand-tuned denoiser 的作法都會有著問題，像是 Temporal Accumulation 再移動物體上會出現殘影，而且會導致全局光照的畫質降低，以及不真實的反射效果。








DLSS 3.5 在原本的 Super Resolution 神經網路中加入「Ray Reconstruction」的能力，將原本工作流程的 Hand-tuned denoiser 交給 AI 處理。




NVIDIA 藉由 5X 倍多的資料量來訓練 Ray Reconstruction，讓神經網路學習遊戲引擎產生的影像、不同光線追蹤的效果，以及判斷 Reconstruction 後的結果是否比以往的 Hand-tuned denoiser 還要好。




最終 DLSS 3.5 重建的光追影像能有著更好的全局照明的畫質，以下幾組比較提供給各位玩家參考。














由 AI 驅動的 DLSS 能最大化 FPS 效能與畫質，DLSS 3.5 包含著 Super Resolution（SR）、Frame Genration（FG）與 Ray Reconstruction（RR）。而且 Ray Reconstruction 功能並不限定 RTX 40 GPU，只要是 RTX GPU 的玩家都可啟用這功能。

不過最終還是要看遊戲開發商如何應用這些功能，玩家才能獲得更出色的光追遊戲。DLSS 3.5 將在今年秋天隨著遊戲推出，其中兩款大作《電馭叛客 2077：自由幻局》與《Alan Wake 2》都將支援這新功能。






除了 DLSS 3.5 之外，NVIDIA ACE 藉助 AI 所打造的智能 NPC，這次加入 NeMo SteerLM，讓開發者可自訂參數與態度，讓智能 NPC 更人性化。






而 NVIDIA 也打造 RTX Remix 的 Mod 工具讓老遊戲可已有著光線追蹤加持，這次 NVIDIA 帶來 Half-Life 2 RTX 光追版。






Half-Life 2 RTX 光追版，是由 4 個頂尖的 Mod Teams（Orbifold Studios）共同開發的專案，採用全光線追蹤、DLSS 3、RTX IO 與 Modernized assets，而目前還屬於開發階段有興趣的玩家可至 nvidia.com/HalfLife2RTX 獲得更多資訊。