這就是 AI 直播！NVIDIA RTX Broadcast 引擎即時綠幕, AR 臉部特徵/追蹤與特殊濾鏡

NVIDIA 似乎要前進最大的直播盛事 TwitchCon，並帶來透過 NVIDIA RTX Broadcast 引擎，所帶來的 AI 直播，可幫助玩家進行綠幕去背、AR 臉部追蹤 / 特徵，以及將名畫套用成為畫面濾鏡等功能。

簡單來說，NVIDIA RTX Broadcast 引擎，借住 GeFroce RTX 顯示卡當中的 Tensor Cores 來加速這種 AI 驗證功能，而且可達到即時處理運算，並且無須任何額外的硬體設備，只要你的直播電腦有安裝 RTX 顯示卡（或筆電）搭配一般視訊鏡頭即可。

NVIDIA RTX Broadcast 引擎 SDK 包含以下三種 AI 驗證功能：

• RTX Greenscreen 綠幕，即時背景移除的功能，也就是透過 AI 辨識臉部與身體，並將額外的影像去背，而在影片展示時亦可將遊戲畫面當作背景使用；各位直播主，跟你的實體綠幕說掰掰吧！
• RTX AR，透過 AI 進行臉部辨識、特徵辨識，甚至可導入 3D 模型，即時的展示 AR 3D 人物於直播當中。
• RTX Style Filters，這絕非一般濾鏡，玩家可指定一副名畫，並將這名畫的化風、顏色做為濾鏡套用至視訊鏡頭當中，例如直播遊戲時透過 RTX Style Filters，將視訊鏡頭套用遊戲風格，如此一來可進行更個性化的直播。

而 RTX Broadcast 引擎，將支援 OBS、XSplit、Huya、Douya 與 Streamlabs 等直播串流軟體，而這個月將會推出此更新的包含 Twitch Studio、Discord 與 Elgato。

小編滿喜歡 RTX Greenscreen 與 RTX Style Filters 的功能，但實際效果與需要佔用多少的 GPU 資源，以及適合單機 RTX 直播 + 遊戲的使用模式，還是要建立雙機直播來處理這即時 AI 的效果，就等 SDK 更新後在來測試了。



source: nvidia.com