NVIDIA AI技術如何革新遊戲體驗：從DLSS 3到AI遊戲濾鏡到NVIDIA ACE
今年Bilibili World開幕前的一天，NVIDIA邀請了大量國內媒體朋友匯聚一堂來體驗RTX AI PC在遊戲和內容創作領域的最新動態。
其實在遊戲領域AI應用早已廣泛鋪開，目前在使用RTX顯卡的小夥伴們應該都有體驗過DLSS了，現在已經有400多款遊戲支持NVIDIA DLSS技術，而有90款遊戲現已支持DLSS 3，本次在活動現場就帶來了四款即將支持DLSS 3的遊戲Demo。
《三角洲行動》是一款設定在2035年的第一人稱特戰幹員戰術射擊遊戲，作爲全球反恐特勤組G.T.I.的精英特戰幹員，你將前往神秘的阿薩拉大陸，調查哈夫克公司的非法活動，遊戲發佈時，將支持光線追蹤反射，GeForce RTX 40系列GPU的玩家還可以使用 NVIDIA DLSS 3 加速性能，以獲得最佳遊玩體驗。
本站遊戲的《漫威爭鋒》是一款基於超級英雄團隊的PvP射擊遊戲。你可以組建一支漫威全明星小隊；通過結合各種力量制定不計其數的策略，形成獨特的組隊技能；在不斷髮展的漫威宇宙中，踏上可破壞、不斷變化的戰場並展開激烈的戰鬥。在發佈首日即支持DLSS 3和Reflex，讓GeForce RTX遊戲玩家在每場多人比賽中都能獲得幀率更高、響應速度更快的遊戲體驗。
《鳴潮》是一款全平臺開放世界動作遊戲，並已在全球範圍內跨平臺同步發行。《鳴潮》主打高自由度的動作戰鬥玩法與豐富多樣的開放世界探索。《鳴潮》是庫洛遊戲和NVIDIA達成合作的首款遊戲，RTX 40系列GPU和DLSS 3幫助遊戲開發者庫洛遊戲將《鳴潮》可玩性和畫面更上一層。
由西山居開發製作的《解限機》是一款近未來科幻機甲主題的多人對戰遊戲。在這款機甲動作射擊遊戲中，你可以解鎖作戰風格各異的機兵；通過塗裝改造，定製個人專屬的外觀方案；或是於危機四伏的廣闊場景中挑戰巨型兵器，面臨各種隨時可能發生的遭遇戰，感受動力澎湃、火力全開的立體空間戰鬥。這款遊戲在發佈時將支持NVIDIA DLSS 3，Reflex以及光線追蹤技術，給GeForce RTX的玩家帶來極致的PC遊戲體驗。
NVIDIA ACE：打造更擬真的NPC
當然了DLSS只是目前AI在遊戲領域的其中一個發展方向，但在未來，AI PC能給遊戲帶來更多不一樣的體驗，比如NVIDIA ACE就是一個很不錯的技術，它利用混合AI驅動的自然語言交互技術，爲遊戲中的NPC帶來改變，變得更爲智能，從而提高了遊戲的體驗。
Covert Protocol是由Inworld AI與NVIDIA合作創建的一項技術演示，它突破了NPC交互的界限。該技術演示使用Inworld的AI引擎，該引擎集成了Riva自動語音識別功能，可實現準確的語音轉文本，並集成了NVIDIA Audio2Face以提供逼真的面部動畫。
該Demo其實在4月份我已經體驗過，但這次的新版本通過NVIDIA NIM把更多的東西整合到本地PC上，原本它的工作流是先是本地利用NVIDIA Riva把玩家輸入的語音轉化爲文字，然後上傳至雲端的大語言模型給出對應的對話回覆，接着在雲端把這答覆轉換爲語音回傳本地，在本地利用NVIDIA Audio2Face爲遊戲角色創建臉部表情動畫，讓嘴型對得上聲音，最後通過遊戲引擎輸出畫面。 此外新版本還支持對NPC回答內容進行一定的定製，比如可以把NVIDIA合作伙伴的相關信息添加進去，現在這位NPC就變成的產品代言人了，日後可以對大語言模型進行一定的專項調整，既可以縮小模型大小，又可以提高它對遊戲的貼合度。
現在就只剩大語言模型這一步是在雲端處理了，文字轉語音這步被轉移到本地進行，雖然依然是地以及雲端相結合的混合AI模式，但由於需要雲端處理的東西變少了，相應速度比舊版快了不少，未來隨着硬件算力的提升，以及大語言模型的優化，完全變成本地處理也不是沒有可能。
NVIDIA App：AI遊戲濾鏡帶來不一樣的畫面
NVIDIA App可以說是NVIDIA推出用來取代NVIDIA控制面板和GeForce Experience的一個輔助工具，和GFE相比NVIDIA App的一項重大改動應該就數不用登錄了。它整合了遊戲優化和控制面板功能，可支持驅動升級，還提供遊戲內覆蓋功能，但本次演示的重點是NVIDIA App內置的兩個基於AI的遊戲濾鏡：RTX動態亮麗和RTX HDR，這兩個濾鏡利用上了AI技術，因此需要顯卡帶有Tensor Cores，也就是至少得RTX 20系起步。
RTX動態亮麗是一款AI賦能的濾鏡，可提升視覺清晰度，讓玩家在每款遊戲中都能更好地區分遊戲內元素。它不僅能在屏幕上呈現更多顏色，而且可以在不同的顏色之間實現完美平衡，避免顏色顯示異常。
RTX HDR也是一款AI賦能的全新Freestyle濾鏡，可以將HDR的豔麗視覺效果無縫引入到原本不支持 HDR 的遊戲中。玩家只需擁有兼容HDR的顯示器，即可在原本不支持HDR的遊戲中體驗HDR效果。
RTX Video：AI視頻增強
RTX Video雖熱不是遊戲領域上的東西，但在線觀看流媒體視頻應該是大部分人都用得上的娛樂方式，RTX Video當中的RTX視頻超分辨率就可以提升在線播放視頻時候的清晰度，讓大家在網上的看片體驗大大提升。
現場展示還有RTX Video HDR，它 可將標準動態範圍 (SDR) 視頻內容轉換爲高動態範圍 (HDR10) 視頻內容，進而增強視覺效果，並使視頻畫面更加鮮豔、生動。目前，用戶可在使用Chrome、Edge、Firefox 瀏覽器和 VLC播放器觀看視頻時體驗由RTX Video所帶來的超清4K HDR視頻，感受由AI增強後的升採樣和HDR效果。
而在前不久，RTX Video也正式對開發者開放。熱門剪輯工具Davinci Resolve和萬興喵影也將新增對RTX Video的支持。萬興喵影用戶可在搭載NVIDIA GeForce RTX GPU的電腦上，將SDR源文件轉換爲HDR視頻進行編輯預覽和導出，享受更加鮮豔、明亮的視覺效果。
Chat RTX：本地AI助手
Chat RTX技術Demo可給用戶體驗一下本地的聊天機器人，當然了它用到了TensorRT-LLM和NVIDIA RTX加速技術，能夠以超快速度生成安全的回覆。
在新版本中它加入了對ChatGLM3-6B這個中文大語言模型的支持，同時還支持語音輸入和圖像搜索功能。與ChatGPT、Google Bard和微軟Copilot等在線工具不同，ChatRTX不需要雲端計算，這對用戶的隱私和數據保密性更好，ChatRTX還支持檢索用戶本地文檔的能力，支持指定格式的文件，用戶可使用該功能搭建本地的數據資料庫，只需要給出文件夾路徑，用戶就可以對這個文件夾內的數據資料提問。
ChatRTX還增添了圖像檢索功能，CLIP模型它可根據你給出的信息搜索本地指定目錄裡面的圖片，在大量圖片中找指定的符合要求圖片時還是蠻有用的。
未來AI定會給遊戲更好賦能
在本次活動上NVIDIA向我們展示了RTX AI PC現在能用的最新應用，以及未來的發展方向，其實就目前的感覺而言，AI對生產力提升方面的作用是要遠大於個人應用的，對個人而言，目前在視頻娛樂、AI助手方面也有不少作用，至於遊戲方面，現在體驗最好的是DLSS以及NVIDIA App裡的各種AI濾鏡了。
現在AI對於遊戲玩家來說，可能最直觀的是DLSS所帶來的改善遊戲畫面流暢度並提高幀率，顯卡性能較強的朋友還可使用DLAA換取更好的畫質，由於NVIDIA App纔沒推出多久，使用它的朋友可能還不多，但它所整合的AI遊戲濾鏡可以帶來更靚麗的畫面，甚至可讓你在遊戲中更容易發現敵人，使你在競技類遊戲中更具優勢。
而NVIDIA ACE則給我們展示了AI在未來遊戲中的作用，它可帶來一個更爲真實的NPC，可與玩家直接語音交流，對話內容也不是事先寫好的腳本，會根據你的發言會有不同回答，還能還原真實的面部表情，就和與真人對話一樣，該技術整合了LLM對話模型，聲音與文字間的轉換，以及人物面部動作擬真等多種AI技術，這也是AI技術在未來會給我們所帶來的完全不一樣的遊戲體驗。
此外還有此前在Computex 2024上公佈的G-assist項目，這是一個基於AI的遊戲助手，可通過屏幕截圖和API理解目前遊戲的情況給玩家提供實時攻略，可以說是一個相當實用的東西，只不過目前該項目還在推進中，要等到它成熟還需時日。