一文看全,NVIDIA在Bilibili World 2024前做了啥

PC領域最熱門的話題莫過於AI PC,但任憑高通、英特爾如何宣傳,NPU+核顯的AI處理能力,仍然遠不及入門版的GeForce RTX 4050 Laptop GPU。是的,現實就是如此殘酷,真正讓你玩溜AI應用的PC,NVIDIA GPU其實才應該標配,因此大部分的熱愛遊戲的玩家,可能早已擁有了AI運行利器。

那麼AI PC說了這麼長時間,到底可以做什麼呢?在Bilibili World 2024開展前夕,筆者受邀參加了新一輪GeForce RTX 40系列品鑑會,僅僅相隔幾個月,遊戲和創作領域的AI,再度升級,點技能點的速度快到離譜。

RTX AI又雙叒升級了

先說一個數據,目前爲止,全球已經超過了1億臺RTX AI PC裝機量,並且超過了500款RTX AI加速的遊戲和應用。開頭提到的GeForce RTX 4050 Laptop GPU守住了200 AI TOPS的底線,規格一旦拉高,比如RTX 4090 D直奔1300 AI TOPS。相比之下,驍龍X Elite主打宣傳的NPU性能爲50 TOPS,未來計劃發佈的Lunar Lake核顯+NPU的總AI TOPS爲100左右。

重點在於RTX AI PC唾手可得,前有機哥機械革命、七彩虹開拓性價比,後有ROG、Alienware拉高性能,現在還有諸如紅魔16Pro的遊戲本來攪局,光是RTX AI的OEM筆記本選擇就超過了200款。

龐大的基本盤讓NVIDIA把更多開發重心放在了AI應用和DEMO的開發上,遊戲當然是玩家們最容易接觸到AI的方式之一。在GeForce RTX 40系列品鑑會上,NVIDIA展示了4款遊戲DEMO,無一例外,DLSS 3在其中都扮演了非常重要的角色。

第一款遊戲是喜聞樂見的《三角洲行動》(Delta Force: Hawk Ops),屬於繼承三角洲衣鉢的續作。作爲一款免費在線競技類FPS遊戲,遊戲幀率和畫面表現出的沉浸感非常重要,現場展示的機器以31.5英寸4K 144Hz miniLED顯示器搭配GeForce RTX 4090 D作爲參考,所有光追特效拉滿。

遊戲形式類似於戰地系列的陣地攻守,大量的載具和槍械可選,畫質拉滿的場景顯然是相當酸爽的。

這裏引用從遊戲中獲得截圖作爲對比,給大家看一下光追開啓和關閉後的效果,高下立判。

RTX OFF

RTX ON

出於習慣,筆者看了一眼左上角的幀率表現,在DLSS 3和Reflex加持下,幀率130FPS+以上,系統響應25ms以內,重點是在沉浸畫面加高幀率表現下,遊戲給予的手感與回饋非常到位,沒有部分網友回饋手感稀碎的情況,體驗帶勁。

第二款遊戲是由網易遊戲開發的《漫威爭鋒》(Marvel Rivals),在遊戲形式上類似於《守望先鋒》,筆者嘗試的是一個推車圖,是的,扮演鋼鐵俠,與銀河護衛隊、X戰警一起在阿斯加德推車,一路還能享受到洛基的debuff互動,也是相當調皮的。

《漫威爭鋒》主要使用了DLSS 3和Reflex技術來提升遊戲的操控感受,在3D建模下還會加入大量的2D漫畫效果,有點《無主之地》的味道,DLSS 3通過AI將幀率提升後,實際遊戲表現出的質感不錯,如果朋友夠的話,多人遊戲一定很帶勁。

第三款遊戲來自《鳴潮》(Wuthering Waves),由於是跨平臺發佈,正式版本是鎖了幀率的。這裏NVIDIA使用的是遊戲演示版,加入了DLSS 3技術和Reflex,在4K分辨率下,幀率輕鬆突破300FPS,正式版的60FPS真的不夠看。

遊戲過程中,筆者嘗試了郊區和主城的切換,並且在釋放技能的時候切換人物,畫面的流暢感搭配32英寸4K miniLED的效果確實不是任何手機屏幕可以比擬的。

最後一款遊戲是《解限機》(Mecha Break),這款遊戲目前處在DEMO狀態,由西山居開發,主題是未來科幻機甲主題的多人對戰遊戲。同樣,遊戲中加入了DLSS 3和Reflex技術。機甲搭配美少女駕駛員確實是個不錯的賣點,在實際體驗中,近戰格鬥搭配光影效果給人眼前一亮,當然也得益於4K高幀率的表現。

四款遊戲在DLSS 3和Reflex加持下,表現出的手感與回饋均遠高於想象,即便其中部分遊戲仍然是DEMO狀態,不代表最終品質,但半成品的表現出打擊感和畫面足夠讓人想多嘗試幾輪。由此可見,大多數遊戲覺得手感不對,真的很有可能是沒有開啓DLSS 3和Reflex,下次覺得遊戲不對味的同學,不妨先看看有沒有能開啓DLSS 3和Reflex的選項,亦或者先升級到RTX 40系列,給AI性能加個分。

功夫在戲外

NVIDIA利用AI提升遊戲體驗的另一個方式是在遊戲之外。例如目前正在測試的NVIDIA APP在未來將進一步取代GeForce Experience和驅動界面,與此同時,還能利用筆記本的硬件優勢,發揮出更多效果。

這裏NVIDIA用DOTA2和巫師3來舉例,不同於以往簡單遊戲濾鏡,AI濾鏡可以實現視覺清晰度提升、並且呈現出更豐富的畫面顏色。NVIDIA將其稱爲RTX Dynamic Vibrance (RTX 動態亮麗)。比如在夜晚場景中,原本黑成一片的細節,被RTX Dynamic Vibrance AI提亮,但不會生硬或者過曝,特別是配合HDR顯示器,完全是另一種遊戲體驗,AI濾鏡在實用性上比之前的濾鏡好很多。

需要注意的是,RTX Dynamic Vibrance本身是需要遊戲接入API的,也就是遊戲需要提供一定的支持。如果遊戲不支持,NVIDIA APP也準備了後手,就是RTX HDR。這也是由AI加持的Freestyle濾鏡,可以將高動態範圍HDR視覺效果無縫引入到原本不支持HDR的遊戲中。比如DOTA2,你想讓G胖更新支持,那一時半會是不可能的,不過NVIDIA APP直接讓其變成了可能,實際效果確實也不錯。

另外一個RTX Video就是利用RTX視頻超分辨率(VSR)和RTX Video HDR實現畫面轉換的效果,RTX 視頻超分辨率 (VSR) 可提升視頻分辨率,使圖像更加清晰銳利,而RTX Video HDR可將標準動態範圍 (SDR) 視頻內容轉換爲高動態範圍 (HDR10) 視頻內容,進而增強視覺效果。

玩家可在Chrome、Edge、Firefox 瀏覽器和 VLC播放器觀看視頻時體驗由RTX Video所帶來的超清4K HDR視頻,感受由AI增強後的升採樣和HDR效果。另外在不久前RTX Video也正式對開發者開放。

熱門剪輯工具Davinci Resolve和萬興喵影也將新增對RTX Video的支持,即便是普通的SDR視頻,通過AI,也能輕鬆提升至HDR明豔的效果,再假以時日,AI可能真的有機會代替影視行業調色師的工作了。

順帶NVIDIA還展示了ChatRTX在筆記本端的應用,包括檢索增強生成(RAG)和 NVIDIA TensorRT-LLM,毋庸置疑,在離線運行下,目前再強勁的NPU,也抵不過任何一款GeForce RTX 40系列GPU,如果你真的注重性能和便攜性,也完全可以考慮買個輕薄型的獨顯筆記本,比如HP OMEN 14 SLIM,配上氮化鎵充電器,沒有什麼AI問題是NVIDIA GPU解決不了的。

這裏ChatRTX新增了ChatGLM3-6B中文大語言模型。用戶還可以通過Whisper模型實現語音識別,更方便地與AI模型對話。此外,CLIP模型可以讓用戶使用自然語言來快速、直觀地檢索本地的圖片。產品經理表示,利用GPU性能,CLIP可以更快速度的完成圖片的向量運算,再加上自然語言描述理解,它的找圖速度比你一個一個翻文件夾要快上不上。

比如你需要色彩斑斕鳥兒的照片,告訴ChatRTX就可以了。這套AI助手也是完全在本地部署的,在NVIDIA官網就能下載。

Covert Protocol DEMO多了個弟弟

NVIDIA ACE近段時間看到進步最快的DEMO,可以這麼說,NVIDA ACE的進步速度幾乎與AI發展速度是看齊的。這是由Inworld AI與NVIDIA合作創建的一項技術演示,應用到名爲Covert Protocol場景的DEMO中,說白了就是在一個場景內,放了3個NPC,每個NPC都由AI控制,可以進行語音互動。製作組只給NPC設定了人設,現場如何發揮,全看NPC自己,省時省力,因此DEMO迭代版本也很快。

新版本更新到了加載本地大模型完成中文識別和英語轉換功能,哪怕遊戲是英語環境,每個NPC都能聽得懂你在說啥。

在這個DEMO中,玩家將扮演2062年的私家偵探馬庫斯·皮爾斯 (Marcus Pierce),致力於揭露生物技術公司大亨的邪惡陰謀。是的,就是找3個AI NPC,接上GPT 3.5,陪你一起玩劇本殺,不需要朋友,聯網就行!

新版本DEMO增加了額外的NPC,叫Jason Park,是門口James Park的弟弟。你要做的就是和這兩兄弟,以及Sophia Anderson、Diego Menendez進行互動,最終獲得Martin Davis的房間號。

這個DEMO由NVIDIA ACE和Inworld AI引擎提供支持的動態NPC交互,同時可交互的環境對象提供影響NPC交互的上下文,最終玩家決策會影響NPC的行爲,有機會真的可以去嘗試一下。

當然,針對近期開展的Bilibili World 2024,NVIDIA還製作了數個品牌互動版本,比如ASUS、七彩虹什麼的,你也可以和Jason Park聊聊產品,講道理,Jason Park的對產品的瞭解程度,不輸於產品經理。

特效小哥:這纔是Stable Diffusion正確打開方式

特效小哥008又登場了。今年著名B站UP主特效小哥008帶來一部由生成式AI輔助製作的特效短片《特效小哥大戰系列之大戰河野華》,其中大量的工作是基於Stable Diffusion實現的,但不是我們印象中文生圖的Stable Diffusion,而是更爲複雜的ComfyUI Stable Diffusion to 3D,長下面這個樣。

全是線框的ComfyUI可以更進一步描述Stable Diffusion生成的細節,從而以更快的速度獲得想要的效果。而實現的最初方式其實仍然簡單,只需要塗鴉即可完成,比如畫個鳥,畫只貓,在GeForce RTX 4090 D加持下,呈現只用了不到1秒鐘,完整的繪製思路也展現了出來,特效小哥008就可以再次基礎上不斷修改細節,最終獲得理想的效果。

這裏的ComfyUI基於Stable Diffusion爲3D模型製作了具有多種材質通道的高質量AI貼圖,同時輔以TripoSR實現生成式的3D模型構建,整個3D特效的前期工作流基於生成式AI工具替代了以往大量的手工繪畫和雕刻工作,極大提升了特效短片的製作效率,配合上TensorRT的Stable Diffusion運行加速,創意流暢度是以往無法想象的。

在此基礎上,生成的AI資產還可以通過RTX GPU加速Blender Cycles渲染器進行最終合成與渲染,Cycles渲染器使用NVIDIA OptiX加速,在AI計算下少量採樣的前提下,就可以爲建模和動畫提供實時的交互方式,是目前Blender中最佳的渲染後端。

另外一個Stable Diffusion應用同樣也是基於ComfyUI,這裏依靠普通的筆記本攝像頭,配合InstantID, IPAdapter和ControlNet等一系列細節控制技術,實現了將用戶形象通過簡單的攝像頭捕捉轉換爲高清超級英雄形象的完整工作流,完成一個屬於自己的超人圖像,當然也可以根據自己的描述做更多調整。

寫在最後

AI PC雖然還處在初步的發展階段,但是RTX AI PC應用已經讓我們看到了更多可能性,先行一步的特效小哥008甚至已經開始利用AI盈利,趁手的AI PC顯然越早入手越好。如果有機會去Bilibili World 2024現場的同學,也可以多去嘗試一下各家展臺的RTX AI PC,興許真能幫你更多靈感,變身專業UP主。

更多遊戲資訊請關註:電玩幫遊戲資訊專區

電玩幫圖文攻略 www.vgover.com