自2022年開始，人工智能全面爆發(fā)，AI開始走進(jìn)到普通大眾的身邊，進(jìn)入到發(fā)展的高速路，于是我們便看到了上游產(chǎn)業(yè)對AI算力的孜孜以求，早已布局AI的硬件廠商N(yùn)VIDIA作為AI算力的“至優(yōu)解”，通過強(qiáng)大的技術(shù)能力重塑了硬件行業(yè)的格局，股價(jià)、市值在這兩年來一路飆升。截止6月中旬，NVIDIA總市值達(dá)到3.24萬億美元，是Intel市值1296萬億美元的25倍，是AMD市值2580億美元的12.5倍，遠(yuǎn)遠(yuǎn)甩開了他在PC行業(yè)的兩個(gè)老對手。

在今年ComputeX大會開幕前，NVIDIA以“加速一切”為主題召開了演講，強(qiáng)調(diào)了AI在未來的重要性以及NVIDIA將推動新一輪的技術(shù)進(jìn)步，并展示了產(chǎn)品路線圖，助力AI工廠、數(shù)據(jù)中心、機(jī)器人工廠降本增效。

不過，這些有點(diǎn)“宏觀敘事”的介紹仿佛還離我們普通人相距甚遠(yuǎn)，我們既不是大模型公司的高層決策者也不是尋求增加效率的數(shù)字化工廠主，現(xiàn)階段，NVIDIA能為我們提供什么樣的AI應(yīng)用體驗(yàn)?zāi)兀窟@個(gè)答案我們移步到NVIDIA的展臺就能找到答案了。

總體來講，通過GeForce RTX 40系列GPU強(qiáng)大的AI性能，在本地AIGC、游戲等場景中可以為我們帶來前所未有的體驗(yàn)，還為高性能MINI PC發(fā)布全新標(biāo)準(zhǔn)。

一、ChatRTX，本地AI助手

ChatRTX是一款運(yùn)行在本地的AI對話應(yīng)用，不過ChatRTX不同于其他軟件只有運(yùn)行加載大語言模型的能力，在此基礎(chǔ)上，通過GeForce RTX 40系列GPU的加速，ChatRTX還具備Retrieval-Augmented Generation檢索增強(qiáng)生成功能，可以對本地PC中的文檔、筆記等數(shù)據(jù)進(jìn)行學(xué)習(xí)，并由LLM大語言模型驅(qū)動進(jìn)行反饋。

例如在下面的視頻中就是針對本地?cái)?shù)據(jù)的顯示，NVIDIA ACE NIM推理微服務(wù)是在這次展會中剛剛發(fā)布的一個(gè)項(xiàng)目（文章之后我們也會介紹到），在ChatRTX中加載選擇Llama 2 13B模型，問及NVIDIA ACE相關(guān)的問題時(shí)，其回答是完全錯(cuò)誤的，這是因?yàn)長lama 2 13B模型在發(fā)布時(shí)，NVIDIA ACE還沒有公布，所以它的回答是錯(cuò)誤的。但我們可以將一些含有Nvidia ACE相關(guān)的文件放到本地的硬盤中，選擇這些文件所在的目錄后，借由RTX顯卡便可以對這些文件進(jìn)行學(xué)習(xí)，再問及相同的有關(guān)NVIDIA ACE的問題時(shí)便可以回復(fù)準(zhǔn)確，并且給出本地文件的準(zhǔn)確位置。

在視頻的后半段，還展現(xiàn)了ChatRTX的本地檢索功能，通過語音輸入，可以精準(zhǔn)查找出符合描述的本地圖片，例如視頻中演示人通過語音要求查找出“Pictures of hiking”，即戶外徒步的照片，ChatRTX便查找出了相關(guān)的本地圖片。

ChatRTX完全在本地運(yùn)行，并且不單單具備運(yùn)行各種LLM大語言模型的“常規(guī)功能”，還可以檢索或生成針對于用戶本地?cái)?shù)據(jù)的內(nèi)容，極大程度的拓寬了本地AI對話的應(yīng)用場景，并且可保護(hù)用戶的隱私。

二、AI生圖的新玩法

NVIDIA正式開始支持廣受歡迎的ComfyUI了，并且可以支持更多更好玩的AI生圖玩法，例如我們在展臺里體驗(yàn)的“頭像生成”功能（下方視頻可查看），通過攝像頭拍攝到自己的頭像，然后根據(jù)示意圖、關(guān)鍵詞生成了我們自己的“超級英雄”形象。

根據(jù)NVIDIA自己的描述，由RTX顯卡加速下的ComfyUI性能可提升60%，生圖時(shí)間要遠(yuǎn)低于蘋果的M3 Max或M3 Pro，具體到我們這次的體驗(yàn)，6張圖的生成用時(shí)大概在20秒左右。

三、DLSS 3.5，游戲幀數(shù)提升，畫面質(zhì)量提高

DLSS 3.5是在DLSS 3 幀生成技術(shù)的基礎(chǔ)上加入了光線重構(gòu)技術(shù)，簡單點(diǎn)來說，光線重構(gòu)技術(shù)是專為游戲中的“光線反射”開發(fā)的AI模型，通過AI訓(xùn)練識別各類光線，解決人工設(shè)計(jì)的光線模擬質(zhì)量低、噪點(diǎn)多的問題，從而提升游戲中光線反射的真實(shí)度、畫面質(zhì)量、清晰度以及幀數(shù)表現(xiàn)。

我們分別來看下在開啟和關(guān)閉DLSS 3.5之后，可以為畫面與幀數(shù)帶來多大的提升。

首先是畫面光影效果：

在開啟DLSS 3.5后，光的反射更加清晰與真實(shí)了，整個(gè)畫面也會明亮許多，尤其是物體反射的邊緣位置，模糊和鋸齒都被優(yōu)化了許多。

左：關(guān)閉DLSS 3.5 右：開啟DLSS 3.5

同場景下，開啟DLSS 3.5后，幀數(shù)從33幀上升到了110幀左右，有3倍多的幀數(shù)提升。

四、NVIDIA ACE

NVIDIA ACE生成式AI微服務(wù)旨在為游戲、娛樂、醫(yī)療、各類客戶服務(wù)等場景提供數(shù)字人服務(wù)，其中包括：

運(yùn)行在本地RTX GPU的：

Riva ASR、TTS、NMT：用于自動語音識別、文本到語音轉(zhuǎn)換、翻譯。

mniverse RTX：用于實(shí)時(shí)路徑追蹤，以制作逼真的皮膚和毛發(fā)。

運(yùn)行在云端服務(wù)的：

Nemotron LLM：用于語言理解，并根據(jù)上下文生成回復(fù)。

Audio2Face：根據(jù)音軌制作栩栩如生的面部動畫。

另外還有兩項(xiàng)全新推出的技術(shù)：

Audio2Gesture，用于根據(jù)音軌生成肢體手勢

Nemotron-3 4.5B，45億的小語言模型，為低延遲、本地端RTX AIPC推理設(shè)計(jì)。

現(xiàn)場展示了兩個(gè)Nvidia ACE的DEMO，可以看以下兩個(gè)視頻：

這是由Inworld制作的一個(gè)酒店大堂的場景，其中擁有諸多的NPU與場景供玩家進(jìn)行對話、探索，每一個(gè)角色都有自己的設(shè)定和背景故事。

第二個(gè)是由完美世界制作的DEMO，可以跟一位來自部落的公主進(jìn)行對話，支持中文。

五、G-Assist項(xiàng)目，面向游戲玩家的AI助手

NVIDIA與Studio Wildcard合作，在現(xiàn)場展示了《方舟：生存飛升》的G-Assist 項(xiàng)目DEMO。

在這個(gè)DEMO中，G-Assist項(xiàng)目可以幫助玩家給出在當(dāng)前進(jìn)度下的游玩建議、給出有關(guān)游戲的背景知識、某個(gè)物品該如何打造等等游戲內(nèi)相關(guān)的內(nèi)容，讓玩家可以直接在游戲中就可以“查攻略”，例如下面的視頻，演示者通過語音輸入，詢問G-Assist項(xiàng)目“游戲初期最好的武器是什么？該如何制作它？”。

除了游戲中的內(nèi)容外，G-Assist項(xiàng)目還可以給出游戲的平均功耗、幀率曲線圖，也可以對G-Assist項(xiàng)目提出游戲幀率的要求，讓G-Assist項(xiàng)目根據(jù)玩家需求調(diào)整畫質(zhì)，從而提升硬件效能。

Assist項(xiàng)目可以講是目前游戲場景中數(shù)一數(shù)二的AI助手，可以在游戲內(nèi)提供攻略，通過AI識別游戲內(nèi)容、游戲攻略，給出游玩建議，還可以對游戲的硬件性能智能調(diào)節(jié)，這是實(shí)實(shí)在在為游戲玩家所設(shè)計(jì)的AI應(yīng)用。

六、SFF-Ready GeForce顯卡標(biāo)準(zhǔn)

SFF-Ready是NVIDIA為高性能小尺寸PC發(fā)布的全新標(biāo)準(zhǔn)，旨在為緊湊型機(jī)箱愛好者選擇硬件時(shí)提供兼容性方面的建議。

顯卡方面，需要滿足以下條件的尺寸，并且級別在GeForce RTX 4070及以上，目前已經(jīng)有36款來自不同廠商的顯卡經(jīng)過認(rèn)證：

另外，還有23款來自不同廠商的機(jī)箱經(jīng)過SFF-Ready認(rèn)證。

七、寫在最后

作為AI領(lǐng)域硬件的絕對龍頭，NVIDIA在軟件與技術(shù)上面也在積極提升普通用戶的使用體驗(yàn)，本次的ComputeX NVIDIA親自下場打樣，給大家伙展示一下行業(yè)巨頭的技術(shù)能力，以RTX顯卡驅(qū)動，在游戲、創(chuàng)作、本地AI助手等方面為玩家、創(chuàng)作者提供了更多玩法。讓我們共同期待NVIDIA能夠?yàn)槲覀儙砀喔玫挠布约案腥?、更方便使用的?yīng)用吧。