NVIDIA為1億RTX PC用戶和開發(fā)者更新AI應(yīng)用和工具

　　中國(guó)北京,2024 年 3 月 20日 — GTC — NVIDIA 宣布領(lǐng)先 AI 應(yīng)用開發(fā)者正在用 NVIDIA 數(shù)字人技術(shù)為商業(yè)應(yīng)用和動(dòng)態(tài)游戲角色創(chuàng)建栩栩如生的化身。其他展示內(nèi)容包括:Chat with RTX全面更新,AI Workbench現(xiàn)已就緒,NIM(NVIDIA Microservices)發(fā)布。行業(yè)專家、開發(fā)者和研究員組成的夢(mèng)之隊(duì)齊聚GTC2024,共同推動(dòng) AI 和加速計(jì)算的未來發(fā)展。

　　在此前的GDC 2024大會(huì)上,NVIDIA發(fā)布RTX技術(shù)全新集成:《黑神話:悟空》(Black Myth: Wukong)和《永劫無(wú)間》(NARAKA:BLADEPOINT)將支持全景光線追蹤和 NVIDIA DLSS 3.5;現(xiàn)已有超過 500 款游戲和應(yīng)用支持NVIDIA RTX技術(shù);更新NVIDIA RTX SDK,以幫助開發(fā)者簡(jiǎn)化創(chuàng)建游戲世界的流程。

　　NVIDIA RTX AI平臺(tái)包括工具和軟件開發(fā)工具包,可幫助Windows開發(fā)人員創(chuàng)建領(lǐng)先的生成式AI功能,并令A(yù)I PC提供最佳性能支持。

　　什么是AI PC

　　2018年,隨著 RTX 技術(shù)和首款專為 AI 打造的消費(fèi)級(jí) GPU (GeForce RTX) 的推出,NVIDIA 加速了向 AI 計(jì)算的轉(zhuǎn)變。

　　AI PC定義:AI PC 是搭載專用AI加速硬件的計(jì)算機(jī)。在 RTX GPU 上,這些專用的 AI 加速器被稱為 Tensor Core。在運(yùn)行要求極為嚴(yán)苛的工作和娛樂應(yīng)用時(shí),Tensor Core 能夠顯著加速 AI 性能,并為 PC 用戶引入了以前在云端才能運(yùn)行的新功能。

　　如何衡量AI PC 的性能:衡量 AI 性能的一種方法是以 teraops 為單位。teraops 即“萬(wàn)億次運(yùn)算/秒”(TOPS)。與發(fā)動(dòng)機(jī)的馬力等級(jí)類似,TOPS 可作為單一指標(biāo)讓用戶了解 PC 的 AI 性能。

　　在 PC上本地運(yùn)行AI應(yīng)用的好處:運(yùn)行在 GeForce RTX PC 系統(tǒng)上,因此其速度很快,同時(shí)用戶的數(shù)據(jù)保存在本地。用戶可以在本地 PC 上處理敏感數(shù)據(jù),因此無(wú)需與第三方共享數(shù)據(jù)或連接互聯(lián)網(wǎng)。

　　為什么RTX是AI PC的核心

　　無(wú)與倫比的AI能力:這一代GeForce RTX GPU可提供的算力,涵蓋了從200 AI TOPS到1300 AI TOPS,包括筆記本電腦和臺(tái)式電腦的多樣選擇。與之相比,目前沒有獨(dú)立 GPU 的 AI PC 的算力僅為 10 至 45 TOPS。

　　用戶群和生態(tài):2018年,隨著 RTX 技術(shù)和首款專為 AI 打造的消費(fèi)級(jí) GPU (GeForce RTX) 的推出,NVIDIA 加速了向 AI 計(jì)算的轉(zhuǎn)變。從那時(shí)起,基于 RTX PC 的 AI 蓬勃發(fā)展,目前已成為擁有超過 1 億用戶和 500 款 AI 應(yīng)用的生態(tài)。

　　先進(jìn)的AI應(yīng)用:無(wú)論是居家還是辦公,在使用提升工作效率和娛樂體驗(yàn)的軟件時(shí),都能充分利用 RTX AI 的力量。得益于GeForce RTX GPU提供的AI特性 -- 游戲玩家可以在更高分辨率下,以更高幀率暢玩鐘愛的游戲;創(chuàng)作者則可專注于創(chuàng)意本身,而無(wú)需在等待系統(tǒng)加載或重復(fù)乏味工作上浪費(fèi)時(shí)間;開發(fā)者亦可以使用生成式 AI 進(jìn)行原型設(shè)計(jì)和自動(dòng)化調(diào)試,從而簡(jiǎn)化工作流。

　　世界級(jí)的數(shù)字人技術(shù)

　　NVIDIA ACE 微服務(wù)讓AI角色栩栩如生。

　　NVIDIA ACE 微服務(wù)可幫助開發(fā)者利用由NVIDIA Audio2Face 提供支持的面部動(dòng)畫以及由NVIDIA ™ Riva自動(dòng)語(yǔ)音識(shí)別(ASR)和文本轉(zhuǎn)語(yǔ)音(TTS)提供支持的語(yǔ)音交流,讓虛擬數(shù)字人物栩栩如生。ACE微服務(wù)非常靈活,允許模型根據(jù)本地GPU的性能在云端和PC上運(yùn)行,以確保用戶獲得最佳體驗(yàn)。采用ACE的中國(guó)開發(fā)者和平臺(tái)包括 米哈游、網(wǎng)易游戲、完美世界游戲、掌趣科技和騰訊。

　　NVIDIA RTX — RTX全局光照 (RTXGI) 和 DLSS 3.5等渲染技術(shù)的集合,可在游戲和應(yīng)用中實(shí)現(xiàn)實(shí)時(shí)路徑追蹤。

　　NVIDIA ACE為游戲帶來栩栩如生的NPC

　　Covert Protocol 是Inworld AI公司與NVIDIA合作開發(fā)的一項(xiàng)全新技術(shù)Demo,它突破了游戲中角色互動(dòng)的界限。Inworld AI 擎集成NVIDIA Riva 和NVIDIA Audio2Face,前者可實(shí)現(xiàn)精確的語(yǔ)音轉(zhuǎn)換文字,后者可提供逼真的面部表情。

　　Inworld AI引擎采用多模態(tài)方法來展示非玩家角色(NPC),將認(rèn)知、感知和行為系統(tǒng)集成在一起,在精心制作的環(huán)境中呈現(xiàn)令人驚嘆的 RTX 渲染角色,以實(shí)現(xiàn)身臨其境的敘事效果。

Inworld AI Covert Protocol 技術(shù)Demo

　　育碧 NEO NPCs 利用 Inworld 和 NVIDIA ACE 技術(shù)探索數(shù)字人在游戲中可能性

　　NEO NPCs 由育碧巴黎工作室的多學(xué)科團(tuán)隊(duì)開發(fā),是育碧創(chuàng)作者與生成式 AI 技術(shù)領(lǐng)先合作伙伴 NVIDIA 和 Inworld AI 密切合作的成果。Inworld 的角色引擎和 LLM 技術(shù)使育碧的敘事團(tuán)隊(duì)能為每個(gè) NPC 建立完整的背景、知識(shí)庫(kù)和對(duì)話風(fēng)格,而NVIDIA ACE 技術(shù)套件中的 NVIDIA Audio2Face 則用于實(shí)現(xiàn)實(shí)時(shí)面部動(dòng)畫。

　　育碧通過三個(gè)獨(dú)立技術(shù) Demo 展示了 NEO NPC 的功能。每個(gè)場(chǎng)景都側(cè)重于 NPC 行為、環(huán)境和上下文意識(shí)的不同方面;一系列實(shí)時(shí)反應(yīng)和動(dòng)畫;以及連續(xù)對(duì)話、協(xié)作和戰(zhàn)略決策。這些實(shí)驗(yàn)發(fā)現(xiàn)突破了游戲設(shè)計(jì)和沉浸感的界限。

　　育碧的敘事團(tuán)隊(duì)利用 Inworld AI 技術(shù)打造出兩個(gè) NEO NPCs:Bloom 和 Iron,他們擁有自己的背景故事、知識(shí)庫(kù)和不同的對(duì)話風(fēng)格,在技術(shù) Demo 宇宙中建立獨(dú)特的角色。

　　Inworld 技術(shù)還為 NEO NPC 提供有關(guān)周圍環(huán)境的內(nèi)在知識(shí),并通過 Inworld 的 LLM 提供交互式響應(yīng)。Audio2Face 為兩個(gè) NPC 的面部提供實(shí)時(shí)面部表情和口型同步。

育碧 NEO NPCs 技術(shù)Demo

　　DLSS 3.5 樹立全新游戲標(biāo)準(zhǔn),通過AI增強(qiáng)光線追蹤功能

　　DLSS:自2019 年起,已有超過 500 款游戲和應(yīng)用利用光線追蹤、DLSS 和AI技術(shù)徹底改變?nèi)藗兊挠螒蚝蛣?chuàng)作方式。

　　在 GDC 上,NVIDIA 宣布兩款新游戲?qū)⒅С諨LSS 3.5光線重建(Ray Reconstruction)和全景光線追蹤技術(shù),實(shí)現(xiàn)畫質(zhì)和性能的大幅提升,為 GeForce 玩家?guī)順O致體驗(yàn)。備受期待的《黑神話:悟空》(Black Myth: Wukong)將于8月20日發(fā)布?！队澜贌o(wú)間》(NARAKA: BLADEPOINT)即將在PVP和PVE模式下的三個(gè)地圖中添加全景光線追蹤,之后也將在更多地圖中陸續(xù)支持全景光線追蹤。

　　《黑神話:悟空》(Black Myth: Wukong)備受期待,在 GDC 發(fā)布后獲得大量報(bào)道。#《黑神話:悟空》(Black Myth: Wukong) DLSS 3.5預(yù)告片# 在 嗶哩嗶哩上的搜索量排名第一。在GDC 發(fā)布后的90分鐘內(nèi),所有平臺(tái)的瀏覽量超過 30 萬(wàn)。

　　Chat with RTX,聽得更多,看得更多,聊得更多

　　Chat with RTX (或簡(jiǎn)稱ChatRTX), 使用檢索增強(qiáng)生成、NVIDIA TensorRT-LLM 軟件和 NVIDIA RTX 加速,將本地生成式AI功能引入到支持 RTX 的 Windows系統(tǒng)中。用戶可快速、輕松地將本地文件作為數(shù)據(jù)集連接到開放式大語(yǔ)言模型(如 Mistral 或 Llama 2),快速查詢與上下文相關(guān)的答案。

　　除文本外,Chat with RTX 還將很快增加對(duì)語(yǔ)音、圖像和新模型的支持。除了谷歌的 Gemma,Chat with RTX也將在未來的更新中支持ChatGLM 。

　　中國(guó)領(lǐng)先剪輯軟件剪映率先采用RTX AI平臺(tái)加速產(chǎn)品功能

　　NVIDIA正在和國(guó)內(nèi)深受用戶喜愛的剪輯軟件剪映專業(yè)版共同探索推進(jìn)生成式AI在PC端的落地。目前,NVIDIA已通過TensorRT推動(dòng)剪映AI藝術(shù)字功能上線,并正在通過RTX AI平臺(tái)加速生成式AI在剪映產(chǎn)品功能中的應(yīng)用。

　　剪映產(chǎn)品經(jīng)理表示:“長(zhǎng)期以來剪映和NVIDIA一直都是非常緊密的合作伙伴,在RTX GPU的加速下剪映專業(yè)版可以實(shí)現(xiàn)更高的性能表現(xiàn)。我們期待RTX AI PC強(qiáng)大的性能表現(xiàn)以及加速優(yōu)化對(duì)AI模型的處理能力能幫助剪映的用戶更高效、智能地進(jìn)行創(chuàng)作。”

　　面向開發(fā)者的RTX AI 工具:推動(dòng)創(chuàng)新的 AI 解決方案

　　NIM 微服務(wù)--預(yù)構(gòu)建的AI "容器"采用行業(yè)標(biāo)準(zhǔn) API,包括必要的軟件組件,優(yōu)化整體體驗(yàn),有助于將部署時(shí)間從數(shù)周縮短到數(shù)分鐘。

　　NVIDIA AI Workbench--現(xiàn)已全面上市,可幫助開發(fā)者利用 PC 級(jí)性能和顯存占用空間快速創(chuàng)建、測(cè)試和定制預(yù)訓(xùn)練生成式 AI 模型和 LLM。

　　TensorRT 加速--幫助開發(fā)者充分利用 RTX GPU中的Tensor Core的加速庫(kù)軟件。TensorRT加速現(xiàn)可通過TensorRT-LLM for Windows用于基于文本的應(yīng)用。開發(fā)者還可訪問 OpenAI Chat API 的 TensorRT-LLM 封裝程序。

　　以上介紹的RTX AI工具,在 GTC 和 GDC 上發(fā)布的諸多新聞以及展示的技術(shù)Demo,正在幫助開發(fā)者推動(dòng)創(chuàng)新的 AI 解決方案,更讓RTX PC用戶感受到生成式 AI的未來可期。

　　關(guān)于NVIDIA

　　自1993年成立以來,NVIDIA (NASDAQ: NVDA) 一直是加速計(jì)算領(lǐng)域的先驅(qū)。NVIDIA 1999年發(fā)明的GPU驅(qū)動(dòng)了PC游戲市場(chǎng)的增長(zhǎng),并重新定義了現(xiàn)代計(jì)算機(jī)圖形,開啟了現(xiàn)代AI時(shí)代,正在推動(dòng)跨市場(chǎng)的工業(yè)數(shù)字化。NVIDIA現(xiàn)在是一家全棧計(jì)算公司,其數(shù)據(jù)中心規(guī)模的解決方案正在重塑整個(gè)行業(yè)。