NVIDIA 在 CES 2024 上展示游戲、創(chuàng)作、生成式 AI 和機器人領(lǐng)域的創(chuàng)新成果
AI 浪潮再次席卷 CES,為游戲玩家和內(nèi)容創(chuàng)作者帶來各種性能強大的新工具。
在 CES 展會開始之前,NVIDIA 發(fā)表了一場重磅演講,重點介紹了將為游戲和應(yīng)用帶來逼真角色的生成式 AI 模型,以及一款面向游戲玩家和創(chuàng)作者的全新 GPU。
NVIDIA GeForce 高級副總裁 Jeff Fisher 表示:“如今,生成式AI正在成為最新科技發(fā)展的拐點,而NVIDIA 則是這一重大科技轉(zhuǎn)型的核心。”他與 NVIDIA 多位演講嘉賓一起介紹了游戲、內(nèi)容創(chuàng)作和機器人技術(shù)領(lǐng)域的產(chǎn)品與合作。
生成式 AI 的跳板
Fisher 表示,隨著 AI 成為主流,NVIDIA RTX GPU 的出貨量超過 1 億臺,這些PC 使用場景在新興的生成式 AI 領(lǐng)域發(fā)揮著關(guān)鍵作用,ChatGPT 和 Stable Diffusion 的創(chuàng)新就是例證。
2023 年10 月,NVIDIA 發(fā)布TensorRT-LLM for Windows 庫,在 RTX PC 上將 Llama 2 和 Mistral 等大語言模型(LLM)的推理性能加速了 5 倍。
借助全新的 Chat with RTX(將于本月發(fā)布),AI 愛好者可以使用檢索增強生成 (即 RAG,一種增強生成式 AI 模型準(zhǔn)確性與可靠性的技術(shù))連接 RTX 加速的大語言模型和他們自己的數(shù)據(jù),無論是本地存儲文檔數(shù)據(jù),或是視頻網(wǎng)絡(luò)數(shù)據(jù)均可連接。
Fisher還介紹了在 Automatic 1111 熱門文本生成圖像應(yīng)用Stable Diffusion XL和SDXL Turbo中使用TensorRT 加速,性能提升高達 60%。
NVIDIA ACE 微服務(wù)亮相,通過生成式 AI 模型創(chuàng)作虛擬數(shù)字人物
NVIDIA ACE是一個使用生成式 AI 讓虛擬數(shù)字人物變得栩栩如生的技術(shù)平臺。ACE AI 模型可在云端或本地PC端運行。
在一個以 Convai 的新技術(shù)為特色的 ACE 演示中,NVIDIA 資深產(chǎn)品經(jīng)理 Seth Schneider 展示了該平臺的工作原理。
首先,NVIDIA 自動語音識別模型會把玩家的聲音轉(zhuǎn)換為文本。隨后,此文本被導(dǎo)入到LLM中,生成角色的反應(yīng)。
接下來,文本格式的反應(yīng)被轉(zhuǎn)換為語音,并通過動畫模型創(chuàng)造真實的口型同步。最終,動態(tài)角色在游戲場景中被渲染完成。
NVIDIA 在 CES 上發(fā)布了適用于 NVIDIA Audio2Face 和 NVIDIA Riva 自動語音識別的 ACE Production Microservices。目前該服務(wù)已上線,任一模型均可被開發(fā)者集成入管線之中。
前沿交互式虛擬形象和游戲開發(fā)者正在探索如何通過 ACE 和生成式 AI 技術(shù)改變玩家和用戶在游戲及應(yīng)用中與非玩家角色的互動。目前積極迎接 ACE 的開發(fā)者包括Convai、Charisma.AI、Inworld、米哈游、網(wǎng)易游戲、掌趣科技、騰訊游戲、育碧 和 UneeQ。
Getty Images 旗下iStock 發(fā)布了一項基于 NVIDIA Picasso 的生成式 AI 服務(wù)
生成式 AI 可以幫助設(shè)計師和營銷人員創(chuàng)建概念圖、社交媒體內(nèi)容等。今天, Getty Images 旗下 iStock 發(fā)布了一項基于 NVIDIA Picasso(一個面向視覺設(shè)計領(lǐng)域的 AI foundry)開發(fā)的生成式 AI 服務(wù)。
借助 iStock 服務(wù),任何人都可以使用一個 AI 模型從文本創(chuàng)建 4K 圖像。該模型使用 Getty Images 中經(jīng)過授權(quán)且商用安全的海量創(chuàng)意內(nèi)容進行訓(xùn)練。新的編輯API也即將上線,它可以讓客戶對生成的圖像進行更好的控制。
這一生成式 AI 服務(wù)現(xiàn)已在 istock.com 上線,另外還有通過 API 發(fā)布的高級編輯功能。NVIDIA 推出 GeForce RTX 40 SUPER 系列
Fisher 宣布推出全新 GeForce RTX 40 SUPER 系列GPU,它具備強勁的游戲和生成式 AI 性能。
Fisher 表示,GeForce RTX 4080 SUPER支持4K全景光線追蹤游戲。在圖形密集度最高的游戲中,RTX 4080 SUPER的性能比不支持DLSS幀生成技術(shù)GeForce RTX 3080 Ti 快1.4倍。憑借 836 AI TOPS,DLSS 幀生成帶來額外性能提升,RTX 4080 SUPER 性能是 RTX 3080 Ti 的2倍。
創(chuàng)作者生成視頻的速度比在RTX 3080 Ti上快 1.5 倍以上,生成圖像的速度比 RTX 3080 Ti 快 1.7 倍以上。RTX 4080 SUPER 具有更多的核心和更快的顯存,性能更勝一籌。GeForce RTX 4080 SUPER將于 1 月 31 日開售,建議零售價為人民幣8099 元起。
NVIDIA 還推出了 GeForce RTX 4070 Ti SUPER。它擁有更多核心,顯存容量增至 16GB,顯存位寬為 256 bits。Fisher 提到,它比 RTX 3070 Ti 快 1.6 倍,開啟DLSS 3 后,比RTX 3070 Ti快 2.5 倍。GeForce RTX 4070 Ti SUPER 將于 1 月 24 日開售,建議零售價為人民幣6499 元起。
Fisher同時還介紹了RTX 4070 SUPER。GeForce RTX 4070 SUPER的核心數(shù)量比RTX 4070多20%,使其僅使用RTX 3090的一小部分功耗就實現(xiàn)了超越RTX 3090的性能。借助 DLSS 3,它的性能領(lǐng)先優(yōu)勢將擴大到 1.5倍。GeForce RTX 4070 SUPER將于1月17日開售,建議零售價為人民幣4899 元起。
NVIDIA RTX Remix 本月發(fā)布公測
每年有超過 100 億個游戲MOD下載。借助 RTX Remix,MOD制作者可以使用全景光線追蹤、DLSS、NVIDIA Reflex 和生成式 AI 紋理工具重制經(jīng)典游戲,將基本紋理轉(zhuǎn)換為物理精確的 4K 高精度材質(zhì)。RTX Remix 應(yīng)用將于 1 月 22 日發(fā)布公測版。
RTX Remix 已經(jīng)為 NVIDIA 的《傳送門》RTX 版 (Portal with RTX )和MOD制作者制作的《傳送門:序曲》RTX 版 (Portal: Prelude RTX)中提供令人驚嘆的重制版。現(xiàn)在,Orbifold Studios 正在使用 RTX Remix 開發(fā)《半條命 2》 RTX 版:RTX Remix 項目(Half-Life 2 RTX: An RTX Remix Project),這是有史以來評分最高的游戲之一的社區(qū)重制版。
全新AI-Ready RTX筆記本電腦
在過去四年,RTX筆記本電腦增長了5倍,是筆記本電腦品類中增長速度最快的。超過5000萬臺的RTX筆記本電腦被全球的游戲玩家和創(chuàng)作者所青睞。
本次CES,F(xiàn)isher宣布各大OEM廠商將推出一系列全新的RTX筆記本電腦,并表示“得益于強大的RT Core和Tensor Core,每臺RTX筆記本電腦都實現(xiàn)了AI-ready,將帶來最佳的游戲和AI體驗?!?
憑借1億顆GPU裝機量和500款RTX游戲及應(yīng)用,GeForce RTX已經(jīng)成為全球最大的游戲玩家和創(chuàng)作者平臺,現(xiàn)在也是最大的生成式AI平臺。
越來越多的游戲?qū)⒅С?RTX
NVIDIA 高級消費級市場經(jīng)理 Kristina Bartz 表示,現(xiàn)已有超過 500 款游戲和應(yīng)用支持 NVIDIA RTX 技術(shù),其中包括在今年的 TGA 上獲得三項大獎的《心靈殺手 2》 (Alan Wake 2)。
NVIDIA 高級消費級市場經(jīng)理 Kristina Bartz 講解 NVIDIA 技術(shù)在熱門游戲中的應(yīng)用
本次CES 上公布了 14 款全新 RTX 游戲,未來將出現(xiàn)越來越多的RTX游戲。
《地平線:零之曙光》 (Horizon Zero Dawn) 的好評續(xù)作《地平線:西之絕境》(Horizon Forbidden West),將于今年年初登陸 PC 平臺,游戲和《炙炎海岸 》(Burning Shores) 擴展包都將由 DLSS 3 加速。
《Pax Dei》是一款社交沙盒 MMO 游戲,靈感源自中世紀(jì)的傳說。這是一款 Mainframe Industries 開發(fā)的游戲,由前 CCP Games、暴雪和 Remedy Entertainment 的資深人士開發(fā),將于 2024 年春季在 PC 上推出搶先體驗版,并支持 AI 加速的 DLSS 3 技術(shù)。
去年夏天,暴雪推出了采用 DLSS 3 技術(shù)的《暗黑破壞神 IV》 (Diablo IV),該游戲立即成為暴雪史上銷售最快的游戲。光線追蹤技術(shù)將于今年三月登陸《暗黑破壞神 IV》 (Diablo IV)。
超過 500 款游戲和應(yīng)用支持NVIDIA RTX 技術(shù),未來會有更多
通過 NVIDIA Isaac 平臺,生成式 AI 高效助力智能機器人
NVIDIA 嵌入式和邊緣計算副總裁 Deepu Talla 發(fā)表了關(guān)于融合 AI 與機器人技術(shù)的演講。
在這場特別演講的最后,NVIDIA 機器人技術(shù)與邊緣計算副總裁 Deepu Talla 介紹了生成式 AI 與機器人技術(shù)的融合,它可以加快機器人從概念驗證到實際部署的速度。
Talla 提到生成式 AI 在 NVIDIA 機器人生態(tài)系統(tǒng)中的應(yīng)用日益廣泛,Boston Dynamics 和 Collaborative Robots 等機器人創(chuàng)新企業(yè)正在改變?nèi)藱C交互格局。