NVIDIA近年來因其在商業(yè)臺式機和筆記本電腦的GPU中的優(yōu)勢而受到了極大的關(guān)注,尤其是隨著生成AI的興起。在CES 2025貿(mào)易展覽會上,在拉斯維加斯的米歇爾布Ultra競技場的6,000多名與會者面前,首席執(zhí)行官詹森·黃(Jensen Huang)透露了該公司擴展到物理AI世界的擴張。
黃談到了影響游戲,機器人技術(shù)和自動駕駛汽車(AV)行業(yè)的技術(shù)創(chuàng)新。公告包括在三個機器人技術(shù)領(lǐng)域中引入三個新籌碼,世界基金會模型和計劃。為了推動這些領(lǐng)域的各種用例,NVIDIA推出了其新的Blackwell RTX,該RTX具有創(chuàng)新的AI技術(shù),稱為Neural Darlershaders。
Blackwell RTX GPU:組合AI和計算機圖形
盡管NVIDIA一直處于最高水平,為臺式機和筆記本電腦提供了高性能的圖形處理單元,但該公司將其設(shè)計擴展到了由Blackwell Architecture,第五代張量核心和第四代RT核心提供的GeForce RTX 50系列。使用最新的GPU,NVIDIA將人工智能和計算機圖形融合在一起。
作為計算機圖形和生成像素的AI的一個示例,在大規(guī)模的4K視頻中,計算了一個關(guān)于分數(shù)的大規(guī)模視頻,并且AI生成了百萬像素的其余部分。換句話說,AI預(yù)測了它認為像素應(yīng)該是什么。
在下一代可編程的著色器中,NVIDIA引入了RTX神經(jīng)著色器,該著色器是GPU中的小神經(jīng)網(wǎng)絡(luò),從而實現(xiàn)了圖形渲染的AI驅(qū)動增強功能。 NVIDIA針對圖形應(yīng)用空間,包括輻射緩存,紋理壓縮,材料和輻射場等。
神經(jīng)著色器將使開發(fā)人員和創(chuàng)建者能夠在RTX AI計算機上訓(xùn)練其游戲數(shù)據(jù)和著色器代碼。神經(jīng)網(wǎng)絡(luò)通過與傳統(tǒng)輸出進行比較來優(yōu)化,以提高幾個訓(xùn)練周期的準確性。在運行時,張量核心加速了神經(jīng)表示和模型權(quán)重的處理,以實時圖形性能。
“布萊克韋爾(Blackwell)融合了AI驅(qū)動的神經(jīng)渲染和射線追蹤,是自25年前引入可編程陰影以來的最重要的計算機圖形創(chuàng)新,” Jensen Huang說。
在RTX 5090 GPU內(nèi)部,該設(shè)計具有920億晶體管,每秒提供了超過33.52萬億的AI操作計算能力。 NVIDIA聲稱,由于其建筑創(chuàng)新和DLSS 4,RTX 5090的表現(xiàn)可超過4090 GPU,多達2次。該公司表示,由于該產(chǎn)品還針對筆記本電腦,因此NVIDIA MAX-Q技術(shù)將電池壽命延長了40%。
身體AI:想象力在這里
隨著機器人技術(shù)和自動駕駛汽車的開發(fā)迅速發(fā)展,AI模型的性能已越來越依賴于數(shù)據(jù)的可用性。但是,捕獲,清潔和標記這個物理世界數(shù)據(jù)的成本越來越高。
作為回應(yīng),NVIDIA推出了Cosmos,該平臺是通過生成世界基礎(chǔ)模型(WFM)加速物理AI系統(tǒng)的平臺。該平臺具有自回歸世界基礎(chǔ)模型,基于擴散的世界基礎(chǔ)模型,高級令牌和NVIDIA CUDA,該模型提供了AI-ACLEAR的數(shù)據(jù)管道。
Cosmos模型利用各種形式的輸入,包括文本,視覺和視聽提示,以視頻格式生成虛擬環(huán)境的模擬狀態(tài)。世界基金會模型(WFM)能夠從文本或圖像輸入中生成復(fù)雜的視頻,并通過將其當(dāng)前狀態(tài)(無論是圖像還是視頻)集成到具有定義的動作(例如提示或控制信號)來預(yù)測場景的進展。
基礎(chǔ)平臺已專門優(yōu)化,以解決與自動駕駛汽車和機器人應(yīng)用相關(guān)的獨特需求,這些需求考慮了現(xiàn)實世界環(huán)境條件,照明變化和物體永久性等因素。開發(fā)人員利用Nvidia Omniverse來構(gòu)建基于物理的,地理空間準確的方案,然后對其進行處理以產(chǎn)生Omniverse渲染。這些渲染器被輸入到宇宙框架中,從而促進了基于物理學(xué)的合成數(shù)據(jù)的產(chǎn)生。
根據(jù)NVIDIA的說法,Cosmos模型將在開放許可證模型下用于公共使用,以加速目標行業(yè)的工作。 Huang說:“像大型語言模型一樣,世界基金會模型對于推進機器人和AV開發(fā)的基礎(chǔ)是基礎(chǔ),但并非所有開發(fā)人員都擁有培訓(xùn)自己的專業(yè)知識和資源?!?“我們創(chuàng)建了宇宙,以使身體人工智能民主化,并將一般機器人技術(shù)與每個開發(fā)人員息息相關(guān)?!?
將AV和機器人行業(yè)加倍
NVIDIA充滿信心,自動駕駛汽車是現(xiàn)實,該公司正在為該行業(yè)提供一系列解決方案,包括三個計算平臺 - 用于AI模型,仿真系統(tǒng)和合成數(shù)據(jù)生成工具的培訓(xùn)系統(tǒng)。根據(jù)他們的特定需求,汽車制造商可以選擇為其車輛采用一個,兩個或所有三個計算平臺。黃提到Nvidia目前正在與幾乎所有主要的汽車制造商合作,包括Waymo,Tesla,Byd,Jlr,Jlr,Mercedes等。
在CES 2025貿(mào)易展覽會上,NVIDIA宣布,豐田,Aurora和Continental已加入其長期的移動公司,開發(fā)了基于NVIDIA的加速計算和AI平臺的消費者和商業(yè)車隊。豐田將使用在Driveos操作系統(tǒng)上運行的NVIDIA DRIVE AGX ORIN平臺構(gòu)建下一代自動駕駛汽車。
NVIDIA預(yù)計其汽車垂直行業(yè)的增長預(yù)計,到2026財政年度的收入將達到約50億美元。該公司還旨在將其計算解決方案擴展到機器人領(lǐng)域。黃(Huang)伴隨著十幾個類人形機器人,與生成型AI進行了比較,他說:“通用機器人技術(shù)的聊天瞬間就在臨近?!?
NVIDIA推出了ISAAC GR00T藍圖,該框架旨在促進類人形機器人的發(fā)展。該平臺通過模仿學(xué)習(xí)過程可以生成合成運動數(shù)據(jù)集。包括波士頓動力和人物在內(nèi)的機器人公司已開始將技術(shù)納入其開發(fā)工作流程。