當前位置:首頁 > 廠商動態(tài) > Arm
[導讀]Arm CPU正在從根本上推動AI變革,并造福地球。Arm架構是未來AI計算的基石。?

人工智能(AI)具有超越過去一個世紀所發(fā)生的所有變革性創(chuàng)新的潛力,它在醫(yī)療保健、生產(chǎn)力、教育等領域為社會帶來的益處將超乎我們的想象。為了運行這些復雜的AI工作負載,全球數(shù)據(jù)中心所需的計算量需要以指數(shù)級規(guī)模進行擴展。然而,這種對計算無止盡的需求也揭示了一個嚴峻的挑戰(zhàn):數(shù)據(jù)中心需要龐大的電力來驅動AI這一突破性技術。

當今的數(shù)據(jù)中心已經(jīng)消耗了大量的電力——全球每年需要460太瓦時(TWh)電力進行支持,這個數(shù)字等同于整個德國的用電量。而AI的興起預計將在2030年把該數(shù)字提高三倍,意味著將超過印度這一世界上人口最多國家的總耗電量。

未來的AI模型將持續(xù)變得更大、更智能,在帶動對更多計算能力的需求的同時,對電力的需求也會增加,從而成為良性循環(huán)的一部分。而找到降低這些大型數(shù)據(jù)中心電力需求的方法對于實現(xiàn)社會性突破和兌現(xiàn)AI的承諾至關重要。

換言之,沒有電力就無法實現(xiàn)AI,企業(yè)需要重新思考如何應對能效問題的方方面面。

重新構思AI的未來——一個由Arm平臺驅動的未來

Arm最初的產(chǎn)品就是為使用電池的設備而設計的,并推動了移動電話的變革。因此,深植于Arm的能效DNA能使業(yè)界重新思考應如何構建芯片來滿足AI日益增長的需求。

在典型的服務器機架中,僅計算芯片就可以消耗超過50%的電力預算。工程團隊正在尋找各種可以降低該數(shù)字的方法,每一瓦特的減少都至關重要。

正因為此,全球最大的AI頭部云服務提供商們轉而采用Arm技術來降低功耗。與同行業(yè)中的其他產(chǎn)品相比,Arm最新的Arm Neoverse CPU是面向云數(shù)據(jù)中心,性能最高、最節(jié)能的處理器。Neoverse為頭部云服務提供商提供了定制芯片的靈活性,以優(yōu)化其苛刻的工作負載,同時提供領先的性能和能效。每一瓦特的節(jié)省都可以用來實現(xiàn)更多的計算。這也正是為什么亞馬遜云服務(AWS)、微軟、Google和甲骨文(Oracle)現(xiàn)在都通過Neoverse技術,處理其通用計算和基于CPU的AI推理和訓練。Neoverse平臺正在成為云數(shù)據(jù)中心領域的事實標準。

從近期的行業(yè)內的發(fā)布來看:

基于Arm架構的AWS Graviton:與其他同行業(yè)產(chǎn)品相比,Amazon Sagemaker的AI推理性能提高了25%,Web應用程序提高了30%,數(shù)據(jù)庫提高了40%,效率則提升了60%。

基于Arm架構的Google Cloud Axion:與傳統(tǒng)架構相比,其性能和能效分別提高了50%和60%,可為基于CPU的AI推理和訓練、YouTube、Google地球等服務提供支持。

基于Arm架構的Microsoft Azure Cobalt:性能高出同類產(chǎn)品40%,并為Microsoft Teams等服務提供支持,與Maia加速器的耦合驅動Azure的端到端AI架構。

Oracle Cloud采用基于Arm架構的Ampere Altra Max:與傳統(tǒng)同類產(chǎn)品相比,每機架服務器的性能提高2.5倍,能耗降低2.8倍,并用于生成式AI推理模型,諸如摘要、大語言模型訓練的數(shù)據(jù)的標記化,以及批量推理用例。

顯然,Neoverse極大地提升了云端通用計算的性能和能效。此外,合作伙伴也發(fā)現(xiàn)在加速計算方面,Neoverse也能帶來同樣的益處。大規(guī)模AI訓練需要獨特的加速計算架構,例如,NVIDIA Grace Blackwell平臺(GB200)結合了NVIDIA的Blackwell GPU架構與基于Arm架構的Grace CPU。這種基于Arm技術的計算架構可實現(xiàn)系統(tǒng)級設計優(yōu)化,與面向大語言模型的NVIDIA H100 GPU相比,可帶來25倍的能耗降低,并將每個GPU的性能提高30倍。這些優(yōu)化能夠帶來顛覆性的性能和節(jié)能效果,而這一切都得益于Neoverse所帶來的前所未有的芯片定制靈活性。

隨著基于Arm架構的部署持續(xù)擴大,這些企業(yè)將可以節(jié)省高達15%的數(shù)據(jù)中心總能耗。這些巨幅的節(jié)省可以用來在相同的功率范圍內驅動額外的AI運算,而不會增加能源負擔。換言之,這些節(jié)能相當于可以額外運行20億次ChatGPT查詢,驅動四分之一的日常網(wǎng)絡搜索流量,為20%的美國家庭提供照明,或為與哥斯達黎加面積相仿的國家進行供電。這對改善能源消耗和環(huán)境可持續(xù)性產(chǎn)生了驚人的影響。

Arm CPU正在從根本上推動AI變革,并造福地球。Arm架構是未來AI計算的基石。

本站聲明: 本文章由作者或相關機構授權發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內容真實性等。需要轉載請聯(lián)系該專欄作者,如若文章內容侵犯您的權益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或將催生出更大的獨角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉型技術解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關鍵字: 汽車 人工智能 智能驅動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務中斷的風險,如企業(yè)系統(tǒng)復雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務連續(xù)性,提升韌性,成...

關鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質量流程IT總裁陶景文發(fā)表了演講。

關鍵字: 華為 12nm EDA 半導體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權最終是由生態(tài)的繁榮決定的。

關鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務引領增長 以科技創(chuàng)新為引領,提升企業(yè)核心競爭力 堅持高質量發(fā)展策略,塑強核心競爭優(yōu)勢...

關鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術學會聯(lián)合牽頭組建的NVI技術創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術創(chuàng)新聯(lián)...

關鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關鍵字: BSP 信息技術
關閉