當(dāng)前位置:首頁 > 芯聞號(hào) > 美通社全球TMT
[導(dǎo)讀]北京2024年9月27日 /美通社/ -- 9月25日,MLCommons協(xié)會(huì)發(fā)布最新MLPerf? Storage v1.0 AI存儲(chǔ)基準(zhǔn)測(cè)試成績(jī)。浪潮信息分布式存儲(chǔ)平臺(tái)AS13000G7表現(xiàn)出眾,在3D-UNet和CosmoFlow兩個(gè)模型共計(jì)八項(xiàng)測(cè)試中,斬獲五項(xiàng)冠軍。 M...

北京2024年9月27日 /美通社/ -- 9月25日,MLCommons協(xié)會(huì)發(fā)布最新MLPerf? Storage v1.0 AI存儲(chǔ)基準(zhǔn)測(cè)試成績(jī)。浪潮信息分布式存儲(chǔ)平臺(tái)AS13000G7表現(xiàn)出眾,在3D-UNet和CosmoFlow兩個(gè)模型共計(jì)八項(xiàng)測(cè)試中,斬獲五項(xiàng)冠軍

MLPerf? Storage v1.0 AI存儲(chǔ)基準(zhǔn)測(cè)試成績(jī)


MLPerf? Storage v1.0 AI存儲(chǔ)基準(zhǔn)測(cè)試成績(jī)

MLPerf? 是影響力最廣的國際AI性能基準(zhǔn)評(píng)測(cè),由圖靈獎(jiǎng)得主大衛(wèi)?帕特森(David Patterson)聯(lián)合頂尖學(xué)術(shù)機(jī)構(gòu)發(fā)起成立。2023年推出MLPerf? 存儲(chǔ)基準(zhǔn)性能測(cè)試,旨在以架構(gòu)中立、具有代表性和可重復(fù)的方式衡量機(jī)器學(xué)習(xí)(ML)工作負(fù)載的存儲(chǔ)系統(tǒng)性能。該測(cè)試通過準(zhǔn)確建模ML工作負(fù)載所產(chǎn)生的I/O模式來幫助解決存算平衡問題,為不同存儲(chǔ)系統(tǒng)和不同加速器類型的混合和匹配提供了靈活性,為ML/AI模型開發(fā)者選擇存儲(chǔ)解決方案提供權(quán)威的參考依據(jù)。

本次MLPerf? 存儲(chǔ)基準(zhǔn)評(píng)測(cè)(v1.0)吸引了全球13家領(lǐng)先存儲(chǔ)廠商和研究機(jī)構(gòu)參與。該評(píng)測(cè)圍繞醫(yī)學(xué)影像分割、圖像分類、宇宙學(xué)參數(shù)預(yù)測(cè)三大AI存儲(chǔ)應(yīng)用場(chǎng)景,采用主流的3D-Unet、ResNet50、CosmoFlow三類模型,在GPU利用率高達(dá)90%或70%的條件下,以帶寬和支持的模擬 GPU (模擬加速器)數(shù)量為關(guān)鍵性能指標(biāo),評(píng)估單客戶端或集群模式下存儲(chǔ)系統(tǒng)的性能表現(xiàn)。

本次測(cè)試,浪潮信息采用3臺(tái)AS13000G7搭建分布式存儲(chǔ)集群,搭載ICFS自研分布式文件系統(tǒng),在3D-UNet和CosmoFlow兩大評(píng)測(cè)任務(wù)中共獲得五項(xiàng)最佳成績(jī)。其中,在圖像分割3D-UNet多客戶端2評(píng)測(cè)任務(wù)中,服務(wù)于10個(gè)客戶端264個(gè)加速器,集群聚合帶寬達(dá)到360GB/s,單個(gè)存儲(chǔ)節(jié)點(diǎn)的帶寬高達(dá)120GB/s;在宇宙學(xué)分析CosmoFlow單客戶端2和多客戶端2評(píng)測(cè)任務(wù)中,分別提供了18 GB/s和52 GB/s的帶寬最佳成績(jī)。

近年來,浪潮信息基于存算協(xié)同的理念,持續(xù)加大存儲(chǔ)研發(fā)投入,從整體架構(gòu)到各技術(shù)棧持續(xù)創(chuàng)新,優(yōu)化升級(jí)存力,提升了GPU算力整體性能表現(xiàn),實(shí)現(xiàn)了模型訓(xùn)練數(shù)據(jù)處理的即時(shí)性,消除了GPU資源閑置(即"饑餓GPU"現(xiàn)象),全面提升大模型訓(xùn)練效率。

  • 架構(gòu)層面,采用全新數(shù)控分離架構(gòu)。數(shù)據(jù)面和控制面完全解耦,控制面實(shí)現(xiàn)數(shù)據(jù)管理和訪問,數(shù)據(jù)面讀寫操作直通到盤,達(dá)到120 GB/s的單存儲(chǔ)節(jié)點(diǎn)的超高性能,單存儲(chǔ)節(jié)點(diǎn)支撐5臺(tái)8卡計(jì)算節(jié)點(diǎn)規(guī)模,同時(shí)計(jì)算集群GPU利用率90%以上;
  • 軟件層面,通過多路并發(fā)透?jìng)骷夹g(shù),有效減少I/O操作中頻繁的上下文切換,降低單次I/O時(shí)延50%,同時(shí)達(dá)到高并發(fā)下時(shí)延穩(wěn)定性。本次測(cè)試中1430個(gè)高并發(fā)讀線程支撐下,保證每個(gè)線程單次I/O的時(shí)延均在0.005秒,AI端到端訓(xùn)練中I/O占比低于10%。此外,通過元數(shù)據(jù)VRANK技術(shù),達(dá)到單個(gè)元數(shù)據(jù)進(jìn)程多單元并發(fā)處理,提供高性能元數(shù)據(jù)服務(wù);
  • 軟硬協(xié)同層面,通過內(nèi)核親和力調(diào)度,I/O請(qǐng)求動(dòng)態(tài)調(diào)整,增強(qiáng)文件系統(tǒng)與計(jì)算節(jié)點(diǎn)親和性,確保負(fù)載均衡,將數(shù)據(jù)移動(dòng)與多核CPU之間的訪問效率提升400%。

浪潮信息是全球領(lǐng)先的存儲(chǔ)供應(yīng)商,存儲(chǔ)裝機(jī)容量連續(xù)3年穩(wěn)居全球前三、中國第一,是承載中國用戶數(shù)據(jù)最多、數(shù)據(jù)存力貢獻(xiàn)最大的存儲(chǔ)廠商。近年來,浪潮信息積極擁抱AI生態(tài),專注于構(gòu)建面向人工智能的存儲(chǔ)平臺(tái),通過精準(zhǔn)優(yōu)化存算資源配置與持續(xù)強(qiáng)化技術(shù)創(chuàng)新,全面推進(jìn)AI產(chǎn)業(yè)化和產(chǎn)業(yè)AI化進(jìn)程,力爭(zhēng)打造AI存儲(chǔ)的理想之選。

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時(shí)1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動(dòng) BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時(shí)企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對(duì)日本游戲市場(chǎng)的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機(jī) 衛(wèi)星通信

要點(diǎn): 有效應(yīng)對(duì)環(huán)境變化,經(jīng)營業(yè)績(jī)穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤率延續(xù)升勢(shì) 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競(jìng)爭(zhēng)力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競(jìng)爭(zhēng)優(yōu)勢(shì)...

關(guān)鍵字: 通信 BSP 電信運(yùn)營商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺(tái)與中國電影電視技術(shù)學(xué)會(huì)聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會(huì)上宣布正式成立。 活動(dòng)現(xiàn)場(chǎng) NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會(huì)上,軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司(以下簡(jiǎn)稱"軟通動(dòng)力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉