基礎(chǔ)軟件持續(xù)創(chuàng)新 使能多樣性算力
[中國(guó),深圳,2021年4月25日] 在華為開(kāi)發(fā)者大會(huì)2021(Cloud)期間(簡(jiǎn)稱HDC.Cloud 2021),華為計(jì)算產(chǎn)品線研發(fā)總裁熊彥發(fā)表“基礎(chǔ)軟件持續(xù)創(chuàng)新,使能多樣性算力”的主題演講,并宣布鯤鵬社區(qū)(hikunpeng.com)、昇騰社區(qū)(hiascend.com)全新上線。
華為計(jì)算產(chǎn)品線研發(fā)總裁熊彥發(fā)表主題演講
基礎(chǔ)軟件是計(jì)算產(chǎn)業(yè)的“魂”,華為聚焦鯤鵬、昇騰基礎(chǔ)軟硬件持續(xù)創(chuàng)新,構(gòu)建鯤鵬和昇騰兩大計(jì)算產(chǎn)業(yè),擁抱多樣性計(jì)算新時(shí)代。圍繞硬件使能、基礎(chǔ)使能、應(yīng)用使能和開(kāi)發(fā)使能,華為構(gòu)建了包括操作系統(tǒng)openEuler、企業(yè)級(jí)數(shù)據(jù)庫(kù)openGauss、全場(chǎng)景AI計(jì)算框架MindSpore、鯤鵬應(yīng)用使能套件BoostKit、全流程開(kāi)發(fā)工具鏈(鯤鵬DevKit和昇騰MindStudio)等計(jì)算基礎(chǔ)軟件棧,釋放多樣性算力,使能應(yīng)用性能倍級(jí)提升,帶來(lái)極簡(jiǎn)高效的開(kāi)發(fā)體驗(yàn),加快應(yīng)用創(chuàng)新,助力千行百業(yè)數(shù)字化轉(zhuǎn)型和智能升級(jí)。
基礎(chǔ)使能,釋放多樣性算力
在基礎(chǔ)軟件領(lǐng)域,華為開(kāi)源了操作系統(tǒng)openEuler、企業(yè)級(jí)數(shù)據(jù)庫(kù)openGauss、全場(chǎng)景AI框架MindSpore,與產(chǎn)業(yè)界共建、共享、共治三大開(kāi)源社區(qū),加速基礎(chǔ)軟件的創(chuàng)新和發(fā)展。今天,openEuler 21.03、openGauss 2.0、MindSpore 1.2新版本均如期而至。
openEuler致力于打造多樣性計(jì)算首選的原生開(kāi)源社區(qū)。自一年前openEuler社區(qū)發(fā)布首個(gè)LTS版本后,國(guó)內(nèi)主流操作系統(tǒng)廠商均基于此推出了商業(yè)發(fā)行版,并已在金融、運(yùn)營(yíng)商、電力等行業(yè)規(guī)模商用。此次推出的openEuler 21.03創(chuàng)新版基于Linux 最新內(nèi)核版本 5.10開(kāi)發(fā),延續(xù)了華為在內(nèi)核版本的持續(xù)領(lǐng)先。該版本具備千核調(diào)度、PB級(jí)內(nèi)存的分級(jí)管理、內(nèi)核熱升級(jí)等特性,為不同處理器架構(gòu)提供統(tǒng)一機(jī)密計(jì)算框架,并支持鯤鵬、昇騰、x86等多樣性算力。openEuler已經(jīng)成為匯聚多樣性算力的創(chuàng)新平臺(tái)。
自去年6月openGauss開(kāi)源以來(lái),6家數(shù)據(jù)庫(kù)伙伴基于openGauss推出商業(yè)發(fā)行版,并已在金融、電力等多個(gè)行業(yè)客戶規(guī)模商用。此次推出的openGauss 2.0社區(qū)長(zhǎng)期支持版本,在企業(yè)級(jí)性能、安全、運(yùn)維等方面進(jìn)行全方位提升。通過(guò)架構(gòu)和工程優(yōu)化,該新版本在四路鯤鵬服務(wù)器上性能可達(dá)到230萬(wàn)tpmC,使基于單臺(tái)通用服務(wù)器進(jìn)行超高性能數(shù)據(jù)庫(kù)部署成為現(xiàn)實(shí)。
MindSpore 1.2版本具備全自動(dòng)并行、全場(chǎng)景AI、可解釋推薦模型三大創(chuàng)新特點(diǎn),已在MindSpore社區(qū)正式上線。其創(chuàng)新的全自動(dòng)混合并行方案,融合了流水線并行、模型并行和數(shù)據(jù)并行三種技術(shù),開(kāi)發(fā)者只需編寫(xiě)單機(jī)算法代碼,添加少量并行標(biāo)簽,就可實(shí)現(xiàn)訓(xùn)練過(guò)程的自動(dòng)切分,達(dá)成計(jì)算和通信時(shí)間的最小化,提升靜態(tài)圖訓(xùn)練性能40%。同時(shí),MindSpore內(nèi)置了業(yè)界首個(gè)語(yǔ)義級(jí)可解釋推薦模型TB-Net,基于原創(chuàng)知識(shí)圖譜雙向傳導(dǎo)技術(shù),可解釋性相比業(yè)界模型提升63%。該模型將在今年6月份開(kāi)源,屆時(shí),歡迎開(kāi)發(fā)者朋友們下載試用。
應(yīng)用使能,使能應(yīng)用性能倍級(jí)提升
鯤鵬應(yīng)用使能套件BoostKit自去年發(fā)布以來(lái),實(shí)現(xiàn)了鯤鵬在主流應(yīng)用上的性能全面領(lǐng)先。本次最新推出的鯤鵬應(yīng)用使能套件BoostKit 2.0版本,面向大數(shù)據(jù)、分布式存儲(chǔ)、數(shù)據(jù)庫(kù)等八大場(chǎng)景,通過(guò)軟硬協(xié)同調(diào)優(yōu)和核心算法創(chuàng)新,主要應(yīng)用的業(yè)務(wù)性能進(jìn)一步提升20%以上。BoostKit通過(guò)智能預(yù)取、智能卸載、智能多核并行、智能軟硬協(xié)同、智能算法的5級(jí)智能加速,讓大數(shù)據(jù)處理更簡(jiǎn)單、高效,實(shí)現(xiàn)性能數(shù)倍提升。
開(kāi)發(fā)使能,帶來(lái)極簡(jiǎn)高效的開(kāi)發(fā)體驗(yàn)
本次最新發(fā)布的鯤鵬Devkit 2.3版本新增了遠(yuǎn)程調(diào)測(cè)功能,結(jié)合鯤鵬云端環(huán)境,開(kāi)發(fā)者在本地就可以一站式地完成開(kāi)發(fā)、編譯和調(diào)測(cè)。新版本也提供全面診斷調(diào)試工具,針對(duì)系統(tǒng)性能異常的定位準(zhǔn)確率達(dá)到90%,系統(tǒng)故障排除時(shí)間縮短80%以上。為更好地支持應(yīng)用遷移,鯤鵬DevKit 2.3獨(dú)創(chuàng)性提供x86匯編一鍵翻譯到鯤鵬的能力,平均遷移效率從每應(yīng)用6人天提升到2人天。
昇騰MindStudio 3.0中新增了代碼和模型遷移工具、訓(xùn)練可視化專家調(diào)優(yōu)系統(tǒng),讓開(kāi)發(fā)者更高效地基于昇騰軟硬件平臺(tái)進(jìn)行開(kāi)發(fā)。MindStudio遷移工具,能夠在分鐘級(jí)完成腳本和模型向昇騰的一鍵式遷移,平均工作量由1人月降低至2人天。
鯤鵬、昇騰基礎(chǔ)軟件的生態(tài)繁榮需要產(chǎn)業(yè)界全體成員共同努力。今天,鯤鵬社區(qū)和昇騰社區(qū)全新上線,從開(kāi)發(fā)者社區(qū)走向產(chǎn)業(yè)社區(qū),并啟用hikunpeng.com和hiascend.com全新域名。新社區(qū)增強(qiáng)了技術(shù)支持與開(kāi)發(fā)、學(xué)習(xí)發(fā)展與成長(zhǎng)、生態(tài)合作與使能、行業(yè)應(yīng)用與實(shí)踐、產(chǎn)業(yè)溝通與交流等內(nèi)容,匯聚全產(chǎn)業(yè)力量,打造面向鯤鵬、昇騰產(chǎn)業(yè)鏈上下游的一站式產(chǎn)業(yè)社區(qū)。