AI廣闊應(yīng)用,在英特爾酷睿Ultra的加持下,從對個人遙不可及的專用AI超算向PC端延伸。無需額外AI加速裝置,新一代筆記本電腦已經(jīng)能夠擔(dān)負(fù)起數(shù)字人制作這樣高要求的工作。
數(shù)字人、聲優(yōu)的應(yīng)用領(lǐng)域廣泛,24h直播、虛擬主播等應(yīng)用紅極一時。然而,過去這些需要依賴于專用AI加速器搭建的昂貴系統(tǒng)。無論是原始人表情、神態(tài)、動作、聲音等基礎(chǔ)素材的學(xué)習(xí),還是影像的生成,幾乎與PC絕緣,直到英特爾酷睿Ultra的到來。英特爾酷睿Ultra處理器是首款基于Intel 4制程工藝打造的處理器,代表了40年來英特爾架構(gòu)最大的革新。它采用了先進的Foveros 3D封裝技術(shù),結(jié)合前沿的知識產(chǎn)權(quán)成果與先進的制程工藝,以優(yōu)化相關(guān)模塊的性能表現(xiàn)。
如今,英特爾酷睿Ultra攜更多軟硬件特性到來,且其oneAPI軟件平臺早已為這樣的拓展做好準(zhǔn)備。應(yīng)用程序的開發(fā)者只需要開發(fā)一次代碼,就可以讓代碼在跨硬件的異構(gòu)系統(tǒng)上執(zhí)行,底層的硬件架構(gòu)既可以是CPU、GPU、VPU、FPGA,也可以是全新的NPU,甚至是更多的其他針對不同應(yīng)用的硬件加速器。AI加速硬件的匹配與優(yōu)化,將大大提升AI化的應(yīng)用程序的使用體驗。
璇米科技與英特爾聯(lián)手,基于酷睿Ultra平臺,通過一顆或多顆家用攝像頭,即可基于專屬于你個人的動作捕捉,生成數(shù)字人應(yīng)用場景。這一mcpose軟件包使用的算法包括人體2D關(guān)鍵點檢測、單目3D重建、反向動力學(xué)算法以及其他輔助算法。目前提供Windows+OpenVINO、ONNX Runtime、Pyhthon 3.10.x的WHL包和相關(guān)的開發(fā)例子代碼和教程,匹配英特爾所提供的AI開發(fā)環(huán)境,并且非常易于移植至Ubuntu等系統(tǒng)。
OpenVINO則是一套功能強大的深度學(xué)習(xí)工具包,可面向不同的AI開發(fā)工具提供開放統(tǒng)一的全平臺AI加速器硬件接口,加速AI應(yīng)用普及化,更便于應(yīng)用程序“選擇”更合適的AI加速器。
mcpose軟件包使用的算法包括人體2D關(guān)鍵點檢測、單目3D重建、反向動力學(xué)算法以及其他輔助算法。其中人體2D關(guān)鍵點檢測部分在實時場景下使用傳統(tǒng)的輕量卷積神經(jīng)網(wǎng)絡(luò),支持多種骨干網(wǎng)絡(luò),如Resnet50、CSPNet、HRNet-lightweight等,這些骨干網(wǎng)絡(luò)參數(shù)多在1500萬至2300萬之間。在離線使用場景下提供1.5億參數(shù)版本的VIT骨干網(wǎng)絡(luò)版本,用于離線的精準(zhǔn)視頻分析、視頻剪輯以及其他生產(chǎn)力場景。單目3D重建部分實時場景下使用基于transformer的時空網(wǎng)絡(luò),利用transformer對于長短期信息的自動注意力機制提升三維動作重建的精度。
璇米與英特爾一起,將mcpose用于武漢保護江豚項目,利用mcpose優(yōu)秀的關(guān)鍵點檢測能力,快速的將算法遷移至江豚的識別上,有效的提升了江豚研究者獲取數(shù)據(jù)的效率。
全面AI化的酷睿Ultra筆記本電腦,將低成本動作捕捉、數(shù)字重建與數(shù)字人等應(yīng)用的平臺,進一步小型化、輕便化,僅使用一臺筆記本電腦,就能實現(xiàn)主流的AI應(yīng)用。無論是坐在家中還是移動中使用,曾經(jīng)的不可能都變?yōu)榱丝赡堋?/span>
除此之外,AI PC的體驗效果深受其所配備軟件的性能影響,遇強則強。作為AI PC加速計劃的一部分,超過100家獨立軟件供應(yīng)商(ISV)和300余項AI加速功能將針對英特爾酷睿Ultra處理器進行專屬優(yōu)化,提供豐富的AI應(yīng)用程序和框架。包括剪影、天行者、璇米、愛奇藝、百川在內(nèi)的眾多國內(nèi)外軟件廠商,與英特爾同步推出或升級支持酷睿Ultra全新AI特性的產(chǎn)品。消費者則可在全新的酷睿Ultra產(chǎn)品上市伊始,就體驗到AI帶來的變化,無論是文字、腳本、圖片、音頻、視頻等內(nèi)容生成(AIGC),還是摳圖、識別、交互等AI應(yīng)用觸手可及,再無軟硬件相互等待之虞,盡享AI PC盛宴。