中科院:自主研制新一代AI大模型紫東太初2.0問(wèn)世
6月16日消息,中國(guó)科學(xué)院自動(dòng)化研究所今天發(fā)布了該所研制的新一代AI大模型——紫東太初2.0。
全新大模型相比第一代著力提升了決策與判斷能力,實(shí)現(xiàn)了從感知、認(rèn)知到?jīng)Q策的跨越,未來(lái)將在醫(yī)療、交通、工業(yè)生產(chǎn)等領(lǐng)域發(fā)揮更大作用。
第一代紫東太初AI大模型于2021年問(wèn)世,由中國(guó)科學(xué)院自動(dòng)化研究所和華為聯(lián)合開發(fā),區(qū)別于當(dāng)前以文本為主的大部分語(yǔ)言大模型,是全球首個(gè)圖文音三模態(tài)大模型,實(shí)現(xiàn)了無(wú)標(biāo)識(shí)的圖像、文字、語(yǔ)音的識(shí)別能力。
這次發(fā)布的“紫東太初”2.0全模態(tài)大模型,不但優(yōu)化了文本、圖片、語(yǔ)音的融合認(rèn)知,還進(jìn)一步加入了視頻、傳感信號(hào)、3D點(diǎn)云等識(shí)別能力。
新版本突破了多模態(tài)分組認(rèn)知編碼、解碼,全模態(tài)認(rèn)知等關(guān)鍵技術(shù),提升了系統(tǒng)的決策和判斷能力,打通了系統(tǒng)識(shí)別能力從感知、認(rèn)知到?jīng)Q策的通路,從而拓展出更為廣泛的應(yīng)用場(chǎng)景。
目前,由中科院自動(dòng)化所牽頭打造的多模態(tài)人工智能產(chǎn)業(yè)聯(lián)合體已陸續(xù)吸納產(chǎn)學(xué)研各界近70家成員單位。紫東太初大模型已經(jīng)在神經(jīng)外科手術(shù)導(dǎo)航、短視頻內(nèi)容審核、醫(yī)療多模態(tài)鑒別診斷、交通違規(guī)圖像研讀等多領(lǐng)域應(yīng)用。