OPPO聯(lián)合聯(lián)發(fā)科技共建大模型端側(cè)化部署方案,基于AndesGPT的新小布將開(kāi)啟新一輪公測(cè)
10月11日,OPPO宣布與聯(lián)發(fā)科技合作共建輕量化大模型端側(cè)部署方案,通過(guò)采用4位量化技術(shù),實(shí)現(xiàn)精度不掉點(diǎn)效果下端側(cè)化性能更優(yōu),共同推動(dòng) AndesGPT 大語(yǔ)言模型和多模態(tài)大模型在端側(cè)逐步落地。
AndesGPT 作為OPPO自主訓(xùn)練的生成式用戶(hù)專(zhuān)屬大模型。該模型以“端云協(xié)同”為基礎(chǔ)架構(gòu)設(shè)計(jì)思路,推出從10億至千億多種不同參數(shù)規(guī)模的模型規(guī)格,實(shí)現(xiàn)在本地與云端協(xié)同運(yùn)作的效果。
AndesGPT 對(duì)大模型端側(cè)推理引擎進(jìn)行算子融合與優(yōu)化,使得結(jié)果生成速度大于人類(lèi)正常閱讀速度,從而能更好滿(mǎn)足用戶(hù)需求。目前,AndesGPT 已經(jīng)入選 C-Eval 全球中文榜單,并以 79.9 高分登該榜榜首。
同日,基于AndesGPT大模型打造的全新小布助手開(kāi)啟新一輪公測(cè),全新小布助手對(duì)傳統(tǒng)語(yǔ)音助手進(jìn)行內(nèi)核級(jí)升級(jí),為用戶(hù)帶來(lái)更智能的體驗(yàn)。在知識(shí)與問(wèn)答方面,通過(guò)引入高質(zhì)量的知識(shí)圖譜、QA問(wèn)答數(shù),并結(jié)合對(duì)預(yù)訓(xùn)練和指令精調(diào)技術(shù)的優(yōu)化,顯著提升了大語(yǔ)言模型知識(shí)與百科能力的覆蓋面和準(zhǔn)確性。
今年9月,AndesGPT登上SuperCLUE榜單,在十大基礎(chǔ)能力排行榜的“知識(shí)與百科”能力測(cè)試中得到98.33的高分,大幅度領(lǐng)先其他大模型,僅次于GPT4排名國(guó)內(nèi)第一,并在“角色扮演能力”測(cè)試中排名前三。
自2020年起,OPPO已啟動(dòng)AI大模型相關(guān)技術(shù)的探索與實(shí)踐,曾獲得大規(guī)模知識(shí)圖譜問(wèn)答KgCLUE行業(yè)評(píng)測(cè)的第一名,中文自然語(yǔ)言理解CLUE第一名。未來(lái),AndesGPT將持續(xù)加持OPPO智能助手小布的AI能力,為用戶(hù)帶來(lái)更好的使用體驗(yàn),并逐步應(yīng)用于更多OPPO核心產(chǎn)品中。
11月16日,ColorOS 14 將于OPPO開(kāi)發(fā)者大會(huì)中亮相,AndesGPT更多元化的應(yīng)用場(chǎng)景或?qū)⑼桨l(fā)布,敬請(qǐng)期待。