已為上萬(wàn)企業(yè)賦能 Amazon SageMaker是怎么做的？

5月18日消息，基于深度學(xué)習(xí)算法的突破性發(fā)展，近幾年機(jī)器學(xué)習(xí)推動(dòng)的AI能力在企業(yè)實(shí)際生產(chǎn)、服務(wù)中的應(yīng)用已經(jīng)越來(lái)越廣泛，一些基于機(jī)器學(xué)習(xí)平臺(tái)構(gòu)建的內(nèi)容推薦系統(tǒng)、基于語(yǔ)音語(yǔ)義智能理解的在線教學(xué)系統(tǒng)等，甚至還催生出許多新的商業(yè)業(yè)態(tài)。

但整體而言，除了少數(shù)具有專(zhuān)家人才和數(shù)據(jù)科學(xué)家的企業(yè)外，大部分公司仍然很難應(yīng)用AI相關(guān)技術(shù)和能力。

因此，如何降低機(jī)器學(xué)習(xí)使用門(mén)檻，賦能更多企業(yè)快速、便捷、有效獲得AI能力加持，已經(jīng)成為包括AWS在內(nèi)的很多平臺(tái)型技術(shù)巨頭企業(yè)競(jìng)技的新領(lǐng)域。

Amazon SageMaker上線中國(guó)區(qū)

從Gartner在2020年2月發(fā)布的《 云上AI開(kāi)發(fā)者服務(wù)魔力象限》來(lái)看，目前，AWS憑借技術(shù)執(zhí)行力和對(duì)技術(shù)未來(lái)發(fā)展愿景的完整規(guī)劃排名在領(lǐng)導(dǎo)者象限最高位置。

在Gartner看來(lái)，支撐AWS如此高地位的正是2017年AWS推出的Amazon SageMaker這項(xiàng)服務(wù)。

據(jù)介紹，Amazon SageMaker 是一項(xiàng)完全托管的服務(wù)，可以幫助開(kāi)發(fā)者和數(shù)據(jù)科學(xué)家快速地規(guī)模化構(gòu)建、訓(xùn)練和部署機(jī)器學(xué)習(xí) (ML) 模型。

今年4月30日，Amazon SageMaker在由西云數(shù)據(jù)運(yùn)營(yíng)的AWS中國(guó) (寧夏) 區(qū)域和光環(huán)新網(wǎng)運(yùn)營(yíng)的AWS中國(guó)（北京）區(qū)域正式上線，AWS機(jī)器學(xué)習(xí)能力離中國(guó)企業(yè)和開(kāi)發(fā)者更近了。

AWS首席云計(jì)算企業(yè)戰(zhàn)略顧問(wèn)張俠表示，Amazon SageMaker旨在消除企業(yè)使用人工智能的門(mén)檻，把機(jī)器學(xué)習(xí)能力輸送給每一家企業(yè)和機(jī)構(gòu)。

截至目前，全球已有數(shù)以萬(wàn)計(jì)的客戶(hù)利用Amazon SageMaker加快機(jī)器學(xué)習(xí)部署， Autodesk、Change Healthcare、拜耳、英國(guó)航空、蓋洛普、洛杉磯快船隊(duì)、松下航空電子(Panasonic Avionics)、環(huán)球郵報(bào)和T-Mobile等等。中國(guó)客戶(hù)如虎牙、大宇無(wú)限、嘉誼互娛、華來(lái)科技等也已選擇Amazon SageMaker大規(guī)模地構(gòu)建、訓(xùn)練和部署機(jī)器學(xué)習(xí)模型。

Amazon SageMaker如何賦能上萬(wàn)企業(yè)

Amazon SageMaker究竟是一個(gè)怎樣的設(shè)計(jì)、怎樣的運(yùn)行模式，能夠在2年多時(shí)間內(nèi)為上萬(wàn)家企業(yè)提供適用的AI能力的呢？

近日，AWS首席云計(jì)算企業(yè)戰(zhàn)略顧問(wèn)張俠在接受媒體采訪時(shí)對(duì)AWS機(jī)器學(xué)習(xí)能力進(jìn)行了系統(tǒng)介紹。

張俠認(rèn)為，制約人工智能廣泛應(yīng)用的因素有三個(gè)：一是掌握人工智能專(zhuān)業(yè)知識(shí)的人才不足；二是構(gòu)建和擴(kuò)展人工智能的技術(shù)產(chǎn)品有難度；三是在生產(chǎn)經(jīng)營(yíng)中部署人工智能應(yīng)用費(fèi)時(shí)且成本高，最終導(dǎo)致缺乏低成本、易使用、可擴(kuò)展的人工智能產(chǎn)品和服務(wù)。Amazon SageMaker的出現(xiàn)，正是為了幫助企業(yè)解決這些挑戰(zhàn)。

張俠介紹，整個(gè)亞馬遜提供“全站的機(jī)器學(xué)習(xí)服務(wù)”。AWS機(jī)器學(xué)習(xí)服務(wù)做了三層結(jié)構(gòu)設(shè)計(jì)，越往下基礎(chǔ)功能越強(qiáng)大，對(duì)使用的人可能要求越高；越往上是更專(zhuān)門(mén)化的服務(wù)。

在AWS機(jī)器學(xué)習(xí)服務(wù)的三層結(jié)構(gòu)設(shè)計(jì)中，Amazon SageMaker處在承上啟下的中間核心服務(wù)層。

張俠表示：“中層機(jī)器學(xué)習(xí)（ML）服務(wù)對(duì)一些相對(duì)來(lái)說(shuō)有技術(shù)背景的比較專(zhuān)業(yè)的人員，可以利用這個(gè)工具真正為企業(yè)找到人工智能、機(jī)器學(xué)習(xí)所帶來(lái)的一些創(chuàng)新點(diǎn)、突破點(diǎn)，推出新產(chǎn)品、新服務(wù)的點(diǎn)，使其能夠全方位把握這些機(jī)器學(xué)習(xí)的工具、手段、方法，為自己所用?！?/p>

整體而言，Amazon SageMaker是一個(gè)工具集，提供了用于機(jī)器學(xué)習(xí)的所有組件，貫穿整個(gè)機(jī)器學(xué)習(xí)的工作流程，從而以更少的努力、更低的成本、更快地將機(jī)器學(xué)習(xí)模型投入生產(chǎn)。

Amazon SageMaker內(nèi)置了豐富的算法，提供強(qiáng)大的功能，如彈性筆記本、實(shí)驗(yàn)管理、自動(dòng)模型創(chuàng)建、調(diào)試與分析，以及模型概念漂移檢測(cè)，等等。這些功能封裝在首個(gè)面向機(jī)器學(xué)習(xí)的集成開(kāi)發(fā)環(huán)境Amazon SageMaker Studio中。

例如，Amazon SageMaker Studio將所有用于機(jī)器學(xué)習(xí)的組件集中在一個(gè)地方。跟使用集成開(kāi)發(fā)環(huán)境（IDE）做軟件開(kāi)發(fā)一樣，開(kāi)發(fā)者現(xiàn)在可以在Amazon SageMaker Studio中查看和組織源代碼、依賴(lài)項(xiàng)、文檔和其它應(yīng)用程序資產(chǎn)，例如用于移動(dòng)應(yīng)用程序的圖像。當(dāng)前，機(jī)器學(xué)習(xí)工作流有大量組件，其中許多組件都帶有自己的一組各自獨(dú)立的工具。Amazon SageMaker Studio IDE為所有Amazon SageMaker功能和整個(gè)機(jī)器學(xué)習(xí)工作流提供了一個(gè)統(tǒng)一界面。Amazon SageMaker Studio為開(kāi)發(fā)者提供了創(chuàng)建項(xiàng)目文件夾、組織Notebook和數(shù)據(jù)集，以及協(xié)作討論Notebook和結(jié)果的功能，使構(gòu)建、訓(xùn)練、解釋、檢查、監(jiān)視、調(diào)試和運(yùn)行機(jī)器學(xué)習(xí)模型變得更簡(jiǎn)單、更快。

另外，比如自動(dòng)構(gòu)建模型的功能Amazon SageMaker Autopilot，它是業(yè)內(nèi)首個(gè)可以讓開(kāi)發(fā)者對(duì)其模型保持控制和可見(jiàn)性的自動(dòng)化機(jī)器學(xué)習(xí)功能。Amazon SageMaker Autopilot會(huì)自動(dòng)檢查原始數(shù)據(jù)，應(yīng)用特征處理器，挑選最佳算法集，訓(xùn)練多個(gè)模型，對(duì)它們進(jìn)行調(diào)優(yōu)，跟蹤其性能，然后根據(jù)性能對(duì)模型進(jìn)行排名。點(diǎn)擊幾下鼠標(biāo)，用戶(hù)可以得到易于部署的、性能最佳的模型推薦，而這只需很少一點(diǎn)時(shí)間和精力用于訓(xùn)練。并且，用戶(hù)可以清楚地看到模型是如何創(chuàng)建的，以及模型中包含什么內(nèi)容。

缺乏機(jī)器學(xué)習(xí)經(jīng)驗(yàn)的人可以使用Amazon SageMaker Autopilot輕松地生成僅基于數(shù)據(jù)的模型，經(jīng)驗(yàn)豐富的開(kāi)發(fā)者可以使用它快速開(kāi)發(fā)基礎(chǔ)模型，團(tuán)隊(duì)可以在此基礎(chǔ)上進(jìn)行進(jìn)一步迭代。Amazon SageMaker Autopilot為開(kāi)發(fā)者提供了多達(dá)50種不同的模型，可以在Amazon S ageMaker Studio中查看。

據(jù)張俠介紹，整套Amazon SageMaker服務(wù)可以使用戶(hù)開(kāi)發(fā)效率提升10倍。而以“SageMaker+TensorFlow”為例，從一些客戶(hù)案例中也可以看到，已經(jīng)把效率從65%提高到90%，訓(xùn)練時(shí)間從30分鐘縮短到14分鐘。

現(xiàn)場(chǎng)，AWS機(jī)器學(xué)習(xí)服務(wù)應(yīng)用者大宇無(wú)限也現(xiàn)身說(shuō)法。

大宇無(wú)限主要為中東、東南亞和拉丁美洲等新興市場(chǎng)提供移動(dòng)短視頻服務(wù)，主力產(chǎn)品Snaptube的月活用戶(hù)已經(jīng)突破1億。

大宇無(wú)限機(jī)器學(xué)習(xí)技術(shù)總監(jiān)蘇映濱介紹：“短視頻的聚合服務(wù)面對(duì)海量的數(shù)據(jù)與海量的用戶(hù)，我們需要一個(gè)精準(zhǔn)的個(gè)性化內(nèi)容推薦系統(tǒng)。但是對(duì)一個(gè)初創(chuàng)企業(yè)來(lái)說(shuō)，要構(gòu)建一個(gè)滿(mǎn)足海量用戶(hù)、千萬(wàn)級(jí)視頻的推薦，以及相匹配的機(jī)器學(xué)習(xí)平臺(tái)，在人力、時(shí)間、資金相當(dāng)有限的情況下獨(dú)立實(shí)現(xiàn)不太現(xiàn)實(shí)?！?/p>

蘇映濱稱(chēng)，SageMaker的出現(xiàn)，幫助大宇無(wú)限實(shí)現(xiàn)從0到1的突破。“SageMaker的出現(xiàn)極大的簡(jiǎn)化了整個(gè)機(jī)器學(xué)習(xí)的構(gòu)建、訓(xùn)練和部署的流程。而且SageMaker的很多算法已經(jīng)優(yōu)化得性能非常不錯(cuò)，對(duì)我們來(lái)說(shuō)，就直接做好訓(xùn)練數(shù)據(jù)的準(zhǔn)備，直接調(diào)用接口、設(shè)置參數(shù)，基本上幾個(gè)命令就可以直接部署上線了。SageMaker已經(jīng)幫我們實(shí)現(xiàn)了這個(gè)功能，所以整體上它的訓(xùn)練成本還是相比自己搭建要便宜，我們估算平均下來(lái)能節(jié)省70%的訓(xùn)練成本?！?/p>

在張俠看來(lái)，AWS自己獨(dú)特的這一套方法，就是高度關(guān)注客戶(hù)的需求，和客戶(hù)一起創(chuàng)新，在客戶(hù)的創(chuàng)新實(shí)踐中找到AWS產(chǎn)品服務(wù)所需要提供的新功能。具體在AWS機(jī)器學(xué)習(xí)服務(wù)上，由于它服務(wù)的廣泛、成本簡(jiǎn)便，支持所有通用架構(gòu)，而且背后還有AWS全方位云技術(shù)服務(wù)和平臺(tái)支持，這些構(gòu)成了Amazon SageMaker的獨(dú)特優(yōu)勢(shì)。