江蘇移動(dòng)，運(yùn)維在云上！

自中國(guó)移動(dòng)宣布啟動(dòng)“云改”戰(zhàn)略已有三年。當(dāng)前，中國(guó)移動(dòng)核心系統(tǒng)全部云化、容器化，并按照云原生的開(kāi)發(fā)和運(yùn)維模式，實(shí)現(xiàn)敏捷開(kāi)發(fā)和智能運(yùn)維。

云網(wǎng)融合的理想，正逐步照耀進(jìn)現(xiàn)實(shí)。

尤其是隨著移動(dòng)云蘇錫中心四千臺(tái)節(jié)點(diǎn)投入與運(yùn)營(yíng)，中國(guó)移動(dòng)集團(tuán)網(wǎng)絡(luò)事業(yè)部、中國(guó)移動(dòng)云能力中心、江蘇移動(dòng)三方通力合作，為實(shí)現(xiàn)云、邊、端算力協(xié)同做出的諸多努力已初見(jiàn)成效。

作為備受江蘇移動(dòng)信賴的運(yùn)維合作伙伴，紫光股份旗下新華三集團(tuán)助其在規(guī)?；\(yùn)維、標(biāo)準(zhǔn)化運(yùn)維、協(xié)同化運(yùn)維、智慧化運(yùn)維四方面煥新升級(jí)，營(yíng)造云上運(yùn)維新體驗(yàn)。

規(guī)模：基于“資源整合”下的龐大投入

作為IT技術(shù)的集大成者，云計(jì)算是諸如虛擬化,分布式存儲(chǔ),分布式計(jì)算,多租戶等技術(shù)自然發(fā)展、精心優(yōu)化與組合的結(jié)果。

相對(duì)于傳統(tǒng)電信運(yùn)維，原本單一、物理的設(shè)備變?yōu)榱藙?dòng)態(tài)、虛擬的資源，海量的告警、日志、性能參數(shù)撲面而來(lái)，從指數(shù)級(jí)增長(zhǎng)的網(wǎng)元設(shè)備管理和租戶管理要求到多數(shù)據(jù)中心管理帶來(lái)的風(fēng)險(xiǎn)管控和應(yīng)急開(kāi)銷(xiāo)，云運(yùn)維“規(guī)模巨大”，需要以更加靈活、自如的方式去管理虛擬的計(jì)算節(jié)點(diǎn)、存儲(chǔ)和網(wǎng)絡(luò)等資源。

僅以加固動(dòng)作為例，江蘇移動(dòng)一級(jí)云上當(dāng)前已經(jīng)有3000+設(shè)備，每次集成都會(huì)新增幾十臺(tái)設(shè)備，新集成設(shè)備上線前必須完成20+項(xiàng)安全加固動(dòng)作，維護(hù)人員需要逐臺(tái)設(shè)備SSH登錄并上傳腳本，并要針對(duì)不同的集成應(yīng)用需要多次修改腳本，一旦設(shè)備加固出錯(cuò)，需要先人工刪除錯(cuò)誤配置，時(shí)間成本成倍增加，整體流程繁瑣復(fù)雜，且多個(gè)維護(hù)團(tuán)隊(duì)之間操作規(guī)范不統(tǒng)一，帶來(lái)潛在的安全隱患。

江蘇移動(dòng)開(kāi)展大規(guī)模運(yùn)維應(yīng)用實(shí)踐刻不容緩，以自動(dòng)化平臺(tái)作為作業(yè)中心的執(zhí)行平臺(tái)和執(zhí)行通道恰逢其時(shí)。圍繞安全建設(shè)、執(zhí)行通道、服務(wù)編排能力、全棧接入能力、多數(shù)據(jù)中心管理五大議題，江蘇移動(dòng)利用自動(dòng)化平臺(tái)完成入網(wǎng)驗(yàn)收、日常巡檢、告警預(yù)處理、統(tǒng)一運(yùn)維等運(yùn)維工作。

針對(duì)安全加固工作量大，效率低下的問(wèn)題，新華三集團(tuán)AOM上線后，原有的手工安全加固操作升級(jí)為全面自動(dòng)化過(guò)程，對(duì)加固操作腳本化、標(biāo)準(zhǔn)化、流程化、參數(shù)化，并實(shí)現(xiàn)異常步驟重復(fù)執(zhí)行，整體上提升了安全加固效率，保證加固結(jié)果的一致性和準(zhǔn)確性。諸多努力下，安全加固工作改善效果明顯，所需時(shí)間較原來(lái)縮短5倍，更規(guī)避了操作過(guò)程中的異常錯(cuò)誤，讓整個(gè)加固過(guò)程更安全、更可靠。

從原始人肉運(yùn)維升級(jí)到工具融合協(xié)同的平臺(tái)化運(yùn)維，運(yùn)維效率獲得指數(shù)級(jí)提升!

標(biāo)準(zhǔn)：尋找最優(yōu)解的落地實(shí)踐

運(yùn)維走向運(yùn)營(yíng)，并向服務(wù)化、標(biāo)準(zhǔn)化演進(jìn)是云運(yùn)維的必然趨勢(shì)。

這主要是因?yàn)?，云運(yùn)維具有被管網(wǎng)元同質(zhì)化的特質(zhì)，即由每臺(tái)設(shè)備的部署參數(shù)，諸如系統(tǒng)版本、部署目錄、配置參數(shù)、部署工具統(tǒng)一等帶來(lái)的運(yùn)維工作基本一致，大量重復(fù)性、批量級(jí)的運(yùn)維任務(wù)使運(yùn)維標(biāo)準(zhǔn)化至關(guān)重要。

以此為基礎(chǔ)，通過(guò)對(duì)“運(yùn)維最佳實(shí)踐”的歸納和總結(jié)，進(jìn)而對(duì)“最佳實(shí)踐”進(jìn)行統(tǒng)一規(guī)范和執(zhí)行的“運(yùn)維服務(wù)標(biāo)準(zhǔn)化”有助于降低維護(hù)難度、能耗需求及運(yùn)維成本，并提高運(yùn)維效率、資源效率與服務(wù)質(zhì)量。

而在中國(guó)移動(dòng)的運(yùn)維實(shí)踐中，由標(biāo)準(zhǔn)迥異、交付體系未統(tǒng)一等因素造成的運(yùn)維能力不足仍制約著運(yùn)維的效果。例如，因?qū)俚剡\(yùn)維工作對(duì)的工作內(nèi)容及標(biāo)準(zhǔn)界定模糊，運(yùn)維人員對(duì)告警的故障點(diǎn)定界不足，漏查了其中一端;又如，由于售前、售中、售后等環(huán)節(jié)的服務(wù)交付體系未統(tǒng)一，致使預(yù)期的全周期服務(wù)交付在服務(wù)組織、客戶響應(yīng)、適配需求、故障投訴支撐等方面尚存欠缺。

于此而言，制定標(biāo)準(zhǔn)化的運(yùn)營(yíng)流程，嚴(yán)控驗(yàn)收環(huán)節(jié)，搭建標(biāo)準(zhǔn)化運(yùn)維服務(wù)體系，形成快速交付能力已成為影響租戶滿意度的關(guān)鍵舉措。

在新華三集團(tuán)的幫助下，江蘇移動(dòng)圍繞“服務(wù)、運(yùn)營(yíng)、驗(yàn)收、建設(shè)、設(shè)備”五個(gè)維度搭建起標(biāo)準(zhǔn)化運(yùn)維服務(wù)體系，并將日常巡檢、較低風(fēng)險(xiǎn)變更、故障通報(bào)等標(biāo)準(zhǔn)化相對(duì)較高的工作抽離出來(lái)，組成服務(wù)臺(tái)團(tuán)隊(duì)成為內(nèi)外部門(mén)信息交互的唯一接口，總體控制事件、問(wèn)題、故障、變更的流程運(yùn)轉(zhuǎn)，全面感知云平臺(tái)運(yùn)維狀態(tài)，以自動(dòng)化支撐手段持續(xù)提升運(yùn)維標(biāo)準(zhǔn)化和自動(dòng)化。

協(xié)同：拒絕“一盤(pán)散沙”，建設(shè)“一支隊(duì)伍”

縱橫交織、流程冗長(zhǎng)，是移動(dòng)云運(yùn)維工作面臨的最主要困境。

一方面，移動(dòng)云運(yùn)維工作橫向涉及網(wǎng)絡(luò)事業(yè)部、云能、政企、客戶，縱向涉及省公司各專(zhuān)業(yè)、IT維保商，分工界面縱橫交織，切分存在困難。

另一方面，運(yùn)維流程長(zhǎng)，一個(gè)普通的投訴都會(huì)涉及多達(dá)13個(gè)環(huán)節(jié)，因個(gè)別環(huán)節(jié)設(shè)計(jì)不合理導(dǎo)致效率低下的事情時(shí)有發(fā)生，需要扁平化的流程和精準(zhǔn)的故障定界能力來(lái)保證處置效率。

牽一發(fā)而動(dòng)全身,一子落而滿盤(pán)活。

系統(tǒng)性問(wèn)題，當(dāng)通過(guò)機(jī)制建設(shè)來(lái)解決。依托新華三集團(tuán)豐富的運(yùn)維經(jīng)驗(yàn)，一套能夠持續(xù)優(yōu)化的運(yùn)維質(zhì)量管理體系得以迅速搭建。通過(guò)定期對(duì)基礎(chǔ)運(yùn)維指標(biāo)、運(yùn)維性能容量指標(biāo)、專(zhuān)項(xiàng)團(tuán)隊(duì)管理指標(biāo)的集合衡量，圍繞“人員、服務(wù)、平臺(tái)、流程、事務(wù)”等關(guān)鍵要素對(duì)IT運(yùn)維整體管理和技術(shù)水平進(jìn)行評(píng)估，并不斷強(qiáng)化弱指標(biāo)來(lái)提高整體運(yùn)維質(zhì)量。

運(yùn)維服務(wù)依托人來(lái)展開(kāi)。在搭建運(yùn)維質(zhì)量管理體系后，新華三集團(tuán)憑借豐沛的運(yùn)維人才資源助江蘇移動(dòng)在內(nèi)部開(kāi)展全網(wǎng)云運(yùn)維培訓(xùn)、賦能工作，詳細(xì)介紹“云計(jì)算、云存儲(chǔ)、云專(zhuān)網(wǎng)、云安全”等前沿技術(shù)演進(jìn)趨勢(shì)，并對(duì)云運(yùn)維所涉及的工具、制度、流程做統(tǒng)一梳理，最大化發(fā)揮江蘇移動(dòng)內(nèi)部運(yùn)維人員價(jià)值，全力保障業(yè)務(wù)的平穩(wěn)推進(jìn)。

智慧：立足當(dāng)下，放眼未來(lái)

預(yù)測(cè)未來(lái)的最好方式，是創(chuàng)造未來(lái)。

回頭看，經(jīng)過(guò)多年的研發(fā)、測(cè)試、部署及運(yùn)行，運(yùn)營(yíng)商系統(tǒng)內(nèi)部積累了大量的運(yùn)維經(jīng)驗(yàn)。但兩類(lèi)情況仍是事故高發(fā)區(qū)，一是由于升級(jí)后的某些隱患未能及時(shí)發(fā)現(xiàn)而造成的事故;二是由于事故的發(fā)生很突然，不能快速定界，貽誤時(shí)機(jī)，釀成大事故。

向前望，智能運(yùn)維是運(yùn)維發(fā)展的大勢(shì)所趨，數(shù)字化技術(shù)通過(guò)規(guī)避故障與計(jì)劃性例行維護(hù)成為傳統(tǒng)電信系統(tǒng)提升運(yùn)維效率、降低運(yùn)維成本的重要手段。在可預(yù)見(jiàn)的未來(lái)，對(duì)業(yè)務(wù)的深層理解，豐富的運(yùn)維經(jīng)驗(yàn)，基于數(shù)字化技術(shù)的智能運(yùn)維，將構(gòu)成驅(qū)動(dòng)運(yùn)維效率的三駕馬車(chē)。

作為贏得未來(lái)的關(guān)鍵一步，新華三集團(tuán)助其構(gòu)建“2+5+N”框架下的智慧化運(yùn)維，圍繞“預(yù)測(cè)-感知-診斷-決策-控制-執(zhí)行”5大領(lǐng)域的應(yīng)用，進(jìn)行智能引擎設(shè)計(jì)，并建立端到端的故障處理協(xié)同流程，實(shí)現(xiàn)從云到網(wǎng)的“一步響應(yīng)、協(xié)同處理”，整合碎片化的數(shù)據(jù)、知識(shí)和AI能力，快速構(gòu)建可靈活復(fù)用的智慧能力模型，牽引運(yùn)維智能化水平提升，有效幫助企業(yè)將風(fēng)險(xiǎn)系數(shù)與業(yè)務(wù)需求進(jìn)行匹配，并在日常運(yùn)維中對(duì)故障做到主動(dòng)感知，最大化降低企業(yè)運(yùn)維風(fēng)險(xiǎn)。

在數(shù)字化轉(zhuǎn)型大潮下，傳統(tǒng)運(yùn)維面臨的挑戰(zhàn)不容忽視，僅確保IT設(shè)備安全穩(wěn)定運(yùn)行已無(wú)法滿足企業(yè)的需求，為企業(yè)及業(yè)務(wù)創(chuàng)造價(jià)值已成為更深層的訴求，這要求IT運(yùn)維工作朝更深度與更前沿的方向發(fā)力。在與江蘇移動(dòng)深度合作的征程中，新華三集團(tuán)將通過(guò)數(shù)智化運(yùn)維助江蘇移動(dòng)打造優(yōu)異的運(yùn)維能力，加快推進(jìn)運(yùn)營(yíng)商數(shù)智化運(yùn)維轉(zhuǎn)型進(jìn)程!