大數(shù)據(jù)：還3G上網(wǎng)一本“明白賬”

 用微信聯(lián)系上一群好友，然后在手機上找到一家附近的特色餐廳，大家紛紛開著導航過去，上菜前低頭看微博，菜上了不吃先拍照分享，這就是一部分現(xiàn)代人的真實生活寫照。手機上網(wǎng)通過近些年來的飛速發(fā)展，已經(jīng)不再讓人感到陌生，隨著3G網(wǎng)絡走入我們的生活，隨時隨地獲取暢快便捷的互聯(lián)網(wǎng)體驗，已經(jīng)不再是難事。

然而，在此背后，大家卻或多或少地帶有一絲顧慮：“我的上網(wǎng)流量超了沒有?”“月底了，不敢再用了!”我們有時甚至能夠聽到這樣的投訴：“我就發(fā)發(fā)微博聊聊天，扣了我這么多錢!”在智能手機走進千家萬戶，3G網(wǎng)絡普及，流量飛速增長的今天，對于流量、上網(wǎng)記錄的投訴也同時以不可控制的速度遞增，甚至運營商也曾被消費者以“欺詐”等名義起訴，類似于“您的智能手機可能進行了系統(tǒng)或軟件的更新”等含糊的解答再也應對不了消費者的質(zhì)疑。就在業(yè)務爆炸性增長的同時，信譽的危機也悄然來到了電信運營商的面前。一個便捷、透明的上網(wǎng)記錄查詢系統(tǒng)成為了唯一的出路。

為客戶提供上網(wǎng)記錄查詢并非我們想象的這么簡單。這個查詢系統(tǒng)需要提供海量級的數(shù)據(jù)應用。今年上半年，我國移動互聯(lián)網(wǎng)用戶已達3.88億，同期國內(nèi)某電信運營商月移動上網(wǎng)記錄也增至上萬億條之多，而且每半年時間其上網(wǎng)記錄數(shù)量都會成倍遞增。在這樣的情況下，傳統(tǒng)的關系數(shù)據(jù)庫根本無法應對上網(wǎng)記錄的存儲、管理和處理重任，有運營商已進行過測試：當傳統(tǒng)關系型數(shù)據(jù)庫承載百億條數(shù)據(jù)的時候，就已開始有心無力，一個查詢請求有可能幾個小時都不能返回結果。

還好，這個困局隨著“大數(shù)據(jù)”逐漸成為IT產(chǎn)業(yè)的關注熱點，也迎來了轉機。此前曾讓電信運營商束手無策的移動上網(wǎng)記錄，就擁有高容量、數(shù)據(jù)類型多樣化、持續(xù)不斷增長刷新以及能夠從中挖掘出有價值的信息這四個基本特征，算是典型的“大數(shù)據(jù)”，所以，針對大數(shù)據(jù)的一系列管理和處理技術也就成為了運營商構建高效透明查詢系統(tǒng)，樹立誠信服務的關鍵技術。

某3G服務的運營商近期就通過與英特爾的緊密合作，采用一套基于英特爾架構的解決方案率先化解了這個難題。這套解決方案的核心硬件和軟件平臺分別是基于英特爾至強處理器的服務器，以及英特爾Hadoop發(fā)行版，前者不僅性能在主流服務器處于領先地位，而且還在可擴展性上擁有獨到的優(yōu)勢。后者則可以直接利用這一優(yōu)勢，為大數(shù)據(jù)提供分布式、橫向可擴展的數(shù)據(jù)組織與管理功能，并將應用負載分散到硬件系統(tǒng)的每個節(jié)點上。而且，與開源版本和其他發(fā)行版的Hadoop相比，它對于英特爾硬件平臺的優(yōu)化也更為充分，能夠讓其性能充分釋放，使應用效率更高、計算存儲分布更均衡。

海量數(shù)據(jù)電信解決方案

最終，通過配備高存儲容量至強服務器，以及英特爾Hadoop 發(fā)行版在軟件層面的支持，該運營商成功構建了移動用戶上網(wǎng)記錄查詢與分析支持系統(tǒng)。該系統(tǒng)使得相關記錄檢索速度達到了秒級，即輸入任何一個城市的號碼，它的詳細上網(wǎng)記錄會在1-2秒種被檢索出來。在用戶界面中輸入號碼后，瞬間就可以得到每天的流量記錄，詳細的網(wǎng)站地址，在什么位置上的網(wǎng)，用的是什么網(wǎng)絡以及起始時間等等，用戶再有任何質(zhì)疑，運營商的客服人員都可以通過清晰明確地答復，消除他的疑慮。

“因為有了大數(shù)據(jù)，有了現(xiàn)在的這些技術支持，以前需要3-6各月才能查詢的記錄我們現(xiàn)在只需要幾分鐘，甚至更快。“該運營商負責人在談到這個系統(tǒng)時興奮地表示：“基于英特爾架構的大數(shù)據(jù)軟硬件技術，給電信行業(yè)帶來了很大機遇，這些數(shù)據(jù)的挖掘分析還會為最終客戶的使用體驗展現(xiàn)出更高的價值，為未來移動互聯(lián)網(wǎng)的發(fā)展奠定了良好的基礎。”