[導讀]巨量資料(bigdata)無疑是推動下一波科技業(yè)發(fā)展的關鍵，也讓所有大廠視為必須緊抓在手中的機會。因此，當英特爾(Intel)亞太區(qū)資料中心事業(yè)群行銷專案經(jīng)理NickKnupffer上周來臺舉辦巨量資料媒體說明會時，第一個問題就
巨量資料(bigdata)無疑是推動下一波科技業(yè)發(fā)展的關鍵，也讓所有大廠視為必須緊抓在手中的機會。因此，當英特爾(Intel)亞太區(qū)資料中心事業(yè)群行銷專案經(jīng)理NickKnupffer上周來臺舉辦巨量資料媒體說明會時，第一個問題就是“在這之前，還有誰參加過其他廠商舉辦的巨量資料活動？”
“每兩天，我們產(chǎn)生出的資料量，便相當于自有文明以來到直到2003年的總和，”Knupffer強調(diào)了今天資料產(chǎn)生的速度之快，以及數(shù)量之龐大。
“今天，中國智慧城市專案中因儲存產(chǎn)生的資料量，便高達200PB；RFID標簽的銷售量，會從2011年的1,200萬個，成長到2021年的2,090億個；”Knupffer指出，未來幾年內(nèi)，這些所謂的巨量資料，將衍生出極為龐大的商機，例如“10年內(nèi)，因個人位址資料而產(chǎn)生的產(chǎn)值將高達8,000億美元；未來幾年內(nèi)，美國將可因善用巨量資料，每年節(jié)省3,000億美元的醫(yī)療保健費用。”
這股巨大的資料成長趨勢，勢必要求IT基礎設施具備更強大的運算、儲存功能，同時也意味著包含資料處理、介面和高速傳輸技術再革新的必要性，另外還包括可擴展性，未來因應巨量資料趨勢，所有的IT架構都必須基于開放式架構平臺，以確保能提供良好的成本優(yōu)勢，讓廠商能無縫升級。
Knupffer指出了巨量資料的幾個主要定義：首先是巨大的資料量(volume)──傳統(tǒng)資料單位是GB或TB，而巨量資料則是從PB起跳；第二是快速資料處理和動態(tài)資料體系(velocity)──傳統(tǒng)資料進行復雜的事件處理，而巨量資料則強調(diào)「即時」資料分析；第三是資料多樣性(variety)──這就需要回異于過去的軟體技術，包括有能力因應更多「非結構化」資料處理的創(chuàng)新軟體及演算法。
巨量資料對硬體和軟體產(chǎn)業(yè)都帶來了巨大挑戰(zhàn)，最大原因便在于絕大多數(shù)資料都是非結構化，而且包含許多種截然不同的格式，當然，還必須思考到資料本身的正確性──所有來自于人所輸入的資料，正確性達到多少？其中有多少是虛假資料？是否有演算法能夠依照所有收集到的相關資料，做出最接近真實的判斷？
目前，這些問題都還懸而未決。但像英特爾這樣的廠商，已經(jīng)踏出了腳步。
我們可以透過更快速的CPU、儲存、I/O和網(wǎng)路平臺技術，在硬體方面建構適合巨量資料的硬體環(huán)境；接來來，我們會陸續(xù)投入創(chuàng)新的最佳化軟體堆疊和服務，去探索最適合發(fā)展巨量資料的各式軟技術，Knupffer說。他強調(diào)，英特爾投資(IntelCapital)已經(jīng)針對多家發(fā)展相關技術的公司進行了投資，并積極尋求建立巨量資料生態(tài)系統(tǒng)。
所謂的開放平臺，代表著開放軟體和開放標準，以及和產(chǎn)業(yè)界各相關領域的廠商合作，提供更具經(jīng)濟效益的創(chuàng)新方案，在巨量資料時代共同尋找成長契機，Knupffer說。事實上，在英特爾擘劃的巨量資料藍圖中，包含了從智慧建筑、智慧城市、物聯(lián)網(wǎng)(IoT)、道路監(jiān)控、醫(yī)療保健、智慧電表、工業(yè)系動化等所有一切必須運用到電腦運算和資料分析的領域，而最終結果，便是將所有這些領域串連起來。
Knupffer也指出，未來在面對巨量「非結構化」資料時，最主要的挑戰(zhàn)并不在硬體，而在軟體。因此，可「即時」分析各種不同類型非結構化資料的軟體技術，是發(fā)展巨量資料處理平臺的關鍵。但這部份，仍需要時間。這也是英特爾一直積極投資擁有相關技術公司的主因。
Knupffer并未透露太多英特爾的巨體計劃，但顯然，一個圍繞著英特爾處理器為核心，再朝四周延伸的策略已然形成。但未來，這個要將眾多跨應用領域的資料都串連起來的開放平臺，會有多么「開放」──它與現(xiàn)今在許多嵌入式領域也占有一席之地的ARM之間的競爭和消長情況又是如何？繼續(xù)觀察下去，將會很有意思。
“每兩天，我們產(chǎn)生出的資料量，便相當于自有文明以來到直到2003年的總和，”Knupffer強調(diào)了今天資料產(chǎn)生的速度之快，以及數(shù)量之龐大。
“今天，中國智慧城市專案中因儲存產(chǎn)生的資料量，便高達200PB；RFID標簽的銷售量，會從2011年的1,200萬個，成長到2021年的2,090億個；”Knupffer指出，未來幾年內(nèi)，這些所謂的巨量資料，將衍生出極為龐大的商機，例如“10年內(nèi)，因個人位址資料而產(chǎn)生的產(chǎn)值將高達8,000億美元；未來幾年內(nèi)，美國將可因善用巨量資料，每年節(jié)省3,000億美元的醫(yī)療保健費用。”
這股巨大的資料成長趨勢，勢必要求IT基礎設施具備更強大的運算、儲存功能，同時也意味著包含資料處理、介面和高速傳輸技術再革新的必要性，另外還包括可擴展性，未來因應巨量資料趨勢，所有的IT架構都必須基于開放式架構平臺，以確保能提供良好的成本優(yōu)勢，讓廠商能無縫升級。
Knupffer指出了巨量資料的幾個主要定義：首先是巨大的資料量(volume)──傳統(tǒng)資料單位是GB或TB，而巨量資料則是從PB起跳；第二是快速資料處理和動態(tài)資料體系(velocity)──傳統(tǒng)資料進行復雜的事件處理，而巨量資料則強調(diào)「即時」資料分析；第三是資料多樣性(variety)──這就需要回異于過去的軟體技術，包括有能力因應更多「非結構化」資料處理的創(chuàng)新軟體及演算法。
巨量資料對硬體和軟體產(chǎn)業(yè)都帶來了巨大挑戰(zhàn)，最大原因便在于絕大多數(shù)資料都是非結構化，而且包含許多種截然不同的格式，當然，還必須思考到資料本身的正確性──所有來自于人所輸入的資料，正確性達到多少？其中有多少是虛假資料？是否有演算法能夠依照所有收集到的相關資料，做出最接近真實的判斷？
目前，這些問題都還懸而未決。但像英特爾這樣的廠商，已經(jīng)踏出了腳步。
我們可以透過更快速的CPU、儲存、I/O和網(wǎng)路平臺技術，在硬體方面建構適合巨量資料的硬體環(huán)境；接來來，我們會陸續(xù)投入創(chuàng)新的最佳化軟體堆疊和服務，去探索最適合發(fā)展巨量資料的各式軟技術，Knupffer說。他強調(diào)，英特爾投資(IntelCapital)已經(jīng)針對多家發(fā)展相關技術的公司進行了投資，并積極尋求建立巨量資料生態(tài)系統(tǒng)。
所謂的開放平臺，代表著開放軟體和開放標準，以及和產(chǎn)業(yè)界各相關領域的廠商合作，提供更具經(jīng)濟效益的創(chuàng)新方案，在巨量資料時代共同尋找成長契機，Knupffer說。事實上，在英特爾擘劃的巨量資料藍圖中，包含了從智慧建筑、智慧城市、物聯(lián)網(wǎng)(IoT)、道路監(jiān)控、醫(yī)療保健、智慧電表、工業(yè)系動化等所有一切必須運用到電腦運算和資料分析的領域，而最終結果，便是將所有這些領域串連起來。
Knupffer也指出，未來在面對巨量「非結構化」資料時，最主要的挑戰(zhàn)并不在硬體，而在軟體。因此，可「即時」分析各種不同類型非結構化資料的軟體技術，是發(fā)展巨量資料處理平臺的關鍵。但這部份，仍需要時間。這也是英特爾一直積極投資擁有相關技術公司的主因。
Knupffer并未透露太多英特爾的巨體計劃，但顯然，一個圍繞著英特爾處理器為核心，再朝四周延伸的策略已然形成。但未來，這個要將眾多跨應用領域的資料都串連起來的開放平臺，會有多么「開放」──它與現(xiàn)今在許多嵌入式領域也占有一席之地的ARM之間的競爭和消長情況又是如何？繼續(xù)觀察下去，將會很有意思。
下載文檔
