超過350名國內(nèi)技術(shù)人才齊集Elastic中國開發(fā)者大會(huì)2016 共研開源共享代碼的好處
掃描二維碼
隨時(shí)隨地手機(jī)看文章
軟件提供商Elastic舉辦了Elastic 中國開發(fā)者大會(huì)2016,吸引業(yè)界超過350名技術(shù)專家到來交流,當(dāng)中包括來自蘇寧、百度、奇虎360、大眾點(diǎn)評(píng)、斗魚、趨勢(shì)科技、折800、58到家、瀚思安信的技術(shù)專家。
這個(gè)首次由Elastic在中國舉辦的開發(fā)者大會(huì)主要圍繞 Elastic 的開源產(chǎn)品: Elasticsearch、Logstash、Kibana和 Beats,探討在搜索、數(shù)據(jù)實(shí)時(shí)分析、日志分析、安全等領(lǐng)域的實(shí)踐與應(yīng)用?;陂_源的Elastic Stack已于全球獲得超過7,500萬次的累積下載,當(dāng)中客戶包括聯(lián)想、華為等有名企業(yè)。
大會(huì)上,首先由Elastic的工程師介紹Elastic Stack的演變過程,以及最新的Elastic Stack 5.0的功能。來自各大企業(yè)的專家也分享了他們?cè)诓煌I(lǐng)域作為用戶的經(jīng)驗(yàn)回饋。
蘇寧利用Kibana和Elastic Stack搭建云跡實(shí)時(shí)日志分析產(chǎn)品,提供應(yīng)用、web、防火墻、中間件等日志的實(shí)時(shí)檢索、統(tǒng)計(jì)分析、告警,為蘇寧1000+系統(tǒng)提供日志的實(shí)時(shí)檢索分析服務(wù)。蘇寧監(jiān)控研發(fā)中心技術(shù)副總監(jiān)彭燕卿先生表示:「實(shí)時(shí)分析日志是程序員定位問題非常重要的環(huán)節(jié),Elastic Stack對(duì)提升日志的安全性及效率致關(guān)重要?!?/p>
此外,Elastic Stack在電子銀行的安全應(yīng)用亦非常奏效。隨著手持設(shè)備的不斷普及,越來越多人在日常生活中選擇使用便利的電子銀行,黑客亦如此,總是緊盯這塊蛋糕。以“數(shù)據(jù)驅(qū)動(dòng)安全”為愿景,致力于利用大數(shù)據(jù)幫助企業(yè)解決龐雜、分立的信息安全問題的為名的瀚思(Hansight), 其技術(shù)總監(jiān)李學(xué)輝先生表示:「不管哪家銀行,只要在做網(wǎng)上銀行系統(tǒng),就得面對(duì)每天來自世界各地的惡意訪問,雖然金融體系有很完善的安全管控機(jī)制,但總會(huì)有一些惡意的訪問成功登入系統(tǒng),并且其中一些造成儲(chǔ)戶損失。銀行可利用Elastic Stack通過大數(shù)據(jù)分析的途徑來發(fā)現(xiàn)潛在的惡意訪問,從而進(jìn)一步采取行動(dòng),避免不必要的損失?!?/p>
Elasticsearch在移動(dòng)病毒偵測(cè)領(lǐng)域亦非常有用。目前移動(dòng)應(yīng)用越來越普及,與此同時(shí),大量惡意程式散布于互聯(lián)網(wǎng)之中,企業(yè)需要構(gòu)建一個(gè)病毒分析和檢測(cè)的平臺(tái)對(duì)大量樣本進(jìn)行分析和檢測(cè)來保護(hù)終端用戶以免受病毒的侵?jǐn)_。趨勢(shì)科技高級(jí)研發(fā)工程師李嘯先生說:「我們利用Elasticsearch分析移動(dòng)病毒的特征,并設(shè)計(jì)基于elasticsearch的病毒特征庫,寫下特定指令來監(jiān)控和檢測(cè)病毒?!?/p>
Elasticsearch同時(shí)亦加快SparkSQL的查詢速度。 SparkSQL對(duì)查詢的SQL,需要掃描全部的數(shù)據(jù),然后獲取滿足查詢條件的記錄。如果在海量的數(shù)據(jù)中,命中的記錄個(gè)數(shù)比較小,查詢的時(shí)間主要在讀取數(shù)據(jù)。奇虎360李振煒先生指出:「奇虎360對(duì)于每一個(gè)SQL查詢,提取出索引字段的查詢條件,然后通過Elasticsearch得到滿足條件的記錄的路徑,Spark直接讀取記錄,實(shí)現(xiàn)了海量數(shù)據(jù)的查詢,秒級(jí)響應(yīng)?!?/p>
談到搜索服務(wù),斗魚大數(shù)據(jù)工程師白凡先生亦和議道:「我們?cè)诙肤~主站、魚吧、點(diǎn)播系統(tǒng)、移動(dòng)端等搜索項(xiàng)目中均應(yīng)用了Elasticsearch,已成為公司的核心服務(wù)?!?/p>
最后,百度大數(shù)據(jù)部高級(jí)工程師高攀先生也分享其公司如果利用Elasticsearch增加權(quán)限管理系統(tǒng)、支持跨機(jī)房數(shù)據(jù)同步、支持多租戶資源隔離和解決數(shù)據(jù)一致性問題。
總括而言,出席這次開發(fā)者大會(huì)的技術(shù)人才也認(rèn)為開源為業(yè)界趨勢(shì),而ElasticStack亦為一個(gè)在不同領(lǐng)域應(yīng)用很不錯(cuò)的選擇。值得討論的是,單靠開源軟件是否足夠,還是需要一些配套以發(fā)揮開源軟件的所有潛能。