大數(shù)據(jù)最典型,人們最熟悉的應(yīng)用場景就是精準(zhǔn)營銷,根據(jù)用戶既往的行為數(shù)據(jù)做出分析,然后做出預(yù)測(cè),以此輔助企業(yè)的營銷過程,除此之外,大數(shù)據(jù)還能做什么?還有哪些應(yīng)用場景呢?
Splunk是一家特別的大數(shù)據(jù)分析服務(wù)公司,它的數(shù)據(jù)分析與傳統(tǒng)的數(shù)據(jù)處理的方式有所不同。
Splunk的工作對(duì)象主要是機(jī)器數(shù)據(jù),所謂機(jī)器數(shù)據(jù)是指IT環(huán)境中包括操作系統(tǒng),數(shù)據(jù)庫應(yīng)用,ERP,移動(dòng)終端、電腦、服務(wù)器、路由器等任何設(shè)備上產(chǎn)生的數(shù)據(jù),Splunk可基于任何來源,任何類型,任何數(shù)量的數(shù)據(jù)源,進(jìn)行關(guān)聯(lián)處理,關(guān)聯(lián)分析最后為用戶服務(wù)。
比如,Splunk可以提供智能化的IT的運(yùn)維,利用大數(shù)據(jù)精準(zhǔn)定位用戶的問題,快速處理問題,用AIOps來解決運(yùn)維問題;Splunk可以提供成面,成體系的安全服務(wù),通過分析來發(fā)現(xiàn)未知的安全威脅;Splunk的業(yè)務(wù)分析服務(wù)可用來改善產(chǎn)品和用戶體驗(yàn),監(jiān)控用戶的使用數(shù)據(jù),使用APP的數(shù)據(jù),以此來改善他的產(chǎn)品和服務(wù)。
在實(shí)際應(yīng)用中,Splunk有很多實(shí)踐案例可以分享。
納斯達(dá)克用Splunk做內(nèi)部外部的威脅分析,作為一家金融交易機(jī)構(gòu),安全是至關(guān)重要的。事實(shí)上,納斯達(dá)克與許多企業(yè)一樣,有很多來自于外部內(nèi)部的安全威脅。比如系統(tǒng)會(huì)發(fā)現(xiàn)離職員工訪問企業(yè)賬戶的異常,結(jié)合其他相關(guān)數(shù)據(jù)判定行為是否正常,比如防止人員流動(dòng)造成的IP知識(shí)產(chǎn)權(quán)流失,或者及早發(fā)現(xiàn)IP知識(shí)產(chǎn)權(quán)流失的問題。
國內(nèi)某大型金融機(jī)構(gòu)使用Splunk做運(yùn)維。一方面,IT架構(gòu)越來復(fù)雜,故障定位也越來越難。交換機(jī)報(bào)錯(cuò)找交換機(jī),數(shù)據(jù)讀寫錯(cuò)誤找數(shù)據(jù)庫,交換機(jī)的報(bào)錯(cuò)可能是數(shù)據(jù)庫造成的,有些東西沒法一下找到問題,Splunk平臺(tái)能對(duì)所有數(shù)據(jù)進(jìn)行關(guān)聯(lián)分析,能清楚定位報(bào)警。一方面,100個(gè)報(bào)警提示其實(shí)可能只有一個(gè)真正問題,Splunk關(guān)聯(lián)分析之后能做告警壓縮。報(bào)警壓縮的價(jià)值在哪兒?一天幾十萬條報(bào)警要怎么處理呢?有的人外包,有的人認(rèn)為刪掉一部分,面對(duì)茫茫多的報(bào)警信息,處理起來非常麻煩,想解決的話,只有加派人手了,這是成本。
制造業(yè)里的寶馬新能源車也在用Splunk,寶馬新能源車的設(shè)計(jì)研發(fā)模擬交付用戶跟蹤都在用Splunk,用前期記錄的數(shù)據(jù)來做流程返工,迅速找出問題的所在,Splunk可以監(jiān)控所有電動(dòng)車的使用過程,通過對(duì)所有電動(dòng)車行駛規(guī)矩,停留的地點(diǎn),停留時(shí)間的分析判斷在哪兒放充電站。寶馬會(huì)利用收集到的各種信息來分析和改善產(chǎn)品。
Splunk幫特斯拉監(jiān)控特斯拉汽車從研發(fā)到生產(chǎn),到后續(xù)的交付,到用戶的使用,信息的采集的全過程,能收集到用戶的駕駛習(xí)慣、踩剎車的習(xí)慣、打方向盤的習(xí)慣,能記錄開車的頻率、習(xí)慣的速度,給出一些提醒建議,幫助改善產(chǎn)品,實(shí)現(xiàn)快速迭代。
Splunk能分析的數(shù)據(jù)非常全,然后能對(duì)數(shù)據(jù)做全面的關(guān)聯(lián),這就是Splunk最大的特點(diǎn)了。
天學(xué)網(wǎng)是一家以智能學(xué)習(xí)產(chǎn)品和平臺(tái)服務(wù)為主的教育服務(wù)的公司,每天有幾百萬付費(fèi)用戶,這些用戶非常重視使用體驗(yàn),這為運(yùn)營提出了很多挑戰(zhàn),因?yàn)橛脩魧?duì)于錯(cuò)誤基本上是零容忍。
天學(xué)網(wǎng)副總裁劉文(左)和Splunk 中國區(qū)總經(jīng)理嚴(yán)立忠(右)
天學(xué)網(wǎng)副總裁劉文表示,故障出現(xiàn)后的響應(yīng)時(shí)間只有分鐘級(jí),以往小時(shí)級(jí)的響應(yīng)是完全不行的。
為了提升保障用戶的使用體驗(yàn),六年前開始,天學(xué)網(wǎng)自主開發(fā)了一部分監(jiān)控系統(tǒng),也有一部分使用了開源的監(jiān)控系統(tǒng),所以,天學(xué)網(wǎng)本身其實(shí)有技術(shù)積累的。
盡管如此,但是面對(duì)一些具體的問題時(shí)也是無從下手,或者說自己投入辛辛苦苦做出來的東西效果達(dá)不到預(yù)期,或者達(dá)到預(yù)期后的代價(jià)非常高。
大約從三年前開始,天學(xué)網(wǎng)開始使用Splunk的方案。天學(xué)網(wǎng)副總裁劉文這樣說道,我從當(dāng)前60分水平想要做到80分的話,需要花很大代價(jià),我現(xiàn)在用Splunk的方案能做到90分以上,而代價(jià)遠(yuǎn)比我自己做的要小。Splunk的使用體驗(yàn)讓劉文深刻體會(huì)到了什么叫術(shù)業(yè)有專攻。
劉文將與Splunk的合作過程總結(jié)為三個(gè)需求階段
據(jù)了解,天學(xué)網(wǎng)跟Splunk的合作不到三年,當(dāng)前能做到快速,定位和解決問題,這是第一階段,在Splunk的幫助下,天學(xué)網(wǎng)的技術(shù)團(tuán)隊(duì)得以能專注于研究教學(xué)技術(shù),將智能技術(shù)注入其中,下一階段,天學(xué)網(wǎng)想在問題出現(xiàn)之前解決問題。
在天學(xué)網(wǎng)的用戶中80%以上的場景需要在家里完成,用戶產(chǎn)生的數(shù)據(jù)90%以上是非結(jié)構(gòu)化的。比如用戶練習(xí)英語口語的時(shí)候會(huì)產(chǎn)生錄音,產(chǎn)生筆記,百萬級(jí)用戶規(guī)模下,數(shù)據(jù)量將非常大,如何發(fā)現(xiàn)服務(wù)過程中的潛在問題將會(huì)帶來很高的價(jià)值。
如今,天學(xué)網(wǎng)已經(jīng)著手第二層級(jí)的需求,劉文表示十分看好其前景,能夠很大程度上提高故障反映速度,提升用戶體驗(yàn),這對(duì)于復(fù)購率和使用數(shù)字兩方面都非常重要。在滿足第二層級(jí)需求的過程中,劉文還意識(shí)到,引入Splunk的服務(wù)引進(jìn)的不只是一套技術(shù),而且是引進(jìn)了一套業(yè)內(nèi)的最佳實(shí)踐經(jīng)驗(yàn)。
第三個(gè)階段的想要達(dá)到的效果是從立體的視角審視發(fā)生了什么。審視用戶來的時(shí)候有沒有遇到問題,購買行為怎么樣?使用過程中有沒有遇到麻煩,可能遇到什么問題。
第三個(gè)需求也開始嘗試,天學(xué)網(wǎng)考慮將Splunk用在全業(yè)務(wù)流程管理,用來分析底層機(jī)器數(shù)據(jù),上層應(yīng)用數(shù)據(jù),業(yè)務(wù)層面的數(shù)據(jù)等等。
劉文認(rèn)為,開源的方案是一條路徑但是構(gòu)建和使用成本太高了,效率和質(zhì)量也很難滿足實(shí)際需求,這時(shí)候確實(shí)需要一個(gè)很強(qiáng)的工具,他表示,教育行業(yè)對(duì)于質(zhì)量和體驗(yàn)的要求與醫(yī)療行業(yè)的要求特別像,便宜點(diǎn)當(dāng)然好,但價(jià)格不是第一位。
他希望,底層系統(tǒng)的運(yùn)行指標(biāo)和上層一些業(yè)務(wù)指標(biāo)以某種方式串起來,串起來之后來進(jìn)行更快的迭代和決策,這件事有很強(qiáng)的探索性。
他相信,在Splunk的幫助下,一方面企業(yè)的生產(chǎn)力絕對(duì)是得到了提高。另一方面,整體擁有成本遠(yuǎn)低于自己研發(fā),既節(jié)省了金錢也節(jié)省了時(shí)間。
評(píng)論