編者按：在今日IT界，“大數(shù)據(jù)”炙手可熱。有人將“大數(shù)據(jù)”喻為與蒸汽、電力、石油相媲美的下一代重要自然資源，是企業(yè)未來競爭優(yōu)勢的基礎(chǔ)。遠(yuǎn)傳技術(shù)上海研發(fā)中心的葛培明博士一直關(guān)注研究“運營數(shù)據(jù)分析”領(lǐng)域，對“大數(shù)據(jù)”有一番自己的見解，以下是他對大數(shù)據(jù)的一些看法：
Q: 葛博士，您好。請問您是如何看待大數(shù)據(jù)的作用，尤其是非結(jié)構(gòu)化數(shù)據(jù)？
A:您好�；ヂ�(lián)網(wǎng)、移動互聯(lián)網(wǎng)、語音電話、物流網(wǎng)絡(luò)、電子商務(wù)和企業(yè)內(nèi)部信息化軟件，這些系統(tǒng)每一分每一秒都在產(chǎn)生大量的數(shù)據(jù)。據(jù)估計，過去兩年間產(chǎn)生的數(shù)據(jù)占目前全球數(shù)據(jù)的90%，新的數(shù)據(jù)正在以每天2.5EB的量級高速增長。
通過對不同來源數(shù)據(jù)的管理、處理、分析與優(yōu)化，并將分析與優(yōu)化的結(jié)果應(yīng)用到實踐中，將創(chuàng)造出巨大的經(jīng)濟和社會價值。
從企業(yè)自身的發(fā)展來講，企業(yè)正在經(jīng)歷從“經(jīng)驗驅(qū)動”到“數(shù)據(jù)驅(qū)動”的階段，例如，零售商可以通過大數(shù)據(jù)的分析實時掌握市場動態(tài)并迅速做出應(yīng)對；大數(shù)據(jù)分析為制定更加精準(zhǔn)有效的營銷策略提供決策支持，為消費者提供更加及時和個性化的服務(wù)。另外，大數(shù)據(jù)也在改變著人們的思維，從抽樣分析到全數(shù)據(jù)分析，從因果關(guān)系分析到相關(guān)關(guān)系分析，大數(shù)據(jù)正在改變著人類科學(xué)研究的手段。
對于非結(jié)構(gòu)化數(shù)據(jù)的處理與分析，目前還存在一些瓶頸，但每一次突破都會帶來技術(shù)與商業(yè)的革命。
Q:您能舉例說明一下大數(shù)據(jù)挖掘的神奇效果嗎？
A:谷歌公司利用5000萬條最頻繁檢索的詞條，并對美國疾控中心在2003年到2008年間季節(jié)性流感傳播時期的數(shù)據(jù)進行了比較，成功的預(yù)測了冬季流感在全美范圍的傳播，而且具體到特定的地區(qū)和州，預(yù)測結(jié)果發(fā)布的時間比官方數(shù)據(jù)早了一兩周。
Q:請問您覺得國內(nèi)企業(yè)是否重視大數(shù)據(jù)？他們是如何采集和挖掘大數(shù)據(jù)的？達到了怎樣的效果？他們在采集和挖掘上還需要哪些改善？請結(jié)合實際例子談一談。
A:目前國內(nèi)的很多企業(yè)或組織也逐漸意識到大數(shù)據(jù)分析的價值和重要性。
對于大數(shù)據(jù)的采集和挖掘，他們進行了許多實踐。比如大型電商、銀行、保險、電信運營商等都在不同程度的利用大數(shù)據(jù)進行決策支持，而且已經(jīng)有一些成果。例如電商的智能推薦系統(tǒng)、保險的需求預(yù)測、電信運營商的個性化服務(wù)等。
在具體方法上，這些企業(yè)多數(shù)選用了客戶行為分析軟件，他們?nèi)〉玫某晒兔媾R的問題，從客戶行為分析軟件在國內(nèi)的發(fā)展歷程上就可以體現(xiàn)出來。
客戶行為分析的目標(biāo)就是大數(shù)據(jù)，它起源于國外，09年進入中國。
最初的客戶行為分析稱之為流量統(tǒng)計，它的主要功能就是統(tǒng)計網(wǎng)站有多少人訪問，每一個頁面有多少點擊量。在當(dāng)時，這款軟件還是產(chǎn)生了很大作用。但是流量統(tǒng)計有兩個非�；A(chǔ)的問題沒有解決：一是網(wǎng)頁內(nèi)部的點擊沒有跟蹤，這就造成客戶行為不全。二是不了解客戶屬性，比如網(wǎng)站有100萬的訪問量，但是不知道這100萬是誰。
所以出現(xiàn)了第二代的客戶行為分析，它是基于電子商務(wù)的客戶行為。除了流量統(tǒng)計之外，還可以跟蹤內(nèi)部點擊，通過頁面的訪問量、平均每次交易額等，定制一些流程圖，看出交易中的不足。第二代客戶行為分析解決了流量時代的第一個缺陷，在電子商務(wù)領(lǐng)域取得了非常巨大的成功。
但是適用于電商領(lǐng)域的客戶分析軟件，在非電子商務(wù)領(lǐng)域卻水土不服。
