中國IDC圈5月17日報道，大數(shù)據(jù)應(yīng)用有幾個方面，一個是效率提升，幫助企業(yè)提升數(shù)據(jù)處理效率，降低數(shù)據(jù)存儲成本。另外一個是對業(yè)務(wù)作出指導(dǎo)，例如精準(zhǔn)營銷，反欺詐，風(fēng)險管理以及業(yè)務(wù)提升。過去企業(yè)都是通過線下渠道接觸客戶，客戶數(shù)據(jù)不全，只能利用財務(wù)數(shù)據(jù)進(jìn)行業(yè)務(wù)運營分析，缺少圍繞客戶的個人數(shù)據(jù)，數(shù)據(jù)分析應(yīng)用的領(lǐng)域集中在企業(yè)內(nèi)部經(jīng)營和財務(wù)分析。
大數(shù)據(jù)應(yīng)用有幾個方面，一個是效率提升，幫助企業(yè)提升數(shù)據(jù)處理效率，降低數(shù)據(jù)存儲成本。另外一個是對業(yè)務(wù)作出指導(dǎo)，例如精準(zhǔn)營銷，反欺詐，風(fēng)險管理以及業(yè)務(wù)提升。過去企業(yè)都是通過線下渠道接觸客戶，客戶數(shù)據(jù)不全，只能利用財務(wù)數(shù)據(jù)進(jìn)行業(yè)務(wù)運營分析，缺少圍繞客戶的個人數(shù)據(jù)，數(shù)據(jù)分析應(yīng)用的領(lǐng)域集中在企業(yè)內(nèi)部經(jīng)營和財務(wù)分析。
數(shù)字時代到來之后，企業(yè)經(jīng)營的各個階段都可以被記錄下來，產(chǎn)品銷售的各個環(huán)節(jié)也被記錄下來，客戶的消費行為和網(wǎng)上行為都被采集下來。企業(yè)擁有了多維度的數(shù)據(jù)，包括產(chǎn)品銷售數(shù)據(jù)、客戶消費數(shù)據(jù)、客戶行為數(shù)據(jù)、企業(yè)運營數(shù)據(jù)等。擁有數(shù)據(jù)之后，數(shù)據(jù)分析成為可能，企業(yè)成立了數(shù)據(jù)分析團隊整理數(shù)據(jù)和建立模型，找到商品和客戶之間的關(guān)聯(lián)關(guān)系，商品之間關(guān)聯(lián)關(guān)系，另外也找到了收入和客戶之間的關(guān)聯(lián)關(guān)系。典型的數(shù)據(jù)分析案例如沃爾瑪啤酒和尿布、蛋撻和手電筒，Target的判斷16歲少女懷孕都是這種關(guān)聯(lián)關(guān)系的體現(xiàn)。
關(guān)聯(lián)分析是統(tǒng)計學(xué)應(yīng)用最早的領(lǐng)域，早在1846年倫敦第二次霍亂期間，約翰醫(yī)生利用霍亂地圖找到了霍亂的傳播途徑，平息了倫敦霍亂，打敗了霍亂源于空氣污染說的精英，拯救了幾萬人的生命。倫敦霍亂平息過程中，約翰醫(yī)生利用了頻數(shù)分布分析，建立了霍亂地圖，從死亡案例分布的密集程度上歸納出病人分布同水井的關(guān)系，從而推斷出污染的水源是霍亂的主要傳播途徑，建議移除水井手柄，降低了霍亂發(fā)生的概率。
另外一個典型案例是第二次世界大戰(zhàn)期間，統(tǒng)計分析學(xué)家改造轟炸機。英美聯(lián)盟從1943年開始對德國的工業(yè)城市進(jìn)行轟炸，但在1943年年底，轟炸機的損失率達(dá)到了英美聯(lián)盟不能承受的程度。轟炸軍司令部請來了統(tǒng)計學(xué)家，希望利用數(shù)據(jù)分析來改造轟炸機的結(jié)構(gòu)，降低陣亡率，提高士兵生還率。統(tǒng)計學(xué)家利用大尺寸的飛機模型，詳細(xì)記錄了返航轟炸機的損傷情況。統(tǒng)計學(xué)家在飛機模型上將轟炸機受到攻擊的部位用黑筆標(biāo)注出來，兩個月后，這些標(biāo)注布滿了機身，有的地方標(biāo)注明顯多于其他地方，例如機身和側(cè)翼。有的地方的標(biāo)注明顯少于其他地方，例如駕駛室和發(fā)動機。統(tǒng)計學(xué)家讓軍火商來看這個模型，軍火商認(rèn)為應(yīng)該加固受到更多攻擊的地方，但是統(tǒng)計學(xué)家建議對標(biāo)注少的地方進(jìn)行加固，標(biāo)注少的原因不是這些地方不容易被擊中，而是被擊中的這些地方的飛機，很多都沒有返航。這些標(biāo)注少的地方被擊中是飛機墜毀的一個主要原因。軍火商按照統(tǒng)計學(xué)家的建議進(jìn)行了飛機加固，大大提高了轟炸機返航的比率。以二戰(zhàn)著名的B-17轟炸機為例，其陣亡率由26%降到了7%，幫助美軍節(jié)約了幾億美金，大大提高了士兵的生還率。
一 數(shù)據(jù)分析中的角色和職責(zé)
數(shù)據(jù)分析團隊?wèi)?yīng)該在科技部門內(nèi)部還在業(yè)務(wù)部門內(nèi)部一直存在爭議。在業(yè)務(wù)部門內(nèi)部，對數(shù)據(jù)場景比較了解，容易找到數(shù)據(jù)變現(xiàn)的場景，數(shù)據(jù)分析對業(yè)務(wù)提升幫助較大，容易出成績。但是弊端是僅僅對自己部門的業(yè)務(wù)數(shù)據(jù)了解，分析只是局限獨立的業(yè)務(wù)單元之內(nèi)，在數(shù)據(jù)獲取的效率上，數(shù)據(jù)維度和數(shù)據(jù)視角方面缺乏全局觀，數(shù)據(jù)的商業(yè)視野不大，對公司整體業(yè)務(wù)的推動發(fā)展有限。業(yè)務(wù)部門的數(shù)據(jù)分析團隊缺少數(shù)據(jù)技術(shù)能力，無法利用最新的大數(shù)據(jù)計算和分析技術(shù)，來實現(xiàn)數(shù)據(jù)分析和建模。數(shù)據(jù)分析和計算依賴于科技部門，效率較低，無法打通各個環(huán)節(jié)和實現(xiàn)效率和收益最優(yōu)。
數(shù)據(jù)分析和挖掘部門位于科技部門，優(yōu)點是直接可以了解所有數(shù)據(jù)，利用最新的大數(shù)據(jù)計算分析技術(shù)來進(jìn)行數(shù)據(jù)分析和建模，數(shù)據(jù)視野好。面對全局?jǐn)?shù)據(jù)建立數(shù)據(jù)采集和分析系統(tǒng)，系統(tǒng)復(fù)用程度高，降低重復(fù)投資，效率高。但是團隊人員商業(yè)敏感度低，過度關(guān)注技術(shù)和架構(gòu)，重視技術(shù)的領(lǐng)先和處理效率，數(shù)據(jù)商業(yè)敏感度低，不重視數(shù)據(jù)商業(yè)化場景，對業(yè)務(wù)理解程度不夠，支持力度不如前者。科技部門愿意搭建一個大數(shù)據(jù)平臺，讓業(yè)務(wù)部門自己去尋數(shù)據(jù)場景，業(yè)務(wù)部門在數(shù)據(jù)商業(yè)化過程中也會遇到環(huán)節(jié)不暢通，效率低下的問題。