電信運(yùn)營(yíng)商大數(shù)據(jù)平臺(tái)的演進(jìn)
我們可以看一下運(yùn)營(yíng)商建立大數(shù)據(jù)的利用演進(jìn)的過程，最早運(yùn)營(yíng)商會(huì)看大數(shù)據(jù)的數(shù)據(jù)引入過來使得原來歷史的數(shù)據(jù)進(jìn)一步的做處理和分析，去發(fā)現(xiàn)，最早引入運(yùn)營(yíng)商大數(shù)據(jù)的應(yīng)用比較多的會(huì)看到我們做詳單的查詢，詳單我們呼叫的記錄詳單保存在記錄里面量非常大，以前過一段時(shí)間我們就把它歸檔或者從業(yè)務(wù)系統(tǒng)里面拿掉。但是這些數(shù)據(jù)其實(shí)在以后我們還需要對(duì)它進(jìn)行查詢?cè)L問，甚至更進(jìn)一步的分析，而大數(shù)據(jù)的技術(shù)應(yīng)用使得第一步從一個(gè)簡(jiǎn)單的應(yīng)用，我們可以對(duì)歷史數(shù)據(jù)進(jìn)行訪問和分析，第二塊我們也會(huì)建一些客戶深入的洞察，把原來業(yè)務(wù)系統(tǒng)里面的數(shù)據(jù)，跟我們網(wǎng)絡(luò)上客戶的行為數(shù)據(jù)去做關(guān)聯(lián)，去做客戶深度的洞察。但是從這種角度來看，每一個(gè)系統(tǒng)或者每一個(gè)應(yīng)用基本上都是垂直在建的。所以接下來我們到了第二個(gè)階段，其實(shí)就是要看運(yùn)營(yíng)商希望把整個(gè)基礎(chǔ)的架構(gòu)，包括原有的業(yè)務(wù)數(shù)據(jù)，包括網(wǎng)絡(luò)運(yùn)營(yíng)的這些數(shù)據(jù)，包括對(duì)外部支撐的數(shù)據(jù)，希望能夠有一個(gè)公共的平臺(tái)，所以第二個(gè)階段建一個(gè)公共平臺(tái)，通過公共平臺(tái)支撐上面的數(shù)據(jù)分析和業(yè)務(wù)應(yīng)用。第二個(gè)階段是有限的一些開發(fā)商或者服務(wù)商提供，運(yùn)營(yíng)商為了更廣泛的讓更多的人使用他的平臺(tái)和數(shù)據(jù)，同時(shí)讓他的數(shù)據(jù)價(jià)值得到更大程度的發(fā)揮，希望有更多的合作伙伴在平臺(tái)上做數(shù)據(jù)價(jià)值的發(fā)現(xiàn)，做數(shù)據(jù)應(yīng)用的開發(fā)。所以第三個(gè)階段更多看到平臺(tái)需要有一個(gè)更開放的環(huán)境，有一個(gè)統(tǒng)一的平臺(tái)，有一個(gè)統(tǒng)一的數(shù)據(jù)治理的環(huán)境，有一個(gè)開放的數(shù)據(jù)，使眾多的開發(fā)商和運(yùn)營(yíng)伙伴在這個(gè)平臺(tái)做產(chǎn)品開發(fā)和數(shù)據(jù)使用。
這是基于前面的構(gòu)想的一個(gè)生態(tài)環(huán)境的描述，最下面可以看到我們有一個(gè)數(shù)據(jù)的提供者，過去這里面更多會(huì)談到運(yùn)營(yíng)商自己的一些數(shù)據(jù)，我的業(yè)務(wù)系統(tǒng)的網(wǎng)絡(luò)數(shù)據(jù)，未來有第三方的數(shù)據(jù)接入。第二層可以看到有一個(gè)數(shù)據(jù)的統(tǒng)一的基礎(chǔ)架構(gòu)，上面會(huì)構(gòu)建一些公共的服務(wù)，并且把這些服務(wù)開放出來，這里面包括平臺(tái)本身自己的服務(wù)，包括一些深度計(jì)算，數(shù)據(jù)處理，技術(shù)分析的服務(wù)，我們把這些服務(wù)能夠在扁平化的平臺(tái)上開放出來，而這些開放的是基于相對(duì)的標(biāo)準(zhǔn)，不同的開發(fā)商不同的消費(fèi)者可以在這個(gè)上面基于這樣的標(biāo)準(zhǔn)開發(fā)他們的應(yīng)用。這里面會(huì)有數(shù)據(jù)的開發(fā)者，他們基于運(yùn)營(yíng)商的數(shù)據(jù)做數(shù)據(jù)的加工和處理，會(huì)有應(yīng)用的開發(fā)者他們基于這些數(shù)據(jù)，基于平臺(tái)的能力開發(fā)適合特定的需求的應(yīng)用，也會(huì)有一些工具的開發(fā)者，這些工具開發(fā)者包括傳統(tǒng)工具的提供者，也包括基于今天新興大數(shù)據(jù)底層的數(shù)據(jù)，做二次開發(fā)。最上面是我們看到的一些服務(wù)的最終數(shù)據(jù)消費(fèi)，他們有可能是運(yùn)營(yíng)商內(nèi)部的客戶，也有可能是外部的客戶。
面向運(yùn)營(yíng)商的大數(shù)據(jù)分析平臺(tái)
從這個(gè)上面我們推導(dǎo)出來我們需要平臺(tái)的架構(gòu)，底層我們可能接入這些數(shù)據(jù)，包括傳統(tǒng)的從運(yùn)營(yíng)商自己的業(yè)務(wù)系統(tǒng)里面的數(shù)據(jù)，也包括網(wǎng)絡(luò)上的數(shù)據(jù)，網(wǎng)絡(luò)上的數(shù)據(jù)其實(shí)以前在運(yùn)營(yíng)商的分析環(huán)境里面是接觸比較少的，因?yàn)檫@些數(shù)據(jù)如果要去采集的話，會(huì)對(duì)網(wǎng)絡(luò)本身有一些影響，所以我們?cè)跇?gòu)建這樣平臺(tái)的時(shí)候，從采集到數(shù)據(jù)的存儲(chǔ)和加工，除了考慮我們對(duì)數(shù)據(jù)本身使用的需求以外，由于這個(gè)本身IT環(huán)境和CT的環(huán)境已經(jīng)在那里，有他自己的一套架構(gòu)，同時(shí)還需要考慮的是，對(duì)這些數(shù)據(jù)進(jìn)行采集處理、加工，同時(shí)要考慮到怎么樣減少對(duì)原有系統(tǒng)的影響，以及保持這個(gè)系統(tǒng)的穩(wěn)定性。
綠色既包括我們對(duì)傳統(tǒng)IT的數(shù)據(jù)倉(cāng)庫(kù)，數(shù)據(jù)庫(kù)的集成，也包括像Hadoop新興大數(shù)據(jù)的集成，在整個(gè)平臺(tái)上我們還會(huì)考慮構(gòu)建一個(gè)統(tǒng)一的數(shù)據(jù)治理，因?yàn)殡S著Hadoop和非結(jié)構(gòu)化數(shù)據(jù)的應(yīng)用，這些數(shù)據(jù)如何變成運(yùn)營(yíng)商或者一個(gè)企業(yè)客戶的數(shù)據(jù)資產(chǎn)的角度來對(duì)他有效的管理，這個(gè)里面也是很重要的，因?yàn)槲覀冎罃?shù)據(jù)倉(cāng)庫(kù)和Hadoop數(shù)據(jù)的形態(tài)可能都是不一樣，需要有一個(gè)統(tǒng)計(jì)的數(shù)據(jù)治理。我們還需要考慮在現(xiàn)有的環(huán)境里面，如何去跟已有的環(huán)境去做整合和集成，運(yùn)營(yíng)商這樣一個(gè)企業(yè)IT的環(huán)境比較復(fù)雜，我們也會(huì)考慮到跟數(shù)據(jù)來源提供者和數(shù)據(jù)消費(fèi)提供者的關(guān)系。通過能力開放去提供第三方的服務(wù)的使用。
在整個(gè)平臺(tái)的設(shè)計(jì)和構(gòu)想后，我們已經(jīng)在一些客戶那面得到了一些試點(diǎn)和使用，在這里面就列舉了一些，由于引入新的數(shù)據(jù)處理的手段，新的數(shù)據(jù)感覺的手段以及分析手段以后，我們能夠進(jìn)一步做哪些分析是我們?cè)瓉懋a(chǎn)生的經(jīng)營(yíng)分析系統(tǒng)沒有辦法做。另外我們也可以知道通過網(wǎng)絡(luò)側(cè)的深入分析我們可以知道，比如說沒有人拿了同一個(gè)CM卡在不同的地方，一個(gè)CM卡被復(fù)制，同時(shí)在打電話，如果這兩個(gè)CM卡在不同的基站使用肯定能體現(xiàn)出來。另外一個(gè)領(lǐng)域可以看到，可以服務(wù)運(yùn)營(yíng)商做網(wǎng)絡(luò)的優(yōu)化，我通過時(shí)時(shí)分析知道，在我這個(gè)網(wǎng)絡(luò)和基站里面有哪些用戶，這些用戶如果基站的某些指標(biāo)對(duì)那些用戶產(chǎn)生什么樣的影響，從而做網(wǎng)絡(luò)的優(yōu)化。