當(dāng)今社會(huì)中產(chǎn)生的日益增長(zhǎng)的數(shù)據(jù)如海嘯般襲來,這種趨勢(shì)正影響金融、零售、政府、娛樂、新聞等領(lǐng)域。而開發(fā)者正努力構(gòu)建程序,以便從海量數(shù)據(jù)中提取有價(jià)值的信息。
加強(qiáng)數(shù)據(jù)中心業(yè)務(wù)成為發(fā)展的關(guān)鍵點(diǎn),因?yàn)閿?shù)據(jù)必須要有“家”,海量數(shù)據(jù)需要存儲(chǔ)設(shè)備來容納它。并且在許多情況下,還需要對(duì)數(shù)據(jù)進(jìn)行分析。在軟件層面上服務(wù)器需要分析數(shù)據(jù)的應(yīng)用程序,在硬件層面上則需要高性能的超級(jí)計(jì)算機(jī)集群。數(shù)據(jù)的分析使數(shù)據(jù)變得有意義。
海量數(shù)據(jù)影響存儲(chǔ)設(shè)備成本
這一切意味著數(shù)據(jù)中心行業(yè)迎來巨大的機(jī)遇與商機(jī),專門從事海量數(shù)據(jù)業(yè)務(wù)的公司迅速增長(zhǎng)。Amazon前首席科學(xué)家表示“數(shù)據(jù)是原油,但石油需要加以提煉后才能使用,從事海量數(shù)據(jù)處理的公司就是煉油廠”。
分析家表示大數(shù)據(jù)到來還體現(xiàn)在各企業(yè)加大存儲(chǔ)設(shè)備投資的趨勢(shì)。雖然重復(fù)數(shù)據(jù)的刪除可有效壓縮數(shù)據(jù)和存儲(chǔ)硬件的成本。但Forrester的James Kobielus表示企業(yè)存儲(chǔ)預(yù)算每年增長(zhǎng)20%至40%,并且隨著需求的增加還在不斷飆升。
當(dāng)然好的消息是存儲(chǔ)設(shè)備廉價(jià)化的趨勢(shì)還在繼續(xù)。Kobielus預(yù)測(cè)PB容量存儲(chǔ)設(shè)備的價(jià)格將會(huì)在未來不久來到合理的價(jià)位。從安全的角度來講數(shù)據(jù)移植帶來了新的挑戰(zhàn)。能將更多的數(shù)據(jù)分配到小型設(shè)備是數(shù)據(jù)中心重要的能力。
同時(shí)Michael chui表示其生成數(shù)據(jù)的能力要遠(yuǎn)大于保存數(shù)據(jù)的能力。McKinsey也表示隨著海量數(shù)據(jù)時(shí)代的到來,企業(yè)間競(jìng)爭(zhēng)的焦點(diǎn)將會(huì)被轉(zhuǎn)移。
中間商的契機(jī)
海量數(shù)據(jù)同樣為中間商來創(chuàng)造了商機(jī)。有些公司已經(jīng)有很多年處理大數(shù)據(jù)集的經(jīng)驗(yàn)。LexisNexis公司就是一個(gè)很好的例子。其提供的HPCC系統(tǒng)幫助商業(yè)、金融服務(wù)以及其他高端事業(yè)的客戶分析大量數(shù)據(jù)。LexisNexis公司技術(shù)部門負(fù)責(zé)HPCC系統(tǒng)的Armando Escalante表示“我們專注海量數(shù)據(jù)的研究已經(jīng)有15年的時(shí)間”。HPCC系統(tǒng)最近開源了其數(shù)據(jù)平臺(tái),并發(fā)布在GitHub上。Escalante表示我們這樣做是為了使HPCC系統(tǒng)在社區(qū)繼續(xù)保持其影響力,并完善我們的平臺(tái)。
101data實(shí)際上在處理大數(shù)據(jù)領(lǐng)域也已經(jīng)有10年以上的時(shí)間經(jīng)驗(yàn)。在人們談?wù)撆c計(jì)算之前,101data已經(jīng)提供多種針對(duì)于海量數(shù)據(jù)實(shí)際使用中的特定服務(wù),包括數(shù)據(jù)倉(cāng)庫(kù)和商業(yè)智能高級(jí)分析??蛻艨墒褂檬煜さ墓ぞ吲c服務(wù)進(jìn)行交互。例如電子表格,客戶可以容易的找到他們想要的。101data的高級(jí)副總裁Tim Negris表示海量數(shù)據(jù)的收集以及存放和利用海量數(shù)據(jù)實(shí)際上完全是兩回事。在做任何事前需要大量(準(zhǔn)備數(shù)據(jù))的工作是像Oracle和大多數(shù)數(shù)據(jù)庫(kù)廠商所面臨的難題之一。我們正是要消除這個(gè)難題,并把數(shù)據(jù)直接交到分析師的手中。
現(xiàn)今中間商已將海量數(shù)據(jù)與云計(jì)算技術(shù)有機(jī)的結(jié)合在一起。專家預(yù)測(cè),未來在此領(lǐng)域的投資將會(huì)繼續(xù)增加。