他說，從數(shù)據(jù)庫到數(shù)據(jù)倉庫再到今天的大數(shù)據(jù)，數(shù)據(jù)量的快速增長(zhǎng)是一個(gè)趨勢(shì)，而與之相對(duì)應(yīng)的數(shù)據(jù)處理的方式也在變化、提高，這是一個(gè)螺旋上升的發(fā)展過程。
而“數(shù)據(jù)量巨大”只是大數(shù)據(jù)的一個(gè)標(biāo)簽。除此以外，數(shù)據(jù)的多樣化、管理的復(fù)雜度、實(shí)時(shí)分析等也是用戶在處理大數(shù)據(jù)時(shí)必須面對(duì)的挑戰(zhàn)。
在大數(shù)據(jù)時(shí)代，企業(yè)需要面對(duì)的是不斷變化的數(shù)據(jù)，因此需要實(shí)時(shí)對(duì)數(shù)據(jù)進(jìn)行處理和分析，這無疑增加了數(shù)據(jù)分析的難度，但同時(shí)也提高了企業(yè)預(yù)測(cè)未來市場(chǎng)變化的準(zhǔn)確度。
對(duì)于企業(yè)來說，是否應(yīng)該采用大數(shù)據(jù)分析工具，不是以企業(yè)擁有的數(shù)據(jù)量大小決定的，只要企業(yè)有商業(yè)預(yù)測(cè)的需求，就應(yīng)該盡快使用大數(shù)據(jù)分析工具。
很多人認(rèn)為，大數(shù)據(jù)就是指非結(jié)構(gòu)化的數(shù)據(jù)。其實(shí)，這是一個(gè)“謊言”。事實(shí)上，全球產(chǎn)生的數(shù)據(jù)中85%以上的確是非結(jié)構(gòu)化的數(shù)據(jù)。但是在當(dāng)前的大數(shù)據(jù)應(yīng)用中，企業(yè)主要處理的還是結(jié)構(gòu)化的數(shù)據(jù)。
如今，許多擁有結(jié)構(gòu)化數(shù)據(jù)處理工具的廠商紛紛轉(zhuǎn)向Hadoop，目的就是要尋找一個(gè)處理非結(jié)構(gòu)化數(shù)據(jù)的好辦法。盡管如此，大多數(shù)廠商的非結(jié)構(gòu)化數(shù)據(jù)分析工具，也是先把非結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)換成結(jié)構(gòu)化數(shù)據(jù)之后再進(jìn)行處理。
云計(jì)算帶來了IT基礎(chǔ)架構(gòu)的變革，大數(shù)據(jù)則有力地推動(dòng)了企業(yè)業(yè)務(wù)的轉(zhuǎn)型。從這個(gè)角度講，大數(shù)據(jù)對(duì)企業(yè)來說是一個(gè)挑戰(zhàn)，更是一個(gè)實(shí)現(xiàn)業(yè)務(wù)轉(zhuǎn)型的契機(jī)。伴隨著大數(shù)據(jù)應(yīng)用的興起，企業(yè)對(duì)數(shù)據(jù)科學(xué)家、數(shù)據(jù)分析師這些新型的專業(yè)人才的需求也會(huì)變得更加迫切。