導讀:隨著第四屆云計算大會的落幕,三天內(nèi)太多精彩的創(chuàng)新和分享沖擊著我們,CSDN將陸續(xù)對講師的精彩分享整理加工后再提供給讀者。今天帶來的是中國電子學會云計算專家委員會主任委員、中國工程院院士李德毅在云計算大會上的主題演講,CSDN整理如下:
云計算正在走向成熟,大數(shù)據(jù)正在發(fā)展
在經(jīng)歷了對云計算的認識以后,已經(jīng)成為當前信息通信行業(yè)的主旋律。我們可以用維基百科看一看當前對三個重要技術(shù)概念的理解。一個是曾經(jīng)人們跟云計算混淆不清的網(wǎng)格計算,一個是正在發(fā)展的大數(shù)據(jù),我們來看一看用維基百科訪問網(wǎng)格計算詞條,云計算這個詞條和大數(shù)據(jù)這個詞條,看看全世界是怎么關(guān)注的。網(wǎng)格計算2008年4月出現(xiàn)的全人類關(guān)注高峰達到69573次。云計算在2011年12月達到了最高的點擊率751383次。大數(shù)據(jù)在瀏覽次數(shù)上已經(jīng)體現(xiàn)不出來了,因為它剛剛興起,因此我們必須改變縱坐標的測度。大數(shù)據(jù)正在發(fā)展,在2012年3月達到58888次,這就是說全世界對這三個重要概念的關(guān)注點,也就是我們的群體行為。這個群體行為如果我們用一個著名的咨詢公司Gartner在2011年的一個曲線印證的話,他把有些技術(shù)叫做成熟技術(shù),有些技術(shù)期待著成熟技術(shù),被認為是2—5年就可以采用的技術(shù)。而大數(shù)據(jù)正處于上升期,云計算正處于興旺期,網(wǎng)格計算沒有再出現(xiàn)。這項技術(shù)從興起到興旺到走向成熟,都可以用客觀規(guī)律來表示,從這個觀點也支撐了我的這個標題,就是從興起到興旺。
中國電子學會云計算專家委員會主任委員、中國工程院院士 李德毅
為什么要提到大數(shù)據(jù)呢?我們看一看世界人類對物質(zhì)和能量的認識所形成的數(shù)據(jù)量的變化。在1993年的時候,大量的信息是以虛擬狀態(tài)存在的,也就是說人類的信息大量還是模擬化還沒有數(shù)字化。到2000年,數(shù)字化成分逐漸增加。到2007年,人類的信息量幾乎90%以上都實行了數(shù)字化。在這個情況之下,出現(xiàn)了大數(shù)據(jù)。大數(shù)據(jù)英文Big Data,這個層面告訴我們一個認識,他講是PB時代的數(shù)據(jù)、PB時代的科學,因此我們有必要理解大數(shù)據(jù)跟云計算的關(guān)系。我們大家都比較熟悉的是數(shù)據(jù)庫或者數(shù)據(jù)倉庫技術(shù),我們曾經(jīng)用了很長很長時間的數(shù)據(jù)庫、數(shù)據(jù)倉庫在大數(shù)據(jù)面前遇到什么挑戰(zhàn)呢?我們可以看一看。首先,我們從數(shù)據(jù)量來看,一般來說,數(shù)據(jù)庫或者數(shù)據(jù)倉庫都在GB這個量級,或者到TB量級,而大數(shù)據(jù)是在TB或者PB量級,這是數(shù)據(jù)量的不同。嚴格的講,這個量還不是決定問題的根本。更重要的是,當我們把所有的信息放到數(shù)據(jù)倉庫的時候,數(shù)據(jù)要求是比較高的質(zhì)量、比較干凈的數(shù)據(jù)。而我們實際生活中遇到的數(shù)據(jù),多數(shù)都是有噪聲的渾沌的狀態(tài),放在數(shù)據(jù)庫中難以成熟。
在數(shù)據(jù)庫和數(shù)據(jù)倉庫當中,我們的數(shù)據(jù)模型有一個很強的結(jié)構(gòu),有一個關(guān)于數(shù)據(jù)帶數(shù)的支撐,而大數(shù)據(jù)常常是非結(jié)構(gòu)的,大數(shù)據(jù)中人們常常關(guān)注的是視頻、聲音、圖片數(shù)據(jù),而不是純數(shù)據(jù)。如果我們把數(shù)據(jù)放進數(shù)據(jù)庫里面的話,我們需要一個數(shù)據(jù)池,因此我們在研究數(shù)據(jù)管理的時候,需要頂層設計。而現(xiàn)在我們不可能挖一個池把數(shù)據(jù)裝進去,我們面臨的是一個海量數(shù)據(jù),我們面臨的是要在海里撈魚。在數(shù)據(jù)庫技術(shù)中,我們面臨的是一個交易的操作,如果是一個TB數(shù)據(jù)量的話,做一個交易大概要50個小時才能完成,這種技術(shù)比較重交易。而大數(shù)據(jù)時代,我們更關(guān)心的是人與數(shù)據(jù)的交互。對于數(shù)據(jù)庫而言,我們經(jīng)常希望得到一個千人一面的、比較理想的確定點,而對于大數(shù)據(jù)來說,我們常常需要一個不確定的點,一個滿意的點,這是給傳統(tǒng)的數(shù)據(jù)庫技術(shù)提出的挑戰(zhàn)。
在這樣的情況之下,運營商們聚焦云計算,開始注重數(shù)據(jù)中心的大數(shù)據(jù)處理問題,無論是郵件服務中心、客戶關(guān)系管理中心、計算能力多租賃中心、搜索服務中心、數(shù)據(jù)管理中心、流媒體服務中心、位置服務中心,都必須認真考慮在特定服務環(huán)境下的大數(shù)據(jù)處理問題。
“我們”比“我”更聰明
在云計算時代,對我們軟件開發(fā)的方式也提出了新的挑戰(zhàn),我們曾經(jīng)知道,一個大型的軟件公司例如微軟,在互聯(lián)網(wǎng)尤其是社交網(wǎng)絡的環(huán)境下,人們已經(jīng)用一個社區(qū)、社團來開發(fā)。例如說Top Cooed就是這樣一個社區(qū),這個社區(qū)的骨干成員可以達到40萬,即使像微軟這樣的公司,程序員達到萬人以上已經(jīng)很難以維持,一個40萬人的軟件開發(fā)社團告訴我們,這樣的社團將是一個社區(qū),而不是一個公司。今后的軟件開發(fā),除了公司之外,還有一個小眾,但是在這個小眾里面可以有幾十萬的開發(fā)者。Top Cooed在全世界軟件開發(fā)社區(qū)里做三方面的工作。第一,把軟件碎片化,進行軟件的編碼比賽,互評代碼、系統(tǒng)評測,這占了Top Cooed社區(qū)三分之一的工作量。如果生活中有許多程序需要開發(fā)的話,我們可以把這個開發(fā)任務以外包的形式推到社會上,讓社會上的人進行競標提交成果,在完成兼職開發(fā)過程中,我們的軟件開發(fā)者們,就拿到了相應的報酬,有很多軟件開發(fā)工程師以后將不在公司工作,而是在社區(qū)兼職工作。我在浙江大學就認識這樣一個學生,他做Top Cooed的軟件兼職開發(fā)員,不但養(yǎng)活了自己,而且還養(yǎng)活了他的父母。這種開發(fā)社區(qū),還為各個公司尋找人才,成為一個很重要的人才源。獵頭們在這樣一個社區(qū)里面,展示各個企業(yè)的狀況,進行員工的招聘。所以說,云計算使得軟件作為平臺的開發(fā)更加的群體化、社會化,形成新的開發(fā)機構(gòu)。
眾包概念,在互聯(lián)網(wǎng)上誕生以后已經(jīng)滲入社會的各個方面,使得人人都可以是軟件開發(fā)者、編輯者、創(chuàng)作者、記者。因此,云計算告訴我們一個真理,在云計算形成各式各樣的社團、小眾或者由小眾組成的大眾,他們之間的深度合作使我們得到一個真理,就是“我們”比“我”更聰明。云計算在中國,已經(jīng)走過了理念清醒、操作模糊、八仙過海、云里霧里的一段路程。但是,現(xiàn)在已經(jīng)取得了越來越多的共識,被國家列入戰(zhàn)略性新興產(chǎn)業(yè),走上了云計算的應用之路。所以,我們第四屆中國云計算大會就是以示范引領(lǐng)創(chuàng)新實踐作為一個口號。
人們的共識是什么呢?信息技術(shù)和信息服務可以實現(xiàn)社會化、集約化和專業(yè)化,網(wǎng)絡變得豐富、邊緣變得簡單,終端產(chǎn)品豐富多樣,交互更加智能。今后,將不再需要各部門建自己專門的信息系統(tǒng),讓信息服務成為全社會的公共基礎(chǔ)設施。在這一點上,已經(jīng)沒有什么不同的聲音了。
云計算讓我們新興產(chǎn)業(yè)鏈發(fā)生了很大的變化,那種曾經(jīng)以產(chǎn)品為中心的產(chǎn)業(yè)鏈分工轉(zhuǎn)變?yōu)橐苑諡橹行牡睦尕P(guān)方的相互滲透,他們之間相互滲透、頻繁交互,協(xié)商共贏,華為公開提出來“樂于被集成”,他們是符合趨勢的。
云計算將曾經(jīng)相隔的微電子、計算機、通信、軟件、家電等產(chǎn)品融合為三大板塊。早期的時候,這些版塊相互還有距離,但是隨著云計算形成的各種各樣的數(shù)據(jù)中心、計算中心、服務中心,以及各種各樣的異構(gòu)、交叉、層疊的網(wǎng)絡和豐富多樣的設備讓這些結(jié)構(gòu)走到了一起。曾經(jīng)計算機搞計算機產(chǎn)品,通信搞電話、搞交換,然后慢慢的計算機搞個人電腦、通信產(chǎn)業(yè)搞手機,使得筆記間的間隙越來越小,現(xiàn)在人們發(fā)現(xiàn)個性化、智能化、輕便化的端設備成為大眾的技術(shù),因此就導致了今天的三大板塊,第一個版塊就是端設備,涌現(xiàn)出非常非常多的端設備,國內(nèi)的云電視就提出把操作系統(tǒng)、WiFi放到電視里。第二部分是網(wǎng)絡和網(wǎng)絡運營商,第三是數(shù)據(jù)中心、計算中心和服務中心,云計算導致了我們產(chǎn)業(yè)鏈的重新格局。就是說云計算已經(jīng)成為ICT行業(yè)的主旋律,不再動搖、不再懷疑。