北京·亦莊·云世界大會(huì)2013于12月12日在亦莊創(chuàng)意生活廣場(chǎng)舉行。本屆云世界大會(huì)以“Cloud Now @ CHINA ”為主題,圍繞“趨勢(shì)發(fā)展的世界云”和“自主創(chuàng)新的中國(guó)云”兩大主線。延續(xù)北京硅谷對(duì)話“雙城記”傳統(tǒng),來(lái)自硅谷的云計(jì)算頂級(jí)專家,云計(jì)算領(lǐng)域頂級(jí)的公司與中國(guó)互聯(lián)網(wǎng)及云計(jì)算領(lǐng)域的領(lǐng)導(dǎo)企業(yè)、風(fēng)云人物,通過技術(shù)、創(chuàng)新、投資、趨勢(shì)等方面的碰撞,解讀云計(jì)算本質(zhì)、趨勢(shì)、創(chuàng)新創(chuàng)業(yè)機(jī)會(huì)。同時(shí),與會(huì)者也將零距離接觸到中國(guó)云計(jì)算這幾年的發(fā)展成果。
Morado Ventures的聯(lián)合創(chuàng)始人、董事總經(jīng)理Ash Patel在2013云世界大會(huì)上做主題演講,主要介紹一下我們?cè)诨A(chǔ)架構(gòu)方面的四個(gè)趨勢(shì),你用數(shù)據(jù)可以做哪些東西。以下是Ash Patel的演講全文:
Ash Patel:大家好,首先非常感謝能夠給我這樣一個(gè)機(jī)會(huì)來(lái)做今天的發(fā)言,我叫做Ash Patel,我是來(lái)自于Morado Ventures的聯(lián)合創(chuàng)始人、董事總經(jīng)理,我們是早期的天使基金。我在雅虎工作過十年,主要做大數(shù)據(jù)方面的工作,我是數(shù)據(jù)非常忠實(shí)的粉絲,同時(shí)也很高興在這里見到了很多的同事。
我們現(xiàn)在其實(shí)是處在一個(gè)大數(shù)據(jù)的時(shí)代,大數(shù)據(jù)對(duì)于我們來(lái)說是下一代的我們所說的“黑羊”。上一次可能是互聯(lián)網(wǎng),是我們所說的石油的發(fā)展,石油的發(fā)展使全球變得更加的工業(yè)化了。
主要介紹一下我們?cè)诨A(chǔ)架構(gòu)方面的四個(gè)趨勢(shì),你用數(shù)據(jù)可以做哪些東西。
第一個(gè)趨勢(shì),實(shí)時(shí)的數(shù)據(jù)的分析??匆幌氯虻那闆r,有90億的設(shè)備是和互聯(lián)網(wǎng)相關(guān)的,到2020年會(huì)有150億的設(shè)備,包括手機(jī)、機(jī)器、感應(yīng)器。我們的數(shù)據(jù)量是不斷爆炸的,機(jī)器量會(huì)比人們?cè)瓉?lái)帶來(lái)的數(shù)據(jù)大很多,這是一個(gè)大的趨勢(shì)。
舉一個(gè)例子,比如我這次坐的飛機(jī),每小時(shí)會(huì)帶來(lái)22T的數(shù)據(jù)。10個(gè)小時(shí)的飛機(jī),每小時(shí)22T,10個(gè)小時(shí)數(shù)據(jù)會(huì)達(dá)到220T。每天24小時(shí)生成的數(shù)據(jù)是非常巨大的,我們生活在這個(gè)世界當(dāng)中,每一分鐘都有不同的數(shù)據(jù)產(chǎn)生。數(shù)據(jù)在現(xiàn)階段是最有效的,所以在全球我們必須進(jìn)行實(shí)時(shí)的數(shù)據(jù)處理。不進(jìn)行數(shù)據(jù)處理,你都沒有辦法進(jìn)行很好的儲(chǔ)存,這就是我們?yōu)槭裁匆紤]對(duì)實(shí)時(shí)的數(shù)據(jù)進(jìn)行處理。
我們?cè)?jīng)投資過一家公司,叫做DATA TORRENT。Hadoop會(huì)處理你的數(shù)據(jù),每天每小時(shí)會(huì)發(fā)給你報(bào)告,告訴你數(shù)據(jù)的變化。對(duì)于DATA TORRENT也是這樣的,在Hadoop上可以利用這樣的架構(gòu),給你一個(gè)實(shí)時(shí)的可精簡(jiǎn)的流數(shù)據(jù)。你可能只有一個(gè)小的硬件,每小時(shí)、每分鐘你都可以處理很多的數(shù)據(jù),做一些可預(yù)測(cè)的分析。為什么這一點(diǎn)是非常重要的?因?yàn)槟憧梢赃M(jìn)行實(shí)時(shí)的數(shù)據(jù)的監(jiān)測(cè),也可以讓業(yè)務(wù)的狀態(tài)實(shí)時(shí)的來(lái)進(jìn)行更新。這就是我們所說的實(shí)時(shí)的平臺(tái),它的實(shí)時(shí)性是非常重要的。
現(xiàn)在很多反饋都可以生成數(shù)據(jù),像金融行業(yè)。金融詐騙發(fā)生的時(shí)候,你需要找到金融詐騙的渠道?;蛘咴谑豌@井的平臺(tái)上,你發(fā)現(xiàn)哪一口井的油壓發(fā)生的問題,這都是需要實(shí)時(shí)數(shù)據(jù)分析的。
圖像就是一個(gè)一個(gè)的節(jié)點(diǎn)聚在一起,放在一起數(shù)據(jù)量是非常大的。在Hadoog數(shù)據(jù)當(dāng)中,我們通過一定的形式來(lái)存儲(chǔ)數(shù)據(jù)。現(xiàn)在全球的形勢(shì)是非常復(fù)雜的,社交網(wǎng)絡(luò)實(shí)際上就是圖表的一種。運(yùn)輸網(wǎng)絡(luò)、供應(yīng)鏈等等這些設(shè)備,一個(gè)機(jī)器是來(lái)自于全球幾千個(gè)部件組合在一起的,每一個(gè)企業(yè)都有自己的運(yùn)輸網(wǎng)絡(luò)。如果有一家企業(yè)出現(xiàn)了問題,或者他們的運(yùn)輸線,或者鐵路線出現(xiàn)了問題,你要對(duì)圖表進(jìn)行分析,測(cè)量它產(chǎn)生的影響。這是很難的,因?yàn)閷?duì)于圖表的分析,這也是大數(shù)據(jù)分析當(dāng)中很困難的一點(diǎn)。
這方面也有一個(gè)技術(shù),叫Neo4j(音)的技術(shù),我們對(duì)其進(jìn)行了投資,大家也來(lái)到了會(huì)議的現(xiàn)場(chǎng)。充分的利用圖表當(dāng)中有效的數(shù)字進(jìn)行不斷的擴(kuò)展和升級(jí)。為什么圖表的數(shù)據(jù)非常重要?比特幣最近炒的很熱。在銀行帳戶當(dāng)中里可以進(jìn)行資金的轉(zhuǎn)移,如果你想知道這個(gè)人是不是在“洗錢”。A把錢給了B,在金融的交易當(dāng)中,正常的銀行帳戶會(huì)有一個(gè)記錄,錢從賬戶A挪到了賬戶B。但是現(xiàn)在有上百萬(wàn)的金融數(shù)據(jù),你想追蹤,從A賬戶到B賬戶,你沒有數(shù)據(jù)庫(kù)就沒有辦法來(lái)做。對(duì)于客戶來(lái)說也有一些客戶的數(shù)據(jù),我們可以通過幾百萬(wàn)的數(shù)據(jù)中來(lái)看A是不是給B發(fā)送了錢。所以對(duì)于金融行業(yè)來(lái)說這也是非常重要的,這就是我們所說的圖表的重要性。對(duì)于圖表型的數(shù)據(jù),你可以進(jìn)行分析,它不僅僅應(yīng)用在社交網(wǎng)絡(luò),還可以應(yīng)用在其他的領(lǐng)域,像基礎(chǔ)設(shè)施。
另外一個(gè)趨勢(shì),隨著人們大量的使用云計(jì)算,你有沒有能力管理。人們已經(jīng)看到了這種變化,就像集裝箱,集裝箱把一個(gè)東西發(fā)送到另一個(gè)地點(diǎn)。在軟件的領(lǐng)域你沒有辦法很容易的把軟件像集裝箱一樣打包進(jìn)行轉(zhuǎn)移。有一家企業(yè)他們可以讓人們將數(shù)據(jù)打包,應(yīng)用可以很容易的像集裝箱一樣打包?,F(xiàn)在在云上每個(gè)人都在用虛擬化,打包的方式變得更加的容易。可以把你的網(wǎng)絡(luò)流程進(jìn)行分類,不一定是只有虛擬化才能夠?qū)崿F(xiàn)。你有整個(gè)的操作體系,你有你的硬件,在這個(gè)基礎(chǔ)之上你有自己的瀏覽器,對(duì)于每一個(gè)應(yīng)用都要進(jìn)行收集,在此基礎(chǔ)之上進(jìn)行分析。這是很復(fù)雜的流程,docker公司可以將你的軟件進(jìn)行打包,放在集裝箱當(dāng)中,可以在同一個(gè)操作系統(tǒng)上部署。你可以更加的準(zhǔn)確應(yīng)用所有的應(yīng)用,我們可以通過虛擬化的方式獲得所有的收益。這家公司有開源的軟件,google等其他的合作伙伴都在與他合作。docker未來(lái)可以做更多的事情,可以把整個(gè)流程打包,從開發(fā)生產(chǎn)到拓展實(shí)現(xiàn)一體化,以非常簡(jiǎn)單的方式就可以實(shí)現(xiàn)。
最后一個(gè)趨勢(shì),軟件定義數(shù)據(jù)中心的概念。出現(xiàn)云之前,所有技術(shù)都是基于硬件基礎(chǔ)之上的,現(xiàn)在我們需要對(duì)架構(gòu)進(jìn)行重新的思考。老的數(shù)據(jù)中心有一些機(jī)器有比較低的平衡度,這是非常常見的數(shù)據(jù)中心的結(jié)構(gòu),發(fā)明了云之后,我們可以對(duì)硬件進(jìn)行應(yīng)用虛擬化,在云的環(huán)境當(dāng)中運(yùn)行??匆幌戮W(wǎng)絡(luò),這個(gè)網(wǎng)絡(luò)仍然是硬件,我們需要進(jìn)行串聯(lián),現(xiàn)在有辦法進(jìn)行一些改變。所以現(xiàn)在的計(jì)算是由軟件所定義的。
有一家公司PLURIBUS提供的設(shè)備可以對(duì)整個(gè)架構(gòu)進(jìn)行虛擬化,對(duì)路由等等都進(jìn)行虛擬化。隨著拓展,隨著加入新的客戶,你可以把整個(gè)網(wǎng)絡(luò)進(jìn)行重新的配置,在軟件上就可以實(shí)現(xiàn),不需要更大的變革。
非常感謝大家,我希望這四個(gè)趨勢(shì)對(duì)您來(lái)說也是非常有意義的,感謝大家聆聽我的演講。