多孤島大數(shù)據(jù)訪問加速初創(chuàng)公司Alluxio去年與華為達(dá)成合作關(guān)系,最近又與Dell EMC就ECS產(chǎn)品簽訂了類似的協(xié)議。
Alluxio解決的問題是,很多單獨(dú)的存儲(chǔ)機(jī)制是針對(duì)需要被多個(gè)分析型應(yīng)用訪問的大規(guī)模非結(jié)構(gòu)化數(shù)據(jù)。每種應(yīng)用(Hadoop、Spark、Storm、samza等)需要自己安排訪問每個(gè)數(shù)據(jù)源(AWS S3、HDFS、Ceph、Isilon、Gluster等)。
Alluxio提供了一個(gè)中央軟件層,能夠通過他們選擇的接口讓上述任何一種應(yīng)用訪問任何一種數(shù)據(jù)源。這樣能夠不費(fèi)力地做到像NVMe驅(qū)動(dòng)器為PCI協(xié)議閃存數(shù)據(jù)存儲(chǔ)所做的那樣,為上層系統(tǒng)軟件提供標(biāo)準(zhǔn)接口。
除了提供統(tǒng)一訪問的Alluxio之外,開源代碼提供了內(nèi)存緩存來加速數(shù)據(jù)訪問,包括讀和寫。
Alluxio graphic
Dell EMC與Alluxio的合作涉及到Alluxio企業(yè)版(AEE)和Dell EMC的Elastic Cloud Storage(ECS)對(duì)象存儲(chǔ)服務(wù)器用于大數(shù)據(jù)工作負(fù)載。ECS曾經(jīng)的代號(hào)是Nile。Dell EMC和Alluxio宣稱,他們給"客戶提供了DAS存儲(chǔ)的替代選擇,提供ECS的優(yōu)點(diǎn)同時(shí)還有Alluxio AEE軟件的性能改進(jìn)"。
Alluxio首席執(zhí)行官李浩源表示,Alluxio能夠讓ECS用作網(wǎng)關(guān)或者存儲(chǔ)組件:"Alluxio為Dell EMC ECS客戶提供了能夠使用任何計(jì)算框架在本地或者云中以內(nèi)存速度訪問單獨(dú)存儲(chǔ)系統(tǒng)的靈活性。"
對(duì)于潛在客戶來說,將Dell EMC與Alluxio這個(gè)組合與Dell EMC的DSSD D5相對(duì)比是有道理的,后者也提供了對(duì)大數(shù)據(jù)的高速訪問。兩者之間在速度和成本上的對(duì)比是很有意思的。
對(duì)于Alluxio來說,就在幾個(gè)月前剛剛與華為簽約之后又和Dell EMC簽約,這是個(gè)好消息,其他存儲(chǔ)提供商可能也會(huì)接踵而至,比如HDS、HPE和NetApp。