Whamcloud,創(chuàng)建于2010年7月,專注于開源Lustre超級計(jì)算機(jī)文件系統(tǒng)的研制。(中國的天河- 1A系統(tǒng)也在大比例使用Lustre)他們以獲得OpenSFS 210萬美元的合約,以完善其功能并發(fā)展新的特性。
Lustre是HP,Intel,Cluster File System公司聯(lián)合美國能源部開發(fā)的Linux集群并行文件系統(tǒng)。它來源于卡耐基梅隆大學(xué)的的研究員Peter Braam在NASD項(xiàng)目研究工作。Lustre優(yōu)勢在于其可擴(kuò)展性和可靠性,同時(shí)可滿足大規(guī)模并行集群存儲系統(tǒng)上的I/O需求。
在世界500強(qiáng)超級計(jì)算機(jī)的文件系統(tǒng)中Lustre占據(jù)60%的份額,該設(shè)計(jì)支持PB級別的文件,并可高速訪問存儲在文件系統(tǒng)中的數(shù)據(jù)。
在2007年Sun Microsystems公司對Cluster File Systems公司的包括Lustre File System在內(nèi)的知識產(chǎn)權(quán)和商務(wù)資產(chǎn)等主要資產(chǎn)進(jìn)行并購。并將技術(shù)用于ZFS(Zettabyte File System)之中,同時(shí)用于高性能計(jì)算市場。
但是Oracle在2010年收購了Sun Microsystems,但Lustre并沒有在Oracle的發(fā)展計(jì)劃之中。因?yàn)镺racle對傳統(tǒng)超級計(jì)算機(jī)集群并不是很感興趣。不過Oracle將繼續(xù)提供對Lustre 1.8業(yè)務(wù)的支持,但對于Lustre 2.0版本卻不提供支持。
Whamcloud是由一批來自美國能源部的Lustre愛好者組建的,并投入大量的資金用于超級計(jì)算機(jī)的研究。2010年9月公司得到1000萬美元的贊助,同時(shí)在今年1月更多的Lustre專家從Oracle加入其中。
即使有天使基金的投資,Whamcloud仍然需要更多的資金。前美國洛斯阿拉莫斯國家實(shí)驗(yàn)室數(shù)據(jù)中心的經(jīng)理(Los Alamos National Laboratory)及現(xiàn)OpenSFS的CEO Norman Morse表示OpenSFS的成員每年要支付50萬美元的會費(fèi)。所以最初的5各成員已經(jīng)繳納了250萬美元,在未來幾個月中還會有400萬美元用于Lustre的研發(fā)。
Morse表示非營利OpenSFS的貢獻(xiàn)者包括超級計(jì)算機(jī)制造商Cray、HPC存儲供應(yīng)商Data Direct Networks、勞倫斯·利弗摩爾國家實(shí)驗(yàn)室(Lawrence Livermore National Laboratory)和橡樹嶺國家實(shí)驗(yàn)室(Oak Ridge National Laboratory)。并已與這些貢獻(xiàn)者達(dá)成一致,他們將優(yōu)先發(fā)展并投資開發(fā)Lustre。
目前,Lustre只有單一的元數(shù)據(jù)服務(wù)器,這是其文件服務(wù)的一個瓶頸。所以Whamcloud的開發(fā)人員將云數(shù)據(jù)服務(wù)器并行化,以提高容量和吞吐量。另外兩個被添加到Lustre的特性是分布式命名空間和文件系統(tǒng)檢查。
Whamcloud CEO Brent Gorda表示雖然Lustre擁有高性能的特點(diǎn)。Lustre文件系統(tǒng)已經(jīng)部署在政府、用于學(xué)術(shù)研究的超級計(jì)算實(shí)驗(yàn)室和商業(yè)領(lǐng)域,并取得成功。同時(shí)在華爾街、石油和天然氣行業(yè)也是其用戶。
傳統(tǒng)上,Lustre的管理一直使用CLI(命令行界面)。而今年6月在漢堡舉行的國際超級計(jì)算機(jī)會議上,Whamcloud已經(jīng)開始開發(fā)一個新的GUI(圖形用戶界面),這將使它更易于管理開源的Lustre文件系統(tǒng)。同時(shí)圖形用戶界面將使其更適合用于云服務(wù)。
最后Gorda表示“如果你正在尋找有關(guān)IT的工作,也許成為Lustre專家是個不錯的選擇。Lustre的開發(fā)和管理人員有很高的需求。這項(xiàng)技術(shù)已經(jīng)再次被人們重視,并逐漸開始使用它”。