Facebook日前公布了其位于俄勒岡州普利維爾數(shù)據(jù)中心的新技術(shù)基礎(chǔ)架構(gòu)的細(xì)節(jié),包括定制服務(wù)器、機(jī)架以及UPS。這是Facebook第一個自建的數(shù)據(jù)中心。
Facebook技術(shù)業(yè)務(wù)的副總裁Jonathan Heiliger稱,普利維爾數(shù)據(jù)中心的PUE是1.07,這意味著該數(shù)據(jù)中心是業(yè)內(nèi)最節(jié)能的數(shù)據(jù)中心。
制冷設(shè)計
Facebook采納了雙層架構(gòu),將服務(wù)器和制冷設(shè)備分開,允許對服務(wù)器占地面積的最大利用。Facebook選擇通過數(shù)據(jù)中心的上半部分管理制冷供應(yīng),因此冷空氣可以從頂部進(jìn)入服務(wù)器空間,利用冷空氣下降熱空氣上升的自然循環(huán),避免使用氣壓實現(xiàn)下送風(fēng)。
俄勒岡州涼爽、干燥的氣候是Facebook決定將其數(shù)據(jù)中心放在普利維爾的關(guān)鍵因素。“這是蒸發(fā)冷卻的理想地點,”Facebook數(shù)據(jù)中心工程主管JayPark說。過去50年來,普利維爾的溫度從未超過105華氏度(約40.56攝氏度)。
空氣通過在二樓的一組換氣扇進(jìn)入數(shù)據(jù)中心。然后空氣經(jīng)過一個混調(diào)室,在這里冷空氣可以和服務(wù)器的余熱混合以調(diào)整溫度。然后冷空氣經(jīng)過一系列的空氣過濾器,在最后一間過濾室,通過小型噴頭進(jìn)一步控制溫度和濕度??諝饫^續(xù)通過另一個過濾器,吸收水霧,然后通過一個風(fēng)扇墻,將空氣通過地板的開口吹入服務(wù)器區(qū)域。整個冷卻系統(tǒng)都位于二樓,空氣直接吹向服務(wù)器,無需風(fēng)道。
“這一系統(tǒng)的美妙之處在于,我們沒有任何的管道系統(tǒng),”Park說。“空氣直接進(jìn)入數(shù)據(jù)大廳,壓入整個數(shù)據(jù)中心。”
機(jī)架和服務(wù)器
冷空氣然后進(jìn)入定制的機(jī)架,這些機(jī)架三個一組,每個包括30個1.5U的Facebook服務(wù)器。為了避免浪費,服務(wù)器也是定制的,服務(wù)器內(nèi)部的英特爾和AMD主板被分拆成一些基本的必需部件,以節(jié)省成本。機(jī)箱體積比一般機(jī)箱大,這意味著能夠容下更大的散熱器和風(fēng)扇,也意味著需要更少的外界空氣用于降溫。“我們?nèi)サ袅怂袥]用的東西,”Facebook硬件工程師AmirMichael說。“稍高一點的底盤讓我們能使用更高的散熱片。相對常規(guī)的40毫米風(fēng)扇,我們也能用更大、更有效的60毫米風(fēng)扇。”
布線和電源都放在服務(wù)器的前方,因此Facebook的運維人員可以在涼爽的通道維護(hù)機(jī)器,而不用站在溫度高達(dá)100華氏度(約37.8攝氏度)的機(jī)器后部操作。
UPS和電源分配
Facebook特別注重的一塊是電源分配,傳統(tǒng)的數(shù)據(jù)中心都是使用不間斷電源,在AC-DC的轉(zhuǎn)換中形成了功耗。“我們對這一電源設(shè)計的效率投入了大量精力,”Michael說。
Facebook數(shù)據(jù)中心采用定制的供電設(shè)備,可以適用277V交流電源,而不是普通的208V,這使得電能可以直接接入服務(wù)器,不需要經(jīng)過交流到直流的轉(zhuǎn)換,從而避免了電能損耗。供電設(shè)備由Facebook設(shè)計,臺達(dá)電子以及加州寶威電源(PowerOne)生產(chǎn)。
UPS系統(tǒng)呢?Facebook原先計劃在服務(wù)器上安裝車載電池,最終裝得是in-rowUPS單元,每組服務(wù)器之間放置一套UPS,在斷電時提供后備電源。每個UPS系統(tǒng)包括20塊電池,有五串48V直流電池。Facebook的電源供應(yīng)包括兩部分,一個是交流市電,另一個是直流UPS系統(tǒng)。