1、數據中心被動式散熱解決方案通向綠色數據中心之路數據中心被動式散熱解決方案通向綠色數據中心之路文ICPI公司亞太區張愚1前言隨著新一代計算機設備的計算能力和功率能耗的大幅度提高,傳統數據中心如何增加每機柜的功率密度也變得越來越重要.Intel的研究表明,同樣的計算能力在2002年時需要25個機柜和128kW的能耗(5.1kW每機柜),到2008年時,只需一個機柜21kW的能耗(21kW每機柜).對比之下,我們節省了107kW的能耗,并且也大大節省了數據中心的物理大小和結構.這種大幅度的計算能力的提升得益于虛擬計算,內存系統,多核CPU系統,CPU速度和GPGPU技術的飛速發展.虛擬計算大大提高了

2、服務器的使用效率,從而增加了單個機柜的發熱密度.隨著內存容量和速度的飛速發展,最新的DRAM技術使得內存的發熱量也大大的提升.工程和科學研究等應用大量使用圖形浮點運算,GPGPU使得顯卡的發熱量從25W提高到300W以上.雖然服務器的功耗持續不斷的提高,但是性能和功耗比在不斷的下降.從以上的例子可以看出,數據中心空調系統能夠高效的對機柜進行冷卻,將大大降低數據中心的總能耗,在本質上我們可以真正擁有一個綠色數據中心.提高空調的制冷效率并節約能源只是數據中心管理的重要一部分,然而每機柜的熱密度不停的增加則帶給我們更多的挑戰.目前全球數據中心的每機柜的平均熱密度大概為6.5kW,但是ASHRAE2預

3、測在2014年數據中心平均每機柜所需的制冷量為37kW,這種5倍的熱密度飛躍,需要我們對數據中心進行不斷的革新來解決.本文將對被動式散熱解決方案以及如何利用該技術實現綠色節能數據中心進行介紹.2數據中心散熱基礎首先,我們將對數據中心散熱做一個基本的研究.IT設備散熱所需的風量可用下列等式來表明:m./H=2.9W÷T其中:m./H為機柜中的設備散熱所需的風量(立方米冷風/每小時);W=瓦特數(IT設備的功耗);T=IT設備的溫差(設備回風溫度減去設備的進風溫度)c該等式表明了機柜的散熱能力和高架送風地板的送風能力有著密不可分的關系.由于高架送風地板所送的冷風風量的不充足,使機柜上部的

4、IT設備進風風扇所造成的負壓,會將機柜后部熱通道中的熱空氣抽入lT設備中,從而造成服務器過熱的問題.研究表明,在一個設計不合理的數據中心內,60%的空調機冷送風由于氣流組織的不合理而被浪費.目前,傳統的開放式熱通道結構數據中心面臨著兩大氣流管理難題:冷熱空氣相混合現象和空調冷送風的浪費現象,這兩種現象大大降低了空調制冷的效率.其中,冷熱空氣相混合現象指的是由設備產生的熱空氣和空調機的冷送風相混合,從而提高了設備的進風溫度;空調冷送風的浪費現象則是指空調機的冷送風并未進入設備并對設備進行冷卻,而是直接回流到空調機的現象.冷熱空氣混合現象也是導致數據中心溫度不一致的主要原因,并且這種現象也大nte

5、lligentBuilding&CityInformation20123No.18421OurEyes本期關注大降低了數據中心空調的制冷效率和制冷能力.如何解決這兩種現象,最簡單,有效的方法就是將冷熱空氣物理隔離開.3數據中心散熱管理基線隔離冷熱空氣Intel公司多年的研究和實驗表明,良好的氣流組織管理,能夠大大減少冷熱空氣相混合現象和空調冷送風的浪費現象.lntel公司現在的數據中心的熱密度也從單個機柜310WPSF增力口至781WPSF(每機柜15kW增力口至140kW以上).另夕卜,Dell4幣口HP5的數據中心也正在使用冷池或熱池技術.本文將對這種被動型(通過物理手段,

6、無任何有源設備)對數據中心進行散熱做出研究,并對可行的方案做出比較,從而找出最佳的數據中心散熱解決方案.目前,主動性數據中心散熱也在行業內普遍使用.但是其高昂的投資成本,復雜的安裝過程和維護等問題,我們將不在本文中討論4數據中心散熱解決方案4.1方案1:冷池和熱池熱通道封閉或熱池(HAC)是將熱通道密閉起來并通過回風管將熱回風傳回數據中心空調系統,如圖1所示.對比熱池,冷池(CAC)是將冷通道密閉起來.這兩種技術都將空調的冷送風和熱回風隔離開來,并使空調機回風溫度提高以此來提高空調的制冷效率.這兩種方式的區別主要是可擴展性,散熱管理和工作環境的適宜性.冷池的可擴展性主要是受地板下送風和如何將地

7、板下冷風送入多個冷池的制約.目前業界對該技術有著很多的誤解,很多人認為空調機的出風量能滿足設備的散熱風量即可.他們忽略了高架地板下冷送風對于多個冷池的壓力影響和空間的限制.相反,熱池則是使用整個數據中心作為冷通道來解決這個問題,正因為這樣,擴大了冷通道的空間.這樣熱池相比于冷池有著更多的空調冗余性能,多出的熱通道空間將會在空調系統出現故障時,能夠給予更多的寶貴維修時間.而22智能建筑與城市信息2012年第3期總第184期且隨著服務器設備的散熱能力的提高,服務器所需的散熱風量將會大大的減少.現在很多服務器的熱風出風溫度可以達到55.冷池的未被隔離部分空間的溫度將會比傳統數據中心大大的提高,這將大

8、大增加數據中心工作人員的舒適度和減少數據中心其他設備的使用壽命.綜上所述,雖然這兩種方法都可以提高每臺機柜的熱密度,但是當合理使用熱池時,熱池的效率比冷池更加有效可靠.通過以上的對比,我們可以發現熱池比冷池有著更多的優點.另外在數據中心斷電的情況下,冷池數據中心的冷空氣只存在于高架地板下和密閉冷通道中,相反熱池數據中心中的冷空氣存在于高架地板下和房間內的絕大多數地方,所以冷池數據中心的冷空氣體積遠遠小于熱空氣的體積.當數據中心斷電或空調出現問題時,冷池數據中心在幾秒鐘可以喪失所有的lT設備.所以在有可能的情況下,我們應該盡量采用熱池而不是冷池.使用部分密閉熱池或冷池的數據中心的熱點現象可能還會

9、存在,其消防設施的位置也需要額外注意,但相比傳統數據中心則大大提高了每機柜的熱密度.但是,要到達2014年每機柜37kW的熱密度,這些是遠遠不夠的.4.2方案2:垂直排風管機柜除此之外,另一種方案是機柜級的冷熱風隔離系統,如圖2所示.這種系統通常是機柜的一個延伸部分,最常見的系統為機柜垂直排風管系統,或稱作煙囪機柜系統.垂直排風管系統將密閉機柜內的熱回風導入到天花板上方.對比冷池或熱池,煙囪機柜系統有著巨大的優點:首先,對于機柜而言,煙囪機柜隔離冷熱空氣系統比冷池或熱池系統隔離整排機柜的冷熱空氣更為簡單有效,并且煙囪機柜在所有解決方案中是最簡單的全密閉系統.另外,煙囪機柜系統不和空調系統相連,

10、這樣我們可以隨著需求的增加來任意增加機柜,從而達到更高的可擴展性.最后,該系統和空調系統的獨立性確保了數據中心可以使用大型的空調系統來提高制冷效率和節能.使用垂直排風管系統,冷空氣可使用高架地板(常用送風方法)送風或直接將冷風吹入數據中心內部來送風,并且可以結合使用空氣節能器來起到更佳的節能效果,垂直排風管系統在數據中心內的應用,如圖3所示.垂直排風管系統機柜的第一個挑戰是必須使用天花吊頂或者使用回風管,這樣,數據中心就需要額外的高度.第二個挑戰是風壓差,我們必須確保機柜前后具有風壓,使得冷風可以進入機柜來對機柜散熱.這種挑戰主要體現在機柜前部的送風風壓壓力,機柜后部熱回風的風壓,機柜后部的理

11、線等功能區對風壓的影響以及機柜頂部垂直排風管的大小和長度.因此,必須在設計時特別注意,確保該垂直排風管系統不會造成錯誤的壓差.我們可以通過控制機柜內部的空氣流速來控制機柜內部的空氣壓力,即使在沒有任何有源設備的情況下,利用自然壓力差將更ntelligentBuilding&CityInformation20123No18423_OurEyes本期關注多的冷送風吸入機柜,并將熱回風排放至天花板上部.5通向綠色數據中心之路垂直排風管機柜5.1防止無效的冷送風浪費現象Uptime(美國最大,最權威的數據中心研究機構)曾對美國的大型數據中心做過一次研究,美國平均每個數據中心冷送風風量是

12、實際需求的2.7倍,但是這么多的冷量仍無法對大多數的數據中心進行冷卻很多數據中心存在著局部過熱問題.實際上這么多的冷量并沒有進入機柜對lT設備進行降溫,而完全浪費掉.比如,我們通常所見高架地板上的過線孔,在下走線的數據中心內,很多過線孔是開在熱通道或機柜底部,這些開口在過線的同時也將空調的冷送風送入了熱通道或機柜底部,從而繞開了設備的進風風扇.我們甚至不止一次的見到,由于水平走線的原因,有些數據中心在數據中心高級地板墻壁上開了很大的孔,該孔造成了大量空調冷送風向數據中心外部泄露,這些被浪費的冷送風帶來高架地板靜壓箱送風風壓的損失,從而導致冷送風不能送達關鍵的位置.Uptime通過實際測量很多數

13、據中心,發現大多數的數據中心都存在不正確的浪費現象,其浪費達到50%甚至更多.如果將這些不正確的開孔密閉起來,可以大大提高數據中心空調制冷的效果.如果我們把這50%的冷量節省下來,該數據中心就有巨大的節能效果.我們用表1對同一數據中心做一個比24智能建筑與城市信息2012年第3期總第184期較,在一個30個機柜的低熱密度的機房內,如果我們將地板過線孔都密封起來,該數據中心空調運行每小時節省262度電.表1開放過線孔數據中心密閉過線孔數據中心機柜數量3O3O機柜熱密度4kW4kW設備溫度升高1111每個機柜所需的風量662CFM662CFM所需總風量1986019860總送風量397201986

14、0數據中心溫度升高5C1OC所需CRAC數量480fONS240fons所用電費5256kWh262.8kWh5-2提高空調機熱回風溫度來提高空調制冷性能眾所周知,空調的制冷效率和性能與空調機熱回風和冷送風的溫差有關,如表2所示.表2空調機型號冷送風溫度熱回風溫度制冷量LieberiFH20010噸2178lons冷量空調機3215.5fons15,5405cc20.7lONSLieberlFH600C2123.0fons32cc46.0ions30噸冷量空調機4O.561.3lons對于絕大多數的數據中心而言,它們給空調機的回風溫度并不高,這些可能是因為數據中心的布局不好或者是熱回風在回流空

15、調機時被旁路(浪費的)冷送風降溫,從而導致數據中心的空調制冷效能未達到空調機的性能值.我們以LibertFH600C30噸的空調機來看,大多冷熱通道布局的數據中心溫差為5.5(21回風溫度,15.5C送風溫度),這時空調機的制冷量僅為23噸,遠遠未達空調機額定正常制冷指標.如果我們將回風溫度從21提高到40.5時,我們可以將空調額定制冷量翻倍,30噸冷量的空調機實際制冷效率為61.3噸.提高回風溫度,不僅可以少買空調機來節約投資費用,同時在數據中心實際運行中也節省了很多電費.那么如何提高回風溫度?答案很簡單:使用煙囪機柜.因為使用煙囪機柜,我們幾乎忽略設備熱回風的路徑.所有熱空氣在天花板上方,

16、冷熱空氣不再混合,所以不存在熱空氣在向空調機回流時被冷卻的現象.5.3提高空調機冷送風溫度采用冷熱通道布局的數據中心,房間內部的溫度不一.由于冷熱空氣的相混合和避免機柜過熱的問題,空調機通常的冷送風溫度在1113之間.但是在煙囪機柜的數據中心中,機柜頂部的垂直排風管將機柜內部的熱回風導流至天花板上方,從而使機房內部再無冷熱空氣混合的現象.lT設備過熱要求設備進風溫度不能超過25oC,這樣,對于空調機而言,24oC的冷送風完全能夠冷卻數據中心.通過提高空調機的冷送風溫度,可以提高冷凍水管的水溫和冷水機組的制冷效率.6結束語PUE是全球用來衡量數據中心是否綠色節能的重要一個技術指標.美國高性能數據

17、中心的PUE值大概為2.0左右.這代表了數據中心每用2度電,只有1度電是被lT設備用掉,另外1度電是用在管理該數據中心.通過對數據中心管理用電使用情況分析,得出空調和氣流管理大概占到40%左右的結論.國內數據中心的PUE值比歐美發達國家要大,這也意味著同樣的數據中心,我們使用了更多的能源.其中主要問題是管理人員對數據中心散熱的不熟悉,不重視.主要問題體現在以下幾個方面:一味購買更多的,更大的空調機來對數據中心制冷;空調冷送風溫度過低;熱回風回流空調機時,預冷卻回風從而降低了空調的制冷效率;機房布局不合理,機柜冷熱空氣相混合現象嚴重;大量的錯誤地板開孔導致大量冷送風被浪費.機柜的傳統概念正在被垂直排風管系統慢慢改變,機柜不再是傳統意義上只是用來安裝設備的柜子而已,使用垂直排風管機柜可將冷熱空氣徹底隔離,成為數據中心空調系統密不可分的一個重要組成部分.目前垂直排風管機柜在國際數據中心中逐步應用.其中Intel在全球30個高熱密度數據中心廣泛使用.lntel在實際應用中,每機柜熱密度高達32kW,在機房中無任何機柜局部過熱現象.在高效地對lT設備進行散熱之外,該機柜還通過提高空調回風溫度和提高空調機冷送風溫度來大大節約數據中心能源.高密度刀片機柜