隨著 AI 大模型等高密度計算的蓬勃發展,芯片功耗與服務器功耗逐步上升,單機柜功率密度也不斷增大。根據相關機構調研,2020 年數據中心平均機架功率為 8.5 kW/機柜,相比于 2011、2017 年有明顯提高,年復合增長率達到 15% 。高功耗芯片,高密度服務器及單機柜密度的演進,使傳統風冷制冷模式在換熱性能及能耗優化方面逐步受限,而液冷制冷模式將在數據中心中變得越來越不可或缺。
近日,英特爾聯合浪潮信息對業界開放首款全液冷冷板服務器參考設計,基于通用高密服務器創新設計出一種高效的全液冷冷板架構,實現服務器發熱部件接近 100% 液冷散熱,助力達成極低的 PUE 水平。同時,英特爾與浪潮信息、中國電子技術標準化研究院、開放計算標準工作委員會 OCTC 聯合發布了《全液冷冷板系統參考設計及驗證白皮書》,為全液冷服務器設計和規模應用中面臨的主要難點和痛點提供了創新設計參考,對全液冷冷板技術在通用架構上實現快速導入和推廣具有重要指導意義。
英特爾市場營銷集團副總裁中國區數據中心銷售總經理莊秉翰表示:
得益于英特爾的長期技術創新,全液冷冷板服務器正在成為液冷產業生態中的重要組成部分。如今,英特爾與全球領先的算力提供商浪潮信息的緊密合作,選擇在踐行‘雙碳’目標最有力的中國市場發布全液冷冷板服務器,是希望通過中國的示范效應,逐步推動這項技術在全球范圍內的普及,以此促進綠色數據中心可持續發展。
浪潮信息服務器產品線總經理趙帥表示:
‘All in 液冷’戰略確保了浪潮信息在液冷技術創新及產業化推進領域的持續投入,我們將始終致力于通過更加綠色低碳的液冷技術創新,推動算力高質量發展。長久以來,浪潮信息高度重視開放數據中心生態的構建,此次通過與全球芯片產業領導者英特爾的密切合作,在全液冷冷板技術的探索上實現了至關重要的跨越,并面向全產業進行開放,這將為蓬勃發展的液冷產業生態注入新的創新活力,打通液冷規模化應用的最后一公里。
01聯合創新實現服務器全液冷冷板覆蓋
相對于浸沒式液冷,冷板式液冷有著諸多優勢:
技術相對成熟、生態完善,對機柜和服務器改造小; 不改變客戶的使用習慣和運維模式,機房承重與風冷場景基本一致; 冷卻液不直接接觸芯片和服務器內其他部件,對材料兼容性要求低,可以相對容易地與不同廠商和型號的計算設備兼容,為客戶提供更多的硬件選擇空間; 占用空間相對較少,適合于對空間有限制的數據中心和計算環境; 對冷卻液的需求量少,更加環保。
而同時,冷板式液冷的部署與應用也面臨眾多挑戰:目前大多數冷板結構僅覆蓋 CPU、GPU 等高功耗發熱部件,其余部件常以風冷輔助冷卻,導致服務器需要配置冷板及風扇兩套冷卻部件;系統存在漏液短路風險,如果冷卻液與冷板材質選擇和后期維護不當,長期運行后可能出現腐蝕和冷卻液泄露,導致服務器損壞。
鑒于冷板式液冷在產業鏈成熟度、改造成本、可維護性、兼容性等方面的優勢,為更好的克服上述挑戰、解決內存、硬盤等部件功耗逐步上升的現實問題,英特爾聯合浪潮信息創新通用高密服務器的液冷優化設計,實現 CPU、高功耗內存、固態硬盤、OCP 網卡、電源、PCIe 轉接卡和光模塊等服務器內主要發熱部件的冷板全液冷覆蓋,構建高能效的系統級解決方案。該方案基于浪潮信息 i24M7 2U 四節點高密計算服務器,每個液冷節點可以支持兩顆最新的第五代英特爾至強可擴展處理器,整體設計理念是在滿足性能和可靠性要求的基礎上,從系統級解決方案開始,探索高能效、低成本和易于運維的全液冷服務器全新設計之道。
在該項目中,CPU 冷板模組基于英特爾 至強 Eagle Stream 平臺可擴展處理器冷板的設計要求,綜合考慮散熱,結構性能,成品率,價格及不同材質冷板設計兼容性等因素優化而成的一款 CPU 冷板參考設計,主要由 CPU 冷板鋁支架,CPU 冷板及冷板接頭等部件組成。
內存液冷設計采用英特爾創新型的枕木散熱器液冷方案,因內存插滿如鐵軌上的枕木而得名。它將傳統風冷散熱和冷板散熱相結合,通過內置熱管的散熱器(或純鋁/銅板、Vaper Chamber 等)把內存上的熱量傳遞至兩端,與冷板通過選定的導熱墊片接觸,最終通過冷板內的冷卻液把熱量帶走實現內存散熱。相比現有的管路(Tubing)內存液冷方案,枕木散熱器液冷方案采用模塊化設計,具有易于組裝和維護、通用性好、性價比高等優勢。
該項目的固態硬盤液冷方案基于英特爾的創新設計,通過內置熱管的散熱器把硬盤區域的熱量導出與硬盤區域外的冷板通過導熱墊片垂直接觸實現換熱。此固態硬盤液冷方案主要由裝有散熱器的固態硬盤模組,固態硬盤冷板,硬盤模組鎖緊機構,及硬盤支架組成。硬盤模組鎖緊機構固定在硬盤支架上提供合適的預緊力來保證固態硬盤模組和固態硬盤冷板的長期接觸可靠性。為了方便硬盤冷板環路在狹小空間內的安裝,硬盤支架在服務器深度方向采用了抽屜式的安裝方式設計。相比業界已有的硬盤液冷嘗試,此方案可支持 30 次以上系統不斷電熱插拔,可靠性高,對加工工藝要求低,漏液風險低,同時可靈活適配不同厚度和數量的固態硬盤系統。
此外,該項目對 PCIe 卡、OCP 網卡和電源等部件均進行了創新的冷板設計。值得一提的是,項目在冷板材質方面也進行了探索實踐。由于銅材質成本較高,該項目分別基于銅材質和鋁合金材質冷板,從換熱性能、可靠性、成本、重量等多方面進行對比及優化,同時對與鋁質冷板液冷循環回路相匹配的液冷工質,進行了選型和相應的腐蝕性測試驗證,為進一步降低冷板液冷成本提供了豐富的實踐數據支持。
02基于通用高密度服務器架構
示范效應明顯
英特爾與浪潮信息對全液冷服務器的冷板性能進行了散熱性能測試、液冷熱捕獲效率(HCR)測試、流阻測試等多項測試,結果表明該服務器可實現接近 100% 液冷散熱,系統無風扇運行,助力達成極低的PUE水平,并通過“去空調化”節省 30% 以上的數據中心空間,充分滿足數據中心的高密度部署需求,對推進綠色數據中心的建設具有重要的意義。方案年均 PUE 可低至 1.1 以下,有助于數據中心綠色高效發展。
在散熱性能測試中,銅冷板系統(冷卻工質 PG25)在目標最差邊界條件下所有的零部件溫度都滿足溫度要求,并且還有一定安全溫度裕量。在液冷熱捕獲效率(HCR)測試中,在典型的液冷系統工作邊界條件下—系統進水溫度 38?C (W32), 空氣環境溫度 35?C,全液冷服務器液冷熱捕獲效率(HCR)在 93% 左右。將全液冷服務器置于密閉整機柜輔以集中式風液換熱器的工作情況下,由于機柜前后門封閉,熱量無法從服務器中逃逸至外部環境中,更容易被風液換熱器進行捕獲,整機柜測試 HCR 值更高,可接近98%。
更重要的是,相較于以往的高度定制化全液冷服務器設計,該項目基于通用高密服務器架構,創新的全液冷方案參考設計為解決服務器內部分組件液冷方案設計難點提供了新思路,設計的簡化和傳統工藝的采用可降低整體方案的成本,提高全液冷方案的經濟性,對推動全液冷冷板技術的普及和規模化應用具有極強的示范和推動作用。
得益于英特爾的長期技術創新,全液冷冷板服務器正在成為服務器液冷生態中的重要組成部分,其最大程度發揮了冷板式液冷的優勢,同時彌補了需要風冷輔助的不足。如今,英特爾與浪潮信息的緊密合作,已經向全液冷數據中心生態邁出了堅實的一步。放眼整個液冷生態,仍存在關鍵部件的互換性、ISV的集成能力和服務能力、冷板式液冷和浸沒式液冷的關鍵技術攻堅等諸多重要環節,需要廣泛的生態伙伴一起努力。這也是整個生態構建的關鍵所在。英特爾將致力于聯合廣泛的生態伙伴,構建更完整的液冷生態,推進綠色數據中心持續發展,為降低碳排放、構建人與自然和諧共生的美好未來貢獻力量。
審核編輯:湯梓紅
-
英特爾
+關注
關注
60文章
9749瀏覽量
170652 -
服務器
+關注
關注
12文章
8701瀏覽量
84553 -
浪潮
+關注
關注
1文章
442瀏覽量
23712
原文標題:英特爾聯合浪潮信息開放全液冷冷板服務器參考設計,實現近100% 液冷散熱
文章出處:【微信號:英特爾中國,微信公眾號:英特爾中國】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論