中國(guó)儲(chǔ)能網(wǎng)訊:在數(shù)字經(jīng)濟(jì)的快速發(fā)展下,數(shù)據(jù)中心作為信息時(shí)代的“大腦”,其能效與散熱技術(shù)的優(yōu)化已成為行業(yè)關(guān)注的焦點(diǎn)。尤其是近年來(lái),隨著計(jì)算需求的爆炸式增長(zhǎng),傳統(tǒng)風(fēng)冷方案逐漸顯示出其局限性,液冷技術(shù)因其出色的散熱效率而成為業(yè)界新寵。
目前,中國(guó)液冷數(shù)據(jù)中心的規(guī)?;瘧?yīng)用仍處于初級(jí)階段,主要應(yīng)用于對(duì)計(jì)算密度要求極高的場(chǎng)景,如超級(jí)計(jì)算中心和部分先進(jìn)的互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)中心。例如,國(guó)家超級(jí)計(jì)算深圳中心二期項(xiàng)目、阿里巴巴仁和數(shù)據(jù)中心等,都采用了液冷技術(shù),以應(yīng)對(duì)日益增長(zhǎng)的散熱挑戰(zhàn)。
液冷技術(shù)相較于傳統(tǒng)風(fēng)冷技術(shù),具有更高的散熱效率和能源利用率。特別是在高密度、高功耗的數(shù)據(jù)中心環(huán)境中,液冷能顯著降低PUE(功率使用效率)值,實(shí)現(xiàn)更為綠色、節(jié)能的運(yùn)營(yíng)。然而,液冷技術(shù)在國(guó)內(nèi)數(shù)據(jù)中心的推廣應(yīng)用仍面臨一些挑戰(zhàn),包括成本較高、技術(shù)成熟度有待提升、市場(chǎng)認(rèn)知度不足等問(wèn)題。
中國(guó)IDC圈整理為了展現(xiàn)了液冷技術(shù)在中國(guó)應(yīng)用的多樣性和廣泛性整理了液冷數(shù)據(jù)中心項(xiàng)目案例。從冷板式到浸沒(méi)式,從超級(jí)計(jì)算中心到云數(shù)據(jù)中心,各類項(xiàng)目的成功實(shí)踐。我們收集的16個(gè)項(xiàng)目中,11個(gè)項(xiàng)目采用了浸沒(méi)式液冷方式,主要是一部分為超算項(xiàng)目,一部分為液冷實(shí)驗(yàn)項(xiàng)目。真正商用的液冷主要互聯(lián)網(wǎng)數(shù)據(jù)中心項(xiàng)目,這些項(xiàng)目不僅證明了液冷技術(shù)在提升數(shù)據(jù)中心能效方面的巨大潛力,也為行業(yè)的發(fā)展提供了寶貴經(jīng)驗(yàn)。
特別關(guān)注——液冷數(shù)據(jù)中心項(xiàng)目篇
1、國(guó)家超級(jí)計(jì)算深圳中心二期項(xiàng)目— 深圳 | 浸沒(méi)式
2022年11月14日,我國(guó)在建的最大超算中心——國(guó)家超級(jí)計(jì)算深圳中心項(xiàng)目二期正式開(kāi)工,項(xiàng)目位于深圳市光明區(qū),據(jù)了解,本項(xiàng)目將建設(shè)持續(xù)計(jì)算能力達(dá)2Eflops,存儲(chǔ)能力可擴(kuò)展到1000P的E級(jí)計(jì)算機(jī)應(yīng)用系統(tǒng)。項(xiàng)目用地面積4.6萬(wàn)平方米,總建筑面積11.28萬(wàn)平方米,建設(shè)周期從2022年至2025年。項(xiàng)目投資額 120 億元,將采用曙光的浸沒(méi)式液冷服務(wù)器。
2、天府云數(shù)據(jù)產(chǎn)業(yè)基地項(xiàng)目— 四川 | 冷板式
四川能投天府云數(shù)據(jù)產(chǎn)業(yè)基地位于成都簡(jiǎn)陽(yáng)空天產(chǎn)業(yè)園,項(xiàng)目于2021年12月開(kāi)工,2022年8月15日封頂,是四川省重點(diǎn)推進(jìn)項(xiàng)目,是四川能投集團(tuán)落實(shí)省委、省政府“5+1”產(chǎn)業(yè)布局在數(shù)字經(jīng)濟(jì)領(lǐng)域的引導(dǎo)性新基建標(biāo)桿項(xiàng)目。
項(xiàng)目一期投資9.75億,占地208畝,建筑面積47000平方米,包括3棟單體建筑,其中2棟數(shù)據(jù)中心樓、1棟運(yùn)營(yíng)樓,規(guī)劃5000個(gè)平均功率5.49KW的高標(biāo)準(zhǔn)機(jī)柜。項(xiàng)目遵循國(guó)家標(biāo)準(zhǔn)A級(jí)數(shù)據(jù)中心建設(shè)等級(jí)要求,并采用冷板式液冷、水冷+自然冷卻和余熱回收等技術(shù),依托四川能投自身的綠色能源優(yōu)勢(shì),借力集團(tuán)在相變液冷、地?zé)帷?chǔ)能、氫能等方面的內(nèi)部資源,實(shí)現(xiàn)PUE小于1.25的目標(biāo)。
3、合肥先進(jìn)計(jì)算中心項(xiàng)目— 安徽 | 浸沒(méi)式
合肥先進(jìn)計(jì)算中心“巢湖明月”是合肥綜合性國(guó)家科學(xué)中心重大科技基礎(chǔ)設(shè)施和公共服務(wù)平臺(tái),擁有科學(xué)計(jì)算、智能計(jì)算、液冷、存儲(chǔ)等在內(nèi)共1500多臺(tái)服務(wù)器。該中心由合肥市大數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)有限公司建設(shè),系統(tǒng)建設(shè)規(guī)模為雙精度計(jì)算峰值12PFlops、整數(shù)計(jì)算峰值256Pops、數(shù)據(jù)總存儲(chǔ)容量15PB。其中,雙精度計(jì)算峰值相當(dāng)于31250臺(tái)酷睿I7-9700電腦,存儲(chǔ)容量相當(dāng)于117187部128G手機(jī),采用浸沒(méi)式液冷技術(shù)。
4、國(guó)家超級(jí)計(jì)算鄭州中心項(xiàng)目— 河南 | 浸沒(méi)式
國(guó)家超級(jí)計(jì)算鄭州中心建筑面積共4萬(wàn)余平方米,其中,機(jī)房及環(huán)境配套設(shè)施建筑面積9千余平方米。中心主機(jī)系統(tǒng)取由“中岳嵩山”,被命名為“嵩山”超級(jí)計(jì)算機(jī), 該中心主機(jī)系統(tǒng)總體設(shè)計(jì)按照“安全可控、應(yīng)用包容、按需擴(kuò)展、高效節(jié)能”的基本原則,配備新一代高性能計(jì)算機(jī)——“嵩山”超級(jí)計(jì)算機(jī),理論峰值計(jì)算能力100PFlops,存儲(chǔ)容量100PB,采用綠色節(jié)能的浸沒(méi)式相變液冷冷卻技術(shù),PUE值低于1.04。
5、國(guó)家電網(wǎng)寧波北侖數(shù)據(jù)中心項(xiàng)目— 浙江 | 浸沒(méi)式
2020年10月,云酷智能在寧波北侖高塘變電站變成功打造浙江首臺(tái)PUE低于1.08的室外模塊化浸沒(méi)式液冷數(shù)據(jù)中心。該數(shù)據(jù)中心采用模塊化液冷機(jī)房部署方式,外置冷卻塔系統(tǒng)散熱,項(xiàng)目建設(shè)機(jī)房總?cè)萘?34U,總功率100kW。經(jīng)北京信通院檢測(cè),該數(shù)據(jù)中心PUE<1.04,節(jié)約65%占地面積,縮短70%建造時(shí)間,每年節(jié)約電量302745kW·h,節(jié)省電費(fèi)約24.22萬(wàn)元。
6、國(guó)家超級(jí)計(jì)算成都中心項(xiàng)目— 四川 | 浸沒(méi)式
國(guó)家超算成都中心位于四川成都天府新區(qū)興隆湖東南角。2020年9月,國(guó)家超算成都中心投運(yùn),項(xiàng)目采用浸沒(méi)式相變液冷技術(shù)為超算核心設(shè)備提供高效換熱,最高運(yùn)算速度達(dá)10億億次/秒。投運(yùn)來(lái),超算中心先后為北京、上海、廣州、重慶等35個(gè)城市的760余個(gè)用戶提供了算力服務(wù),服務(wù)領(lǐng)域涵蓋航空航天、裝備制造、新型材料、人工智能等30個(gè)領(lǐng)域,包括高海拔宇宙線觀測(cè)站等13個(gè)國(guó)家重大科技基礎(chǔ)設(shè)施、國(guó)家級(jí)課題。
7、國(guó)家超級(jí)計(jì)算昆山中心項(xiàng)目— 江蘇 | 浸沒(méi)式
2020 年,國(guó)家超級(jí)計(jì)算昆山中心建設(shè)項(xiàng)目順利通過(guò)科技部組織的專家驗(yàn)收,項(xiàng)目總算力達(dá) 400Pflops。擁有 CPU+DCU 計(jì)算單元結(jié)構(gòu),CPU 采用國(guó)產(chǎn)曙光 7000 系列,DCU(類 GPU 結(jié)構(gòu))采用國(guó) 產(chǎn)海光1號(hào)加速器,項(xiàng)目采用了曙光的全浸沒(méi)液冷服務(wù)器。
8、地球系統(tǒng)數(shù)值模擬裝置專用高性能計(jì)算機(jī)— 北京 | 冷板式
2015年,中科院大氣物理研究所的“地球數(shù)值模擬裝置原型系統(tǒng)”率先使用冷板式液冷服務(wù)器,大大提高散熱效率,也成為國(guó)內(nèi)液冷服務(wù)器大規(guī)模使用的第一個(gè)公開(kāi)案例。2017年,該系統(tǒng)上榜當(dāng)年全球高性能計(jì)算機(jī)(HPC)TOP500榜單。
9、山西先進(jìn)計(jì)算中心項(xiàng)目— 山西 | 冷板式
山西先進(jìn)計(jì)算中心暨計(jì)算科學(xué)產(chǎn)業(yè)基地是在太原市人民政府、山西轉(zhuǎn)型綜合改革示范區(qū)、中科曙光的大力支持下,以原中國(guó)科學(xué)院先進(jìn)計(jì)算技術(shù)創(chuàng)新與產(chǎn)業(yè)化聯(lián)盟北京計(jì)算中心為基礎(chǔ)組建的。作為該中心的建設(shè)和運(yùn)營(yíng)主體,國(guó)科晉云正是它們?nèi)胶献鞯某晒?jù)悉,山西先進(jìn)計(jì)算中心項(xiàng)目于2017年底簽約、2018年10月份開(kāi)始運(yùn)行。每秒4000萬(wàn)億次的超級(jí)運(yùn)算的 “硅立方”系統(tǒng)顛覆了傳統(tǒng)的風(fēng)冷制冷方式,采用的是冷板式液冷降溫,大約能夠降低40%的能耗。
10、阿里巴巴浙江云計(jì)算仁和數(shù)據(jù)中心項(xiàng)目— 浙江 | 浸沒(méi)式
2020年9月,阿里巴巴浙江云計(jì)算仁和數(shù)據(jù)中心(以下簡(jiǎn)稱“阿里仁和數(shù)據(jù)中心”)正式開(kāi)啟服務(wù),該項(xiàng)目位于余杭區(qū)錢江經(jīng)濟(jì)開(kāi)發(fā)區(qū),采用了多項(xiàng)阿里巴巴最先進(jìn)節(jié)能技術(shù)進(jìn)行規(guī)劃設(shè)計(jì)與建造,如服務(wù)器全浸沒(méi)液冷、高壓直流(HVDC)、供配電分布式冗余(Distribution Redundancy)、智能AI優(yōu)化算法等。由于服務(wù)器全浸沒(méi)液冷技術(shù)的大規(guī)模利用,阿里仁和液冷數(shù)據(jù)中心整體能源使用效率只有1.09,達(dá)到目前世界最領(lǐng)先水平。
11、阿里云北京冬奧云數(shù)據(jù)中心項(xiàng)目— 河北 | 浸沒(méi)式
阿里云張北數(shù)據(jù)中心位于河北省張家口市張北縣,距離首都北京約220公里,所承載的華北3節(jié)點(diǎn)已成為阿里云對(duì)外服務(wù)的最大核心地域節(jié)點(diǎn)之一,也是2022年北京冬奧會(huì)的主數(shù)據(jù)中心(阿里云北京冬奧云數(shù)據(jù)中心)。該區(qū)域由3個(gè)相距20公里左右的數(shù)據(jù)中心園區(qū)組成,也是國(guó)內(nèi)企業(yè)首個(gè)采用三點(diǎn)式布局的數(shù)據(jù)中心集群。阿里云浸沒(méi)式液冷實(shí)驗(yàn)的首要目標(biāo)并不是追求極致的PUE,冷卻水系統(tǒng)采用30~35℃的供回水就可以維持服務(wù)器的正常運(yùn)轉(zhuǎn),擴(kuò)大了數(shù)據(jù)中心采用自然冷卻的選擇范圍。一個(gè)30萬(wàn)臺(tái)服務(wù)器規(guī)模的云數(shù)據(jù)中心集群,以每臺(tái)服務(wù)器600W計(jì)算,如果年均PUE能夠從1.25降至1.1,一年節(jié)電即可超過(guò)2億度,相當(dāng)于減少20萬(wàn)噸二氧化碳的排放量。
12、騰訊清遠(yuǎn)數(shù)據(jù)中心項(xiàng)目— 廣東 | 冷板式
騰訊數(shù)據(jù)中心聯(lián)合星星海實(shí)驗(yàn)室展示了光伏,服務(wù)器液冷等技術(shù)在數(shù)據(jù)中心中的應(yīng)用、數(shù)據(jù)中心綠色能源解決方案以及nanoT-block戶外一體柜,描繪了分布式云背景下的騰訊數(shù)據(jù)中心零碳藍(lán)圖。此次聯(lián)合星星海實(shí)驗(yàn)室展出的騰訊液冷技術(shù)已經(jīng)在清遠(yuǎn)清新數(shù)據(jù)中心小規(guī)模研究驗(yàn)證,通過(guò)液冷冷板直接為cpu散熱的方式,將T-block本就很低的年均PUE進(jìn)一步降到了1.10。
13、潤(rùn)澤科技國(guó)際信息云聚核港項(xiàng)目— 河北 | 冷板/浸沒(méi)式
潤(rùn)澤科技國(guó)際信息云聚核港項(xiàng)目服務(wù)于國(guó)內(nèi)某知名短視頻企業(yè),于2023年7月1日投入使用。該項(xiàng)目總建筑面積 41726.34平方米,建筑高度 30.6米,規(guī)劃設(shè)計(jì)建設(shè)2124架液冷機(jī)柜,單機(jī)柜功率最低21kW,最高功率達(dá) 50kW。
14、中聯(lián)綠色大數(shù)據(jù)產(chǎn)業(yè)基地項(xiàng)目—山西 | 冷板/浸沒(méi)式
“中聯(lián)綠色大數(shù)據(jù)產(chǎn)業(yè)基地”是中聯(lián)數(shù)據(jù)集團(tuán)在大同陽(yáng)高建設(shè)的國(guó)內(nèi)單體最大的超大規(guī)模定制化數(shù)據(jù)中心,總裝機(jī)規(guī)模預(yù)計(jì)10萬(wàn)+高密機(jī)柜,規(guī)劃總占地規(guī)模約1000畝,總建筑面積超過(guò)50萬(wàn)平方米,項(xiàng)目綜合投資預(yù)計(jì)超300億元。本次建設(shè)的機(jī)房為字節(jié)跳動(dòng)專用機(jī)房,機(jī)柜功率密度較高,末端采用風(fēng)墻、板式液冷、浸沒(méi)液冷等多種方式。經(jīng)多次技術(shù)比較、評(píng)選,確定間接復(fù)合直接蒸發(fā)冷卻技術(shù)節(jié)能效果最好,能充分利用當(dāng)?shù)貎?yōu)良的氣象資源。
15、京東云華北(廊坊)數(shù)據(jù)中心項(xiàng)目— 河北 | 冷板式
京東云華北(廊坊)數(shù)據(jù)中心項(xiàng)目借助京東云的整機(jī)柜冷板式液冷技術(shù),可以實(shí)現(xiàn)芯片級(jí)液體直接冷卻,將室外冷源(水或氟化物)直接注入服務(wù)器主板芯片進(jìn)行冷卻,達(dá)成系統(tǒng)去冷機(jī)化。CPU散熱由冷卻液通過(guò)室內(nèi)板式換熱器換熱后,可直接利用室外冷卻塔進(jìn)行散熱,全年及全國(guó)絕大部分區(qū)域內(nèi)均可進(jìn)行自然冷卻,實(shí)現(xiàn)超低PUE。在規(guī)模投入2021年京東11.11的數(shù)據(jù)中心,借助液冷技術(shù)可以實(shí)現(xiàn)全年運(yùn)行PUE低于1.1,基礎(chǔ)設(shè)施能耗節(jié)省可達(dá)30%,對(duì)應(yīng)碳排放總量減少10%以上。
16、中國(guó)電信中部智算中心項(xiàng)目— 湖北 | 浸沒(méi)式
中國(guó)電信中部智算中心建在位于武漢東湖高新區(qū)的中國(guó)電信中部大數(shù)據(jù)中心(武昌基地)。據(jù)了解,中部智算中心一期項(xiàng)目液冷機(jī)房,該項(xiàng)目可提供200P的算力,相當(dāng)于20萬(wàn)個(gè)1TB移動(dòng)硬盤的數(shù)據(jù)在1秒內(nèi)即可處理完畢。該項(xiàng)目首次采用基于國(guó)產(chǎn)AI基礎(chǔ)軟硬件平臺(tái)的方案架構(gòu),實(shí)現(xiàn)算、存、網(wǎng)、電、熱整體設(shè)計(jì)。通過(guò)獨(dú)特的嵌入式液冷單元,盲插總線架構(gòu),實(shí)現(xiàn)液冷到芯片,液冷到服務(wù)器,液冷到機(jī)柜,全場(chǎng)景PUE≤1.15.在達(dá)到業(yè)內(nèi)一流綠色節(jié)能環(huán)保水平的同時(shí),可支持部署萬(wàn)億參數(shù)大模型。
隨著大數(shù)據(jù)、人工智能、云計(jì)算等技術(shù)的不斷進(jìn)步,數(shù)據(jù)中心對(duì)于算力和能效的需求將進(jìn)一步提升,液冷技術(shù)的應(yīng)用潛力將更加凸顯。為了促進(jìn)液冷技術(shù)在中國(guó)數(shù)據(jù)中心領(lǐng)域的廣泛應(yīng)用,行業(yè)需要加大技術(shù)研發(fā)和創(chuàng)新力度,降低應(yīng)用成本,同時(shí)加強(qiáng)市場(chǎng)教育和推廣,提升液冷技術(shù)的認(rèn)知度和接受度。
雖然液冷技術(shù)在中國(guó)數(shù)據(jù)中心的應(yīng)用還面臨一系列挑戰(zhàn),但隨著技術(shù)的不斷成熟和市場(chǎng)的逐步開(kāi)拓,液冷技術(shù)有望在未來(lái)成為中國(guó)乃至全球數(shù)據(jù)中心散熱解決方案的重要選擇。