2023年，我們見證了人工智能（AI）的爆發(fā)，它正在改變?nèi)藗兊墓ぷ鳌⑸睢⒁约芭c技術(shù)交互的方式。以ChatGPT為代表的生成式AI也因其顯著的進(jìn)步和廣泛的應(yīng)用，在去年引起了極大的關(guān)注。隨著人工智能的不斷發(fā)展和成熟，將有可能徹底改變從醫(yī)療保健、金融、生產(chǎn)制造到交通、娛樂等眾多行業(yè)。市場對人工智能的巨大需求推動了新的芯片和服務(wù)器技術(shù)的發(fā)展，這些變化將對數(shù)據(jù)中心的建設(shè)、電力需求、水資源消耗、供配電和制冷技術(shù)與架構(gòu)帶來顛覆性的挑戰(zhàn)。如何應(yīng)對這些挑戰(zhàn)，將在新的一年成為行業(yè)備受關(guān)注的議題。
趨勢一：智算中心將引領(lǐng)數(shù)據(jù)中心建
過去十年，云計算一直是推動數(shù)據(jù)中心建設(shè)與發(fā)展的主要驅(qū)動力，目的是為社會提供數(shù)字化轉(zhuǎn)型所需的通用算力。但是，AI的爆發(fā)帶來了巨大的算力需求，為了滿足AI大模型的訓(xùn)練和應(yīng)用推理，我們需要建設(shè)大量的智算中心。施耐德電氣根據(jù)全球數(shù)據(jù)中心的用電量，GPU芯片和AI服務(wù)器未來的出貨量等數(shù)據(jù)，估算出全球智算中心目前的電力需求為4.5 GW，占數(shù)據(jù)中心總57 GW的8%，并預(yù)測到2028年它將以26%-36%的年復(fù)合增長率增長，最終達(dá)到14.0 GW至18.7 GW，占總93 GW的15%-20%。這一增長速度是傳統(tǒng)數(shù)據(jù)中心年復(fù)合增長率（4%-10%）的2到3倍。算力的分布也會由現(xiàn)在的集中部署（集中vs. 邊緣為95%:5%）向邊緣遷移（50%:50%），這意味著智算中心將引領(lǐng)數(shù)據(jù)中心建設(shè)的潮流。
趨勢二：AI將推動機(jī)柜功率密度驟升
機(jī)柜功率密度對數(shù)據(jù)中心的設(shè)計與造價具有較大的影響，包括供配電、制冷以及IT機(jī)房的布局等，一直都是數(shù)據(jù)中心比較關(guān)注的設(shè)計參數(shù)之一。Uptime過去幾年的調(diào)研結(jié)果顯示，服務(wù)器機(jī)柜的功率密度正在穩(wěn)步但緩慢地攀升。機(jī)柜的平均功率密度通常低于6千瓦，大多數(shù)運營商沒有超過20千瓦的機(jī)柜。造成這一趨勢的原因包括摩爾定律使芯片的熱設(shè)計功耗維持在相對較低的水平（150瓦），同時高密服務(wù)器通常被分散部署在不同的機(jī)柜以降低對基礎(chǔ)設(shè)施的要求。但AI的爆發(fā)將改變這一趨勢，施耐德電氣研究發(fā)現(xiàn)，用于訓(xùn)練的AI機(jī)柜功率密度可以高達(dá)30-100千瓦（取決于芯片的類型和服務(wù)器的配置）。而造成這一高密的原因是多方面的，包括快速提升的CPU/GPU熱設(shè)計功耗，CPU為200-400瓦，GPU為400-700瓦，未來還會進(jìn)一步升高；AI服務(wù)器的功耗通常在10千瓦左右，由于GPU是并行工作的，AI服務(wù)器需要以集群的方式緊湊部署，以降低芯片和存儲之間的網(wǎng)絡(luò)時延。機(jī)柜功率密度的陡增將給數(shù)據(jù)中心物理基礎(chǔ)設(shè)施的設(shè)計帶來巨大挑戰(zhàn)。
趨勢三：數(shù)據(jù)中心正在從風(fēng)冷向液冷過渡
風(fēng)冷一直都是數(shù)據(jù)中心IT機(jī)房冷卻的主流方式，如果設(shè)計得當(dāng)，可支持十幾個千瓦甚至更高的機(jī)柜功率密度。但隨著對AI訓(xùn)練性能的不斷追求，開發(fā)人員不斷提高芯片的熱設(shè)計功耗，對這些芯片進(jìn)行風(fēng)冷變得不切實際。雖然一些服務(wù)器供應(yīng)商通過重新設(shè)計芯片的散熱器、增加服務(wù)器風(fēng)量以及進(jìn)出風(fēng)溫差，以不斷突破風(fēng)冷技術(shù)的極限，配置40-50千瓦風(fēng)冷型的AI機(jī)柜，但這會使風(fēng)扇的功耗呈指數(shù)級增加。例如，AI服務(wù)器風(fēng)扇可以消耗高達(dá)25%的服務(wù)器功率，但傳統(tǒng)服務(wù)器的典型值只有8%。施耐德電氣認(rèn)為芯片的冷卻才是液冷的主要驅(qū)動力，20千瓦機(jī)柜功率密度是風(fēng)冷和液冷相對合理的分界線。當(dāng)AI機(jī)柜功率密度超過這一數(shù)值時，應(yīng)重點考慮采用液冷服務(wù)器。相較于風(fēng)冷，液冷還帶來了諸多好處，包括處理器可靠性和性能提升、能源效率提升、用水量減少以及噪音水平降低等等。目前，對于高密的AI服務(wù)器，供應(yīng)商通常提供風(fēng)冷和液冷兩種方案，但對于下一代GPU，液冷將是唯一選擇。
趨勢四：配電的安全可靠在智算中心更加重要
對于傳統(tǒng)數(shù)據(jù)中心，不同工作負(fù)載同時達(dá)到峰值的概率極低。比如，典型的大型數(shù)據(jù)中心峰均比通常在1.5-2.0或更高。但在智算中心，由于AI訓(xùn)練負(fù)載缺乏變化（峰均比接近1.0），工作負(fù)載可以在峰值功率下，運行數(shù)小時、數(shù)天甚至數(shù)周。其結(jié)果是增加了上游大型斷路器脫扣的可能性，以及宕機(jī)的風(fēng)險。同時，由于機(jī)柜功率密度的升高，需要采用更高額定電流值的斷路器、列頭柜、小母線等。而在電阻變小的同時，可以通過的故障電流也就更大，這意味著IT機(jī)房出現(xiàn)拉弧的風(fēng)險也會升高，保證該區(qū)域工作人員的安全是必須解決的難題。施耐德電氣建議在設(shè)計階段采用模擬軟件對電力系統(tǒng)進(jìn)行弧閃風(fēng)險評估，分析可產(chǎn)生的故障電流，并且對可靠性進(jìn)行分析，以便為特定場地設(shè)計最佳解決方案。這項研究必須從中壓開關(guān)柜分析至機(jī)柜層面，同時建議如果新建數(shù)據(jù)中心IT機(jī)房的AI訓(xùn)練工作負(fù)載超過60-70%，需要根據(jù)下游各饋線斷路器的總和來確定主斷路器的大小，設(shè)計時不再考慮同時系數(shù)。
趨勢五：標(biāo)準(zhǔn)化將成為液冷推進(jìn)的關(guān)鍵
冷板式液冷和浸沒式液冷是數(shù)據(jù)中心液冷的兩種主流方式。究竟選擇哪種液冷方式以及如何實現(xiàn)快速部署一直都是行業(yè)熱議的話題。隨著越來越多AI服務(wù)器采用冷板式液冷，冷板式液冷也更容易與傳統(tǒng)的風(fēng)冷系統(tǒng)兼容，受到很多數(shù)據(jù)中心運營商的青睞。但是服務(wù)器廠家液冷的設(shè)計方式多種多樣，快速接頭、盲插和Manifold的兼容性存在諸多問題，IT與基礎(chǔ)設(shè)施的責(zé)任邊界也模糊不清，這大大限制了液冷在數(shù)據(jù)中心的接受度和推廣。相較于冷板式液冷，采用碳氟化合物流體的浸沒式液冷不僅價格相對較高，而且很多碳氟化合物屬于對環(huán)境有害的人工合成類化學(xué)物質(zhì)，面臨越來越多的行業(yè)監(jiān)管與政策壓力。因此，浸沒式液冷除了采用油類冷卻液，可用的碳氟化合物流體將越來越少。施耐德電氣建議IT廠家提供更為標(biāo)準(zhǔn)化的設(shè)計方案，包括流體的溫度、壓力、流量、設(shè)備的接口等，并且提供更加明確的責(zé)任邊界。施耐德電氣將在第一季度發(fā)布液冷白皮書，來幫助數(shù)據(jù)中心更好地部署液冷技術(shù)。
趨勢六：數(shù)據(jù)中心將更加關(guān)注WUE
水資源短缺正在成為許多地區(qū)的嚴(yán)重問題，了解和減少數(shù)據(jù)中心的水資源消耗變得越來越重要。此前，數(shù)據(jù)中心水資源消耗未被重視的一個重要原因是用水成本相對用電通常是微不足道的，甚至很多數(shù)據(jù)中心通過消耗更多的水來提高能效。但是，數(shù)據(jù)中心的用水已經(jīng)引起了很多當(dāng)?shù)卣年P(guān)注，尤其在水資源匱乏的地區(qū)，政府正在出臺各項政策來限制和優(yōu)化數(shù)據(jù)中心的用水。這其中包括將WUE作為數(shù)據(jù)中心的設(shè)計指標(biāo)，采用水電雙控政策。因此，減少用水量將成為許多數(shù)據(jù)中心運營商未來關(guān)注的重點領(lǐng)域。施耐德電氣通過對數(shù)據(jù)中心行業(yè)用水量的研究，認(rèn)為數(shù)據(jù)中心的WUE值在 0.3-0.45 L/kWh之間是一個相對優(yōu)秀的數(shù)值。施耐德電氣建議根據(jù)數(shù)據(jù)中心所在地域水資源情況、氣候情況和數(shù)據(jù)中心類型，尋找用電與用水之間的平衡。行業(yè)可以采用絕熱蒸發(fā)、間接蒸發(fā)冷卻、液冷等各種技術(shù)創(chuàng)新，從而減少直接用水量。數(shù)據(jù)中心運營商應(yīng)將WUE作為可持續(xù)發(fā)展目標(biāo)的一部分，報告用水量/節(jié)水量，同時關(guān)注用電所帶來的間接用水量。
趨勢七：提升配電能力將成為智算中心新的訴求
在智算中心，隨著機(jī)柜功率密度的提升以及AI機(jī)柜的集群化部署，IT機(jī)房的配電面臨額定容量偏小的挑戰(zhàn)。比如，過去一個300 kW的配電模塊可以支持幾十臺甚至是上百臺機(jī)柜。而如今，同樣配電模塊的電量甚至無法支持一個最低配置的NVIDIA DGX SuperPOD AI集群（單排358 kW的10個機(jī)柜，每機(jī)柜36 kW）。配電模塊規(guī)格太小，使用多個配電模塊不僅浪費IT空間，也變得不切實際。與單個大容量配電模塊相比，多個配電模塊還會增加成本。回歸配電的本質(zhì)，提高配電容量的主要手段就是增大電流。施耐德電氣建議在設(shè)計時應(yīng)選擇規(guī)格足夠高的配電模塊，實現(xiàn)彈性部署，從而適應(yīng)未來的配電需求，以至少支持一整排集群為準(zhǔn)。比如，在額定電壓下，800 A的配電模塊是目前適用于所有三種配電類型（PDU，RPP和母線）的標(biāo)準(zhǔn)容量尺寸，可提供576 千瓦（降容后為461 千瓦）。對于末端配電可以使用小母線，從而避免了定制大于63 A額定電流的機(jī)柜PDU。在空間允許的情況下，可以使用多個標(biāo)準(zhǔn)化的機(jī)柜PDU作為過渡。
趨勢八：AI將賦能數(shù)據(jù)中心的節(jié)能改造
數(shù)據(jù)中心通過提供AI算力推動人類社會向著自動化、數(shù)字化和電氣化等更加可持續(xù)的方向演進(jìn)，賦能交通、制造和發(fā)電領(lǐng)域減少對環(huán)境的影響。反過來，AI也可以賦能數(shù)據(jù)中心能源的優(yōu)化，來減少其自身對環(huán)境的影響。比如，AI和機(jī)器學(xué)習(xí)技術(shù)可以用于數(shù)據(jù)中心冷源系統(tǒng)和空調(diào)末端的控制，通過對歷史數(shù)據(jù)的分析，實時監(jiān)測數(shù)據(jù)中心氣流分布，并基于數(shù)據(jù)中心IT負(fù)載的變化，實時匹配合適的冷量輸出。通過自動調(diào)節(jié)末端精密空調(diào)及風(fēng)機(jī)的運轉(zhuǎn)方式，從而實現(xiàn)動態(tài)地按需制冷，以減少熱點并且降低機(jī)房的能源消耗與運維成本。施耐德電氣認(rèn)為AI技術(shù)在機(jī)房空調(diào)群控系統(tǒng)中的應(yīng)用，可以實現(xiàn)機(jī)房內(nèi)部環(huán)境參數(shù)的智能監(jiān)測和控制，并通過自動調(diào)節(jié)與優(yōu)化來提高能效和系統(tǒng)的可靠性，從而達(dá)到節(jié)能減排的目的。隨著AI技術(shù)的持續(xù)普及，以及國家對數(shù)據(jù)中心節(jié)能降耗的持續(xù)要求，無論是新建還是改造項目，AI技術(shù)在數(shù)據(jù)中心空調(diào)群控系統(tǒng)中均將得到更多的關(guān)注與應(yīng)用。
趨勢九：配電系統(tǒng)的占地面積將引關(guān)注
在數(shù)據(jù)中心設(shè)計中，追求IT機(jī)房面積占比的最大化，即盡可能減少輔助設(shè)備間的占地面積，一直都是數(shù)據(jù)中心設(shè)計的主要訴求之一。對于傳統(tǒng)的數(shù)據(jù)中心，IT機(jī)房的面積與配電室的面積之比通常為1.5:1左右。隨著AI驅(qū)動IT機(jī)柜的高密化，越來越多的IT機(jī)房采用液冷方式，液冷IT機(jī)房的面積與配電室的面積之比將發(fā)生逆轉(zhuǎn)，在0.6:1左右。這時，配電室的占地面積將引起數(shù)據(jù)中心設(shè)計人員的更多關(guān)注，優(yōu)化配電室的占地面積也必將成為行業(yè)的一個發(fā)展方向。施耐德電氣認(rèn)為在更小的占地面積內(nèi)，提高配電和電源設(shè)備的供電容量是有效的途徑之一。比如，減小UPS系統(tǒng)的占地面積，包括采用更高功率電源模塊的模塊化UPS，實現(xiàn)兆瓦級單柜功率；同時采用鋰電池取代鉛酸蓄電池，可以將電池間的占地面積減少40-60%。集中部署供配電設(shè)備（比如：電力撬塊）也可以減少配電間的占地面積；采用體積緊湊的模塊化配電柜和池化柴油發(fā)電機(jī)等應(yīng)急電源也是有效的手段。
趨勢十：儲能系統(tǒng)在數(shù)據(jù)中心的價值日益凸顯
UPS系統(tǒng)在實現(xiàn)數(shù)據(jù)中心電能質(zhì)量治理和不間斷供電方面一直發(fā)揮著重要的作用。隨著數(shù)據(jù)中心運營商面臨著提高可持續(xù)性和財務(wù)績效，同時保持或增強(qiáng)供配電系統(tǒng)的可靠性和彈性的壓力，新的能源存儲和發(fā)電技術(shù)提供了新的可能性，但也對傳統(tǒng)數(shù)據(jù)中心運營模式和電氣架構(gòu)提出了挑戰(zhàn)。電池和燃料電池等分布式能源技術(shù)能夠有效產(chǎn)生或存儲清潔能源。儲能系統(tǒng)除提供傳統(tǒng)UPS系統(tǒng)功能外，還可以通過在用電高峰時釋放存儲的能量來管理電力需求高峰，實現(xiàn)扛峰增載；通過削峰填谷，降低數(shù)據(jù)中心用電成本，來實現(xiàn)能源成本優(yōu)化；同時參與電網(wǎng)的需求響應(yīng)，實現(xiàn)創(chuàng)收。施耐德電氣認(rèn)為數(shù)據(jù)中心實現(xiàn)可持續(xù)發(fā)展，需要降低能源成本，充分利用擱淺的資產(chǎn)，減少對柴油發(fā)電機(jī)的依賴，并保持獨立于電網(wǎng)的業(yè)務(wù)彈性，這些需求為儲能系統(tǒng)在數(shù)據(jù)中心的采用創(chuàng)造了更多有效的應(yīng)用場景與價值。隨著鋰電池儲能系統(tǒng)價格的不斷下降和電氣架構(gòu)的創(chuàng)新，數(shù)據(jù)中心可以通過微網(wǎng)系統(tǒng)提供對能源供應(yīng)的更大控制權(quán)和自主權(quán)；在沒有微網(wǎng)的情況下，也可以通過部署儲能系統(tǒng)來獲得競爭優(yōu)勢。
進(jìn)入2024年，數(shù)據(jù)中心行業(yè)的重點將從傳統(tǒng)數(shù)據(jù)中心建設(shè)轉(zhuǎn)向智算中心建設(shè)，通過不斷的技術(shù)創(chuàng)新來實現(xiàn)智算中心的可持續(xù)發(fā)展與適應(yīng)下一代IT技術(shù)是關(guān)鍵所在。
免責(zé)申明：本文轉(zhuǎn)自互聯(lián)網(wǎng)平臺，不作為任何商業(yè)用途，僅作信息分享。如若有侵權(quán)，請聯(lián)系我們刪除。
