高效能AI需求激增:NVIDIA Blackwell平台推動液冷散熱方案,預估年底滲透率達10%

隨著人工智慧(AI)技術的迅速發展,高效能計算需求與日俱增。NVIDIA 將於2024年底推出全新一代平台 Blackwell,這一舉措預計將推動大型雲端服務提供商(CSP)建設新的 AI 伺服器資料中心。TrendForce 的最新報告指出,這將有望使液冷散熱方案的滲透率在年底前達到10%。Blackwell 平台預計於2025年正式放量,取代現有的 Hopper 平台,成為 NVIDIA 高階 GPU 的主力方案,預計占整體高階產品的83%。

液冷技術:應對AI高耗能需求的最佳選擇

液冷技術:應對AI高耗能需求的最佳選擇

Blackwell 平台的高效能 AI 伺服器,如 B200 和 GB200,單顆 GPU 功耗可達1,000W,HGX 機種每台裝載8顆 GPU,NVL 機種每櫃最多可達72顆 GPU。如此巨大的能耗推動了液冷散熱供應鏈的成長。傳統氣冷散熱方案已經無法應對這些需求,尤其是 GB200 NVL36 和 NVL72 整機櫃的熱設計功耗(TDP)分別高達70kW和140kW,需要更高效的液冷方案來有效解決散熱問題。

液冷技術,尤其是直接液體冷卻(DLC),提供了比傳統氣冷方案更高的散熱效率。液冷方案包括水冷板(Cold Plate)、冷卻分配系統(Coolant Distribution Unit, CDU)、分歧管(Manifold)、快接頭(Quick Disconnect, QD)和風扇背門(Rear Door Heat Exchanger, RDHx)。其中,CDU 是液冷系統的關鍵組件,負責調節冷卻劑流量,確保機櫃溫度控制在預設的 TDP 範圍內。

市場趨勢與供應鏈發展

市場趨勢與供應鏈發展

TrendForce 報告顯示,NVIDIA AI 方案目前主要依賴 Vertiv 作為 CDU 供應商,而奇鋐、雙鴻、台達電和 CoolIT 等公司則正在測試並驗證液冷系統的其他關鍵零組件。隨著 NVIDIA 積極擴展 CSP 客群,預計2025年 GB200 折算 NVL36 的出貨量將達6萬櫃,而 GB200 的 Blackwell GPU 用量則可達210萬至220萬顆。

未來,NVIDIA 計劃推出多種 AI 伺服器組態,包括 HGX、GB200 Rack 和 MGX,分別針對 CSP 和企業型客戶。預計這三個機種的出貨比例將約為5:4:1。HGX 平台能夠無縫接軌既有的 Hopper 平台設計,使 CSP 或大型企業客戶能夠迅速採用。GB200 整櫃 AI 伺服器方案則主要針對超大型 CSP 市場。TrendForce 預計 NVIDIA 將於2024年底率先導入 NVL36 組態,以求快速進入市場。NVL72 由於其更複雜的設計和散熱系統,預計將於2025年推出。

液冷方案的挑戰與前景

儘管液冷方案能夠有效應對高效能 AI 伺服器的散熱需求,但其設計和實施仍面臨諸多挑戰。液冷機櫃設計更適合新建資料中心,但涉及土地和建築規劃等複雜程序。此外,CSP 可能不希望受制於單一供應商的規格,可能選擇其他搭載 x86 CPU 架構的機種,或擴大自研 ASIC AI 伺服器基礎設施,以降低成本或針對特定 AI 應用情境。

在此背景下,從直接液體冷卻(DLC)到浸沒式冷卻,乃至經過改良的氣冷配置,滿足不同客戶的需求。這些先進的冷卻技術不僅能夠提升 AI 伺服器的算力,還能降低使用者的碳足跡和營運成本(OpEx),實現更強大且可持續的 AI 運算。

資料來自:TechNews

延伸閱讀

數位發展部推動智慧國家:從算力、資料到人才的完整發展路徑

台灣數位發展部揭示智慧國家新願景,以算力、資料、人才三大基礎推動政策。比較國際策略,解析台灣企業案例,並提供配合建議,帶您掌握數位政府與智慧城市發展趨勢。

iThome 2025 CIO 大調查:GAI 領先者的技術佈局

2025 台灣 CIO 大調查揭示:GAI 技術佈局正加速,代理型 AI 與 RAG 成為核心,帶動 IT 預算、人力需求與資安投資。完整解析上下篇專題,掌握產業趨勢與競爭優勢。

《逢甲人月刊》395期專訪:鑫捷科技Webplus | 全方位網路系統整合商

非常榮幸能夠在《逢甲人月刊》395期的專訪報導,分享鑫捷科技在系統整合、網路管理、資訊安全 及 軟體開發 領域的經驗與觀點,也期盼能為產業帶來更多正向的啟發與價值。

iThome 2025 CIO 大調查:GAI 領先者戰略

【2025 台灣 CIO 大調查】GAI(生成式 AI)將如何改變企業戰略?本篇深度解析揭示台灣企業的導入比例、CIO 最憂心的風險、產業差異與未來趨勢,並搭配數據圖表完整剖析,掌握 GAI 領先者的成功關鍵。

成功案例

臺中市政府財政局|財產管理資訊系統更新案

我們進行系統架構優化、資料結構更新與使用者介面改版,並整合現有資料庫。系統更新後,使用單位操作更為直覺,並可即時掌握資產異動紀錄,提升公部門財產管理透明度與行政效率。

機械業領導品牌|防火牆年度維護專案

此服務涵蓋漏洞資料庫更新、即時威脅分析與原廠技術支援,並由鑫捷提供定期健檢與設定最佳化建議,有效提升整體防護等級。

精密電子企業|身分控管導入專案

該設備支援雙因子認證與 USB 型態部署,提升登入安全與企業資訊防護層級。我們並進行教育訓練與使用政策規劃,協助企業順利導入零信任架構的第一步。

知名飲料品牌|備援系統設備採購案

由鑫捷科技協助進行 RAID 設定、帳號權限管理與資料同步,並結合備份排程與異地備援建議,確保資料保全無虞,提升企業資料管理效率。

讓鑫捷科技幫助您推動企業數位轉型,提升企業效率與競爭力。
立即聯繫,獲得量身打造的資訊解決方案!