AI與5G雙引擎驅動!雲端資料中心引爆高階記憶體搶購潮,2025年供需缺口達30%

隨著全球數位轉型浪潮加速,雲端資料中心的建置需求已成不可逆的趨勢。根據國際調研機構最新數據,2024年全球雲端資料中心資本支出將突破2500億美元,其中高階記憶體的成本佔比從過去的15%飆升至35%以上。這股漲勢背後的關鍵推手,正是人工智慧(AI)訓練、邊緣運算、以及5G網路的大量資料吞吐需求。以NVIDIA的H100 GPU為例,其所需的高頻寬記憶體(HBM3)每顆晶片容量已達80GB,是前代產品的兩倍,而這僅僅是資料中心伺服器內一個零組件的縮影。更令人矚目的是,由於高頻寬記憶體(HBM)與DDR5的製程良率提升不易,三星、SK海力士等記憶體大廠雖全力擴產,但2025年預估仍會出現高達30%的供需缺口。這意味著,掌握高階記憶體供應鏈的業者,將在未來三年主導雲端服務的升級節奏,而台灣作為全球半導體封測與記憶體模組的重鎮,勢必在這波浪潮中扮演關鍵角色。

資料中心能耗失控,高階記憶體成省電救星

傳統資料中心最大的痛點在於能耗,其中記憶體的耗電佔比約為整體系統的20%至30%。雲端業者如Google、Amazon、Microsoft正積極導入低功耗DDR5與HBM-PIM(處理器整合記憶體)技術,這類新型高階記憶體不僅能將運算延遲降低50%,更可減少25%以上的能耗。以Google的TPU v5為例,其搭載的客製化高頻寬記憶體,讓整體機櫃功率密度從每櫃10kW提升至40kW,但功耗增幅僅15%,徹底改寫了資料中心效能與電費的平衡方程式。台灣供應鏈中的南亞科、華邦電已宣布投入DDR5與CXL(Compute Express Link)記憶體模組的量產,目標正是鎖定這波節能升級潮。此外,由於AI推論(Inference)需要大量隨機讀寫資料,傳統的DRAM已無法滿足需求,促使伺服器廠商開始採用容量更大的MRDIMM(多列雙列記憶體模組),進一步推升高階記憶體的單價與滲透率。

邊緣運算與元宇宙落地,高頻寬記憶體成標配

雲端資料中心的下一步,是從集中式轉向分散式邊緣架構。根據IDC預測,2025年全球將有超過500億個物聯網裝置,這些裝置產生的資料量將達到79ZB。為了即時處理這些海量資料,邊緣伺服器必須配備更高頻寬、更低延遲的記憶體。例如Meta的Project Aria眼鏡,其運算單元便內建了特製的HBM4e記憶體,以支援即時3D地圖建置與手勢辨識。與此同時,元宇宙的發展也讓記憶體需求變得更加多元。以微軟的Mesh平台為例,其虛擬會議中的即時渲染與協作,需要每個節點配備至少64GB的專用記憶體,這比傳統雲端遊戲伺服器的需求高出四倍。台灣記憶體模組龍頭威剛與十銓,已推出專為邊緣伺服器設計的超頻DDR5套件,並與超微(AMD)合作驗證相容性,確保在極端溫度下的穩定運作。這類客製化記憶體產品的毛利率高達40%,遠高於標準型記憶體的15%,成為台廠跳脫價格戰的重要利基。

記憶體製程微縮逼近物理極限,CXL技術開啟新局

高階記憶體的需求雖然爆量,但半導體製程已逼近1奈米節點的物理極限,傳統的微縮技術導致記憶體電晶體漏電問題日益嚴重。為了解決此困境,CXL(Compute Express Link)記憶體互連技術應運而生。CXL允許CPU與記憶體透過PCIe 6.0通道直接通訊,不再需要透過傳統的記憶體控制器,這不僅可將記憶體頻寬提升至每秒1TB以上,更允許系統動態調整記憶體容量,讓雲端業者能針對不同任務(如AI訓練、資料庫查詢)彈性分配資源。英特爾與AMD的新一代伺服器平台已全面支援CXL 3.0,而台灣半導體封測廠日月光與力成,則同步開發出CXL專用的2.5D與3D封裝技術,預計在2025年第二季量產。這項突破將使記憶體與運算晶片間的傳輸距離從毫米級縮短至微米級,進一步降低延遲。值得注意的是,CXL技術的普及也帶動了記憶體顆粒的單價上揚,因為其對記憶體頻率與時序的要求比傳統DDR5高出20%以上。對台系記憶體設計公司而言,這正是切入高附加價值領域的最佳時機,未來誰能在CXL生態系中站穩腳跟,誰就能主導下一波資料中心的算力革命。

【其他文章推薦】
電動堆高機、柴油堆高機怎麼選?差異一次比較
貨櫃屋優勢特性有哪些?
零件量產就選CNC車床
消防工程交給專業來搞定
塑膠射出工廠一條龍製造服務

堆高機租賃怎麼選最划算?掌握 3 大隱形成本,每年幫公司省下萬元!

work_outlinePosted in 工業