AI算力兩年飆3倍、HBM頻寬年增不到2倍——美光坦承:高階記憶體「短期無解」

一句話總結:美光在Hot Chips 2026正式宣告,AI算力以每兩年3倍的速度狂飆,但HBM頻寬每年擴展不到2倍,記憶體牆正以超乎預期的速度惡化,而且短期內無解。 核心要點 算力與頻寬的死亡交叉:美光研究數據顯示,AI算力每兩年成長3倍,HBM頻寬年增卻不到2倍,兩者差距持續擴大,記憶體牆加速惡化。

一句話總結:美光在Hot Chips 2026正式宣告,AI算力以每兩年3倍的速度狂飆,但HBM頻寬每年擴展不到2倍,記憶體牆正以超乎預期的速度惡化,而且短期內無解。

核心要點

  1. 算力與頻寬的死亡交叉:美光研究數據顯示,AI算力每兩年成長3倍,HBM頻寬年增卻不到2倍,兩者差距持續擴大,記憶體牆加速惡化。
  2. 物理極限卡住堆疊層數:JEDEC已放寬HBM封裝高度限制,理論上可以堆疊更多層來拉高頻寬,但散熱問題直接撞上物理天花板,不是單一廠商能解決的事。
  3. 唯一解方不在硬體:美光直言,除非AI系統(包含軟體模型與硬體架構)對token的效能或成本達到飽和點,否則高階HBM的供給緊繃在可見未來不會緩解。
  4. DDR5跟著遭殃:HBM與(LP)DDR5在同一片晶圓上競爭產能,HBM供不應求的同時,DDR5價格也注定居高不下,一般用戶只能繼續吞下去。
  5. 記憶體牆不是新問題,但AI讓它變成災難:從Intel 80486 DX2時代就存在的記憶體瓶頸,35年來靠快取和倍頻技術撐著,但AI的創新架構直接把這個老問題推到懸崖邊。

Hot Chips 2026,美國史丹佛大學,全球半導體頂尖團隊齊聚一堂。記憶體三大廠之一的美光上場,帶來的不是新產品發表,而是一份近乎警告的研究報告。

報告數字很殘酷:AI算力每兩年成長3倍,HBM頻寬每年卻連2倍的擴展速度都不到。算力像火箭,記憶體像腳踏車,系統效能被硬生生卡在資料傳輸那一段。記憶體牆不只存在,它正在加速崩潰

有人會說:HBM不是一直改朝換代嗎?堆疊層數不是可以增加嗎?沒錯,JEDEC確實放寬了封裝高度限制,理論上層數往上疊,頻寬就能往上拉。問題是,堆越多層,熱就越多。散熱是物理問題,不是製程微縮能解決的。邏輯晶片可以一直縮小,記憶體不行,這條路遲早走到盡頭。

話說回來,美光這份研究最有趣的地方,不是它點出問題,而是它給出的解方指向了硬體以外的方向。研究結論是這樣寫的:除非AI系統——包含軟體模型與硬體架構——對token達到效能停止或成本停止下降的飽和點,否則高階記憶體的供給無解。

翻譯成白話文就是:別再指望半導體廠商靠製程或封裝來救你了。真正的突破口,可能來自演算法效率的提升、模型架構的改變,讓每個token需要的記憶體頻寬少一點,或者讓算力成長曲線趨緩一些。換句話說,軟體得回頭幫硬體擦屁股

對一般消費者來說,這個趨勢還有一個隱藏效應:HBM和DDR5在同一片晶圓上競爭產能。HBM供不應求,產能持續被高階產品吃掉,(LP)DDR5的價格就沒有走弱的理由。你以為AI漲價只影響伺服器?其實你桌上那台電腦的記憶體價格,也默默被綁架了。

編輯觀點:美光這份報告其實點出了一個產業界不太願意公開承認的事實——半導體硬體堆疊的玩法已經逼近物理極限,接下來的競賽將被迫往軟體與系統架構移動。對臺灣記憶體供應鏈來說,這既是警訊也是機會:警訊是單純賣硬體的商業模式會越來越辛苦,機會則是系統級優化、散熱封裝、異質整合這三個領域的人才與技術,將在未來三到五年內成為最稀缺的戰略資源。問題是,我們準備好了嗎?

從產業面來看,美光這份研究其實把球踢回了AI軟體與系統廠商手上。過去幾年,硬體廠商拚命追趕算力需求,現在輪到演算法工程師和系統架構師上場了。如果你是在AI領域工作的技術人,這篇文章可能跟你直接相關:你選擇的模型架構、你設計的推論系統,會不會成為下一個被記憶體牆卡住的受害者?

如果往後推演幾年,我們可能會看到一個趨勢:AI競賽的勝負不再只靠算力硬拚,而是誰能用更聰明的軟體架構,在同樣的記憶體頻寬下跑出更多的有效token。記憶體牆不會消失,但可以繞過去——只是這條繞路,需要軟體與硬體的人坐下來好好談。

你的下一步是什麼?如果你正在評估AI硬體採購、或規劃明年的算力預算,建議你把「記憶體頻寬」放在跟「算力峰值」同等重要的位置。數字會說話:算力兩年3倍,HBM頻寬一年不到2倍,這個差距只會越來越大。現在不把記憶體牆納入規劃,明年可能就是你的系統瓶頸

一句話結論

美光證明了高階記憶體供給在AI面前已束手無策,接下來的解法不在晶圓廠,而在演算法與系統架構師的腦袋裡。

本文改寫整理自公開新聞來源,原始報導由自由時報發布。

常見問題 FAQ

什麼是記憶體牆?為什麼AI時代特別嚴重?

記憶體牆是指處理器算力成長速度遠超過記憶體資料傳輸頻寬,導致系統效能被卡在傳輸環節的瓶頸現象。AI時代因為模型參數爆炸、訓練資料量暴增,這個問題被加速惡化,美光研究顯示算力與頻寬的成長差距已擴大到無法忽視的程度。

HBM的產能限制會影響一般消費者的記憶體價格嗎?

會。HBM與DDR5在同一條產線上競爭晶圓產能,當HBM需求暴增、產能被高階產品大量吃掉時,(LP)DDR5的供給就會減少,價格自然居高不下。短期內消費級記憶體很難看到明顯降價。

記憶體牆問題有機會在未來三年內被解決嗎?

美光研究給出的結論是否定的。在AI系統對token的效能或成本達到飽和點之前,硬體端的改善空間有限。未來真正的解方來自軟體演算法效率的提升與系統架構的創新,而非單純等待下一代HBM量產。

※ 此篇文章由 AI 改寫或生成,內容僅供參考,可能存在錯誤或不準確之處。