🇨🇳最新收集於 3m

NVIDIA 推出 NVHBM,打造更高速客製化 AI 記憶體

NVIDIA 推出 NVHBM,打造更高速客製化 AI 記憶體
PostLinkedIn
🇨🇳閱讀原文: cnBeta (Full RSS)
#custom-memory#3d-hbmnvhbmnvidianvhbmhbm4envlink-fusion

💡NVHBM 可能重塑 AI 加速器的記憶體頻寬,並將 NVIDIA 生態系延伸至第三方 XPU。

⚡ 30-Second TL;DR

有什麼變化

NVHBM 將記憶體控制器相關功能移至 3D HBM 堆疊的基底裸片中。

為什麼重要

若能大規模採用,NVHBM 有望改善受記憶體頻寬限制的 AI 工作負載,並強化 NVIDIA 對加速器記憶體設計的掌控。支援第三方 XPU 也可能擴大 NVIDIA 的硬體互連生態系。

下一步行動

向 GPU 與加速器供應商確認未來平台是否支援 NVHBM 和 NVLink Fusion,並評估頻寬提升對受記憶體限制之推論工作負載的影響。

誰應關注:Developers & AI Engineers

關鍵要點

  • NVHBM 將記憶體控制器相關功能移至 3D HBM 堆疊的基底裸片中。
  • NVIDIA 計畫在未來 GPU 中整合 NVHBM。
  • 相較於 HBM4E,NVHBM 頻寬最高可提升 30%。
  • NVLink Fusion 可能讓第三方 XPU 客戶採用這項技術。

🧠 深度解析

背景與延伸:來自公開資料,非原文內容。引用 6 個來源。

🔑 增強重點摘要

  • NVHBM 透過將記憶體控制器整合至 HBM 基底裸片,成功將 XPU 運算裸片的可用面積提升了 25%。
  • 該技術在提升頻寬的同時,能降低 15% 的 HBM 功耗,為運算核心提供更佳的散熱餘裕。
  • NVHBM 的實體記憶體介面(PHY)設計大幅縮減了 I/O 佔用面積,較 JEDEC HBM4E 標準減少達 67%。
  • 透過簡化中介層(Interposer)的佈線設計,NVHBM 可釋放高達 80% 的可用矽片佈局空間。
  • 亞馬遜旗下的 Annapurna Labs 已成為首個合作夥伴,將 NVHBM 技術導入其未來的 Trainium 晶片與 AWS 基礎設施中。
📊 競品分析▸ Show
特性NVHBMJEDEC HBM4E (標準版)
頻寬效能基準 +30%標準基準
功耗效率降低 15%標準功耗
運算裸片面積佔用減少 25%標準佔用
I/O 面積佔用減少 67%標準佔用

🛠️ 技術深入

  • 記憶體控制器架構:將控制器從運算裸片(Compute Die)遷移至 3D HBM 堆疊的基底裸片(Base Die)。
  • 介面優化:採用客製化 PHY 設計以縮減 I/O 佔用空間。
  • 互連技術:作為 NVLink Fusion 生態系的一部分,支援第三方 XPU 進行高效能整合。
  • 佈線技術:透過簡化中介層路由,優化晶片封裝內的訊號傳輸路徑。

🔮 前景展望AI analysis grounded in cited sources

NVIDIA 將透過 NVHBM 掌握 AI 晶片生態系統的記憶體標準制定權。
透過提供標準化的 NVHBM 實作方案給第三方客戶,NVIDIA 正將其硬體架構轉化為事實上的產業標準。
雲端服務供應商(CSP)將更傾向於開發客製化 XPU 以取代通用 GPU。
NVHBM 釋放的運算裸片空間與簡化的整合難度,降低了開發專用 AI 加速器的門檻與成本。

時間線

2026-08
NVIDIA 正式發表 NVHBM 技術並宣布與 Annapurna Labs 合作

📎 來源 (6)

Factual claims are grounded in the sources below. Forward-looking analysis is AI-generated interpretation.

  1. nvidia.com
  2. kucoin.com
  3. techpowerup.com
  4. wccftech.com
  5. nvidia.com
  6. wccftech.com
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: cnBeta (Full RSS)

這是摘要,不是原文。去看原站,或訂閱每週簡報。

每週 AI 簡報

每週一封,可隨時退訂。