來源較早收集於 2h

SK 海力士量產 192GB SOCAMM2 供 NVIDIA AI 伺服器

閱讀原文: Reddit r/LocalLLaMA
#server-memory#ai-hardware

192GB 低功耗記憶體解決 NVIDIA Rubin AI 訓練瓶頸—硬體轉變必知(24字)

30 秒速覽

有什麼變化

開始量產 192GB SOCAMM2

為什麼重要

緩解大規模 AI 訓練的記憶體限制,提升 NVIDIA GPU 叢集效率。顯示伺服器產業轉向手機式記憶體。

下一步行動

檢查 SK 海力士 SOCAMM2 規格,用於下一個 NVIDIA AI 伺服器建置。

誰應關注:Enterprise & Security Teams

關鍵要點

  • •開始量產 192GB SOCAMM2
  • •LPDDR5X 提供 2 倍以上頻寬、功耗減 75%
  • •專為 NVIDIA Vera Rubin AI 平臺設計
  • •解決 AI 系統記憶體限制

深度解析

本篇為 AI 生成分析,非原文內容。

增強重點摘要

  • •SOCAMM2 規格採用了 JEDEC 最新標準,旨在取代傳統伺服器中體積龐大且功耗較高的 RDIMM,特別針對邊緣 AI 與高密度機架環境進行優化。
  • •SK 海力士透過將 LPDDR5X 晶片直接封裝在模組基板上,大幅縮短了記憶體與處理器之間的物理距離,從而顯著降低了訊號傳輸延遲。
  • •此 192GB 容量模組利用了 SK 海力士先進的 1b 奈米製程技術,在維持高頻寬的同時,實現了業界領先的單位面積儲存密度。

競品分析

核心技術
SK 海力士 192GB SOCAMM2
LPDDR5X
三星 (Samsung) LPCAMM2
LPDDR5X
美光 (Micron) LPDDR5X 模組
LPDDR5X
目標市場
SK 海力士 192GB SOCAMM2
NVIDIA Vera Rubin AI 伺服器
三星 (Samsung) LPCAMM2
筆電與邊緣運算
美光 (Micron) LPDDR5X 模組
嵌入式與 AI 伺服器
功耗效率
SK 海力士 192GB SOCAMM2
極高 (較 RDIMM 減 75%)
三星 (Samsung) LPCAMM2
高
美光 (Micron) LPDDR5X 模組
中高
頻寬表現
SK 海力士 192GB SOCAMM2
針對 AI 訓練優化
三星 (Samsung) LPCAMM2
針對行動裝置優化
美光 (Micron) LPDDR5X 模組
標準伺服器規格

技術深入

  • 採用 LPDDR5X 介面,支援高達 9600 MT/s 的傳輸速率。
  • 模組設計採用 CAMM2 (Compression Attached Memory Module) 架構,透過壓縮連接器取代傳統插槽,減少訊號干擾。
  • 支援多通道並行存取,針對 NVIDIA Vera Rubin 架構的 GPU 記憶體控制器進行了特定協議優化。
  • 整合了先進的電源管理積體電路 (PMIC) 在模組上,實現更精細的電壓調節以降低靜態功耗。

前景展望基於引用來源的 AI 分析

伺服器記憶體架構將從 RDIMM 全面轉向 CAMM2/SOCAMM2。
隨著 AI 訓練對記憶體頻寬與功耗密度的要求日益嚴苛,傳統插槽式記憶體已無法滿足 Vera Rubin 等次世代架構的物理限制。
SK 海力士將在 2026 年底前佔據 AI 伺服器記憶體市場 40% 以上份額。
透過與 NVIDIA 的深度綁定以及在 SOCAMM2 領域的先發優勢,SK 海力士成功將產品嵌入 AI 基礎設施的核心供應鏈。

時間線

2023-12
JEDEC 正式發布 CAMM2 標準,為記憶體模組小型化奠定基礎。
2024-05
SK 海力士宣布成功開發業界首款針對伺服器優化的 LPDDR5X 模組原型。
2025-09
SK 海力士與 NVIDIA 達成合作協議,將 SOCAMM2 納入 Vera Rubin 平台驗證計畫。
2026-03
SK 海力士 192GB SOCAMM2 通過 NVIDIA 伺服器相容性測試,進入量產準備階段。

AI 週報

閱讀本週精選 AI 大事摘要 →

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Reddit r/LocalLLaMA ↗

這是摘要,不是原文。去看原站,或訂閱每週簡報。

每週電子報

每週一封,可隨時退訂。