🦙較早收集於 8h

逆向工程 Apple ANE 訓練 MicroGPT

逆向工程 Apple ANE 訓練 MicroGPT
PostLinkedIn
🦙閱讀原文: Reddit r/LocalLLaMA
#apple-silicon#npu-training#reverse-engineering#power-efficiencymicrogpt-on-apple-aneapple-anemicrogptm4-mac-miniclaudecoreml

💡逆向 ANE 達 6.6 TFLOPS/W 訓練 – Apple AI 開發者遊戲規則改變者(28字)

⚡ 30-Second TL;DR

有什麼變化

使用 Claude 逆向 ANE API,繞過 CoreML

為什麼重要

解鎖 Apple 矽晶 NPU 高效訓練,或擴展叢集訓練大模型,降低邊緣 AI 能源成本。

下一步行動

複製 GitHub 儲存庫,在 M4 Mac Mini 上執行 ANE 基準測試。

誰應關注:Researchers & Academics

關鍵要點

  • 使用 Claude 逆向 ANE API,繞過 CoreML
  • 在單一 M4 晶片訓練 110M MicroGPT
  • 38 TFLOPS INT8 運算僅 2.8W,效率勝 GPU/H100
  • 單裝置支援 3B/7B 模型 LoRA 訓練
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Reddit r/LocalLLaMA

這是摘要,不是原文。去看原站,或訂閱每週簡報。

每週 AI 簡報

每週一封,可隨時退訂。