🦙Reddit r/LocalLLaMA•較早收集於 27m
StepFun 發佈 Step 3.5 Flash 兩款基礎模型
#base-models#open-source-releasestepfun-step-3.5-flashstepfunstep-3.5-flash
💡Step 3.5 Flash 新基礎模型:本地微調的開源新選擇。(38字元)
⚡ 30-Second TL;DR
有什麼變化
為 Step 3.5 Flash 發佈兩款基礎模型
為什麼重要
為本地 AI 從業者提供新的開源基礎模型,用於微調或高效部署。擴展 StepFun 生態系中的自訂 LLM 開發選項。
下一步行動
從 Reddit 連結下載兩款基礎模型,並在本地 LLM 環境中測試。
誰應關注:Developers & AI Engineers
關鍵要點
- •為 Step 3.5 Flash 發佈兩款基礎模型
- •由 u/tarruda 在 Reddit r/LocalLLaMA 公告
- •提供模型與評論的直接連結
🧠 深度解析
背景與延伸:來自公開資料,非原文內容。引用 8 個來源。
🔑 增強重點摘要
🛠️ 技術深入
- Transformer 架構,45 層(3 密集層 + 42 MoE 層),隱藏大小 4,096,詞彙大小 128,896。[2]
- 每個 MoE 層有 288 路由專家 + 1 共享專家,每 token 選擇 Top-8 專家;注意力為 3:1 SWA 比例(滑動窗口大小 512)。[2][6]
- 支援本地部署於 Mac Studio M4 Max、NVIDIA DGX Spark 或 AMD AI Max+ 395 等硬體,GGUF INT4 量化版本約 111.5 GB,生成速度達 20 tok/s。[4][7]
- 使用改進 Muon 優化器訓練 17.2T 高品質 token,FP8 精度,支援工具呼叫但不支援微調或圖像輸入。[3][6]
🔮 前景展望AI analysis grounded in cited sources
⏳ 時間線
2026-02
StepFun 發佈 Step 3.5 Flash 開源基礎模型,強調 MoE 效率與代理能力
📎 來源 (8)
Factual claims are grounded in the sources below. Forward-looking analysis is AI-generated interpretation.
📰
AI 週報
閱讀本週精選 AI 大事摘要 →
👉相關動態
AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Reddit r/LocalLLaMA ↗
每週 AI 簡報
每週一封,可隨時退訂。