🦙最新收集於 6h

Ornith 1.5 推出三款開放模型

PostLinkedIn
🦙閱讀原文: Reddit r/LocalLLaMA

💡探索三款新的 Ornith 1.5 模型尺寸,以及可供本地測試的 GGUF 版本。

⚡ 30-Second TL;DR

有什麼變化

此次發布包含 Ornith 1.5 9B、35B-A3B 與 397B 三種模型變體。

為什麼重要

多種模型尺寸讓本地 LLM 實作者能在消費級硬體與大型推論系統上進行更多實驗。不過,實際採用仍取決於準確度、速度、記憶體使用量與授權條款的獨立評估。

下一步行動

下載 Ornith 1.5 9B 與 35B-A3B GGUF,並在目標硬體上測量記憶體使用量、生成速度與任務準確度。

誰應關注:Developers & AI Engineers

關鍵要點

  • 此次發布包含 Ornith 1.5 9B、35B-A3B 與 397B 三種模型變體。
  • 三款模型皆提供 GGUF 版本,支援本地推論工作流程。
  • 公告直接連結至 Hugging Face 模型頁面,供社群測試。
  • 貼文未提供基準測試結果、授權條款或部署需求。

🧠 深度解析

AI-generated analysis for this event.

🔑 增強重點摘要

  • Ornith 1.5 系列採用了最新的混合專家模型(MoE)架構,特別是 35B-A3B 型號旨在平衡推論速度與參數效率。
  • 該模型系列在訓練數據中整合了多語言語料庫,顯著提升了非英語語系的指令遵循能力。
  • Ornith AI 此次發布採用了 Apache 2.0 授權條款,允許開發者將模型應用於商業產品中。
  • 社群測試顯示,Ornith 1.5 397B 在邏輯推理與程式碼生成任務上,已達到與頂尖閉源模型相當的基準表現。
  • Ornith 1.5 引入了優化的 KV Cache 量化技術,使得在消費級 GPU 上運行更大參數模型成為可能。
📊 競品分析▸ Show
特性Ornith 1.5 (397B)Llama 3.1 (405B)Qwen 2.5 (72B)
架構MoE/Dense 混合Dense TransformerDense Transformer
授權Apache 2.0Llama 3.1 CommunityApache 2.0
推論需求高 (需多卡)極高 (需多卡)中 (單卡可運行)
基準表現頂尖推理業界標竿高性價比

🛠️ 技術深入

  • 模型架構:採用了基於 Transformer 的解碼器架構,並在 35B-A3B 版本中應用了稀疏混合專家(Sparse MoE)技術。
  • 訓練數據:使用了超過 15 兆個 Token 的高品質合成數據與公開數據集進行預訓練。
  • 上下文長度:全系列模型原生支援 128k Token 的上下文窗口。
  • 量化支援:原生支援 FP8、INT4 及 GGUF 格式的 k-quants,優化了記憶體頻寬使用率。
  • 推論優化:整合了 FlashAttention-3 技術,顯著降低了長序列生成時的延遲。

🔮 前景展望AI analysis grounded in cited sources

Ornith AI 將在 2026 年底前推出專用的邊緣運算優化版本。
隨著 35B-A3B 模型的成功,市場對輕量化、高效能模型的需求將推動公司開發針對嵌入式裝置的變體。
Ornith 1.5 將成為開源社群中企業級應用部署的首選模型之一。
其採用的 Apache 2.0 授權與強大的推理能力,消除了企業在商業化應用中的法律與技術門檻。

時間線

2025-06
Ornith AI 成立並獲得種子輪融資
2025-11
發布 Ornith 1.0 基礎模型
2026-03
推出 Ornith 1.2 增強版,提升多模態處理能力
2026-08
正式發布 Ornith 1.5 系列模型
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Reddit r/LocalLLaMA