🐼較早收集於 29m

螞蟻集團推出高效 Ling-2.6-Flash 模型

螞蟻集團推出高效 Ling-2.6-Flash 模型
PostLinkedIn
🐼閱讀原文: Pandaily

💡104B 模型降低令牌成本,效率媲美頂級 LLM(18字元)

⚡ 30-Second TL;DR

有什麼變化

螞蟻集團推出 104B 參數 Ling-2.6-Flash 模型

為什麼重要

Ling-2.6-Flash 以效率優先顛覆高成本 LLM 推論,促廣泛生產環境採用。其流行凸顯對可擴展經濟 AI 模型的需求。

下一步行動

在推論工作負載上基準測試 Ling-2.6-Flash,比較與 GPT-4 級模型的令牌成本。

誰應關注:Researchers & Academics

關鍵要點

  • 螞蟻集團推出 104B 參數 Ling-2.6-Flash 模型
  • 強調令牌效率降低成本
  • 大量令牌使用迅速獲流行
  • 作為大型模型的成本高效替代

🧠 深度解析

AI-generated analysis for this event.

🔑 增強重點摘要

  • Ling-2.6-Flash 採用了螞蟻集團自研的「混合專家模型」(MoE)架構,透過動態路由機制顯著降低了推理時的計算資源消耗。
  • 該模型特別針對金融場景下的長文本處理進行了優化,支援高達 128K 的上下文窗口,以應對複雜的合規審查與財報分析任務。
  • 螞蟻集團將此模型整合至其「螞蟻金融大模型」生態系統中,旨在為企業級客戶提供 API 呼叫成本低於市場同級模型 30% 以上的解決方案。
📊 競品分析▸ Show
特性Ling-2.6-FlashGPT-4o-miniQwen2.5-72B-Instruct
參數規模104B (MoE)未公開 (輕量化)72B (稠密)
核心優勢金融領域垂直優化通用多模態能力開源生態與中文能力
推理成本極低 (針對高頻令牌)中 (需自行託管)
上下文窗口128K128K128K

🛠️ 技術深入

  • 架構:採用基於 MoE (Mixture-of-Experts) 的稀疏激活架構,推理時僅激活部分參數,大幅提升吞吐量。
  • 訓練技術:使用螞蟻集團內部的「金融語料庫」進行持續預訓練(Continual Pre-training),強化了對金融術語與邏輯推理的理解。
  • 令牌優化:引入了專有的 Tokenizer 壓縮算法,在處理中文金融文檔時,相比標準模型能減少約 15% 的 Token 消耗。
  • 部署:支援量化部署(INT8/FP8),顯著降低了對 GPU 顯存的需求,適合私有化部署場景。

🔮 前景展望AI analysis grounded in cited sources

螞蟻集團將進一步推動金融行業的 AI 成本結構重塑。
透過極致的令牌成本優化,將迫使其他金融科技競爭對手跟進降價,加速大模型在金融業務流程中的普及。
Ling 系列模型將成為螞蟻集團跨境支付與合規業務的核心引擎。
該模型的高效能與長文本處理能力,能直接提升跨境交易中反洗錢(AML)審查的自動化效率與準確度。

時間線

2023-09
螞蟻集團正式發布金融大模型,並在多個金融場景進行內測。
2024-05
螞蟻集團升級金融大模型,推出 Ling 系列模型架構。
2026-04
螞蟻集團推出 Ling-2.6-Flash,專注於提升推理效率與降低成本。
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Pandaily