Bartowski 上傳新 Qwen3.5 27B Imaxtrix 量化版本

🔑 增強重點摘要

• •Qwen3.5-27B 採用 Transformer 與線形注意力混合架構，支援多模態輸入（文字+圖像+影片），上下文長度達 256K 或 262K 令牌。
• •在 Artificial Analysis 的 Intelligence Index 中，Qwen3.5-27B 得分 42，高於 o3-pro (41) 及 Qwen3.5-35B-A3B (37)，展現強大推理與代理能力。
• •商業部署定價為輸入每百萬令牌 0.30 美元、輸出 2.40 美元，具競爭力但西方企業存取性需考量。

🛠️ 技術深入

• •架構：Transformer + 線形注意力機制混合，提供快速回應並平衡推論速度與效能。
• •模態：支援文字、圖像、影片輸入至文字輸出，使用 Qwen3 Tokenizer，參數量 27B。
• •訓練特點：使用數十兆令牌大規模語料，強調數學、程式碼、長文讀解及多模態資料，包含 LLM 自評篩選前處理及縮放法則優化學習排程。
• •量化效能：在 RTX 3090 (24GB VRAM) 上以 5bit 量化實現實用速度，IQ 量化如 IQ4_XS 品質接近 Q4_K_S 但體積更小。

🔮 前景展望AI analysis grounded in cited sources

⏳ 時間線