🧧Qwen (GitHub Releases: qwen-code)•最新收集於 29m
Qwen Code 執行 SWE-bench 與 Terminal-Bench
💡了解 Qwen Code 如何接受涵蓋 589 個軟體工程與終端機任務的評估。
⚡ 30-Second TL;DR
有什麼變化
此次基準測試使用 Benchmark-Qwen-Ref v0.21.12。
為什麼重要
這項分階段評估可讓開發者更全面了解 Qwen Code 在軟體工程與終端機任務上的表現。由於公告尚未提供分數，實務工作者應等待基準測試結果發布後，再進行能力比較。
下一步行動
追蹤 Qwen Code 版本頁面以取得 v0.21.12 基準測試結果，並在導入編碼工作流程前重現 500 個 SWE-bench 與 89 個 Terminal-Bench 案例的評估。
誰應關注：Developers & AI Engineers
關鍵要點
- •此次基準測試使用 Benchmark-Qwen-Ref v0.21.12。
- •第一階段的 SWE-bench Verified 評估包含 500 個案例。
- •Terminal-Bench 2.0 包含 89 個案例，僅在同一版本成功發布 SWE 結果後才會執行。
🧠 深度解析
AI-generated analysis for this event.
🔑 增強重點摘要
- •Qwen Code 系列模型專注於提升軟體工程任務中的自動化能力，特別是針對複雜程式碼庫的修復與終端操作。
- •SWE-bench Verified 是業界公認的基準測試，旨在評估 AI 模型在真實 GitHub 問題修復中的端到端解決能力。
- •Terminal-Bench 2.0 專門用於測試模型在模擬終端環境中執行指令、除錯及管理檔案系統的實戰操作能力。
- •Benchmark-Qwen-Ref v0.21.12 是一套標準化的評估框架，旨在確保 Qwen 模型在不同版本迭代間的效能可比性與一致性。
- •Qwen 團隊透過此類基準測試，旨在縮短 AI 輔助編碼工具從「程式碼生成」到「自主解決工程問題」的技術差距。
📊 競品分析▸ Show
| 特性/模型 | Qwen Code (最新版) | Claude 3.5 Sonnet | GPT-4o (OpenAI) |
|---|---|---|---|
| SWE-bench 表現 | 高度優化 (專注開源) | 業界領先基準 | 強大通用能力 |
| 終端操作能力 | 針對 Terminal-Bench 優化 | 具備 Computer Use 能力 | 透過工具呼叫執行 |
| 開源/閉源 | 開源 (Open Weights) | 閉源 | 閉源 |
🛠️ 技術深入
- 採用基於 Transformer 的解碼器架構，針對長上下文視窗進行了針對性優化，以處理大型程式碼庫。
- 整合了專有的程式碼執行環境 (Sandbox)，確保在評估 SWE-bench 時的安全性與隔離性。
- 訓練數據集包含大規模的 GitHub 儲存庫與終端操作日誌，強化了模型對 Shell 指令與系統環境的理解。
- 評估框架 Benchmark-Qwen-Ref 支援自動化環境配置，能夠動態解析測試案例中的依賴關係。
🔮 前景展望AI analysis grounded in cited sources
Qwen Code 將顯著提升開源 AI 代理在自動化軟體維護領域的市佔率。
透過公開透明的基準測試數據，開發者能更精確地評估其在實際工程任務中的可靠性。
Terminal-Bench 2.0 將成為衡量 AI 代理系統操作能力的行業標準。
隨著 AI 從單純的程式碼生成轉向自主代理，對終端環境互動能力的評估需求正快速增加。
⏳ 時間線
2024-04
Qwen1.5-Code 系列發布，標誌著 Qwen 進入專業程式碼模型領域。
2024-09
Qwen2.5-Coder 發布，在多項編碼基準測試中達到開源模型領先水準。
2025-03
Qwen 團隊開始導入 Benchmark-Qwen-Ref 框架以標準化內部評估流程。
2026-05
Qwen Code 針對 SWE-bench Verified 進行大規模效能優化與迭代。
📰 事件追蹤
Qwen (GitHub Releases: qwen-code) • 8/15/2026
Qwen Code 發布 Terminal-Bench 煙霧測試 r5
›
Qwen (GitHub Releases: qwen-code) • 8/15/2026
Qwen Code 通過發布冒煙測試
›
Qwen (GitHub Releases: qwen-code) • 8/15/2026
Qwen Code 新增更安全的自動修復與分割檢視提及功能
›
Qwen (GitHub Releases: qwen-code) • 8/7/2026
Qwen Code 新增 PR 8588 驗證證據
›
Qwen (GitHub Releases: qwen-code) • 8/7/2026
Qwen Code 驗證 OTel 工作階段生命週期
›
Qwen (GitHub Releases: qwen-code) • 8/7/2026
Qwen Code 新增本機驗證截圖
›
Qwen (GitHub Releases: qwen-code) • 5/13/2026
Qwen-Code v0.15.11-preview.2：CLI 與效能優化更新
›
📰
AI 週報
閱讀本週精選 AI 大事摘要 →
👉相關動態
AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源： Qwen (GitHub Releases: qwen-code) ↗