💼較早收集於 0m

Microsoft 發布 SkillOpt 以優化 AI 代理技能

Microsoft 發布 SkillOpt 以優化 AI 代理技能
PostLinkedIn
💼閱讀原文: VentureBeat

💡無需昂貴的微調或修改模型權重,即可優化 AI 代理性能。

⚡ 30-Second TL;DR

有什麼變化

在不更改底層模型權重的情況下優化代理技能 Markdown 文件。

為什麼重要

此工具使開發人員能夠在企業工作流程中改進代理性能,而無需進行全模型微調所帶來的高昂成本與複雜性。

下一步行動

從 GitHub 下載 SkillOpt 框架,以自動化改進您代理的系統提示詞與工具使用策略。

誰應關注:Developers & AI Engineers

關鍵要點

  • 在不更改底層模型權重的情況下優化代理技能 Markdown 文件。
  • 利用深度學習風格的反饋迴路系統性地改進指令集。
  • 解決了技能漂移、缺乏驗證以及重複失敗編輯等常見故障模式。
  • 在 GPT-5.5 和 Qwen 等模型的基準測試中表現優於現有基準。

🧠 深度解析

Web-grounded analysis with 16 cited sources.

🔑 增強重點摘要

  • SkillOpt 由微軟研究院(Yifan Yang、Ziyang Gong 等)開發,於2026年5月發布,並附有arXiv論文(arXiv 2605.23904)和MIT許可證下的GitHub開源儲存庫。
  • 該框架作為文本空間優化器運作,將自然語言技能文件(Markdown檔案)視為凍結大型語言模型(LLM)代理的「外部狀態」,而非透過微調模型權重或使用檢索增強生成(RAG)來改進。
  • SkillOpt採用四步驟訓練循環:代理執行任務並記錄帶分數的軌跡(Rollout)、優化器模型分析成功與失敗(Reflect)、提出對技能文件的有界編輯(Edit),以及僅在驗證集上嚴格提高性能時才接受編輯(Validate)。
  • 它引入了深度學習概念,如訓練週期(epochs)、批次大小(batch sizes)和「文本學習率」(編輯預算)來控制修改幅度,並使用拒絕編輯緩衝區(rejected-edit buffer)提供負面回饋,以及週期性慢速/元更新(epoch-wise slow/meta update)以學習長期經驗。
  • SkillOpt在六個基準測試、七個目標模型(包括GPT-5.5、Claude、Qwen)和三種執行環境(直接聊天、Codex、Claude Code)的52個評估設定中,均表現最佳或並列最佳,例如將GPT-5.5在直接聊天中的準確度提升了23.5個百分點。
📊 競品分析▸ Show
特性/方法SkillOpt傳統/其他提示優化 (例如:TextGrad, GEPA, 人工編寫)
優化對象自然語言技能文件 (Markdown)單一提示、人工編寫指令
優化機制深度學習風格的訓練循環 (Rollout, Reflect, Edit, Validate),文本學習率,驗證門控軌跡回饋、鬆散控制的自我修訂、試錯
模型權重不修改底層模型權重不修改 (通常)
部署成本零額外推理時間成本零額外推理時間成本 (通常)
可移植性優化後的技能文件可在不同模型、執行環境和相關基準之間轉移通常較差,針對特定模型或任務
性能提升 (GPT-5.5)直接聊天:+23.5點;Codex代理循環:+24.8點;Claude Code:+19.1點表現較差,SkillOpt 在52/52個評估單元中表現最佳或並列最佳
開源狀態MIT 許可證開源某些可能是開源,但未在搜索結果中明確指出

🛠️ 技術深入

  • 核心理念: 將純文本的Markdown技能文件視為凍結大型語言模型(LLM)代理的「外部狀態」,而非模型內部參數。
  • 優化器模型: 一個獨立的優化器模型(例如,在主要配置中為GPT-5.5)負責提出對技能文件的有界編輯,包括新增、刪除和替換操作。
  • 訓練循環:
    • Rollout(執行): 凍結的目標代理使用當前技能文件執行任務,並記錄帶分數的軌跡,包括訊息交換、工具調用、驗證器回饋和數值分數。
    • Reflect(反思): 優化器模型分析軌跡批次中的成功與失敗,將其分離成小批次以識別系統性程序錯誤。
    • Edit(編輯): 優化器提出對技能文件的結構化編輯。一個「編輯預算」或「文本學習率」限制了每一步允許的編輯數量(預設為4個操作)。
    • Validate(驗證): 帶有建議編輯的候選技能會在獨立的驗證集上進行評估。只有當編輯嚴格提高性能時才被接受。被拒絕的編輯會作為負面回饋保留。
  • 週期性慢速/元更新: 捕獲長期領域經驗,而不改變目標模型。此指導區塊會寫入受保護的欄位,並同樣通過驗證門控。
  • 與執行環境無關的部署: 同一個優化器和訓練循環可以生成適用於不同執行環境(直接聊天、Codex CLI、Claude Code CLI)的技能。
  • 輸出成果: 一個緊湊的 best_skill.md 文件(通常為300-2,000個token),無需更新模型權重即可部署。
  • 實現細節: 作為Python套件,可透過 pip 安裝,要求Python 3.10+。支援多種後端(OpenAI、Azure、Claude、Qwen、MiniMax),並包含一個WebUI儀表板。
  • 關鍵參數: 包括 num_epochs(訓練週期數)、batch_size(批次大小)、minibatch(小批次大小)、merge_batchworkerslr(文本學習率)、lr_sched(學習率排程,如餘弦衰減)、strict hard validation gating(嚴格硬驗證門控)以及 slow-update + meta-skill enabled(慢速更新與元技能啟用)。

🔮 前景展望AI analysis grounded in cited sources

SkillOpt將加速AI代理的開發與部署,使其更具適應性和成本效益。
透過自動化技能優化,企業可以減少手動提示工程的時間和成本,並在不重新訓練大型模型的情況下,使代理適應新的任務和領域。
技能文件將成為AI代理生態系統中可訓練和可移植的新型資產。
SkillOpt將自然語言技能文件視為可訓練參數,使其能夠像模型權重一樣被優化、版本控制和跨模型、跨環境部署,而無需額外的推理成本。
這種文本空間優化方法將推動AI代理從「應用程式優先」轉向「代理優先」的範式轉變。
透過使代理能夠透過可演進的技能文件自主學習和改進,SkillOpt支持微軟在Build 2026大會上提出的「代理優先」願景,即AI代理將在後台持續工作並協調任務。

時間線

2024-05
Microsoft Copilot Studio 推出用於構建自主代理的工具。
2025-03
Microsoft Agent Framework 和 Azure AI Agent Service 被討論,後者於Microsoft Ignite 2024推出,提供企業級代理開發服務。
2026-05
SkillOpt 研究論文(arXiv:2605.23904)首次提交並發布於arXiv和Microsoft Research。
2026-05
Microsoft Research 正式發布 SkillOpt 開源框架,並在GitHub上提供MIT許可證下的儲存庫。
2026-06
SkillOpt v0.1.0 在 PyPI 上發布,包含完整的訓練循環、多後端支援、內建基準測試和WebUI儀表板。
2026-06
微軟在Build 2026大會上闡述了「代理優先」的未來願景,SkillOpt與此戰略方向一致。

📎 來源 (16)

Factual claims are grounded in the sources below. Forward-looking analysis is AI-generated interpretation.

  1. flowtivity.ai
  2. medium.com
  3. substack.com
  4. venturebeat.com
  5. arxiv.org
  6. medium.com
  7. huggingface.co
  8. digg.com
  9. github.com
  10. digg.com
  11. medium.com
  12. explainx.ai
  13. github.io
  14. gitconnected.com
  15. github.com
  16. kavout.com
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: VentureBeat