
以 SkillEvaluator 衡量 AI Agent 技能表現
NVIDIA SkillEvaluator 用於衡量封裝後的 agent skills 是否能改善 AI agent 的表現。它評估指令、範例與工具指南的價值,協助 agent 找到相關上下文、減少無效步驟,更有效完成專業任務。
Tag: #agent-skills13 results

NVIDIA SkillEvaluator 用於衡量封裝後的 agent skills 是否能改善 AI agent 的表現。它評估指令、範例與工具指南的價值,協助 agent 找到相關上下文、減少無效步驟,更有效完成專業任務。
Vercel 宣布推出 AI Agent 擴充功能的開放標準 Agent Plugins。該標準統一 Agent Skills 與 MCP 伺服器設定格式,讓它們可在相容用戶端之間重複使用;Codex 與 VS Code 已支援,Claude 目前尚未支援。

SKILLTRACE 是一套用於偵測可重用 LLM Agent 技能重用來源的審計框架,涵蓋作者文字、程式碼、工具與工作流程。它結合三種來源證據,在 SKILLTRACE-BENCH 上達到 0.938 AUROC 與 0.898 F1。

Vercel 已公開推出 Agent Plugins 1.0.0,這是一項用於封裝 Agent Skills 與 MCP servers 的開放、廠商中立標準。此格式為相容用戶端提供可預測的插件目錄、manifest 與元件位置,同時將安裝與政策決策保留給各用戶端。

研究人員提出大型語言模型代理技能的雙層優化框架,外層使用蒙地卡羅樹搜尋決定技能結構,內層使用 LLM 精煉內容。此方法解決技能設計中結構與組件的相互依賴。於開源營運研究問答資料集實驗顯示代理效能提升。

智譜 AI 推出 AutoClaw(澳龍),國內首個真正一鍵安裝的本地版 OpenClaw。預置 50+ 熱門 Skills,並支援一鍵接入飛書等工具。一次下載,即讓電腦變身 7*24 小時專屬助理。
NVIDIA NeMo 推出 Evaluator Agent Skills,可在數分鐘內進行對話式 LLM 評估。此工具於 Hugging Face Blog 強調,能快速評估 LLM 在對話中的表現。此舉簡化開發者的評估流程。

@skills 是一套開放協定,將技能內容、持久化與自動觸發分離,讓代理程式無須將技能描述長期放在系統提示詞中即可使用技能。該協定已在 AdaL CLI 中實作,並由可選用的 atskills.one 探索中心提供支援。

Vercel CLI 的 Marketplace 整合現在會在供應商提供技能時,自動從 skills.sh 安裝其代理技能。開發者也能直接在終端機探索供應商並瀏覽分類。

skills.sh 現在允許使用者將多個代理技能打包成可透過單一網址分享的技能套件。套件可整合來自社群或私人來源的技能,包括本機資料夾、ZIP 檔案與 GitHub 儲存庫,並可透過 CLI 指令安裝或更新。