🗾ITmedia AI+ (日本)•最新收集於 82m
Microsoft 推出 Skill Recorder，讓 Copilot 代理電腦操作
💡將錄製的桌面流程轉成可重複使用的 Copilot 技能，不必從零打造每項自動化。
⚡ 30-Second TL;DR
有什麼變化
Skill Recorder 會擷取電腦螢幕操作，協助 AI 重現任務。
為什麼重要
這款工具降低了為 Microsoft 代理生態系建立特定任務能力的門檻，尤其適合缺乏大量自動化工程資源的團隊。它可能加速將日常桌面流程轉換為可重複使用的代理技能。
下一步行動
在測試用 Mac 上安裝 Skill Recorder，錄製一項重複性工作流程，再於 Copilot Studio 中驗證產出的技能後擴大部署。
誰應關注：Developers & AI Engineers
關鍵要點
- •Skill Recorder 會擷取電腦螢幕操作，協助 AI 重現任務。
- •這款免費桌面應用程式主要為 macOS 設計，也支援 Windows。
- •錄製的工作流程可用於為 Microsoft Copilot Cowork、Microsoft Scout 與 Copilot Studio 建立技能。
🧠 深度解析
AI-generated analysis for this event.
🔑 增強重點摘要
- •Skill Recorder 採用了類似『示範學習』（Learning from Demonstration）的技術，將使用者的滑鼠點擊、鍵盤輸入與 UI 元素互動轉化為結構化的操作腳本。
- •該工具整合了 Microsoft 的 UI Automation 框架，能精確識別應用程式視窗內的控制項，而非僅僅是錄製像素影像。
- •產出的技能檔案（Skill Files）支援跨平台部署，允許在 macOS 上錄製的流程自動轉換並在 Windows 環境的 Copilot Studio 中執行。
- •此工具旨在解決 AI 代理在處理複雜、非標準化企業內部軟體時，缺乏 API 介接的「最後一哩路」自動化問題。
- •Microsoft 將此工具定位為「無程式碼」（No-Code）開發路徑，降低了企業員工將日常重複性工作轉化為 AI 代理技能的技術門檻。
📊 競品分析▸ Show
| 特色 | Microsoft Skill Recorder | UiPath Task Mining | Automation Anywhere Discovery Bot |
|---|---|---|---|
| 核心定位 | Copilot 代理技能訓練 | 企業級流程挖掘與自動化 | 流程發現與自動化部署 |
| 價格模式 | 免費 (隨附於 Copilot 生態) | 訂閱制 (高階企業版) | 訂閱制 (企業版) |
| 部署環境 | macOS / Windows | Windows 為主 | Windows 為主 |
| 技術深度 | 輕量級、AI 代理導向 | 重量級、RPA 流程導向 | 重量級、RPA 流程導向 |
🛠️ 技術深入
- 採用多模態視覺模型（Multimodal Vision Models）來解析螢幕上的 UI 元件層級結構。
- 支援將錄製的操作序列匯出為 JSON 格式的 Workflow Definition，可直接匯入 Copilot Studio 進行編輯。
- 具備隱私遮罩功能，在錄製過程中可自動偵測並模糊化敏感的個人識別資訊（PII）。
- 透過與 Microsoft Graph API 的深度整合，確保錄製的操作能與使用者的企業資料權限同步。
🔮 前景展望AI analysis grounded in cited sources
企業自動化開發成本將顯著下降
透過錄製取代手寫程式碼，將使非技術人員能直接參與 AI 代理的技能建構，大幅縮短開發週期。
macOS 在企業 AI 代理生態中的地位提升
Microsoft 優先支援 macOS 顯示其意圖打破 Windows 在企業自動化工具中的壟斷，擴大 Copilot 的應用場景。
⏳ 時間線
2023-11
Microsoft 正式發表 Copilot Studio，提供低程式碼 AI 代理開發平台。
2024-05
Microsoft 於 Build 大會展示 Copilot 代理（Agents）的自動化操作能力。
2025-09
Microsoft 擴大 Copilot Cowork 與 Scout 的測試範圍，強化跨應用程式協作功能。
2026-07
Microsoft 正式發布 Skill Recorder，作為 Copilot 代理生態系統的關鍵輔助工具。
📰
AI 週報
閱讀本週精選 AI 大事摘要 →
👉相關動態
AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源： ITmedia AI+ (日本) ↗