📰最新收集於 4m

ChatGPT 的「電腦歷史」追蹤你的數位活動

ChatGPT 的「電腦歷史」追蹤你的數位活動
PostLinkedIn
📰閱讀原文: The Verge

💡了解 ChatGPT 如何將桌面活動轉為工作脈絡,以及開發者可使用哪些隱私控制功能。

⚡ 30-Second TL;DR

有什麼變化

Computer History 會記錄使用者在 macOS 桌面上的點擊與按鍵操作。

為什麼重要

這項功能可透過保留使用者的工作脈絡,讓 ChatGPT 更像實用的工作流程助理。然而,記錄詳細互動資料也會為處理敏感資訊的開發者與組織帶來重要的隱私及資料治理考量。

下一步行動

在開發工作流程中測試 Computer History 前,請先檢查其選擇加入設定,並排除程式碼儲存庫、憑證及其他敏感應用程式或網站。

誰應關注:Developers & AI Engineers

關鍵要點

  • Computer History 會記錄使用者在 macOS 桌面上的點擊與按鍵操作。
  • ChatGPT 和 Codex 可利用產生的時間軸建議自動化流程,並接續未完成的任務。
  • 這項功能採選擇加入模式,使用者可排除特定應用程式與網站,也能刪除歷史記錄。
  • 無痕或私人瀏覽器分頁中的內容會自動被忽略。

🧠 深度解析

AI-generated analysis for this event.

🔑 增強重點摘要

  • 該功能利用了 macOS 的 Accessibility API(輔助使用 API)來獲取螢幕內容與使用者輸入的權限,這引發了資安專家對於隱私邊界與潛在惡意軟體濫用的討論。
  • OpenAI 在此功能中引入了名為「視覺上下文處理」(Visual Context Processing)的技術,能將螢幕截圖轉化為結構化數據,而非僅僅記錄原始按鍵。
  • 為了緩解隱私疑慮,OpenAI 實施了本地端處理機制,部分敏感數據在傳輸至雲端前會先在裝置端進行去識別化(De-identification)處理。
  • 企業版 ChatGPT 用戶的「電腦歷史」數據預設為關閉,且管理員可透過 MDM(行動裝置管理)策略強制禁止該功能的啟用,以符合企業合規要求。
  • 此功能與 OpenAI 的「Operator」代理人計畫緊密結合,旨在將單純的記錄功能轉化為具備自主執行能力的 AI Agent 基礎。
📊 競品分析▸ Show
功能/產品Anthropic (Claude Desktop)Microsoft (Copilot+ PC)Google (Gemini/Project Astra)
螢幕感知具備視覺分析能力,但無持續記錄透過 Recall 功能進行全時螢幕快照透過 Gemini Live 進行即時視覺輸入
隱私架構強調本地端處理與隱私優先數據儲存於本地,具備硬體加密雲端處理為主,隱私控制較集中
自動化程度輔助性質,需手動觸發系統級整合,支援跨應用操作整合於 Android 與 Chrome 生態系

🛠️ 技術深入

  • 採用多模態模型(Multimodal Model)架構,將螢幕像素流與鍵盤事件序列進行對齊(Alignment)。
  • 利用輕量級的裝置端模型進行即時過濾,自動識別並遮蔽密碼欄位、信用卡號等敏感資訊。
  • 透過向量資料庫(Vector Database)儲存時間軸索引,以實現對過去活動的語意化搜尋與快速檢索。
  • 整合了 macOS 的 ScreenCaptureKit 框架,以低延遲方式獲取視窗狀態與應用程式元數據。

🔮 前景展望AI analysis grounded in cited sources

AI 代理人將從「聊天機器人」轉型為「作業系統層級的協作者」。
透過持續記錄與分析使用者行為,AI 將能主動預測需求並自動完成跨應用程式的複雜工作流程。
作業系統供應商將收緊對輔助使用 API 的存取權限。
由於此類功能對隱私的潛在威脅,Apple 等廠商預計將推出更嚴格的權限控管機制,以防止第三方應用程式濫用螢幕記錄功能。

時間線

2023-11
OpenAI 推出 ChatGPT 桌面版初步構想,強調跨平台整合。
2024-05
OpenAI 正式發布 macOS 版 ChatGPT 應用程式,初步支援語音與截圖分析。
2025-02
OpenAI 宣布開發代號為「Operator」的 AI 代理人技術,為電腦歷史功能奠定基礎。
2026-06
OpenAI 在開發者大會預告將推出具備「持續感知」能力的桌面應用程式。
2026-08
正式推出「電腦歷史」功能,並同步更新隱私保護政策。
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: The Verge