🖥️較早收集於 8m

Apple 於 WWDC 發表 Apple Intelligence 與 Siri AI

Apple 於 WWDC 發表 Apple Intelligence 與 Siri AI
PostLinkedIn
🖥️閱讀原文: Computerworld

💡Apple 轉向整合式、隱私優先的 AI API,徹底改變了 iOS 與 macOS 開發者的生態環境。

⚡ 30-Second TL;DR

有什麼變化

推出具備跨應用程式情境感知與任務執行能力的 Siri AI。

為什麼重要

Apple 將 LLM 深度整合至作業系統並強調隱私,為消費者 AI 樹立了新標準。開發者現在可以透過新的原生 API,明確地利用裝置端與雲端 AI 功能。

下一步行動

檢視最新的 Apple Intelligence 開發者 API,找出如何透過原生 AI 整合來增強您應用程式現有的工作流程。

誰應關注:Developers & AI Engineers

關鍵要點

  • 推出具備跨應用程式情境感知與任務執行能力的 Siri AI。
  • 發布全新開發者 API,協助將生成式 AI 功能整合至第三方應用程式。
  • 實作 Private Cloud Compute 以實現安全且逼真的影像生成。
  • 為 Apple Passwords 加入代理式 AI,以自動修復安全性問題。

🧠 深度解析

Web-grounded analysis with 38 cited sources.

🔑 增強重點摘要

  • Apple Intelligence的改進始於與Google Gemini的合作,這表明Apple在AI領域採取了戰略性合作以加速其能力。
  • Siri AI現在包含一個專用應用程式,用於跨產品回顧對話,並提供更可自訂的語音功能,包括語速和表達方式。
  • Image Playground現在支援逼真的圖像生成,並透過Private Cloud Compute運行,所有生成的圖像都會自動包含隱藏的SynthID浮水印以識別為AI生成。
  • Apple Intelligence引入了增強的系統級聽寫功能,具有更高的準確性,並提供「用Siri寫作」工具,用於撰寫、重寫、校對和總結文本。
  • 「空間重構」(Spatial Reframing) 是一項新的照片編輯功能,允許用戶在拍攝後調整照片的角度、視角或縮放,利用裝置上的空間模型和Private Cloud Compute。
📊 競品分析▸ Show
功能/定價/基準Apple IntelligenceGoogle Gemini (及其生態系統)Amazon AlexaOpenAI ChatGPT (作為Siri選項)
主要特點深度整合Apple裝置,隱私優先,裝置端處理與Private Cloud Compute混合。 專用Siri App,可自訂語音,空間重構。雲端基礎,跨平台AI能力,廣泛的第三方整合,自適應學習。雲端基礎,智慧家庭控制,生產力支援。強大的語言模型,通用聊天機器人。
整合性深度整合iOS, iPadOS, macOS, watchOS, visionOS。 與Google Gemini合作。跨平台 (網頁, Android, iOS),廣泛的應用程式相容性。整合超過1億個Amazon和第三方裝置。可透過Siri Plus ChatGPT選項整合。
隱私焦點強調裝置端處理和Private Cloud Compute,承諾用戶數據不被Apple或第三方存取或儲存。依賴網路連接,可能引發數據隱私擔憂。雲端服務,數據處理方式未詳細說明。雲端服務,數據隱私政策需參考OpenAI。
定價支援裝置免費提供。 部分功能(如圖像生成)有每日使用限制,iCloud+訂閱可提高配額。Google AI Pro (約每月18.99英鎊),Google AI Ultra (約每月234.99英鎊),包含進階功能。通常與裝置捆綁,服務本身免費。ChatGPT Plus (約每月19.99英鎊),提供更高限制和進階語音模型。
基準裝置端模型在公開基準測試和人工評估中,超越或與Mistral AI、Microsoft和Google的同等小型模型持平。伺服器端模型表現與OpenAI的GPT-4大致相當。未直接提供與Apple Intelligence的公開基準比較,但Apple與Google Gemini合作開發。未提供公開基準。GPT-4作為領先模型之一,被Apple的伺服器端模型作為基準。

🛠️ 技術深入

  • Apple Intelligence由兩種多語言、多模態基礎語言模型驅動:一個約30億參數的裝置端模型,透過KV快取共享和2位元量化感知訓練針對Apple晶片進行優化;以及一個可擴展的伺服器模型,基於新穎的平行軌道混合專家(PT-MoE) Transformer架構。
  • Private Cloud Compute (PCC) 採用客製化的Apple晶片伺服器硬體,包含與iPhone相同的安全隔離區(Secure Enclave)和安全啟動(Secure Boot)技術。
  • PCC運行一個經過強化的作業系統,該系統是iOS和macOS基礎的子集,專為大型語言模型推斷工作負載而設計,並提供極窄的攻擊面。
  • PCC的設計確保用戶數據在請求完成後即被刪除,不會保留任何形式的用戶數據,且Apple員工無法存取。
  • 裝置端模型(AFM 3 Core Advanced)採用指令遵循剪枝(Instruction-Following Pruning, IFP)技術,實現稀疏啟動架構,以克服消費級硬體上的記憶體限制。
  • Foundation Models框架是一個以Swift為中心的API,提供對Apple裝置端和PCC模型的直接存取,支援引導式生成、受限工具呼叫和LoRA適配器微調。
  • App Intents框架透過模式(schemas)將應用程式內容和功能整合到Apple Intelligence和Siri AI中,實現自然語言互動。
  • Image Playground的逼真圖像生成由Private Cloud Compute上的新生成模型提供支援,所有生成的圖像都會自動包含隱藏的SynthID浮水印。
  • Siri AI的底層架構是Apple與Google合作的成果,旨在提供更具對話性、情境感知和螢幕感知能力的助理。

🔮 前景展望AI analysis grounded in cited sources

Apple的AI策略將顯著提升其生態系統的用戶黏性。
透過深度整合AI功能於核心應用程式和Siri,並強調隱私保護,Apple將為用戶提供無縫且個人化的體驗,使其更難以轉向其他平台。
裝置端AI和Private Cloud Compute的結合將為企業級應用程式設定新的隱私標準。
Apple對數據安全和用戶隱私的嚴格承諾,特別是透過PCC的零數據保留政策,將促使其他雲端AI服務提供商重新評估其隱私模型。
第三方開發者將能創造出更智慧、更具情境感知能力的應用程式,而無需承擔高昂的雲端AI成本。
透過Foundation Models和App Intents等開發者框架,Apple將其裝置端和雲端AI能力開放給開發者,降低了整合先進AI功能的門檻。

時間線

2003
SRI International啟動CALO專案,為Siri的誕生奠定基礎。
2010-04
Apple收購Siri Inc.,將其整合進自家生態系統。
2011-10
Apple隨iPhone 4S首次推出Siri,使其成為主流智慧型手機上的首個虛擬助理。
2017
iPhone 8和iPhone X搭載A11仿生處理器,首次引入專用神經網路引擎,強化裝置端AI能力。
2024-06
Apple在WWDC 2024上宣布Apple Intelligence系統及Private Cloud Compute,標誌著其生成式AI戰略的正式啟動。
2026-06
Apple在WWDC 2026上發表Apple Intelligence與Siri AI,並宣布與Google Gemini合作,推出專用Siri App及多項新功能。
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Computerworld