📲較早收集於 35m

Meta 智慧眼鏡協助盲人退伍軍人進行日常導航

Meta 智慧眼鏡協助盲人退伍軍人進行日常導航
PostLinkedIn
📲閱讀原文: Digital Trends

💡了解 Meta 的智慧眼鏡如何被用作視障人士的高影響力輔助工具。

⚡ 30-Second TL;DR

有什麼變化

利用多模態 AI 進行即時視覺描述

為什麼重要

這展示了多模態 AI 在輔助技術中的高度實用性。它驗證了穿戴式硬體在彌補殘障用戶物理限制方面的潛力。

下一步行動

探索多模態 LLM 與穿戴式硬體的整合,以建構專注於無障礙功能的應用程式。

誰應關注:Developers & AI Engineers

關鍵要點

  • 利用多模態 AI 進行即時視覺描述
  • 為視障人士提供實用的無障礙支援
  • 改變公眾對穿戴式 AI 硬體的看法

🧠 深度解析

Web-grounded analysis with 27 cited sources.

🔑 增強重點摘要

  • Meta已與美國盲人退伍軍人協會(Blinded Veterans Association)合作,為超過13萬名符合資格的美國法定盲人退伍軍人免費提供Ray-Ban Meta智慧眼鏡,並提供實務操作培訓。
  • 除了視覺輔助,Meta的AI眼鏡還透過與Oscar Mike基金會的合作,探索如何協助記憶力喪失的退伍軍人,提供記憶輔助和空間意識的改進。
  • Meta AI眼鏡的「看與說 (Look and Tell)」功能允許用戶詢問周圍環境的問題,並獲得即時語音回應,包括識別物體、閱讀文本和描述視覺元素。
  • Meta已推出「Meta穿戴式裝置存取工具包 (Meta Wearables Device Access Toolkit)」,讓開發者能夠為AI眼鏡建立第三方應用程式,進一步擴展其無障礙功能,例如與Microsoft Seeing AI和Aira等應用程式整合。
📊 競品分析▸ Show
特性/產品Meta Ray-Ban 智慧眼鏡Envision GlassesOrCam MyEyeAira (服務)
主要用途主流消費型智慧眼鏡,具強大AI輔助功能,時尚且低調。專為視障人士設計的輔助科技。夾式穿戴裝置,專注於離線文字識別與物體識別。透過人類代理人提供即時視覺協助的訂閱服務。
AI/輔助模式多模態AI助理(Meta AI),按需場景描述、文字閱讀、物體識別。綜合OCR、連續視覺模式、物體/人臉識別、條碼掃描、遠端協助。完全離線的裝置內建AI處理器,高精度文字識別、人臉識別。專業視覺口譯員透過即時視訊串流提供協助。
操作方式語音指令(「嘿 Meta,看並告訴我你看到了什麼」)。語音指令、觸控板、應用程式。手勢控制。透過應用程式呼叫代理人,眼鏡或手機鏡頭串流視訊。
價格作為主流消費品,價格相對較低(具體未提及,但對比專用設備)。約3,499美元(或2,695英鎊不含增值稅)。約4,500美元。訂閱制,每月89-329美元(依分鐘數而定)。
外觀時尚,幾乎與普通Ray-Ban眼鏡無異。專用設計,可能較顯眼。夾在眼鏡上的小型裝置。可搭配Aira專用智慧眼鏡或使用手機鏡頭。
離線功能依賴雲端服務和配對智慧型手機應用程式,離線功能有限。具有強大的離線OCR功能。完全離線運作。需網路連線以連接人類代理人。

🛠️ 技術深入

  • Meta AI眼鏡採用多模態AI系統,能夠同時處理多種類型的輸入訊號,包括視覺和音訊數據。
  • 硬體配置包括多麥克風陣列以可靠捕捉語音輸入,以及一個12百萬像素(MP)超廣角攝影機,用於捕捉用戶視角並支援情境理解。
  • Meta AI透過關聯多個即時輸入來理解環境並生成回應,這些輸入包括用戶所看的內容、所在位置、移動方式以及語音指令。
  • Ray-Ban Display型號的AI模型建立在「AnyMal」等研究基礎上,這是一種統一的語言模型,能夠處理文本、音訊、視訊甚至慣性測量單元(IMU)運動感測器數據。
  • 眼鏡支援邊緣AI處理,部分AI功能可在裝置上進行,提高反應速度。
  • 攝影機可拍攝12MP照片和60秒的1080p影片。
  • 開放式耳機提供清晰的音訊回饋,同時讓用戶保持對周圍環境的感知。

🔮 前景展望AI analysis grounded in cited sources

Meta AI眼鏡將成為主流無障礙科技的標準。
其時尚的外觀和與主流品牌的結合,加上對無障礙功能的重視,將降低社會污名並促進更廣泛的採用。
第三方開發者將大幅擴展Meta AI眼鏡的無障礙應用範圍。
Meta已發布穿戴式裝置存取工具包,允許開發者利用眼鏡的感測器和AI功能,創造更多元化的輔助應用。
AI眼鏡的輔助功能將從視障擴展到其他認知和身體障礙領域。
Meta已與Oscar Mike基金會合作,探索AI眼鏡在記憶力喪失和空間意識方面的應用,顯示其潛力超越單一障礙類別。

時間線

2023-09
Meta發布第二代智慧眼鏡,首次整合Meta AI模型,提供語音啟動的即時物體識別和情境資訊。
2024-12
Ray-Ban Meta智慧眼鏡推出「看與說 (Look and Tell)」功能,允許用戶詢問周圍環境並獲得即時語音回應。
2025-05
Meta推出可自訂的Meta AI詳細回應功能,並宣布將在全球18個支援Meta AI的國家推出「呼叫志工 (Call a Volunteer)」功能。
2025-09
Meta發布「穿戴式裝置存取工具包 (Wearables Device Access Toolkit)」開發者預覽版,允許第三方應用程式存取眼鏡的攝影機和音訊功能,並宣布Microsoft Seeing AI為首批合作夥伴之一。同時推出帶有鏡片內顯示器和螢幕閱讀器支援的Ray-Ban Display眼鏡。
2026-02
Meta與Oscar Mike基金會合作,探索AI眼鏡如何協助記憶力喪失的退伍軍人,並利用Aria Gen 2研究眼鏡進行記憶輔助和空間意識的改進。
2026-06
Meta宣布向所有符合資格的美國法定盲人退伍軍人免費提供Ray-Ban Meta AI眼鏡,並提供盲人退伍軍人協會的實務培訓。
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Digital Trends