隨著 visionOS 3 預期於 2025 年 WWDC 發表,Apple 正逐步揭示其混合實境裝置 Vision Pro 的下一波功能擴展,特別是在輔助使用方面的強化。新功能著重於為視障、低視力與行動不便者提供更高程度的協助,同時也引入更自然的互動方式,例如眼動滾動控制(eye-scrolling),拓展人機操作的可能性。

更進一步的 Zoom 放大與即時辨識支援

在即將推出的更新中,Apple 將進一步整合 Vision Pro 的主相機與 visionOS 系統,強化「Zoom」功能的應用範圍。使用者可透過主相機放大實體世界的視野內容,包括書籍、標籤、周遭環境等細節,並以浮動視窗方式顯示。此功能針對低視力使用者尤其實用,能在生活情境中(例如在廚房查看食譜或購物清單)提供更清楚的視覺輔助,而無需手持其他設備。

同時,針對「旁白」(VoiceOver)用戶,Apple 加入了「即時辨識」功能,讓裝置能透過機器學習技術,在不連網的情況下進行場景說明、物體辨識與文件朗讀等操作。此功能可協助視障者更有效率地理解並回應周圍環境,提升自主性與生活便利性。

API 開放支援第三方視覺協助應用

Apple 亦宣布將推出新的 API,讓獲得授權的第三方應用能取用 Vision Pro 的主相機進行即時視覺輔助。這項變化對如《Be My Eyes》此類服務具有實質意義。透過這些應用,視障者可在無需手持裝置的情況下獲得遠端志工或 AI 所提供的影像識別與協助,進一步實現免持式視覺輔助的應用場景。

支援腦機介面(BCI):協助行動不便者實現基礎互動

另一項重要更新是 visionOS 對 BCI(腦機介面)的初步支援。Apple 將透過其 Switch Control 系統引入新協議 BCI-HID,並與開發商 Synchron 合作,讓其 Stentrode 植入設備成為首批兼容該協議的 BCI 裝置。此協議的設計目的是協助行動不便者,透過腦部訊號來完成如游標移動或點擊操作等基本互動,未來有機會進一步拓展至更多控制場景。

新的互動方式:眼球滾動(Eye Scrolling)

Apple 也正在測試一項名為「眼球滾動」的新功能,預計隨 visionOS 3 正式推出。這項技術將基於現有的眼動追蹤系統運作,使使用者只需移動眼睛就能捲動畫面內容,無需手勢或語音指令。

這項功能將首先應用於 Apple 自家應用程式中,例如 Safari、備忘錄與郵件等,並開放予第三方開發者整合至他們的 App。對於不便進行手部操作的使用者,或是在雙手忙碌時希望透過視線進行介面互動的情境,眼球滾動功能將提供另一種自然直觀的解決方案。

visionOS 3 將帶來更多無障礙與自然控制可能性

從上述功能更新來看,Apple 在 Vision Pro 上的輔助功能開發已逐步超越傳統設定,不再僅限於聲音與放大功能,而是積極拓展至影像識別、遠端協助、BCI 支援與眼動操作等多元領域。這不僅為有特殊需求的使用者提供更多選擇,也重新定義空間運算裝置在人機互動與無障礙設計上的角色。

visionOS 3 預計將於 2025 年 6 月 9 日的 WWDC 正式發表,屆時或將揭示更多關於這些功能整合的細節與實際應用範例。

Apple Vision Pro 輔助功能更新重點(統整):

  • 強化 Zoom 功能,可透過主相機放大真實世界中的視覺內容
  • 支援即時辨識,可在裝置端描述環境、辨識物體、朗讀文件
  • 新增 API,允許如《Be My Eyes》等 app 取用主相機進行即時視覺協助
  • 初步支援 BCI(腦機介面),可透過腦部訊號操作裝置
  • 同步支援 BCI-HID 協定,首個合作設備為 Synchron 的 Stentrode
  • 測試中「眼球滾動」功能,讓使用者可透過眼睛捲動畫面
  • 所有新功能預計將於 2025 年 WWDC 發表,成為 visionOS 3 的一部分

By JYUN