Apple 宣布一系列結合 Apple Intelligence 的全新輔助使用功能更新,涵蓋「旁白」、「放大鏡」、「語音控制」、「輔助使用閱讀器」與影片字幕生成等核心功能,並同步擴展至 Apple Vision Pro,透過生成式 AI 與裝置端運算能力,進一步降低視覺、聽覺與肢體障礙者的數位使用門檻,讓 iPhone、iPad、Mac 與 Vision Pro 從「可使用」進化為「真正理解使用者需求」的輔助工具。
AI 強化「旁白」與「放大鏡」 讓低視能使用者更理解周遭世界
首先是 Apple 將 Apple Intelligence 導入「旁白(VoiceOver)」與「放大鏡(Magnifier)」。過去,「旁白」主要負責朗讀螢幕資訊,如今新增的 Image Explorer 功能,則進一步讓 AI 能夠理解照片、文件、帳單甚至掃描內容,並提供更完整的情境描述。對失明或低視能使用者來說,這意味著不只是「知道畫面上有什麼」,而是能更深入理解畫面內容與細節。
透過「即時辨識」功能,使用者未來可直接按下 iPhone 動作按鈕,對著相機畫面提問,例如詢問「這是什麼產品」、「文件上寫了什麼」,甚至能進一步追問細節,讓手機成為即時的 AI 視覺助理。
「放大鏡」也導入相同的 AI 能力,並針對低視能需求提供高對比介面設計。除了能以語音詢問周遭資訊之外,也支援像是「放大」、「開啟手電筒」等語音操作,降低傳統手勢操作的難度。
對一般使用者而言,這類功能未來也可能成為日常生活中的 AI 輔助工具,例如閱讀菜單、辨識商品資訊、快速理解文件內容等。
![]()
「語音控制」更自然 不用再記複雜指令
「語音控制(Voice Control)」在過去需要精準記住按鈕名稱或位置,但此次更新後,使用者只需以自然語言描述畫面內容,就能完成操作。例如直接說出「點一下最佳餐廳指南」或「打開紫色資料夾」,系統即可辨識並執行。
這項功能特別有助於肢體障礙使用者,因為不再需要精確觸控或記憶複雜控制邏輯,而是更接近「與裝置對話」的操作方式。同時,這也顯示 Apple 正逐步將生成式 AI 導入 UI 理解層面,讓系統開始能「看懂畫面」,而不只是辨識固定指令。
「輔助使用閱讀器」加入摘要與翻譯 降低閱讀門檻
Apple 也針對閱讀障礙與低視能需求更新「輔助使用閱讀器(Accessibility Reader)」。新版本可處理更複雜的版面,包括科學文章、多欄排版、圖片與表格內容,並新增 AI 摘要功能,讓使用者在閱讀長篇內容前,可以先快速掌握重點。
此外,內建翻譯功能也能在保留原本格式、字型與配色的情況下,將內容轉換為使用者熟悉的語言,進一步降低跨語言閱讀門檻。
未提供字幕的影片 也能即時產生字幕
針對失聰與聽障使用者,Apple 此次也新增「字幕生成」功能。當影片本身沒有字幕或隱藏式字幕時,系統可透過裝置端語音辨識,自動生成逐字稿字幕,並適用於 iPhone 拍攝影片、親友分享影片與線上串流內容。
由於採用裝置端運算,因此影片語音內容不需上傳雲端即可完成辨識,兼顧隱私與即時性。這項功能未來也可能成為更多一般使用者觀看短影音、社群影片或跨語言內容的重要工具。
Vision Pro 開始切入醫療與輔助科技應用
此次最具代表性的更新,是 Apple 將 Vision Pro 的眼球追蹤能力導入電動輪椅控制系統。對部分無法操作傳統搖桿的使用者而言,Vision Pro 可透過高精度眼球追蹤,協助操作相容輪椅系統。Apple 表示,新功能可在不同光線環境下運作,且不需頻繁重新校正。首波將支援 Tolt 與 LUCI 系統,並透過藍牙或有線方式連接。
這顯示 Apple 正逐步將 Vision Pro 從娛樂與空間運算設備,延伸至醫療、行動輔助與無障礙科技領域。