蘋果 AI 更有感了!新輔助功能可看圖、辨識環境、即時生成字幕

作者 | 發布日期 2026 年 05 月 20 日 8:28 | 分類 Apple , Apple Intelligence , 科技生活 line share Linkedin share follow us in feedly line share
Loading...
蘋果 AI 更有感了!新輔助功能可看圖、辨識環境、即時生成字幕

蘋果稍早發表了全新的輔助功能,且這次主打結合 Apple Intelligence,讓既有的「旁白」、「放大鏡」、「語音控制」和「輔助使用閱讀器」等功能將新增更詳細的描述功能和自然語言導覽。此外,今年稍晚也將推出包括用 Vision Pro 操控電動輪椅,以及在蘋果生態系中生成字幕。

此外,即日起,特別為輔助使用需求打造、支援 MagSafe 的 iPhone 適應性配件 Hikawa Grip & Stand,也於 Apple Store 線上商店推出三款全新亮眼配色。

蘋果執行長庫克表示,該公司對輔助使用的投入與做法獨樹一格。現在,透過 Apple Intelligence,我們為輔助使用功能帶來強大全新能力,同時也持續堅守隱私保護從設計開始的核心承諾。

旁白、放大鏡功能更進化

失明或低視能使用者可透過「旁白」和「放大鏡」了解螢幕上的資訊或周遭環境,現在透過 Apple Intelligence 這些重要工具變得更強大。

「旁白」中的 Image Explorer 運用 Apple Intelligence,可在全系統中提供更詳細的影像描述,包括照片、掃描帳單、個人文件和其他視覺內容中的資訊。「即時辨識」功能更新後,「旁白」使用者可透過按下 iPhone 的動作按鈕,快速針對相機觀景窗中的內容提出問題,並獲得詳細回應。使用者也可以用自己的話進一步提問,以取得更多視覺資訊。

「放大鏡」則透過 Apple Intelligence,將相同的輔助探索與視覺描述能力帶到特別為低視能使用者打造的高對比介面中。「放大鏡」同樣支援動作按鈕,讓使用者能快速提問並取得答案。此外,使用者也可以透過語音指令控制 app 本身,例如說出「放大」或「開啟手電筒」。

語音控制支援自然語言操作

此外,Apple Intelligence 也將「語音控制」變得比以往更加直覺,可運用自然語言協助各類肢體障礙使用者完全以語音操作 iPhone 和 iPad。

藉由全新的靈活輸入功能,使用者不必再記住精確的標籤名稱或編號,只需以自然語言描述螢幕上的按鈕和控制項目即可。「說出你看到的內容」選項讓使用者能以直覺語句操作各種 app,包括像 Apple「地圖」或「檔案」這類採用視覺化版面的 app。

像是使用者可以說「點一下最佳餐廳指南」或「點一下紫色資料夾」,當介面元素未正確標示輔助使用資訊時,這項功能也能幫助使用者克服操作上的障礙。

輔助使用閱讀器

「輔助使用閱讀器」為有各類障礙需求的使用者提供可自訂的閱讀體驗,涵蓋閱讀障礙、低視能等需求;有了 Apple Intelligence,閱讀體驗也變得比以往更加友善。「輔助使用閱讀器」可處理更複雜的來源內容,例如科學文章,並能整理包含多欄文字、圖片與表格的版面。隨選摘要功能則讓讀者能在深入閱讀細節前,先快速掌握文章重點。此外,透過全新的內建翻譯功能,使用者可用自己的母語閱讀內容,同時保留原有的格式、字體與顏色設定。

影片字幕生成

雖然字幕功能已愈來愈普及,可協助失聰或聽障使用者理解內容,但個人影片、親友分享的內容及其他媒體中的對話,通常仍未提供字幕。有了全新的字幕生成功能,當影片本身未提供字幕或隱藏式字幕時,系統可自動顯示語音內容的逐字稿。

此功能適用於以 iPhone 拍攝的影片、親友分享的影片,以及線上串流內容。藉由裝置端語音辨識技術,字幕會以保障隱私的方式生成,並自動顯示於 iPhone、iPad、Mac、Apple TV 和 Apple Vision Pro 上未提供字幕的影片內容中。使用者也可在影片播放選單或「設定」中,自訂字幕的顯示樣式。

Vision Pro 輪椅控制

部分使用電動輪椅者無法使用搖桿駕駛,因此替代驅動控制系統成為自主移動的重要方式。Vision Pro 全新的電動輪椅控制功能,運用其精準眼球追蹤系統,為相容的替代驅動系統提供靈敏的輸入方式。

透過 Apple Vision Pro,眼球追蹤無須頻繁重新校正,且可在各種光線環境下運作。此功能將率先於美國支援 Tolt 和 LUCI 替代驅動系統,並支援藍牙和有線連接配件。官方也將持續與開發者合作,擴大支援更多輪椅驅動系統。

其他更新項目還包括:

  • 「車輛動態提示」將登上 visionOS,可協助在移動車輛內使用 Vision Pro 的乘客減輕暈車不適。 Vision Pro 也將支援以臉部動作執行點按與系統操作,並在使用「停留控制」時,提供全新的眼控選取方式。
  • 「觸控調節」在 iOS 和 iPadOS 帶來全新的個人化設定方式。
  • Made for iPhone 助聽裝置在 Apple 裝置之間的配對與切換將更加穩定,並於 iOS、iPadOS、macOS 和 visionOS 帶來更完善的設定體驗。
  • tvOS 將加入「放大文字」支援,讓低視能使用者可放大螢幕文字,以便閱讀。
  • 「姓名辨識」功能可在有人叫出失聰或聽障使用者名字時發出通知。此功能支援全球超過 50 種語言。
  • 針對手語翻譯 app 開發者,全新 API 可支援使用者在進行中的 FaceTime 視訊通話中加入真人手語翻譯員。
  • 難以使用傳統控制器的使用者,現在可將 Sony Access 控制器作為遊戲控制器連接至 iOS、iPadOS 和 macOS。使用者可以自訂搖桿、九個內建按鈕,以及最多四個額外外接按鈕或特殊開關的配置方式;也可以結合兩組控制器,打造更個人化的遊戲體驗。

(首圖來源:蘋果

想請我們喝幾杯咖啡?

icon-tag

每杯咖啡 65 元

icon-coffee x 1
icon-coffee x 3
icon-coffee x 5
icon-coffee x

您的咖啡贊助將是讓我們持續走下去的動力

總金額共新臺幣 0
《關於請喝咖啡的 Q & A》