Apple將推出針對認知、言語和視覺方面的認知輔助使用新功能

Apple 今天預覽認知、視覺、聽覺和行動方面的軟體輔助使用功能,以及專為瘖啞人士或可能失去言語能力的人打造的創新工具。這些更新的實現,仰賴軟硬體方面的進步,其中包括裝置端機器學習,這既可確保使用者隱私,更能拓展 Apple 一直以來對於為所有人打造產品的承諾。

Apple 與代表各個領域身心障礙使用者的社群團體密切合作,以開發能實際改善人們生活的輔助使用功能。今年稍晚,認知功能障礙的使用者將可透過「Assistive Access」功能更輕鬆、獨立地使用 iPhone 和 iPad;瘖啞人士將能在通話和對話時,以「Live Speech」將打字化為語音。

而可能失去言語能力的使用者,則可以利用「Personal Voice」功能打造與他們聲音類似的合成語音,從而與親朋好友連結。針對失明或低視能的使用者,「放大鏡」中的「偵測模式」帶來「Point and Speak」功能,可辨識使用者所指向的文字並進行朗誦,從而協助他們與家電等實體物品進行互動。

「Assistive Access」、「Live Speech」,以及更多 Apple 全新輔助使用功能將於今年稍晚推出。

Apple 執行長 Tim Cook 表示:「在 Apple,我們一直都相信最棒的技術,就是為所有人而打造的技術。今天,我們很興奮能分享多項驚人的新功能,這些功能奠基於我們長久以來在技術無障礙化方面的努力,讓每個人都有機會能夠創造、溝通,並做自己熱愛的事。」

Apple 全球輔助使用政策與倡議資深總監 Sarah Herrlinger 表示:「我們在 Apple 所做的一切,都包含讓功能更易於使用。這些突破性的功能在設計的每一個步驟,都將身心障礙社群成員的意見回饋納入考量,以支援各種各樣的使用者,並幫助人們透過全新方式互相連結。」

「Assistive Access」支援認知功能障礙使用者

「Assistive Access」功能利用設計上的創新,讓 app 和各項體驗去蕪存菁,留下最基礎的核心功能,從而減輕認知功能的負擔。這項功能反映了認知障礙使用者以及他們所信任的支持者的意見回饋,聚焦他們喜歡的各項活動,以及 iPhone 和 iPad 的基本功能:與親朋好友連結、拍攝並欣賞照片和聆聽音樂。

「Assistive Access」精簡 iPhone 上「相機」、「照片」、「音樂」、「通話」和「訊息」等 app 體驗,只留下必備的核心功能,以減輕認知障礙使用者的負擔。

「Assistive Access」包含專為電話和 FaceTime 打造的自訂體驗,兩者被整合成了單一「通話」app,以及客製化的「訊息」、「相機」、「照片」和「音樂」等體驗。這項功能提供不同於一般,擁有高對比按鍵和大型文字標籤的介面,以及可協助被信任的照顧者為他們所支持的身心障礙者量身打造使用體驗的工具。

舉例而言,針對較喜歡以視覺進行溝通的使用者,「訊息」納入一款只有表情符號的鍵盤,並提供錄製影片訊息並與親朋好友分享的選項。使用者與他們所信任的照顧者也可以為「主畫面」和 app 選擇更視覺化,以網格為基礎的佈局,或者,偏好文字的使用者則可以選擇基於欄位的佈局。

有了 iPhone 上的「Assistive Access」功能,使用者可以為「主畫面」和 app 選擇更視覺化,以網格為基礎的佈局,或者,偏好文字的使用者也可以選擇基於欄位的佈局。

The Arc of the United States 旗下 National Program Initiatives 計畫資深總監 Katy Schmid 表示:「智力和發育障礙的社群其實充滿創造力,但技術往往對這些人造成身體、視覺或知識方面的障礙。能在 iPhone 或 iPad 上帶來一項提供認知方面輔助使用體驗的功能,便意味著我們能在教育、就業、安全和自主能力方面打開更多扇門。代表著他們的世界能變得更遼闊,擁有更多可能性。」

「Live Speech」和「Personal Voice」等先進言語輔助使用功能

有了 iPhone、iPad 和 Mac 上的「Live Speech」功能,使用者將可以透過打字寫下他們所想要說的話,並讓裝置在電話或 FaceTime 通話,以及現場對話進行期間朗誦這些文字。使用者也可以將常用語句儲存起來,輕敲一下就可在與親朋好友和同事的即時對話中快速套用。「Live Speech」專為支援全球數以百萬計瘖啞人士或逐漸喪失言語能力的使用者而打造。

有了 iPhone、iPad 和 Mac 上的「Live Speech」功能,使用者將可以透過打字寫下他們所想要說的話,並讓裝置在電話或 FaceTime 通話,以及現場對話進行期間朗誦這些文字。

針對可能失去言語能力的使用者,如罹患肌萎縮性脊髓側索硬化症 (ALS) 或其他會逐漸侵蝕說話能力的疾病之人,「Personal Voice」是個簡單而安全的方式,讓他們得以創造與自己聲音相似的語音。

使用者可以透過讀出一系列隨機文本提示,在 iPhone 或 iPad 上錄製 15 分鐘的音訊,以創造出一個「Personal Voice」。這項語音輔助使用功能利用裝置端機器學習,確保使用者的資訊私密而安全,並與「Live Speech」流暢整合,讓使用者能在與親朋好友連結時使用自己的「Personal Voice」1

「Personal Voice」讓可能失去言語能力的使用者得以創造與他們的聲音相似的語音,並和「Live Speech」流暢整合,讓使用者能在與親朋好友連結時使用自己的「Personal Voice」。

在 2018 年確診 ALS 後,非營利組織 Team Gleason 董事會成員及 ALS 權利倡導者 Philip Green 的聲音已經歷巨大改變,他表示:「最重要的事,終究是能夠與親朋好友溝通。如果你可以透過一個跟你自己的聲音很相似的語音,告訴親朋好友說你愛他們,世上的一切都會截然不同,而僅花費 15 分鐘,便能在 iPhone 上創造自己的合成語音,實在是一件非凡的事。」

「放大鏡」中的「Point and Speak」功能讓視覺障礙使用者可以更輕易地與擁有數個文字標籤的實際物體互動。舉例來說,使用微波爐等家電時,「Point and Speak」會結合「相機」 和光學雷達掃描儀的輸入,以及裝置端機器學習,從而於使用者手指在數字鍵盤上移動時,根據其位置朗誦出按鍵上的文字。2。「Point and Speak」內建於 iPhone 和 iPad 上的「放大鏡」app,適合與「旁白」共同使用,並可結合「人物偵測」、「門偵測」和「圖片描述」等其他「放大鏡」功能使用,引導使用者掌握周遭環境。

其他功能特色

  • 失聰或重聽的使用者可以直接將 Made for iPhone 助聽裝置與 Mac 配對,並自訂這些裝置,以創造舒適聆聽環境3
  • 「語音控制」在文字編輯裡加入拼音建議,讓透過語音打字的使用者能夠在「do」、「due」和「dew」等類似讀音中選出正確的字詞4。此外,有了「語音控制指南」,使用者可以學習在 iPhone、iPad 和 Mac 上利用語音指令取代觸控和打字的一些秘訣和技巧。
  • 使用「切換控制」的身體和運動障礙使用者可以將任何切換控制項化為虛擬遊戲控制器,以在 iPhone 和 iPad 上遊玩他們最愛的遊戲。
  • 針對低視能使用者,Finder、「訊息」、「郵件」、「行事曆」和「備忘錄」等 Mac app 中的「文字大小」變得更容易調整。
  • 對快速動畫反應敏感的使用者可以自動在「訊息」和 Safari 上把內有移動物品的的影像暫停,例如 GIF 等。
  • 「旁白」使用者來說,Siri 語音聽起來愈發自然且富於表達情感的力量,縱使高語速狀態下回饋仍然正面;使用者也可以在 0.8 倍速到 2.0 倍速之間進行選擇,從而自訂 Siri 對他們講話時的語速。
Made for iPhone 助聽裝置可直接與 Mac 配對並進行自訂,以爲使用者創造舒適聆聽環境。

在全世界慶祝「全球輔助使用意識日」

為了慶祝「全球輔助使用意識日」,Apple 將於這週推出新功能、精選,以及更多精彩內容:

  • SignTime 服務將於 5 月 18 日在德國、義大利、西班牙和南韓推出,以選用的手語口譯機連結 Apple Store 和 Apple 支援的顧客。這項服務已提供給美國、加拿大、英國、法國和日本的顧客使用5
  • 世界各地的特定 Apple 零售店據點這整週都提供資訊豐富的課程,幫助顧客探索輔助使用功能,而 Apple Carnegie Library 將與手語使用者和譯者合作,帶來一場 Today at Apple 課程。Justina Miles。Apple 零售店據點提供全年開放的團體預約,因此是社群團體一同學習輔助使用功能的好方法。
  • 「捷徑」加入「Remember This」功能,協助認知障礙使用者在「備忘錄」中建立視覺化日記,方便輕鬆參考或反思。
  • 這一週,Apple Podcast將提供一系列關於輔助使用技術給社會帶來的影響的節目;Apple TV app 則播出來自身心障礙社群的著名說書人; Apple Music 則會帶來跨音樂類型的美國手語 (ASL) 音樂影片。
在 App Store 上,三位身心障礙社群領導者將分享自己生為瘖啞人士的經驗,以及輔助及另類溝通 (AAC) app 在他們的人生中所帶來的顛覆性影響。
  1. 「Personal Voice」可透過搭載 Apple 晶片的 iPhone、iPad 和 Mac 建立,並提供英文版本。
  2. 「Point and Speak」將可於配備光學雷達掃描儀的 iPhone 和 iPad 裝置使用,提供英文、法文、義大利文、德文、西班牙文、葡萄牙文、中文、粵語、韓文、日文和烏克蘭文。
  3. 使用者將能把 Made for iPhone 助聽裝置與搭載 M1 晶片的特定 Mac,以及所有搭載 M2 晶片的 Mac 裝置配對。
  4. 「語音控制」拼音建議將提供英文、西班牙文、法文和德文版本。
  5. SignTime 服務已於美國和加拿大以美國手語 (ASL) 提供,並於英國、法國、日本和澳洲分別以英國手語 (BSL)、法國手語 (LSF)、日本手語 (JSL) 和澳洲手語 (Ausian) 提供。5 月 18 日當天,SignTime 將於德國、義大利、西班牙和南韓分別以德國手語 (DGS)、義大利手語 (LIS)、西班牙手語 (LSE) 和韓國手語 (KSL) 提供。

史塔夫短評:身心障礙者能更便利使用iPhone和 iPad