蘋果副總裁親自解釋,iPadOS 14 隨手寫功能如何開發而成?

作者 | 發布日期 2020 年 09 月 30 日 8:00 | 分類 Apple , iPad , iPadOS Telegram share ! follow us in feedly


蘋果 iPadOS 14 的一大亮點,即是名為「隨手寫」(Scribble)的新功能,可將 Apple Pencil 的手寫文字自動轉換成鍵入文字,無須切換使用螢幕鍵盤,背後即運用機器學習技術。蘋果軟體工程資深副總裁 Craig Federigh 接受知名機械科技雜誌 Popular Mechanics 採訪時,分享有關隨手寫功能的開發過程。

藉由 iPadOS 14 新加入的隨手寫功能,可用 Apple Pencil 在 iPad 上的任何文字欄位書寫,並自動轉換成鍵入文字,支援(繁體/簡體)中文與英文混合書寫。若在錯誤書寫上塗劃可將字詞刪除,圈選字詞則能反白以剪下與貼上。

(Source:蘋果

Craig Federigh 表示,隨手寫功能的基礎其實來自數據蒐集。

為了解手寫筆畫,蘋果於世界各地找人,給予一支鉛筆,讓他們快速書寫、緩慢書寫、傾斜書寫,用不同方式寫下文字,再進行機器學習。

這種方法有別於掃描或分析現有筆跡等方式,對蘋果的技術而言,僅靠靜態例子是不夠的,需要查看構成每個字母的筆畫是如何下筆,從中了解人們如何書寫。這還意味著蘋果的軟體可在書寫過程中知道使用者在寫什麼,結合語法的數據資料,甚至可以預測下一筆要寫的筆畫、字母或單字。

大多數蘋果產品運用的機器學習技術一樣,所有運算處理都是在裝置上完成。Craig Federigh 指出,隨手寫功能必須在用戶持有的 iPad 上即時完成書寫轉換,代表裝置本身的運算能力必須擁有一定程度的等級,才能符合功能需求。

(首圖來源:蘋果

延伸閱讀: