為了研發iPadOS 14「隨手寫」功能, 蘋果曾在世界各地找人寫字

為了研發iPadOS 14「隨手寫」功能, 蘋果曾在世界各地找人寫字

iPadOS 14先前已經開始推動更新,其中一項主要功能是名為「隨手寫(Scribble)」的功能,可以讓你手寫輸入的文字,即時辨識轉換成鍵入的文字。

透過 Apple Pencil 和手寫筆記完成更多工作

iPadOS 14 為搭配 Apple Pencil 的 iPad 帶來「隨手寫」功能,讓使用者能在任何文字欄位中進行書寫,這些書寫的文字會自動轉換為鍵入的文字,進而讓使用者輕鬆回覆 iMessage 訊息或在 Safari 中搜尋。所有手寫和文字轉換都在裝置上進行,以確保私密與安全。

寫筆記時,智慧型選取功能會利用裝置上的機器學習功能來區分手寫字和繪圖,如此即可輕鬆選取、剪下手寫文字,並將這些文字做為鍵入的文字來貼上另一份文件中。形狀辨識功能能讓使用者繪製完美的幾何形狀,並能在「備忘錄」插入實用圖表與插畫時,即時加入這些幾何形狀。

「隨手寫」一開始即支援英文、繁體中文和簡體中文,以及中英混合,因此使用者可以同時書寫英文和中文單字,不需切換語言。 

 為了研發iPadOS 14「隨手寫」功能, 蘋果曾在世界各地找人寫字

 

「隨手寫」的工作原理

蘋果公司軟體工程高級副總裁克雷格‧費德里希(Craig Federighi)在接受《大眾機械》Popular Mechanics 採訪時,談到了有關該功能工作原理。

Craig解釋說,隨手寫的功能,一樣是採用AI來辨識文字,因此基礎還是在數據收集。在功能開發過程中,蘋果找到了世界各地的人們,並讓他們使用Apple Pencil寫東西。

「為理解手寫筆劃,我們必須進行數據收集。我們在世界各地找人並讓他們寫東西。給他們一支筆,讓他們快速書寫,緩慢書寫,傾斜書寫。蒐集各種變化的數據。」

該方法不同於掃描和分析現有筆跡的這種相對傳統簡單方法。Craig表示,僅靠靜態的方式(也就是寫完掃瞄來收集數據)是不夠的。他們需要查看構成每個字的順序、邏輯、字母筆畫。 「如果你瞭解筆畫以及筆畫如何寫出來的,則可以用來消除所寫內容的歧義。」

他也強調,與蘋果產品的大多數機器學習功能一樣,所有這些智慧辨識都是在單機上完成的,而不需透過網路,這帶來了另一種挑戰。Craig表示,這意味著裝置的運算算能力必須足夠強大,以提供在本地執行所需的效能。

▶ 訂閱頻道+留言,送你萬元「OVO K1 智慧投影機」

使用 Facebook 留言

發表回應

謹慎發言,尊重彼此。按此展開留言規則