将来的には、Apple の iPad 用 Scribble は、ユーザーが書いた内容に基づいて単語や文字の候補を提示する可能性があり、これは手書きの苦手な人の認識率向上を目的としています。
AppleがiPadOS 14で導入したScribbleにより、Apple Pencilを使ってiPadの画面に書き込むだけで、テキストフィールドにテキストを入力できるようになりました。このシステムは、タブレットの膨大な処理能力を最大限に活用し、可能な限りリアルタイムに近い処理を実現します。
これにより、さまざまな言語のユーザーがテキストを入力し、iPad がそれを自動的に認識して、入力したバージョンをフィールドまたはドキュメントに挿入できるようになりました。
標準的な手書き認識システムは、隠れマルコフ法など、文字の筆順といった要素に基づいていますが、Appleのシステムはそれを無視し、より普遍的なアプローチを採用しているようです。つまり、複数の言語を同時に、しかも高速に処理できるシステムです。
米特許商標庁が火曜日に認可した「リアルタイムの手書き認識の管理」と題する特許で、Apple はこうした機能がどのように動作するのかをその舞台裏で公開している。
特許には、「ユニバーサル認識装置」の使用が記載されており、これは「様々な言語や文字体系の文字の筆記サンプルを収録した大規模な多文字体系コーパス」を用いて学習されます。この学習は、言語、文字体系、筆順、筆画の方向に依存しません。
その結果、手動で言語を切り替えることなく、さまざまな手書き入力方法で混合言語認識を実行できる機械学習モデルが作成されます。
この特許は既存のScribble機能と同様に機能するようだ
このようなトレーニング方法は、従来の手書きとは全く異なる筆順で書かれた文字を認識できるなど、ユーザーにいくつかのメリットをもたらします。また、システムが言語を瞬時に切り替え、単語とその翻訳を母国語の文字で即座に書き出すことも可能になるかもしれません。
筆順を必要とせずに学習しますが、システムは筆順情報も認識しており、他の要素を判断するために活用できます。例えば、ある文字がシステムにとって曖昧な場合、筆順はユーザーが書きたい文字を特定するのに役立つ可能性があります。
考慮されるデータの量には、速度、テンポ、ストロークの連続性の変動も含まれる可能性があり、これらすべてが、ユーザーが書きたかった文字や単語をシステムに知らせることができます。
また、ユーザーが入力しようとしている可能性のある単語やフレーズを表示する候補表示エリアを画面上に設けることも提案されています。システムはリストから主要な候補を自動的に挿入しますが、ユーザーは代わりに他の用語を手動で選択することもできます。
これは、入力中の用語を自動的に補完または修正する既存のテキストツールに似たものになる可能性があります。Appleはまた、タブを使用して候補を素早く並べ替えたり、絵文字メニューへのアクセスなど、ユーザーの選択肢を広げたりすることも提案しています。
言語が主な焦点ではあるが、この特許では、ユーザーが絵文字を描くだけで文書に絵文字を入力することも可能になっている。
特許では、一連のストロークが時間の経過とともに薄れ、ユーザーが書き続けると画面から消えていくことも説明されています。この時間は、書き込んだ内容を処理し、入力したテキストを文書またはテキスト入力ボックスに挿入するためにも使用されます。
文字を認識できない場合、Apple はシステムが候補を提示できると示唆している。
この特許は当初 2019 年 7 月 8 日に出願され、Mei-Qun Xia、Jannes G. Dolfing、Ryan S. Dixon、Karl M. Groethe、Karan Misra、Jerome R. Bellegarda、Ueli Meier によって発明されました。
Apple は毎週多数の特許を申請しているが、特許の存在は同社の研究開発チームの関心領域を示しているものの、特許取得済みのアイデアが将来の製品やサービスに必ず採用されるという保証はない。
特許に記載されている機能の多くは、iPadOSのScribble機能の形で既に存在します。Apple Pencilを使ってテキストを書き込むと、文字が消え、必要な場所に自動的に入力されます。
現在、Scribble は対応言語が限られています。また、Scribble がインストールされているすべての言語を自動的に認識するのではなく、ユーザーは各言語のスクリプトのサポートを手動で有効にする必要があります。
Scribbleは現在、ユーザーが書き込んだ可能性のある他の単語や文字について提案していません。現時点では、Scribbleは最も可能性の高い候補を自動的に提示するため、ユーザーは誤った入力を削除または編集する必要があります。
HomePodでAppleの最新ニュースをいつでもチェック。「Hey Siri、AppleInsiderを再生して」と話しかけると、最新のAppleInsider Podcastが聴けます。または、HomePod miniに「AppleInsider Daily」と話しかけると、ニュースチームからの速報がすぐに聞こえてきます。Apple関連のホームオートメーションに興味があるなら、「Hey Siri、HomeKit Insiderを再生して」と話しかければ、最新の専門ポッドキャストがすぐに聴けます。
