Appleの仮想入力ツール特許はOS Xに次世代のUIインタラクションをもたらす可能性がある

米特許商標庁が火曜日に認めたアップルの特許には、トラックパッドなどの「仮想入力」がさまざまなインタラクティブなオブジェクトとともに画面上に再現され、ユーザーがプログラムや文書を素早く操作できるシステムが記載されている。

Appleの米国特許番号8,427,438「仮想入力ツール」は、現代のコンピュータオペレーティングシステムで提供されている既存のユーザーインターフェースに対するシンプルながらも効果的な改良です。入力デバイスからのデータを変換し、それをカーソルの動きにマッピングする従来のUIとは異なり、この特許はより直接的なインタラクションを可能にするシステムを概説しています。

この特許はまず、AppleのMacBook Proに搭載されているマルチタッチトラックパッドなどの物理入力デバイスの仮想表現を画面上に表示することを要求しています。仮想トラックパッドの座標には、実際のデバイスの対応する座標がマッピングされており、一部の実施形態では、この座標はデジタル版に比例します。仮想トラックパッドの境界内には、物理​​デバイスと直接関連付けて表示される様々なインタラクティブ要素が表示され、カーソルを探すことなく直接選択・操作できます。特許によると、インタラクティブオブジェクトには、アプリケーションウィンドウ、ディレクトリ、開いているメディアファイルなどが含まれます。

特許概要より:

入力デバイスの仮想表現は、特定の時間に提示できるデータ量 (オブジェクトの仮想表現など) を増やす 2 次元領域にすることができ、それによってユーザーのエクスペリエンスが向上します。

この方法を実装することで、トラックパッドの表面全体を効果的に活用し、対応する仮想環境を操作できるようになります。特許文面に記載されているように、ユーザーは1本指でのタップ＆ホールドなどのマルチタッチジェスチャーを使用することで、システムをさらに強化できます。

仮想トラックパッドのイラスト。

仮想システムは、物理デバイス上の入力を検出する識別エンジン、仮想インターフェイス ツールやコンテンツを描画するレンダリング エンジン、物理座標と仮想座標を関連付けるマッピング エンジン、仮想デバイスをカスタマイズする設定エンジン、ユーザー インタラクションを処理して画面上での変換方法を指定するインタラクション エンジン、および仮想デバイス上でインタラクティブなオブジェクト表現を作成するプレゼンテーション エンジンという 6 つのエンジンによって駆動されます。

おそらく6つの中で最も重要であり、特許の説明に最も役立つのは、インタラクションエンジンです。いくつかの実施形態では、このエンジンはユーザーがトラックパッドの特定の領域をタッチまたはタップしたという信号を受信します。この情報に基づいて、タッチされた領域が仮想トラックパッドにマッピングされ、その領域に関連付けられたインタラクティブオブジェクトがアクティブ化されます。

左上のオブジェクトを選択すると、アセットがハイライト表示されます。

別の例として、スワイプなどのマルチタッチジェスチャが認識されます。仮想デバイス上の関連付けられたオブジェクトは、事前に定義された一連のルールに従って操作されます。例えば、選択された象限にインターフェースウィンドウをレンダリングするといった操作です。マルチタッチジェスチャは、仮想ディスプレイのサイズや操作を制御するためにも使用できます。例えば、4本指スワイプで仮想ビューを最小化し、別の入力でインターフェースを拡大することができます。

最後に、コントロールオブジェクトを仮想トラックパッドに統合することで、UIを無効化または終了することができます。このメカニズムは、仮想ツールの他の領域と組み合わせて使用​​することもできます。例えば、ユーザーは指がコントロールオブジェクトに接触し続けていれば、インタラクティブなコンテンツを操作できますが、永続的な変更は加えられません。指がこの領域から離されると、インタラクションはキャンセルされます。

制御オブジェクト（318）が強調表示されています。

Apple の多くの特許と同様に、この仮想入力デバイスが消費者向け製品に採用されるかどうかは不明だが、マルチタッチ入力への推進により、同社がタッチスクリーンディスプレイ付きのラップトップを開発しようと決めた場合、この技術は有効な応急処置となる可能性がある。

Apple の仮想ツールの特許は 2009 年に初めて申請され、発明者は John O. Louch とされている。