将来の iPhone と iPad はユーザーがディスプレイに触れなくても動作する可能性があり、Apple はデバイスに触れることが望ましくない状況で指や Apple Pencil を画面に近づけて選択やジェスチャーを可能にする可能性を検討している。
タッチスクリーンは、その名の通り、ディスプレイに触れることで操作するシステムで、ほとんどのスマートフォンやタブレットユーザーにとって非常に使いやすいシステムです。料理中などで手が汚れている時など、画面に触れることを避けたい場合もありますが、Siriなどのデジタルアシスタントの機能が充実することでこの問題は軽減されるかもしれませんが、指で直接デバイスを操作することに比べれば、到底及ばないと言えるでしょう。
ディスプレイへの継続的な接触に依存しない、強化されたジェスチャーを作成できる可能性もあります。タッチ操作と同時に指を画面上でホバリングさせる機能により、全く新しいタイプのジェスチャーやコントロールが実現する可能性があります。
しかし、ホバーベースのインターフェースは限定的な形では以前から存在していましたが、従来のタッチインターフェースとはシームレスに連携しません。実質的に同じ媒体を通して2つの異なるインターフェース操作を習得することは、一部のユーザーを混乱させる可能性があります。
火曜日に米国特許商標庁からアップルに付与された「近接ベースおよび接触ベースの入力を介してユーザーインターフェースオブジェクトと対話するためのデバイス、方法、およびユーザーインターフェース」に関する特許は、これら両方の分野における問題を解決することを目的としている。
Apple のソリューションには、タッチ感度面上のスタイラスや指などの入力オブジェクトの近接性を検出するために使用される 1 つ以上のセンサーと、ディスプレイとの接触の強度を検出するために使用される 1 つ以上のセンサーがあります。
特許では、スタイラスを検出することで何が読み取られ、それが位置決めのために何を解釈するかが示唆されている。
ホバリングしたアイテムの検出自体は目新しいものではないが、Appleの特許は、要素の存在を検出するというよりも、ユーザーインターフェースが要素とどのようにインタラクトするかに焦点を当てている。今回の場合、スタイラスや指がディスプレイからどれだけ離れているか、スタイラスの角度、位置、そして特定の強さや圧力でディスプレイに接触したタイミングが重要となる。
現在の状態と以前に実行されたアクションに応じて、インターフェースは反応し、ユーザーにさまざまなオプションを提示します。
例えば、インターフェースはスタイラスがディスプレイの特定の範囲内にある場合にのみユーザーの操作を考慮し、スタイラスが画面上にある領域にアイコンを表示して、ユーザーの操作を待機させることができます。そして、インターフェースに追加された要素をスタイラスで押すと、他のアクションがトリガーされる可能性があります。
押す強さや圧力によって異なるアクションを解釈することも可能です。例えば、強く押すと別の選択としてカウントされたり、一部のiPhoneモデルに搭載されている3D Touchのように、オプションをさらに変更したりすることができます。また、押している間の長さも測定して入力に利用することができ、長押しすると、短いタップや押し込みとは異なるアクションを開始できます。
ホバーメカニクスを使用して画面を操作するさまざまな状態の例
この特許では、インターフェースオブジェクトがスタイラスや指のホバリング位置を追跡して動き回り、選択操作と同様に画面に接触する方法も示唆されています。スタイラスや指のホバリング位置を継続的に監視することで、ユーザーはより複雑な操作をジェスチャーとして実行できるようになります。
例えば、ユーザーは指で掴む動作で文書からテキストや画像を切り取り、その後、指を握ったまま手全体を文書の別の部分に移動させることができます。その間、画面上のカーソルは、手がホバーしている場所に基づいて移動し、アイテムを配置できる場所を示します。その後、ユーザーは動作を反転させて切り取ったコンテンツを放し、カーソルがあった場所に貼り付けたり、スタイラスを近接範囲から外したりすることができます。
Apple はまた、同様のホバリング機構を使用して、位置インジケータの視覚的特性を変えたり、ユーザーに範囲を示したり、インターフェース自体の要素を変更したりすることもできると示唆している。
特許の公開は、Apple が特許に記載されているコンセプトを将来の製品やサービスに取り入れることを保証するものではないが、同社の研究開発活動の関心領域を示している。
Appleがホバーベースのインタラクションを検討したのは今回が初めてではありません。2016年の特許では、キーボードやトラックパッドの近くにインライン近接センサーを設置することを示唆しており、2010年の特許ではタッチスクリーンの近接センサーに特化していました。
Appleは2019年の特許において、ジェスチャーや物体の握り方を検知するなど、力覚センサー付きグローブを使って入力操作を強化する方法も検討しています。このテーマを引き継ぐ形で、2019年の別の特許出願では、ユーザーが指を押すと指の側面を軽く圧迫するフィンガーデバイスを装着することで、タッチスクリーンで入力する際に触覚的なフィードバックを与えることが提案されています。
