Appleは、マウスの表面ではなく、近くのテーブル上でのジェスチャーを検知するMac用の新しいMagic Mouseを研究している。
Appleが2009年にMagic Mouseを発表した当時、マルチタッチジェスチャーを搭載していました。その後、Magic Mouseは再設計され、さらに再設計されるという噂も流れています。
しかし、これらの噂は、USB-C充電ポートが底面にあるという、繰り返し発生する問題に集中しています。Appleが他に何かを検討しているという情報は全くなく、ましてやジェスチャー操作の追加など考えもしませんでした。
しかし、新たに取得された「拡張入出力機能を備えた電子機器」という特許は、まさにAppleが行ってきたことそのものです。タップやスワイプに加え、マウスを使ったジェスチャー操作も重要なアイデアです。
「マウスやその他の電子ポインティングデバイスは、筐体の側壁にセンサーアレイを備え、電子ポインティングデバイスの横方向に隣接する領域におけるユーザーの指の位置に関する情報を収集するように構成されている」と特許には記されている。「これらのセンサーは、発光ダイオードやレーザーなどの光源と光検出器に基づく光センサーであってもよい。」
「静電容量センサーは、電子ポインティングデバイスの横に隣接する領域でのユーザーの指の入力を収集するためにも使用される可能性がある」と続く。
これは「ユーザーが3次元のジェスチャーを行うことができる」ということを意味します。ジェスチャーは、「ユーザーが電子機器の近くで指や手を空中で動かす」ことで行うことができます。
つまり、将来のMagic Mouseは、Apple Vision Proの使用に非常に重要なジェスチャー検出の少なくとも一部を搭載する可能性があります。これを裏付けるように、特許には「1台以上の可視光カメラおよび／または1台以上の赤外線カメラ」を使用してジェスチャーを検出できると記載されています。
この特許では、カメラに加え、プロジェクターについても言及されています。マウスなどのデバイスには「プロジェクターが搭載されている可能性があり、例えば、画像を表面に投影する可能性がある」とのことです。
「投影される画像には、仮想キーや、ユーザーが指入力で選択できる視覚要素を含むその他のコンテンツが含まれる場合があります」と説明は続く。「例えば、複数の選択可能な領域（例えば、ファイルフォルダアイコンなどの視覚要素、英数字キーなどのキー、メニューオプション、テキスト、グラフィック、動画コンテンツなどのラベルなど）を含む画像を投影する場合があります。」
つまり、あらゆる表面にレーザー投影されるQWERTYキーボードが普及したのと全く同じように、マウスでも机上に画像を表示できるようになるのです。そして、その画像をタップすると、マウスのカメラがユーザーの位置を認識し、投影された操作を推測してくれるのです。
例えば、MacBook Proのように、ユーザーが指を動かすためのキーボードやマウスエリアが投影されているような感じですね。そして、まさにそれを示すイラストもあります。ただし、通常のキーボードとトラックパッドも付いています。
マウスはユーザーが見て触ることができる画像を投影できるが、MacBook Proでも同様だ。
あらゆる特許は、将来の用途や他社による将来の特許を予測しようとするものですが、今回の特許もマウス以外のものを列挙することで、まさにそれを実現しています。Appleは一般的に「マウスまたはその他のポインティングデバイス」といった表現を用いますが、今回ははるかに先を行くものです。
この機能はマウスで使用されていることに重点を置いていますが、同じ技術が次の用途にも使用できることも簡単に説明しています。
- トラックパッドまたはその他のポインティングデバイス
- ノートパソコン
- 組み込みコンピュータを搭載したコンピュータモニター
- タブレットコンピューター
- 携帯電話
- メディアプレーヤー
- 腕時計
- ペンダント
- ヘッドフォンまたはイヤピース
- ヘッドセット
他にも「テーブル、椅子、机、その他の家具に埋め込まれた電子機器」など、10 を超える例があります。つまり、マウスの横で指を叩くと、ショートカットが起動する可能性があるということです。
机の上にコーヒーカップを置くとMacが起動するかもしれません。指をテーブルの上に広げると、デバイスをピンチ＆ズームする動作になるかもしれません。
しかし、Appleは少なくとも、そのようなマウスやデスクが、それ自体が完全なジェスチャーとして機能するのではなく、ユーザーが他の入力を補完できるようにするという構想を持っているようだ。マウスや椅子は、「空中で動くユーザーの指やその他の体の部分の位置」を判定する、とAppleは述べている。
そして、この「追加のユーザー入力は、入力機能を拡張するのに役立ち、それによってボタン、タッチセンサー、ポインティングデバイスの移動センサーを使用して収集された情報を補完します。」
「ユーザー入力は、視覚的なオブジェクト（アイコンなど）の操作に使用される場合があり、[システム]にテキストを提供するために使用される場合もあります」と続き、「メニューの選択に使用される場合があり、および/または[システム]の機器を操作するために使用される場合もあります」。
つまり、オークションで「入札」ボタンをクリックし、手を振ってどのくらいの額まで入札したいかを伝えることができるのです。
あるいは、もっと実用的な話として、マウスの近くで手首を軽く動かすだけで、Macの画面上でカーソルを動かせるようになるかもしれません。ボタンの近くをクリックするだけで反応するように、軽く叩くような動きで、ハイライト表示されたチェックボックスをクリックするようにMacに指示できるかもしれません。
しかし、いつものように、この特許は主に何かがどのように機能するかに焦点を当てています。考えられるデバイスのリストは異例なほど包括的ですが、ユーザーがなぜこれらのいずれかを実行したいと思うのか、具体的な例を挙げていません。
マウスは近くの動きを感知できるが、iMacやトラックパッドも同様だ。
そして、他のすべての特許と同様に、特許が認められたという事実は、そのアイデアが将来の製品に採用されることを保証するものではありません。
この特許の発明者としてクレジットされている3人の中には、非常に多作なポール・X・ワン氏も含まれています。彼はこれまでに多数の特許と特許出願を保有しており、その中には、旧式のTouch BarをApple Pencilホルダーに置き換える特許も含まれています。
