Apple TV のリモコンや iPhone を使用すると、室内の複数のデバイスを制御できます。ユーザーは、操作したいアイテムの方向に手持ちのコントローラーをジェスチャーすることで、制御するハードウェアを選択できます。
当初、リモコンシステムは、1つのコントローラーで1つのデバイスを操作するために開発されました。例えば、テレビのリモコンで1台のテレビを操作するといった具合です。技術の進歩に伴い、1つのコントローラーで複数のデバイスを操作できるようになりました。例えば、1つのコントローラーでテレビとビデオデッキの両方を操作できるのです。
iPhone のようなデバイスは、通常は関連アプリを実行してソフトウェア ボタンをタップすることで、さまざまな種類のハードウェアを制御できるまでに進化しました。
制御可能なデバイスの数は時代とともに増加してきましたが、どのデバイスを制御するかを選択するという点は変わっていません。システムの種類に関わらず、ユーザーは制御ハードウェア上で制御したいデバイスの種類を選択しなければ、デバイスを制御できません。
ディスプレイのない Apple TV リモコンなど、ボタンやフィードバック機構が少ない非常に小さなコントローラーの場合、ユーザーが制限されたインターフェースで別のデバイスを選択することは現実的ではありません。
米国特許商標庁が認可した「無線測距に基づく電子機器の制御」と題する特許において、Apple は、ユーザーがコントローラ自体の位置と向きによって制御したいデバイスを選択できるシステムを示唆している。
つまり、ユーザーは、ボタンを押して制御対象のデバイスを切り替えるのではなく、リモート コントロール デバイスに、そのデバイスが向いているテレビやスピーカーにコマンドを送るように指示することができます。
リモコンは、複数の無線ベースのデバイスと通信できるだけでなく、室内の仮想デバイスも制御できます。
ユーザーがリモコンで突きや揺らす動作などのジェスチャーを実行すると、リモコンはこれを何かを制御する意図と判断でき、次にリモコンに何を制御する必要があるかを判断するように指示します。
無線測距を使用してリモコンと近くの制御可能な物体との距離、およびリモコン自体の向きを決定することにより、リモコンは理論的にはユーザーが制御したいものを理解し、その特定のデバイスを制御するアクションを実行できるようになります。
このシステムは、無線伝送特性や計算を用いて距離を算出するほか、他のデバイスが発信しリモコンが拾う超音波チャープ音を検出するといった他のシステムも利用できます。ジャイロスコープ、コンパス、加速度計を用いてデバイス自体の向きを判定することも可能です。
Apple は、この技術を使ってコンピューター、ディスプレイ、プリンター、オーディオ機器、家電製品、ホームオートメーション、環境制御、アクセサリなど、さまざまな種類のオブジェクトを制御できると示唆していますが、仮想オブジェクトの制御にも使用できる可能性があります。直接制御できない室内のプロキシオブジェクトを使用すると、リモコンは特定の場所に向けられていることを、サーモスタットなど、部屋の外にある別のものを制御する意図として解釈する可能性があります。
ジェスチャーは、特定のデバイスの制御を開始したり、ユーザーが実行したい調整の種類を指示したりするために使用できます。
ジェスチャーを使うことで、ボタン数が限られているリモコンにも機能が追加され、操作できる範囲が広がります。また、手首をひねるだけで音量調節ができるなど、デバイスをより細かく操作できるようになるでしょう。
この特許には、発明者としてJames H. Foster氏とDuncan R. Kerr氏が記載されています。この特許は2019年7月29日に最初に出願されました。
Apple は毎週多数の特許を申請していますが、特許の存在は Apple の研究開発活動の関心領域を示すものであり、記載されているコンセプトが将来の製品やサービスに使用されることを保証するものではありません。
Appleは、ユニバーサルなジェスチャーコントロールリモコンのアイデアを特許で繰り返し取り上げており、このコンセプトは長年にわたり時折浮上してきました。2009年には、任天堂WiiのようなApple TVリモコンの開発を目指しており、2012年の特許ではリモコンの相対位置検出機能について言及されています。また、2014年にはApple TV用の「リモートワンド」コントローラーも公開されています。
ユニバーサルリモコンのコンセプトも繰り返し提案されており、2012年の特許出願では、複数のデバイスを管理するためのタッチスクリーンベースのコントローラーが提案されています。2013年の特許では、iPhoneを使用して「マルチメディアシステム内のシーンを保存および復元する」システムが提案されています。
最近の特許出願では、2020年2月に出願された「モジュール式壁面ユニットを用いた物体追跡および認証」において、スマートホームネットワークにおける新しいハードウェアの位置特定と設定を支援するために、コンセントの測位技術を活用することが示唆されています。超音波による位置検出は、周囲の状況を検出できるAR/VRヘッドセットの出願など、他の特許にも登場しています。