Apple ARハードウェアは、レンズや外部カメラを動かして、「Apple Glass」の装着者に、見ているものを正確に焦点に合わせる機能を提供する可能性がある。
Appleは、プライバシー、注意散漫の検出、通知の読み取りなど、視線追跡に関する特許を多数取得しています。中には、見ているものだけをレンダリングしたり、それ以外の部分の解像度を下げて電力を節約したりすることでApple ARを高速化することだけに特化した特許もいくつかあります。
しかし今回、「仮想現実および拡張現実システムのためのフォーカス」という新たな特許が取得され、視線追跡機能のさらなる拡張が試みられています。これは、自動調整レンズに関する以前の別の特許出願を基盤としており、視線で外部カメラを操作できる可能性も秘めています。
Appleは、「ARアプリケーションでは、視線追跡情報を使用して、外部カメラをユーザーの視線の方向に焦点を合わせ、ユーザーが見ている物体にカメラが焦点を合わせるようにすることができます」と述べています。
「ARやVRアプリケーションでは、視線追跡情報を使用して目のレンズの焦点を調整し、ユーザーが現在ディスプレイ上で見ている仮想コンテンツがユーザーの目の輻輳と一致する適切な輻輳を持つようにすることができます」と続きます。
つまり、この特許は視線を追跡する方法ではなく、追跡された情報をどう扱うかに関するものです。例えば、ユーザーは仮想会議に参加している可能性があり、その場合、実際の空間の様子が複数のカメラを通して中継されます。
ユーザーが左を向くと、その物理的な部屋に設置されたカメラが自動的にフォーカスを合わせ直したり、最適な視界を確保するために位置を調整したりするよう指示される可能性があります。「外部カメラには、環境内の物体や表面に自動的に焦点を合わせるオートフォーカス機構が搭載される可能性があります」とAppleは述べています。
しかし、これは最適な視界を提供するだけではない。Appleが「Apple Glass」などのヘッドマウントディスプレイ(HMD)のテストで発見したであろう問題を修正することも目的としているようだ。
「従来のAR HMDでは、オートフォーカス機構がユーザーが見ていないものに焦点を合わせる可能性があります」とAppleは述べています。これはおそらく、視線追跡機能を搭載していないHMDで発生すると思われますが、Appleは具体的な内容を明らかにしていません。
視線追跡は、「外部カメラのオートフォーカス機構をユーザーの視線の方向に向けるように指示し、外部カメラがユーザーが現在見ている環境内のオブジェクトに焦点を合わせる」ことができるとだけ書かれています。
視線追跡を示す特許の詳細
最終的な目標は、ユーザーが視聴しようとしているものを常に表示することです。この特許は、ユーザーが視聴しているものが録画映像である場合にも、それがどのように実現されるかについても規定しています。
「一部の実施形態では、録画されたビデオの再生中に眼球レンズの焦点調整を適用できます」とAppleは述べています。「奥行き情報はビデオと一緒に記録することも、コンピュータグラフィックスから取得することもできます。」
この特許は、D. Amnon Silverstein 氏のみに帰属します。同氏の以前の関連研究には、動き検出を使用して画像を自動フォーカスする特許が含まれています。
HomePodでAppleの最新ニュースをいつでもチェック。「Hey Siri、AppleInsiderを再生して」と話しかけると、最新のAppleInsider Podcastが聴けます。または、HomePod miniに「AppleInsider Daily」と話しかけると、ニュースチームからの速報がすぐに聞こえてきます。Apple関連のホームオートメーションに興味があるなら、「Hey Siri、HomeKit Insiderを再生して」と話しかければ、最新の専門ポッドキャストがすぐに聴けます。