Appleが将来的にMacにFace IDを導入することになれば、新たに公開された研究によると、同社がLiDARを使ってユーザーの手のジェスチャーを認識することもできるようだ。
Face IDは、2017年のiPhone Xの発売とともに初めてAppleデバイスに搭載されました。現在ではすべてのiPhoneと多くのiPadに搭載されていますが、Macにはまだ搭載されていません。
つまり、新たに公開されたAppleのジェスチャー検出に関する特許出願は、将来に大きな期待を抱かせる一方で、明言されていない要素がもう一つあるということです。記載されている技術は、ユーザーをスキャンしてジェスチャーを検出するもので、iMac、MacBook Pro、あるいはMacBook Airに搭載されるカメラセンサーのことです。
特許には1万2000語以上に及ぶ説明文の中にFace IDや「ロック」という言葉は一度も出てきませんが、カメラの使用については詳細に説明されています。前面カメラはジェスチャーの検出に使用できるとのことです。
こうしたジェスチャー検出がFace IDと同じ技術を採用する保証はなく、Appleの図面ではカメラがMacBookの画面下部に配置されることが示唆されています。しかし、それでもカメラはMacに向き合ったユーザーを検知できるように設置され、使用中は常にジェスチャーをスキャンすることになります。
特許出願から、手のジェスチャーを検出するシステムの詳細 — 画像提供: Apple
ここで Apple が関心を寄せているのは、同社が「一対のカメラ」と呼ぶものがどのようにして目の前にあるものを観察できるのかという点だ。
「手の動きやその他のジェスチャーは比較的素早い動きを伴う場合があります」と特許出願書には記されている。「そのため、従来のフレームベースカメラの画像のみを使用するジェスチャー認識システムは、精度や効率に欠ける可能性があり、あるいはそのようなカメラが使用する比較的低いフレームレートによって制限される可能性があります。」
そこでAppleは、静止画カメラではなく、広義では動画カメラとも言える「イベントカメラ」の使用を提案している。「イベントカメラは、各ピクセルで発生するイベントを捉え、多くのフレームベースのカメラよりもはるかに高速にユーザーの動きに関するデータを取得できる可能性があります」とAppleは述べている。
しかし、Mac の前で起こるすべての出来事を捉えるイベント カメラは、検出するものが多すぎるため、ジェスチャーを識別するのが難しくなるという問題があります。
「物理環境から得られる潜在的に膨大な量のイベントデータを分析および解釈する必要性により、イベントカメラベースのジェスチャ認識システムがジェスチャを迅速かつ効率的かつ正確に識別する能力が大幅に低下する可能性があります」とAppleは述べています。
同社が提案する解決策は、ユーザーの手が視界内に存在する可能性のある場所の周囲に、いわゆるバウンディングボックスを作成することです。これは、フレームベースカメラを用いて「イベントカメラのデータ分析において背景を考慮から除外する」ことで実現される可能性があります。
つまり、何が背景で何が前景のユーザーなのかを識別するということです。Appleのイラストでは、ユーザーの手を囲む境界ボックスが描かれていますが、これもまた手の認識を意味します。
その結果、特許出願では VR 内のオブジェクトを制御するためにジェスチャーが使用されていると説明されているものの、そのすべてが少なくとも何らかの形の Face ID を使用していることを示しています。
現時点では、Mac に Face ID が搭載されていない理由は、MacBook Pro のカバーが薄すぎてすべてのコンポーネントを収容できないためだと考えられています。
しかし、AppleはiPhone FoldとスリムなiPhone 17 Airの両方を発売すると予想されており、どちらも以前のモデルよりも薄型の筐体となるでしょう。もしかしたら希望的観測かもしれませんが、薄型デザインとこの特許により、MacのFace ID搭載は期待が持てそうです。
