Appleは、仮想現実ヘッドセットや「Apple Glass」のようなヘッドマウントデバイスと統合できるいくつかのタイプの3Dフロアマッピングシステムを研究している。
米国特許商標庁が木曜日に公開した3件の特許出願の中で、Appleはセンサーデータを使って物理的環境の3次元表現を生成するためのさまざまな方法を詳述している。
3つの特許はすべて「部屋のスキャンに基づくフロアプラン生成」という同じ名称ですが、具体的な内容は異なります。例えば、1つの特許では、スキャン処理を用いて深度マッピングと光強度画像データに基づいて3Dデータを取得できるシステムについて説明していますが、もう1つの特許では、この種のデータはライブカメラ映像から取得できると説明されています。
フロアマッピングの具体的な目標も若干異なるようです。特許の1つは、このデータが2Dセマンティックデータに基づいて物理環境内の床から天井までの壁をどのように識別するかを詳細に説明していますが、2つ目と3つ目の特許は、コーナーと小さな壁に焦点を当てています。
この環境データを取得・解析する目的は、モバイルデバイスを用いて正確かつ効率的な計測値やフロアプランを提供することです。Appleによると、現状では既存の技術ではモバイルデバイスから適切なフロアプランを生成することができません。
Apple によれば、このフロアマッピングデータは、iPhone、iPad、あるいは頭に装着するデバイスなど特定のデバイスを通じてユーザーに提供できるという。
モバイルデバイスを使用して部屋のデータを収集する様子を表す図。
3 つの特許すべてに含まれる文には、「例示環境 400 のシステム フローは、画像を表示するための画面および/またはヘッドマウント ディスプレイ (HMD) などの立体画像を表示するための画面を備えたデバイス (たとえば、図 1 および 3 のデバイス 120) に表示できます」とあります。
特許には、画像や深度センサー情報などのセンサーデータから物理環境の3D表現を生成できると記されています。これは、最新のiPhoneが収集できるタイプのデータです。おそらく、Appleのヘッドマウントデバイスも同様に収集できるでしょう。
「いくつかの実装では、フロアプランには部屋の2Dトップダウンビューが含まれます。フロアプランは、例えば線やその他のグラフィック要素を用いて、壁、障壁、または部屋の範囲のその他の制限をグラフィカルに描画することにより、部屋の境界をグラフィカルに描画することができます」と特許には記載されています。
「フロアプランでは、壁の端、ドア、窓などの壁の特徴の位置と形状を図で表すことができます。」
特許には、Feng Tang、Afshin Dehghan、Kai Kang、Yang Yang、Yakang Liao、Guangyu Zhaoが発明者として記載されています。このうちFeng Tangは、AppleのFace IDシステムの開発に携わっており、これはセンサーを用いた3Dモデル生成にも関連しています。
Appleは過去にも、屋内の床面マッピングに関する特許を出願しており、特に仮想現実(VR)や拡張現実(AR)に関連したユースケースも含まれている。2020年には、Apple VRデバイスの使用時にユーザーが壁や家具にぶつかるのを防ぐシステムに関する特許を出願した。
クパチーノを拠点とするこのテクノロジー大手は、ユーザーを仮想環境または部分的仮想環境に没入させる複合現実バイザーや、デジタル情報を現実世界に重ね合わせる軽量メガネなど、複数のヘッドマウントデバイスに取り組んでいると考えられている。
Apple は毎週のように多数の特許を申請しているため、それらの特許は同社の現在の計画や新機能やデバイスの市場投入までの時間を示す指標としては不十分だ。