Apple の AR および VR の取り組みに関する特許には現在、コンピューター生成現実によってプレイヤーの外見を変える方法、そしてハードウェア所有者が外見を変えたくない場合に何が起こるかに焦点を当てた特許が含まれている。
全てのキャラクターがユーザーの私服を着ていたら、ファンタジーバトルゲームとしてはあまり魅力的ではないでしょう。しかし、Appleはゲーム内での容姿の変更は望ましくない問題を引き起こす可能性があると主張し、それを防ぐ方法に関する特許を取得しました。
具体的には、「コンピュータ生成現実体験におけるアイデンティティに基づく包含/除外」という、新たに取得された特許により、プレイヤーの外見変更を防止します。また、必要に応じて、プレイヤーをCGRゲーム全体から除外することも可能です。
「デバイスが環境内のユーザーにCGR体験を提供している間、物理環境内の人々の表現は変更される可能性があります」とAppleは述べています。「例えば、マルチプレイヤーゲーム体験では、ユーザー以外の人物がモンスターや戦闘用アーマーを身に着けた姿で表示されることがあります。」
「しかし、様々な状況において、CGR体験にすべての人が含まれることは望ましくない場合があります」と説明は続く。「例えば、ユーザーの子供や安全担当者が、変更された形で表示されることは望ましくない場合があります。」
Appleが計画しているのは、ゲームやその他のマルチユーザーCGR環境にアクセスするユーザーを識別できるようにすることです。そして、そのユーザーの身元に応じて、外見の変更を禁止するか、除外するかを選択できます。
これは、CGRだけが見えるのか、それとも現実と仮想の物体が混在するARなのかによって異なります。誰かを現実から消すことはできませんが、外見の変化を防ぐことはできます。
この特許は主にCGR環境におけるユーザーの識別に関するものです。奇妙なことに、ログイン認証情報によるユーザー認識は含まれていません。ログイン認証情報による認識は万全ではありませんが、基本的な第一歩となるでしょう。
「(その代わりに)この方法は、CGR体験を提示しながら、シーンの画像を撮影し、その画像から人物を検出し、その人物の身元を特定するという手順を含む」とAppleは述べている。これは、AppleがFace IDの仕組みを説明する方法と同様の「ディープラーニングニューラルネットワーク」を使用している。
「最初の人物の身元は、(ユーザーのヘッドセットで撮影された)ピクセルセットのピクセルに分類器を適用することで決定されます」と説明されています。「分類器には特定の人物のポジティブ画像が与えられ、そのポジティブ画像を他の多数の人物のネガティブ画像(例えば、ライブラリにある数千枚の画像)と比較することで特徴ベクトルを生成します。」
特許の詳細。図501または502はCGR環境から除外できる。
つまり、ゲームに参加する各ユーザーは、Photosの顔認識とほぼ同じ方法で比較・識別されることになります。しかし、特許では代替案が提示されており、それは単に、誰かがゲームに参加する際に、そのユーザーが外見の変更を許可すべきか許可すべきでないかを選択するよう求めるというものです。
これは、マルチプレイヤー環境において、各ユーザーが異なる人物の外見の変化を認識できることを意味します。少なくともこの特許に関しては、認識機能はユーザーごとに設計されています。
この特許は、ダニエル・ウルブリヒト氏を含む7人の発明者によって発明されたものです。ウルブリヒト氏は以前、「Apple Glass」のようなヘッドセットでユーザーの視線を追跡する方法に関する特許出願も行っています。