Apple Vision Pro が装着者の目の画像を外部ディスプレイに表示すると Apple が発表したときは驚きだったが、それは Apple が他に公開を検討しているものに比べれば大したことはない。
ラッセル・T・デイヴィス監督のドラマ「イヤーズ・アンド・イヤーズ」では、ティーンエイジャーたちが顔の前に巨大なデジタルアバターを浮かび上がらせるデバイスを装着します。例えば、アバターは漫画の猫のように表示されます。Appleはこのドラマに注目していたようで、Vision Proの新たな特許出願には猫が登場しています。
Apple Vision Proには、装着者の目の映像がヘッドセットの外側に表示されるEyeSightシステムが既に搭載されています。特許出願「強化されたインタラクションを促進するウェアラブルデバイス」では、この仕組みの詳細が述べられていますが、さらに踏み込んで、「外部の観察者が装着者とインタラクトしたり関わったりする能力」を低下させないようにするための具体的な対策が示されています。
比較的短い特許出願で、約6,000語と20点ほどの図表で構成されています。しかし、EyeSightをさらに拡張する提案が満載です。
「装着者が猫の役を演じるゲームをプレイしている場合」には、「(表示される)ユーザーの目や顔が猫のように見えるように修正される可能性がある」と示唆されている。
「HMD(ヘッドマウントディスプレイ)は、装着者の顔や目のライブビデオフィードを単に表示するだけでなく、ユーザーの目の動きや表情などを追跡および/または模倣する漫画やその他のデジタルレンダリングされた顔や目を表示することができる」と続けている。
「別の例として、装着者の顔や目の表示は、装着者が体験している仮想環境の状況に応じて変化する可能性があります」とAppleは述べています。「例えば、仮想環境で雨が降っている場合、ユーザーの目や顔の上、あるいは目の前に雨が見える場合があります。」
Vision Proヘッドセットが他の誰よりも楽しい時間を過ごしていることを示す特許の詳細
AppleはVision Pro装着者の漫画的表現に力を入れており、その説明の多くはMemojiのより精巧なバージョンのように聞こえる。「ユーザーが驚きなどの感情を表現した場合(視覚的な手がかり、生体認証データ、ユーザーコマンド、またはその他の適切な技術によって検出)、表示される目を強調、修正、誇張するなどして、漫画的で装飾的な驚きのサインを示すことができる」とAppleは提案している。
「同様に、装着者が怒っている場合、ディスプレイに表示される目が修正されたり、誇張されたりして、赤くなったり燃えているように見えたりする可能性がある」とアップルは述べている。
もうすぐ、口論している相手を見る必要がなくなります。
Vision Proの装着者に誰かが近づいた際に何が表示されるかについて、奇妙な示唆が一つあります。特許出願には、「プロセッサは、観察者が装着者の既知の接触者と一致するかどうかを判定するようにさらに構成され、観察者が装着者の既知の接触者と一致すると判定された場合、装着者の識別可能な身体的特徴を隠すことで、撮影された最初の画像を修正する」と記載されています。
顔に巨大なヘッドセットを装着するのが恥ずかしいという方は、Vision Proを使えば変装できるかもしれません。話すときは声を低くすることを忘れないでください。
この要素を除けば、特許出願全体の目的は「装着者と外部観察者との間のインタラクションの強化」を促進することです。ただし、提案では、Vision Proを試してみたいだけの迷惑な外部観察者に対して、ヘッドセットが「邪魔しないでください」という画像を表示する可能性も示唆されています。
将来拡張されたVision Proヘッドセット
AppleのVision ProのテレビCMには、「スター・ウォーズ」のルーク・スカイウォーカーが耐爆ヘルメットをかぶっている映像が挿入されています。普通のヘルメットですが、顔全体が金属かプラスチックの頑丈な壁で覆われています。
Appleは「スター・ウォーズ」を目にした。これはもしかしたら古いアイデアか、後に廃案になったものなのかもしれないが、この特許出願の図面には、水泳用ゴーグルではなく防爆シールドのように顔全体を隠すVision Proのバージョンが含まれている。
防爆シールドが下がっているので、何も見えません。しかし、外部の観測者には見えます。
「[このHMDの例]は[Vision Pro]と実質的に同じであり、同一または類似のコンポーネントを含む可能性がありますが…装着者の顔のより大きな部分を覆うように構成されています」とAppleは述べています。「[装着者の顔のより大きな部分を覆うため…外側に向いたディスプレイはより大きくなり…そのため、例えば装着者の鼻や口など、装着者の顔のより多くの特徴を表示できます。」
比較的短い特許出願であっても、アイデアのバリエーションは事実上無数にあります。漫画風の眉毛やブラストシールドのようなアイサイトなど、より繊細なアイデアも数多くあります。
たとえば、ユーザーの目を映す EyeSight 画面では、部屋の周囲の照明に合わせてその画像の照明を微妙に変更することもできます。
Vision Proはこれまで、このような非常に微妙な効果を追求してきましたが、EyeSightは既に、視聴者に目の虚像を提示する点について批判を受けています。AppleはVision Proを、ヘッドセットの外側にあらゆるものを表示する、より広い世界への第一歩と捉えているのかもしれません。
この特許出願は、ジョニー・アイブ氏とアラン・ダイ氏を含む8人の発明者によって発明されたとされています。アイブ氏は最初の発明者として記載されていますが、彼がAppleを退社した後にこの特許に取り組んだ可能性は低いでしょう。
むしろ、彼の研究は、2017 年 6 月まで遡るバージョンの履歴を持つこの特許出願の根幹にあると考えられます。