Appleは、視聴者がカメラアングルを選択したり、より詳しい情報を知りたい要素を強調したりできるようにすることで、ライブスポーツを充実させる方法を研究している。
バスケットボールの試合を観戦する目的は、競技の迫力や競争、あるいは地元のチームを応援するためだけかもしれませんが、Appleは、それだけではないと考えています。例えば、ある選手を見ていて「いいシューズを履いているな」と思ったことがあるなら、Appleはその選手についてもっと詳しく知る機会を提供するべきだと考えています。そして、ARがそのお手伝いをします。
新しい特許出願では、その靴が買えるとまでは言っていませんが、これは靴の価値を評価することではなく、販売することです。米国特許出願番号20200175275の「アイテムの表現にリンクされたアフォーダンスを生成するための方法、デバイス、およびシステム」は、視聴しているもののさまざまな側面を調べたい場合など、他の状況も示唆していますが、結局はバスケットボールの話に戻ってしまいます。
「例えば、ユーザーがテレビでバスケットボールの試合を見ているとき、興味のある特定のシューズを履いているバスケットボール選手を目にするかもしれません」と同社は述べています。「さらに、ユーザーがチュートリアル（ライブビデオフィードや録画済みのビデオフィードなど）を視聴しているとき、チュートリアル内の障害物や角度によって、チュートリアル内のアイテムでテクニックを実行する方法が分からない場合があります。」
これはチュートリアルが下手なだけだ、あるいは靴にフォーカスを当てているということは、ゲームよりも靴のグリップ力が高いということだ、と思うかもしれません。しかし、Appleはユーザーが画面上の何かについてもっと情報が欲しい、あるいは別の角度から見たい、といったことを伝えられるよう、しかもできれば1つのデバイスで行えるようにしたいと考えています。
ユーザーが閲覧している内容を補足する
「ユーザーがアイテムを含むビデオストリームを視聴する場合、補助デバイスを使用せずにそれらのアイテムに関する詳細な情報や視点を得ることはできません」と報告書は続ける。「ユーザーは、テレビで見た特定の靴に関する詳細な情報にアクセスするには、別のデバイスを使用することになります。」
視点要素は鍵となる要素です。これは、ユーザーが少なくともある程度、自分が見ているカメラアングルを制御できることを意味します。しかし、特許に記載されているように、私たちが本当に求めているのは「2つ目のアイテムとの現実世界のインタラクションを、最初のアイテムにシミュレートされた現実（SR）オーバーレイとして表示する方法」です。
特許の大部分は、ディスプレイがヘッドマウントデバイスであることに関するもので、これはAppleが拡張現実（AR）の一種を研究しているもう一つの事例です。Appleの提案は、あらゆる可能性を網羅しており、iPhoneを含む「1台以上のディスプレイ」でも実現可能であることを示唆しています。
つまり、視聴中の動画を一方の画面、あるいはヘッドセットに表示し、もう一方の画面、あるいはヘッドセットディスプレイの別の部分に二次情報を表示することが可能になる。「（システムは）現実世界での2つ目のアイテムとのインタラクションをオーバーレイとして表示する」と特許には記されている。
特許の詳細。ビデオの1つの要素を2番目の画面で検査する方法を示している。
バスケットボールの試合やチュートリアルが表示されるだけでなく、システムにはユーザーが注目したい要素を指示できる手段が必要です。明確な可能性としては、タッチセンサー付きのメインディスプレイをタップするだけで済むようにすることが挙げられます。
しかし、Appleは、SRとARを組み合わせることで、ユーザーがチュートリアルのデモンストレーションや選手のシューズとインタラクションできるようにすることも提案しています。「例えば、バスケットボールシューズのSR表現のオーバーレイをライブフィードの表現に直接重ね合わせることで、バスケットボール選手の表現が、まるでバスケットボールシューズのSR表現を履いているように見えるようになります」とAppleは述べています。
つまり、現実世界の選手の靴をARアイテムとして表示し、視聴者が触ったり、回したり、調べたりできるようにするということです。「デバイスがライブビデオフィードの表示からSR環境に切り替える際、ユーザーへの邪魔を最小限に抑えるため、ライブビデオフィードの表示を一時停止したり、ブックマークしたりすることがあります」とAppleは説明しています。
もっと平凡な言い方をすれば、その靴はより馴染みのあるピクチャー・イン・ピクチャー表示で表示できる。もっと平凡でない言い方をすれば、「仮想オブジェクトは、例えば物理的な表面やホログラムとして投影され、システムを使用する人は、仮想オブジェクトが物理的な環境に重ねて表示されるのを観察できる」ということだ。
AppleのARとスポーツに関する計画
この出願は発明者のアレクサンダー・オザー氏によるものとされていますが、彼は今のところ先行特許を保有していないようです。しかし、Apple自身もAR関連の特許や特許出願を多数保有しており、その中には特に関連性の高いものも含まれています。
米国特許出願第20200177927号「多方向ビデオの適応型コーディングおよびストリーミング」は、視聴者に複数のビデオアングルの選択肢を提供する方法に重点を置いています。
それは、ヘッドセットに360度ビューを提示することかもしれません。このアプリケーションは、「例えば、視聴者はヘッドマウントディスプレイを使用し、ディスプレイの向きを変えることで、多方向画像の中で興味のある部分を特定することができます」と述べています。
ユーザーが360度のビデオから選択する方法についての別の特許出願の詳細
同様に、ユーザーがこれらのビューを選択したり、バスケットボール選手のシューズを指し示したりする方法に関する関連特許出願があります。米国特許出願番号20200174583「物体の属性をサンプリングするための指デバイスを備えたコンピュータシステム」では、ユーザーが1本または複数本の指にセンサーを装着することで、より正確な制御を行う方法について詳しく説明されています。
多方向ビデオの特許は、ビデオコーディングの側面に関する特許をこれまでに手がけた Xiaohua Yang 氏を含む 9 人の発明者によるものです。
指デバイスの特許申請は、ARやVR用の指先ツールや触覚フィードバック付きのタッチベースデバイスなど、数多くの関連特許を保有する多作のPaul X. Wang氏のみに帰属する。
これらはすべて、AppleのAR特許の範囲を拡大し続ける一方で、Apple TV+におけるスポーツ番組配信計画にも合致する可能性がある。最近では、Appleが同サービスにスポーツの生中継を追加する交渉を行っていることが明らかになった。
これらの協議はまだ初期段階とされているが、どうやらアップルはアマゾンのスポーツコンテンツ担当幹部を引き抜くことでこの分野での取り組みを強化しているようだ。
