iOS 13のApple FaceTime Attention Correction機能を実際に使ってみた

最新のiOS 13ベータ版では、AppleはFaceTime通話中によくあるアイコンタクトの問題を解決するために、拡張現実（AR）技術を活用しています。AppleInsiderは、この新機能を実際に試し、その仕組みを詳しく検証しました。

FaceTime通話をする際、ユーザーは当然ながら画面、つまり会話相手を見たいと思うものです。しかし、通話の相手は、発信者が下を向いているのにしか見えません。

発信者がカメラを見つめると、受信者は発信者が自分の目を見ていると認識します。これは、より自然な視点です。しかし、その時点で発信者は画面上の受信者を見ていないため、通常の視聴時のような鮮明な画像ではなく、周辺視野に頼って相手の反応を見るしかありません。

カメラ アプリを開いて画面を直接見て写真を撮り、次にカメラを見て写真を撮ると、自分でどのように見えるか確認できます。

iOS 13の3番目のベータ版で、AppleはFaceTimeの視線補正機能の新たな切り替え機能を追加しました。これは、FaceTime通話中に実際には画面を見ているにもかかわらず、まるで友人を直接見ているかのように見せることを目的としています。

この機能は、アニ文字、携帯電話のロック解除、さらには FaceTime の拡張現実機能にも使用されているのと同じ TrueDepth カメラ システムを使用します。

舞台裏を見てみると、この新しいアイコンタクト機能は、もちろんAppleのARKitフレームワークによって実現されています。ARKitはユーザーの3D顔マップと深度マップを作成し、目の位置を判定して、それに応じて調整します。

確かなことは言えませんが、AppleはARKit 3 APIを使用している可能性が高いため、この機能がiPhone XSとiPhone XS Maxに限定され、iPhone Xではサポートされていない理由が説明できます。これらのAPIは以前のモデルではサポートされていないためです。Appleの高性能A12 Bionicプロセッサを搭載しているiPhone XRではサポートされていない理由は説明できません。

まっすぐな物体をカメラに映しながら目の前に動かすと、AR（拡張現実）の付加によるわずかな歪みが確認できます。目の周りや鼻にも少しカーブが見られます。

全体的にとても自然に見えるので、この機能について事前に知らなければ、おそらく誰も気づかないでしょう。電話をかけてきた相手が、あなたの鼻や顎ではなく、あなたをまっすぐ見ているように見えるのです。

ここでは、カメラアプリ内で画面とカメラを見ている様子がわかります。画面を見ているときは下を向いているように見えます。FaceTime通話機能をオンにして通話しているときは、カメラをまっすぐ見ているときに少し上を向いているように見えます。