iOS 15の写真では上半身で人物を識別できる

アップルは金曜日に公開した文書で、機械学習の進歩を利用して、顔がはっきりと見えない状況も含め、iOS 15で大幅に改善された人物認識機能を導入した方法について詳しく説明した。

同社はiOS 15版の写真アプリの新機能として「人物認識機能の向上」を挙げているが、ウェブページには詳細がほとんど記載されていない。しかし、Appleの機械学習サイトに掲載された新しいブログ記事によると、写真アプリはカメラで顔がはっきりと映らない場合など、様々な状況で人物を認識できることが明らかになっている。

Apple がこれを実現するために使用する方法の 1 つは、画像内の特定の人物の顔と上半身を一致させることです。

「被写体がカメラから目を離している場合、顔は隠れたり、全く見えなかったりすることがよくあります。こうしたケースを解決するために、画像に写っている人物の上半身も考慮します。上半身は、特定の状況において、服装など一定の特徴を示すことが多いからです。こうした一定の特徴は、数分間隔で撮影された複数の画像から人物を特定するための強力な手がかりとなる可能性があります」とAppleは記している。

同社は、画像全体を入力として取り込み、検出された顔と上半身を具体的に識別します。そして、顔と上半身をマッチングさせることで、従来の顔認識では不可能だった状況でも個人認識精度を向上させます。

このメカニズムは、これまでと同様に、デバイス上の機械学習を利用してプライバシーを確​​保しています。Appleはまた、このプロセスにおけるメモリと電力の消費を最小限に抑えるための対策も講じています。

「iOS 15の写真アプリで利用できるこの最新の進化により、人物認識が大幅に向上しました。図8に示すように、デバイス上でプライベートに行われる機械学習を使用することで、極端なポーズやアクセサリー、あるいは顔が隠れている人物でも正しく認識でき、顔と上半身の組み合わせを使用して、顔が全く見えない人物とも一致させることができます」とAppleは記している。

興味のある方のために、ブログ記事には機械学習モデルのトレーニングに関するより詳しい情報が記載されています。