マイク・ピーターソン
· 1分で読めます
iPhone SEは機械学習を用いて、一枚の2D画像から深度マップを作成できる。クレジット：Halide
当サイトのリンクからご購入いただいた場合、手数料が発生する場合がございます。倫理規定をお読みください。
Apple の新しい iPhone SE は、ポートレートモードの深度推定に機械学習のみを利用する同社初の、そして今のところ唯一の iPhone です。
4月に発売されたiPhone SEは、シングルレンズの単眼カメラに至るまで、iPhone 8のほぼコピーと言えるでしょう。しかし、その内部では、これまでのどのiPhoneよりも高度な深度推定技術が採用されています。
カメラアプリ「Halide」の開発者によるブログ投稿によると、iPhone SEはApple製品ラインナップの中で初めて「単一画像単眼深度推定」を採用したモデルとのことです。つまり、たった1枚の2D画像からポートレートのぼかし効果を作成できる初のiPhoneということです。
これまでのiPhoneでは、ポートレートモードには少なくとも2台のカメラが必要でした。これは、奥行き情報を得るための最良の手段が、わずかに異なる2つの場所から撮影された2枚の画像を比較することだったためです。システムがこれらの画像を比較することで、写真の被写体と背景を分離し、ぼかし効果、つまり「ボケ効果」を生み出すことができます。
iPhone XRは、センサーの「フォーカスピクセル」を用いてポートレートモードをサポートし、大まかな深度マップを生成できるようになったことで、この状況を変えました。しかし、新型iPhone SEにはフォーカスピクセルが搭載されているものの、旧型のハードウェアでは深度マップを生成するのに必要なカバレッジが不足しています。
「新型iPhone SEは、旧型センサーのカバー範囲が狭いため、フォーカスピクセルを使用できません」とHalideのベン・サンドフスキー氏は記している。iFixitが月曜日に実施した分解調査で、iPhone SEのカメラセンサーはiPhone 8のものと基本的に互換性があることが明らかになった。
エントリーレベルのiPhoneは、深度マップを完全に機械学習で生成します。つまり、前面カメラと背面カメラの両方でポートレートモードの写真を生成できるということです。これは間違いなく、搭載されている最上位のA13 Bionicチップセットによって可能になったものです。
ハライド氏によると、奥行き情報は完璧ではないものの、3年前のシングルセンサーカメラのハードウェアの相対的な限界を考えると、これは素晴らしい成果だ。同様に、iPhone SEのポートレートモードは人物にしか機能しないが、ハライド氏によると、新バージョンのアプリではiPhone SEで人物以外の被写体にもボケ効果を加えることができるという。
