Adobe の新しい取り組みは、スマートフォンのカメラとコンピューテーショナル フォトグラフィー全般を改良し、iPhone の写真に一眼レフのようなより自然な外観を与えることを目指しています。
Adobeフェローのマーク・レヴォイ氏とシニアサイエンティストのフロリアン・カインツ氏による新しい論文では、iPhone向けの新しいProject Indigoアプリに具体化された最新プロジェクトについて解説されています。開発者たちが目指すのは、より「自然な」見た目に加え、モバイルデバイスで可能な限り最高の画質を実現することです。
このプロジェクトを説明する新たな研究論文の中で、2人はより本物らしい写真を実現するためのアプローチを詳しく説明しています。このアプリは、他の多くのカメラアプリよりも露出アンダー気味に調整するだけでなく、1回の露出で「1枚の写真を生成する際に、より多くのフレーム、つまり最大32フレーム」を撮影、調整、合成します。
「これは、写真の白飛びが少なくなり、影のノイズが少なくなることを意味します」とレボイ氏とカインツ氏は書いているが、このアプリで写真を撮るには「シャッターボタンを押した後、いつもより少しだけ忍耐が必要になるかもしれませんが…数秒後には、より良い写真が手に入ります」とも述べている。
このアプローチにより、多くのスマートフォンカメラアプリよりも「スムージング」が少なくなり、自然な質感がよりよく保たれます。また、スマートフォンで撮影した写真の中で最も明るいポイントを基準に写真全体の露出を調整する「グローバルトーンマッピング」と呼ばれる手法も回避できます。
その結果、非常に明るい被写体はバランス良く表示される一方で、最も明るい部分よりも暗い部分は露出不足になることがよくあります。特にRAW画像形式を使用していない場合、後から画像を編集して露出不足の部分を修正することが難しくなります。
超解像画像の作成
さらなる問題はズームの問題です。スマートフォンには真の光学ズームレンズがないため、ユーザーが被写体に「ズームイン」すると、カメラはセンサーの中央部分のみを読み取ることになり、画質がさらに低下します。
Indigo カメラ アプリは、「マルチフレーム スーパー解像度」と呼ばれる技術を使用してこの問題を克服し、さまざまな解像度とズーム レベルでシーンの複数の画像をすばやくキャプチャしてノイズを低減します。
遠くの被写体の超解像補正の例。画像クレジット：Adobe
「これらの画像を組み合わせることで、一枚の写真よりも詳細な情報を持つ一枚の写真を作成します」と著者らは述べています。「異なる視点から撮影しているため、超解像写真に写り込んだ詳細な情報は（計算上の）幻覚ではなく、現実のものです。」
Indigoアプリは、スマートフォンで撮影するユーザー向けに、スマートフォン撮影に特化した豊富なコントロール機能も提供しています。「フォーカス、シャッタースピード、ISO感度、露出補正、そしてホワイトバランスといった基本的なコントロール機能を提供しています。ホワイトバランスは、Lightroomのように色温度と色合いを個別に調整できます」と開発者らは指摘しています。
「しかし、各写真はバースト撮影された複数のフレームを合成して作られるため、Indigoではバースト撮影のフレーム数も制御できます」と開発者は述べています。「これにより、写真家は撮影時間とノイズレベルのバランスを取ることができます。」
アプリの将来的な追加機能は、スマートフォンユーザーに新たな可能性をもたらします。Indigoの開発者たちは、写真の最終的な仕上がりをファインダー内でリアルタイムにレンダリングできるようにしたいと考えています。まさに「見たままの仕上がり」を実現できるのです。
例えば、露出時間を短くするのではなく、プレビューの明るさを下げることで暗い画像を作成できます。逆に、露出を上げるのではなく、シャドウを上げることで明るい画像を作成できます。
Indigoは、照明の当たった被写体からの光の反射をインテリジェントに除去することもできます。画像クレジット：Adobe
同様に、たとえばガラスやプラスチックの下にある照明の当たった被写体からの光の反射を除去するといった高度な写真撮影技術も、Indigo を使用すれば「カメラ内」で実行可能になると開発者らは述べている。
開発者たちは、Project Indigoを、現在同名のアプリで使用されている一連の技術であり、「最終的にはAdobeの主力製品、特にLightroomに導入される可能性のある」技術プラットフォームだと考えている。アプリはApp Storeで無料で入手できる。
