iPhone XRの弱点解消？ペットやモノの背景ぼかし、アプリ開発者が独自ポートレートモードを予告
「ポートレートモードの背景ボケ効果は人物専用。ペットやモノは撮れない」という iPhone XRの弱点が、サードパーティー製のアプリで解消するかもしれません。

人気カメラアプリ Halide の開発者が、iPhone XRでは本来撮影できないはずのペットの「ポートレートモード」写真を公開しました。

iPhone XS からやや遅れて発売された iPhone XR は、上位の XS (XS Max )よりも数万円安く買える価格でありながら、 アップルいわく「こちらも「一番いいスマートフォン」」という高性能モデル。

XSと同じ最新プロセッサや、さらに早くなった3D顔認証 Face IDなど、昨年の高級モデル iPhone Xを超える点も多いことから、価格ありきで全体にグレードダウンした廉価版ではなく、むしろこちらが最新 iPhone の標準といった位置づけです。

とはいえ価格が上のプレミアムモデルiPhone XSと比較すれば省かれた点もあり、iPhone XS の広角＋望遠デュアルカメラは、iPhone XRでは広角シングルになっています。

デュアルカメラといえば、一眼レフカメラのように背景をぼかす「ポートレートモード」は、これまでiPhone 7 Plus以降、iPhone X / XSなどデュアルカメラiPhoneだけの機能でした。

しかし iPhone XR は、センサで集めた情報を機械学習プロセッサ「ニューラルエンジン」などで処理して写真から人物を抜き出すことにより、シングルカメラモデルとしては初めてこのポートレートモードが使えます。



一方で制限もあり、従来のデュアルカメラiPhoneでは人物以外も(一応)背景ぼかし効果が使えたものの、iPhone XRの場合は「ポートレート」の名のとおり人物専用。

人間の顔が分かりやすく映っていないと、「誰も検知されませんでした」と表示され背景ぼかしが有効になりません。

従来のデュアルカメラiPhoneでは、精度はともかくモノやペットや後ろ姿でも背景をぼかして撮影できたため、この点はiPhone XRの相対的な弱点のひとつです。
しかしiPhone XRの発売後、マニュアル撮影が可能な高機能カメラアプリ Halide の開発者Ben Sandofsky氏が、猫の背景をぼかした画像を公開しました。Sandofsky氏によると、iPhone XRはXSよりは粗いものの奥行きマップの取得が可能。

そちらを使えば、顔・人体が検出できない場合、つまりペットやモノを撮影したときも背景をぼかす効果が実現できそう、とのこと。



この深度マップ取得はアップルが正式にアプリ開発者向けに提供している機能ではなく、今後されるかどうかも不明。

Halideカメラは人物以外も撮影できる独自ポートレートモードについて「実現できそうだ」「乞うご期待」としつつ、実際にアプリに搭載することを正式に予告したわけではありません。

(どころか、外部の開発者は新型iPhoneのカメラ機能について事前に知らされていないため、iPhone XRでは現状のHalide カメラで不具合が発生しています。)

しかし人体以外でも実は奥行きが取得できていたなら、精度は別として、デュアルカメラのiPhoneのようにペットやモノでも背景ぼかしが使えるようになる希望は出てきました。

余談。iPhone XRと同様にシングル背面カメラの Googleスマホ Pixel 3は、人物以外の「ポートレートモード」撮影に標準対応。

オートフォーカスに使うデュアルピクセル方式のイメージセンサでステレオカメラのように奥行き情報を取得したうえで、機械学習を用いた形状・輪郭推定をあわせて、人物以外でも比較的高精度に背景をぼかせます。


また別の観点としては、もしHalideカメラやほかのカメラアプリが独自のポートレートモードを実装できた場合、iPhone XRユーザーが嬉しいのはもちろん、望遠カメラの画角でしかポートレートモードが使えないデュアルカメラiPhoneでも、「離れてください」と言われず手元の被写体をいい感じに背景ぼかしできるかもしれません。