Halideの開発者がiPhone SEのカメラ技術とiPhone 8の類似点を詳細に説明c

Halideの開発者がiPhone SEのカメラ技術とiPhone 8の類似点を詳細に説明c
Halideの開発者がiPhone SEのカメラ技術とiPhone 8の類似点を詳細に説明c

iPhone SEが広く入手可能になった今、このデバイスの技術仕様についてより詳しく知るようになりました。Halideカメラアプリの開発者たちは、iPhone SEのカメラを詳細に分析した動画を公開し、シングルレンズシステムに新たな光を当てています。

iFixitによる分解では、iPhone SEのカメラハードウェアはiPhone 8と互換性があることが確認されましたが、Halideの分析はカメラソフトウェアに焦点を当てています。具体的には、iPhone SEが「一枚の2D画像だけでポートレート効果を生成できる初のiPhone」である点を指摘しています。

iPhone XRもシングルレンズカメラでポートレート効果を生成していましたが、フォーカスピクセル(フォーカスを助けるために設計された小さな「目」のペア)を使用していました。iPhone SEは3年前のカメラセンサーのため、フォーカスピクセルを使用していません。

新しいiPhone SEは、古いセンサーのカバー範囲が狭いため、フォーカスピクセルを使用できません。代わりに、機械学習によって深度情報を生成します。これは簡単に試せます。別の写真を撮ってみてください。

iPhone SE によって生成される深度データは開発者に公開されており、Halide はこれを利用して iPhone SE カメラでペットや物体のポートレート効果を生成している。ただし、Apple はポートレート モードを人間だけに制限している。

結局のところ、ニューラルネットワークは魔法のように思えますが、人間の知能と同じ限界があります。場合によっては、一枚の画像だけでは不十分です。機械学習モデルは妥当な深度マップを生成するかもしれませんが、それが現実を反映しているとは限りません。

手間をかけずにクールなポートレート効果を作りたいだけなら、それで十分です!シーンを正確に捉え、編集の幅を最大限に広げたいなら、2つ目の視点(デュアルカメラシステム)や他のセンサー(LIDAR)が必要になります。

Halide 開発者による iPhone SE の詳細な分析をここで読むことを強くお勧めします。

havebin.com を Google ニュース フィードに追加します。 

FTC: 収益を生み出す自動アフィリエイトリンクを使用しています。詳細はこちら。

Mac用ディスコエリジウム