新しいスマートフォンのセンサーが、ぼやけた写真を過去のものにしようとしている
スマートフォンのカメラは、より良く、よりシャープに、より速く、そしてよりスマートに進化している。機械学習やAIを利用して、以前は写真や画像処理に関する高度な知識がなければ不可能だったような画像を作成する例も増えている。
今日、それは実質的にボタン1つでできるようになりました。
現在、クアルコムとフランスの「Prophesee」社は、モバイル写真を新たなレベルに引き上げる新技術を発表しています。
約束:もう二度とぼやけた写真は撮らない。
新しいカメラセンサーの仕組み
カメラセンサーのT-Rex:連続的に画像をキャプチャする従来のカメラセンサーとは異なり、Propheseeセンサーはシーンの変化のみをキャプチャします。
新しいセンサーは、何かが動いている時だけ「見る」。静止した要素はセンサーには見えません。これは、ある場所の輝度値が変化したときに、個々のピクセルが独立して「イベント」をトリガーすることで機能します。
Propheseeはこの技術を「Neuromorphic Sensing(ニューロモーフィック・センシング)」と呼んでいる。この機能は “Metavision “として販売されている。
クアルコムの強力なプロセッサーを搭載した現行のスマートフォンのメインカメラと一緒に搭載することができる。センサーは連続的に画像を記録しないため、エネルギー効率も特に優れています。
例えば、”Gen X 320 “と名付けられた最新のセンサーは、36マイクロワットから3ミリワットしか消費しません。
このセンサーに必要な技術は、Prophesee社がクアルコムとソニーと共同で開発しました。
なぜシャープな写真が撮れるのか?
センサーは変化のみを記録するため、画像情報を非常に高速に収集することができます nbsp;
文脈を整理する: 従来のカメラで言えば、10,000 FPSの撮影に相当します。
従来のイメージセンサーは、低ノイズ画像を生成するために、このような高速画像キャプチャのために多くの光を必要とします。Propheseeセンサーは、この点でより柔軟性があり、低照度条件下でも情報を取り込むことができます。
写真撮影時には、このセンサーからのデータをメインカメラからのデータ(もちろんAI付き)と組み合わせることで、モーションブラーを除去することができます
。
このセンサーを搭載した最初の携帯電話はいつ発売されますか?
上の動画で紹介されている結果は、すでに「Metavison」を搭載したスマートフォンで撮影されたものです。実際にどのスマートフォンが使われているのか、未発売のものなのかは明らかにされていない。しかし、携帯電話が写っている写真がある。
携帯電話以外にも、このようなセンサーはAR/VRメガネ、ロボット、医療、スマートホームデバイス、その他多くの分野で応用可能である。
Propheseeは現在、3つのMetavisionセンサーをラインナップしています。そのうちの1つはソニーIMX636で、スマートフォン向けでもある。このセンサーまたは類似のセンサーを搭載した携帯電話がいつ発売されるかはまだわかっていない
。
また、Honorのスマートフォンにおける革新的な技術も興味深い念力を彷彿とさせる:Honor Magic 6 Proは、目だけで部分的に操作することができる
。
この技術をどう思いますか?このようなセンサーを搭載した携帯電話が欲しいと思いますか?それとも、クラシックなシステムカメラにこのような技術を期待しますか?スマートフォンで改善されると思う他の機能や特徴はありますか?以下のコメント欄でお知らせください:
従来のイメージセンサーは、低ノイズ画像を生成するために、このような高速画像キャプチャのために多くの光を必要とします。Propheseeセンサーは、この点でより柔軟性があり、低照度条件下でも情報を取り込むことができます。
写真撮影時には、このセンサーからのデータをメインカメラからのデータ(もちろんAI付き)と組み合わせることで、モーションブラーを除去することができます
。
このセンサーを搭載した最初の携帯電話はいつ発売されますか?
上の動画で紹介されている結果は、すでに「Metavison」を搭載したスマートフォンで撮影されたものです。実際にどのスマートフォンが使われているのか、未発売のものなのかは明らかにされていない。しかし、携帯電話が写っている写真がある。