Больше никаких размытых фотографий: вот как работает новая технология, которая должна сделать мобильные телефоны возможными

0
122

Новый сенсор для смартфонов собирается сделать размытые фотографии достоянием прошлого

Камеры в смартфонах становятся все лучше, резче, быстрее, а теперь еще и умнее. Все больше и больше технологий используют машинное обучение и искусственный интеллект для создания изображений, которые раньше были возможны только при наличии глубоких знаний в области фотографии и обработки изображений

Сегодня это можно сделать практически одним нажатием кнопки.

Сегодня Qualcomm и французская компания «Prophesee» представили новую технологию, которая может вывести мобильную фотографию на новый уровень.

Обещание: Никогда больше не будет размытых фотографий.

Как работает новый сенсор камеры

Т-Рекс среди датчиков камеры:В отличие от обычных датчиков камеры, которые захватывают изображения непрерывно, датчик Prophesee фиксирует только изменения в сцене.

Новый датчик «видит» только, когда что-то движется. Статические элементы невидимы для датчика. Это работает за счет того, что каждый отдельный пиксель независимо запускает «события», когда значение яркости в определенном месте меняется — что и происходит при движении.

Prophesee называет технологию «Neuromorphic Sensing». Функция рекламируется как «Metavision».

В отличие от обычных датчиков камеры, этот записывает не изображения, а изменения.

Он может быть установлен рядом с основными камерами в современных смартфонах с мощными процессорами Qualcomm. Поскольку сенсор не записывает изображения непрерывно, он также особенно энергоэффективен.

Например, последняя модель, обозначенная как «Gen X 320», потребляет от 36 микроватт до 3 милливатт.

Технология, необходимая для этого датчика, была разработана Prophesee в сотрудничестве с Qualcomm и Sony.

Как он обеспечивает четкость фотографий?

Поскольку сенсор регистрирует только изменения, он может собирать информацию об изображении очень быстро

Подробнее: Для обычной камеры это было бы примерно эквивалентно съемке со скоростью 10 000 кадров в секунду.

Обычные датчики изображения требуют большого количества света для столь быстрого захвата изображения, чтобы получить малошумные снимки. Датчик Prophesee гораздо более гибкий в этом отношении и может захватывать информацию даже в условиях низкой освещенности.

При съемке фотографий данные с этого датчика могут быть объединены с данными с основной камеры (разумеется, с помощью искусственного интеллекта) для устранения размытости движения.

Когда появятся первые мобильные телефоны с этим датчиком?

Результаты, представленные в видео выше, уже были получены с помощью смартфона с «Метавизором». Неизвестно, какой именно смартфон используется на самом деле, или это еще не выпущенный смартфон. Тем не менее, есть фотографии, на которых изображен мобильный телефон — но только спереди.

(Один из первых мобильных телефонов со встроенным сенсором Metavision. (Изображение: Prophesee))
(Один из первых мобильных телефонов со встроенным сенсором Metavision. (Изображение: Prophesee))

Помимо мобильных телефонов, такие датчики могут использоваться в AR/VR-очках, роботах, в медицине, устройствах «умного дома» и во многих других областях

Сейчас в портфолио компании Prophesee есть три сенсора Metavision, доступные производителям. Один из них — Sony IMX636, который также предназначен для смартфонов. Пока неизвестно, когда будет выпущен мобильный телефон с этим или подобным сенсором

Также интересна инновация в смартфонах Honor:Напоминает телекинез: Honor Magic 6 Pro можно частично управлять, используя только глаза

Что вы думаете об этой технологии? Хотели бы вы иметь мобильный телефон с таким сенсором? Или, может быть, вы надеетесь, что подобная технология появится в классических системных камерах? Есть ли другие возможности и функции, которые, по вашему мнению, могли бы быть улучшены в смартфонах? Сообщите нам об этом в комментариях ниже: