Новый сенсор для смартфонов собирается сделать размытые фотографии достоянием прошлого
Камеры в смартфонах становятся все лучше, резче, быстрее, а теперь еще и умнее. Все больше и больше технологий используют машинное обучение и искусственный интеллект для создания изображений, которые раньше были возможны только при наличии глубоких знаний в области фотографии и обработки изображений
Сегодня это можно сделать практически одним нажатием кнопки.
Сегодня Qualcomm и французская компания «Prophesee» представили новую технологию, которая может вывести мобильную фотографию на новый уровень.
Обещание: Никогда больше не будет размытых фотографий.
Как работает новый сенсор камеры
Т-Рекс среди датчиков камеры:В отличие от обычных датчиков камеры, которые захватывают изображения непрерывно, датчик Prophesee фиксирует только изменения в сцене.
Новый датчик «видит» только, когда что-то движется. Статические элементы невидимы для датчика. Это работает за счет того, что каждый отдельный пиксель независимо запускает «события», когда значение яркости в определенном месте меняется — что и происходит при движении.
Prophesee называет технологию «Neuromorphic Sensing». Функция рекламируется как «Metavision».
В отличие от обычных датчиков камеры, этот записывает не изображения, а изменения.
Он может быть установлен рядом с основными камерами в современных смартфонах с мощными процессорами Qualcomm. Поскольку сенсор не записывает изображения непрерывно, он также особенно энергоэффективен.
Например, последняя модель, обозначенная как «Gen X 320», потребляет от 36 микроватт до 3 милливатт.
Технология, необходимая для этого датчика, была разработана Prophesee в сотрудничестве с Qualcomm и Sony.
Как он обеспечивает четкость фотографий?
Поскольку сенсор регистрирует только изменения, он может собирать информацию об изображении очень быстро
Подробнее: Для обычной камеры это было бы примерно эквивалентно съемке со скоростью 10 000 кадров в секунду.
Обычные датчики изображения требуют большого количества света для столь быстрого захвата изображения, чтобы получить малошумные снимки. Датчик Prophesee гораздо более гибкий в этом отношении и может захватывать информацию даже в условиях низкой освещенности.
При съемке фотографий данные с этого датчика могут быть объединены с данными с основной камеры (разумеется, с помощью искусственного интеллекта) для устранения размытости движения.
Когда появятся первые мобильные телефоны с этим датчиком?
Результаты, представленные в видео выше, уже были получены с помощью смартфона с «Метавизором». Неизвестно, какой именно смартфон используется на самом деле, или это еще не выпущенный смартфон. Тем не менее, есть фотографии, на которых изображен мобильный телефон — но только спереди.
Помимо мобильных телефонов, такие датчики могут использоваться в AR/VR-очках, роботах, в медицине, устройствах «умного дома» и во многих других областях
Сейчас в портфолио компании Prophesee есть три сенсора Metavision, доступные производителям. Один из них — Sony IMX636, который также предназначен для смартфонов. Пока неизвестно, когда будет выпущен мобильный телефон с этим или подобным сенсором
Также интересна инновация в смартфонах Honor:Напоминает телекинез: Honor Magic 6 Pro можно частично управлять, используя только глаза
Что вы думаете об этой технологии? Хотели бы вы иметь мобильный телефон с таким сенсором? Или, может быть, вы надеетесь, что подобная технология появится в классических системных камерах? Есть ли другие возможности и функции, которые, по вашему мнению, могли бы быть улучшены в смартфонах? Сообщите нам об этом в комментариях ниже: