Компании-производители смартфонов обещают вывести мобильную фотографию на новый уровень, и за последнее десятилетие были сделаны гигантские шаги, но сейчас мы находимся на этапе, когда могут произойти кардинальные изменения… и это означает, что все смартфоны, которые только что были куплены, устареют, если партнерство между французской компанией Prophesee и Qualcomm выполнит свое обещание положить конец размытости изображения и другим артефактам качества изображения, вызванным обычными датчиками, особенно в сценах с высокой динамикой и в условиях низкой освещенности. приближая фотографию и видео к нашему истинному опыту.
Если это не очередное обещание Lytro — мы исправим это после публикации — мы собираемся стать свидетелями новой эры с точки зрения фотографии смартфонов, поскольку обе компании договорились о многолетнем сотрудничестве, чтобы обеспечить нативную совместимость между Event-Based Prophesee. Датчики и программное обеспечение Metavision и мобильные платформы Snapdragon премиум-класса.
Наборы для разработки, которые, как ожидается, будут доступны от Prophesee в этом году, призваны помочь ускорить внедрение в мобильной индустрии решений Prophesee, которые объявлены «Святым Граалем», способным добавить новое сенсорное измерение в мобильную фотографию. По словам компании, ее технология способна изменить парадигму традиционного захвата изображений, фокусируясь только на изменениях сцены, пиксель за пикселем, непрерывно и на экстремальных скоростях.
Prophesee утверждает, что каждый пиксель в датчике Metavision имеет логическое ядро, позволяющее ему действовать как нейрон, добавляя, что «каждый из них активирует себя разумно и асинхронно в зависимости от количества фотонов, которые они воспринимают. Активация пикселя называется событием. По сути, события управляются динамикой сцены, а не произвольными часами, поэтому скорость сбора данных всегда соответствует фактической динамике сцены».
Как это работает, высокопроизводительное удаление размытия на основе событий достигается за счет синхронизации основанного на кадре и событийного датчика Prophesee. Затем система заполняет промежутки между кадрами и внутри них микросекундными событиями, чтобы алгоритмически извлекать чистую информацию о движении и устранять размытость движения. Два изображения теннисиста объясняют это просто: обычная камера зафиксирует размытие, а Prophesee создаст резкий результат. Что из этого является фотографией или видео, а что ИИ пытается заполнить пробелы, некоторые пуристы уже могут задаться вопросом. Путь вперед, однако, кажется очевидным: меньше размытия!
По словам компаний, техническое и деловое сотрудничество предоставит разработчикам мобильных устройств быстрый и эффективный способ использовать возможности датчика Prophesee для значительного улучшения производительности камеры, особенно в динамичных динамичных сценах (например, спортивных сценах) и при слабом освещении. его революционный подход к непрерывному и асинхронному распознаванию пикселей на основе событий. Prophesee работает над комплектом для разработки, поддерживающим интеграцию сенсорной технологии Metavision для использования с устройствами, содержащими платформы Snapdragon следующего поколения.
«Prophesee — явный лидер в применении нейроморфных методов для устранения ограничений традиционных камер и улучшения общего пользовательского опыта. Мы считаем, что это технология, которая изменит правила игры и выведет мобильную фотографию на новый уровень, и наше сотрудничество как на техническом, так и на бизнес-уровнях поможет стимулировать ее внедрение ведущими OEM-производителями», — сказал Джадд Хип, вице-президент по управлению продуктами в Qualcomm Technologies, Inc. Их новаторские достижения в области фотокамер без затвора обеспечивают значительное улучшение качества фотографий, доступных в мобильных устройствах следующего поколения на базе Snapdragon, даже в самых сложных условиях, открывая ряд новых возможностей для пользователей Snapdragon».
«Мы рады работать с поставщиком одной из самых популярных в мире мобильных платформ, чтобы внедрить видение на основе событий в экосистему Snapdragon. Благодаря этому сотрудничеству разработчики продуктов смогут значительно улучшить взаимодействие с пользователем с помощью камер, которые обеспечивают качество изображения и операционную эффективность, недостижимые при использовании только традиционных методов на основе кадров», — сказал Лука Верре, генеральный директор и соучредитель Prophesee.
Таким образом, к концу 2023 года Prophesee надеется найти способы обеспечить скорость, эффективность и качество нейроморфного зрения для мобильных устройств с помощью мобильных платформ Snapdragon премиум-класса. Вдохновленные человеческим глазом, сенсоры Prophesee Event-Based призваны помочь фотографам со смартфонов сделать гигантский шаг вперед и преодолеть разрыв, оставаясь позади обычных камер.
Если система работает так, как было предложено, то спортивная и динамичная фотография, которая раньше была запретной для смартфонов, станет новой игровой площадкой. Только недавно я услышал разговор профессиональных фотографов о том, можно или нельзя использовать смартфоны для спортивной фотографии. С появлением новых датчиков Prophesee Event-Based любой вывод, признанный действительным, должен быть пересмотрен.
:quality(70)/cloudfront-eu-central-1.images.arcpublishing.com/irishtimes/4XXGHXUFNVHRNO46WI6JXQUPCE.jfif)
