За объективом AR: айтрекинг в медицинских технологиях

6 ноября 2023 г.
15:19

Дэвид Голдман, вице-президент по маркетингу Lumus, объясняет, почему он считает, что AR-очки станут основной биометрической необходимостью в ближайшем будущем.

Можете ли вы объяснить, как технология отслеживания взгляда работает в очках AR?

В очках AR технология отслеживания глаз использует источники инфракрасного света и камеры для постоянного отслеживания движения и положения глаз пользователя. Эта комбинация аппаратного обеспечения фиксирует положение зрачка и отражений от роговицы, позволяя системе определять, куда смотрит пользователь. Блок обработки в реальном времени в очках AR вычисляет точку взгляда пользователя, которая затем используется для ряда взаимодействий в среде AR, таких как выбор объектов, навигация по меню и настройка фокуса виртуальных элементов в соответствии со взглядом пользователя. Технология отражающих волноводов, в которой используются зеркала для отражения света и изображений в глазах пользователя, уникально подходит для разработки решений для отслеживания взгляда, поскольку она позволяет снизить сложность необходимого оборудования.

Способность очков AR отслеживать движения глаз значительно улучшает впечатления пользователей, делая взаимодействие более реалистичным и захватывающим. В конечном итоге возможности отслеживания взгляда также приведут к расширению возможностей медицинских технологий и сбора данных о личном здоровье.

Ожидаете ли вы, что возможность отслеживания глаз станет стандартной функцией в готовых к использованию AR-очках или она останется премиальной функцией для определенных приложений?

Хотя возможности отслеживания глаз в очках AR когда-то считались премиальной функцией, эта технология готов к потенциальной интеграции в основные потребительские модели. Этот сдвиг в первую очередь мотивирован желанием предоставить пользователям более интуитивный и захватывающий пользовательский опыт. Однако темпы и масштабы широкого внедрения будут зависеть от темпов технического прогресса и развития потребительских предпочтений в постоянно меняющемся пространстве дополненной реальности.

К факторам, способствующим этой тенденции, относятся снижение в стоимость компонентов айтрекингарастущие ожидания потребителей в отношении беспрепятственного взаимодействия с AR-контентом и растущий интерес разработчиков к созданию захватывающих, захватывающих AR-приложений. Еще одним фактором, способствующим этому, является расширение спектра приложений для отслеживания взгляда, выходящих за рамки простого игрового и профессионального использования, особенно в сфере медицинских технологий.

Как, по вашему мнению, отслеживание взгляда на дисплее, расположенном рядом с глазами, повлияет, в частности, на индустрию медицинских технологий и дополненной реальности?

Отслеживание взгляда на дисплее, расположенном рядом с глазами, имеет значительный потенциал для индустрии медицинских технологий и дополненной реальности. В целях личного здоровья отслеживание глаз с помощью очков AR можно использовать для сбора подробных данных о состоянии здоровья без каких-либо инвазивных тестов или процедур. Например, возможности дополненной реальности для отслеживания глаз могут отслеживать размер зрачка пользователя, частоту моргания и рисунок глаз, чтобы обнаруживать отклонения и диагностировать многие заболевания.

В дополненной реальности его можно использовать для отслеживания того, куда смотрит пользователь в физическом и виртуальном мире, а также динамически настраивать окружающую среду в соответствии с взглядом пользователя. Например, если пользователь смотрит на текст, текст можно выделить или увеличить. Отслеживая взгляд пользователя, технология отслеживания глаз также может позволить владельцам управлять виртуальными объектами, например, глядя на виртуальную кнопку, чтобы выбрать ее, или глядя на виртуальный объект, чтобы взаимодействовать с ним, делая эти взаимодействия более естественными и интуитивно понятными. Это называется отслеживанием взгляда, и такие компании, как Microsoft и Apple, интегрировали его в свои гарнитуры смешанной реальности.

Какие данные о здоровье можно собрать с помощью технологии отслеживания движений глаз и какие заболевания/инфекции можно в результате уменьшить?

Технология отслеживания глаз с помощью очков AR может быть полезна для сбора данных, связанных с движениями глаз, направлением взгляда и реакцией зрачков. Эти данные могут затем помочь в диагностике различных состояний, таких как глаукома, диабетическая ретинопатия, дегенерация желтого пятна и даже некоторые неврологические расстройства. Например, у людей с глаукомой может быть трудности с отслеживанием движущихся объектов глазамикоторый можно обнаружить через очки AR.

Точно так же размер зрачков и частота моргания могут использоваться для определения уровня стресса, внимания и усталости — например, зрачки имеют тенденцию расширяться, когда люди испытывают стресс или усталость, а люди склонны чаще моргать, когда утомлены.

Какие еще медицинские приложения для технологий дополненной реальности вас интересуют? Есть ли какие-либо варианты использования, которыми вы можете поделиться?

В дополнение к вышеупомянутым приложениям AR-отслеживание глаз может стать ценным инструментом для выявления сотрясений мозга и неврологических расстройств. При обнаружении сотрясения мозга он сравнивает данные после инцидента, чтобы обнаружить любые существенные отклонения от базовых данных нормального отслеживания глаз.

AR-отслеживание глаз также может служить инструмент для скрининга неврологических расстройств, таких как болезнь Альцгеймера и Паркинсона путем постоянного наблюдения за зрачками человека и характером движения глаз. Технология ищет нарушения в движениях глаз, такие как снижение плавности слежения (когда глаз постоянно фиксируется на движущемся объекте) или саккады (быстрые движения глаз, которые перемещают взгляд с одной точки на другую) и реакции зрачков по сравнению с базовой линией. Хотя отслеживание глаз с помощью дополненной реальности дает ценную информацию о потенциальных неврологических симптомах, следует подчеркнуть, что это не диагностический инструмент, а скорее средство раннего обнаружения и постоянного мониторинга.