1757929815
2025-09-15 09:38:00
Исследователи из Национального университета Сингапура (NUS) разработали носимое вспомогательное устройство, которое использует Meta’s Llama Models Чтобы помочь людям с нарушениями зрения «увидеть» окружающий мир.
Названный AISEE, гаджет, похожий на наушники, оснащен камерой, которая работает как компаньон искусственного интеллекта (ИИ), который помогает пользователям обрабатывать визуальную информацию, интегрируя в свою повседневную жизнь и даже помогая им вернуться в рабочую силу.
Первоначально задуманный как кольцо с ношенным пальцами в 2018 году, дизайн AISEE с тех пор превратился в форм-фактор для наушников с открытым уходом. Суранга Нанаяккара, профессор Департамента информационных систем и аналитики NUS, которые возглавляли исследовательскую группу, сказал, что этот дизайн был выбран по таким вариантам, как очки, чтобы избежать потенциальной социальной стигмы, и, что более важно, чтобы поддерживать уши пользователя, сохраняя их естественную пространственную осведомленность через звук.
Основываясь на обратной связи с пользователями, Nanayakkara сказал, что дизайн был дополнительно улучшен, решая такие проблемы, как препятствие для волос и необходимость более длительного срока службы батареи. Последняя итерация также функционирует как стандартные наушники для музыки и вызовов, с возможностями искусственного интеллекта по требованию.
Нанаяккара сказал, что этот двухцелевой дизайн улучшает утилиту AISEE и привлекает пользователей. «Не имеет смысла иметь что -то, что используется один раз в день или, может быть, несколько раз в неделю», – сказал Нанаяккара. «Мы построили его больше как умные наушники».
Устройство запускает Агент ИИ структура, где компьютерное зрение и Модели рассуждений Работайте в тандеме с моделью ламы, чтобы понять намерения пользователя и выполнить задачи. Чтобы эффективно запустить Llama на устройстве на основе Android, команда использовала методы количественной оценки для уменьшения размера модели до одного до трех миллиардов параметров.
Hussel Suriyaarachchi, директор AISEE по технологическим технологиям, сказал, что агентская структура также достаточно гибкая, чтобы включить новые версии Llama, когда они становятся доступными. «Если он работает с Llama 3.2, мы можем легко заменить модель на более новые версии, потому что базовая архитектура ламы похожа», – добавил он.
Нанайаккара, который также является соучредителем Aisee, одноименного стартапа, стоящего за устройством, которое было отозвано от NUS около года назад, заявил, что решение об использовании Llama было вызвано отзывы сотрудников визуально, особенно необходимость в офлайн-обработке конфиденциальных документов.
«Если вы слепые, получающий новый трудовой договор, вы бы хотели понять, что находится в контракте, и задать вопросы об этом. Вы не хотите, чтобы его отсканировали и загружали в облако», – сказал Нанаяккара. «Вот почему мы решили использовать ламу, особенно более мелкие модели, которые могут работать на нашем устройстве».
AISEE поддерживается программой инноваций в области исследований выпускников NUS и получила финансирование от Impact Investors. Компания, которая получила премию Meta Llama Impact Innovation в 2024 году, ведет переговоры с такими организациями, как музеи и операторы аэропортов, чтобы сделать их пространство более инклюзивными и планирует скорость потребителя в ближайшее время. Он также работает с приложением Super Asian Юго-Восточной Азии, чтобы создать голосовую систему для бронирования поездок.
На данный момент AISEE не разработала поддержку местных языков помимо того, что доступно через Llama, хотя недавно он получил запрос от фонда в Объединенных Арабских Эмиратах на варианты локализации. «Это соображение для нас в зависимости от ресурсов, которые у них есть», – сказал Нанаяккара.
Nanayakkara видит будущее для AISEE помимо вспомогательных технологий, где он может служить инструментом визуального интеллекта для всех. «Мы предвидим это не как устройство для слепых», – сказал он, сославшись на срезанный эффект Там, где функции, разработанные для людей с ограниченными возможностями, имеют тенденцию приносить пользу населению в целом после удаления ограничений. «Коммерческий успех AISEE будет не в качестве вспомогательной технологии, а в качестве свободного от громкой связи и способа безэкрина для легких вычислений».
#Умная #гарнитура #дает #визуально #новый #способ #увидеть
Продолжение темы
