Понимает ли Алекса вашего малыша? Исследователи Западного университета изучают этот вопрос

Двухлетний сын Оливии Дауб одержим «безделушками». Он говорит о них и кричит о них в 5 утра каждый день.

Дауб сказала, что большинство людей понятия не имеют, о чем говорит ее сын, но она знает, как принести ему крошечный темно-синий фрукт, который он действительно хочет: чернику.

«Мы все были детьми и сталкивались с тем, что нас не понимали взрослые. [adults] всем нам было очень трудно понимать детей, потому что они произносят речь и язык не так, как взрослые».

Дауб, доцент Школы коммуникативных наук и расстройств Западного университета в Лондоне, Онтарио, говорит, что понимание речи малышей еще сложнее для искусственного интеллекта (ИИ). Вот почему она возглавляет новое исследование о том, как ИИ может лучше понимать, как разговаривают малыши.

Дауб сказал, что, хотя программное обеспечение для автоматического распознавания речи, такое как автоматические субтитры на собраниях Zoom и виртуальный помощник Amazon Alexa, стало хорошо распознавать речь взрослых, ему все еще трудно точно уловить то, что говорят маленькие дети.

«Я думаю, мы все видели на YouTube ролики, где малыш просит Алексу сыграть песню, а получает что-то совершенно другое и совершенно неуместное», — сказала она. «Это исследование пытается понять, как мы можем использовать принципы искусственного интеллекта и машинного обучения для улучшения распознавания малышей и дошкольников».

Для этого она работает с западным доцентом по электротехнике и компьютерной инженерии Судехом Никаном, чтобы обучить модель искусственного интеллекта обычным речевым моделям и сочетаниям малышей.

«Большинство имеющихся у нас речевых моделей обучены на речи взрослых, поэтому большинство из этих моделей не очень успешно распознают речь малышей, особенно ошибки, которые они допускают», — сказал Никан.

«Вы должны предоставить примеры ИИ [for it] уметь понимать и различать обычные ошибки и проблемы с речью».

Как будет проходить исследование

Дауб планирует собрать 30 детей, чтобы они играли, рассказывали истории и разговаривали с научными сотрудниками. Каждый сеанс будет записываться и расшифровываться людьми, которые также будут собирать данные о манере речи детей.

По словам Дауба, одна из распространенных закономерностей заключается в том, что многие англоговорящие малыши с трудом произносят звук «r» и вместо этого используют звук «w».

Подобные данные будут переданы Никану, который передаст информацию в частную модель искусственного интеллекта для ее обучения.

«Мы можем точно настроить эти модели, используя данные, специально аннотированные для этой цели», — сказал Никан, добавив, что модель ИИ также будет обучаться с использованием некоторых данных из уже существующего онлайн-сервиса OpenAI.

Дауб и ее команда на данный момент встретились с девятью малышами и продолжают искать новых участников для исследования.

Клиническое и повседневное использование модели ИИ

Хотя исследование находится на ранней стадии, Дауб и Никан заявили, что их цель — обучить модель искусственного интеллекта, которую можно будет использовать в клинических условиях, помогая логопедам анализировать и расшифровывать то, что говорят дети.

«Я не думаю, что мы когда-либо будем точны на 100 процентов, если не будем следить за детьми 24 часа в сутки… но я думаю, что мы можем подойти намного ближе, чем сейчас», — сказала она.

В дальнейшем, по словам Дауба, если ИИ сможет лучше понимать дошкольников, он сможет улучшить такие инструменты, как субтитры и программное обеспечение для специальных возможностей с голосовой активацией, а также предоставит детям больше места для игр с технологиями.

“Мы можем творчески подходить к тому, какой вклад эти маленькие люди могут внести в жизнь общества. Они не просто потребители окружающего их мира. Предоставление им доступа к технологиям также является важным фактором”, – сказал Дауб.