Meta обновляет свой проект Ego-Exo, чтобы продвигать исследования в области искусственного интеллекта и улучшать перспективу от первого лица.

МАДРИД, 1 дек. (Порталтик/EP) –

Мета объявила о новых проектах в области искусственного интеллекта (ИИ) и обновлении своей инициативы Ego-Exo, направленной на решение проблем, связанных с технологиями, ориентированными на предоставление перспективы от первого лица.

В эти дни компания отмечает десятилетний юбилей коллектива Фундаментальные исследования искусственного интеллекта (FAIR, английская аббревиатура), которая, как поясняется в заявлении, «была в авангарде многочисленных научных достижений».

При этом он также подчеркнул, что эта группа экспертов является «фундаментальным звеном». для достижения цели«и что благодаря своей работе он смог внести свой вклад «в построение будущего социальных связей».

Одним из последних достижений в этой области является Голос окно, модель искусственного интеллекта, которую компания представила в июне этого года и способна выполнять задачи по генерации голоса, а также высококачественные аудиоклипы.

Теперь подпись представил своему преемнику, Аудиобокс, который записывает голосовые подсказки или текстовые записи, описывающие звуки или типы речи, которые вы хотите персонализировать.

Еще одна новинка, приуроченная к десятому юбилею FAIR, — это Seamless Communication, которую Meta разработала на основе SeamlessM4T для создания набора моделей искусственного перевода, адаптированных к различным языкам.

В частности, этот инструмент поддерживает английский, испанский, немецкий, французский, итальянский и китайский языки и «сохраняет эмоции и стиль говорящего», а также учитывает скорость и ритм речи.

Тем временем, функция SeamlessStreaming открывает возможность общения в реальном времени с другими людьми, говорящими на разных языках. В отличие от обычных систем, которые переводят после того, как говорящий закончил говорить, эта система делает это во время его речи, чтобы позволить слушателю мгновенно получить доступ к переводу.

Наконец, Мета объяснил, как он продвигает исследования так называемой перспективы от первого лица, также известной как эгоцентрическое восприятие, которая пытается научить ИИ реалистично взаимодействовать с миром, как это делают люди.

Этот проект называется Ego-Exo и в котором он работает. с 2021 годабыл обновлен до Ego-Exo4D, чтобы одновременно захватывать виды от первого лица с носимой камеры, а также внешние или экзоцентрические виды с камер, окружающих пользователя.

Эта комбинация дает моделям ИИ «окно в то, что люди видят и слышат». в сочетании с большим количеством контекста об окружающей среде», как объяснил Мета в этой статье, которая продемонстрировала, как он надеется материализовать эти достижения.

Благодаря этому человек, использующий умные гарнитуры, сможет приобрести новые навыки с помощью виртуального тренера с искусственным интеллектом, который с помощью обучающего видео проведет его, например, по ремонту велосипедной шины или жонглированию футбольным мячом.