Чипы MediaTek на базе искусственного интеллекта призваны сделать ваш следующий телефон очень персональным

Производители телефонов, такие как Google, и производители чипов, такие как Qualcomm, предполагают, что 2024 год станет годом искусственного интеллекта на устройствах. В прошлом месяце на ежегодном саммите руководителей компания MediaTek, производитель кремния, который используется в миллионах телефонов и интеллектуальных устройств, подчеркнул преимущества использования генеративного искусственного интеллекта в телефонах. Например, получение более персонализированных ответов и предложений быстрее, чем с помощью облачных решений, и лишь немногие технологии сделают телефоны значительно лучше.

Но на горизонте есть несколько конкретных вариантов использования, пояснил Дэвид Ку, финансовый директор MediaTek. В следующем году у Vivo появится телефон с функцией, которая будет записывать встречу, расшифровывать ее и предоставлять резюме, которое можно будет использовать в секретных залах заседаний, поскольку обработка выполняется на устройстве.

«Если это частная встреча, вы можете сохранить конфиденциальность информации. Вы не хотите отправлять эту запись в облако, поэтому можете сделать это на устройстве», — сказал Ку.

Читать далее: 2023 год стал годом генеративного искусственного интеллекта. Оно появится на телефонах в 2024 году

В октябре конкурирующий производитель чипов Qualcomm добавил возможности генеративного искусственного интеллекта непосредственно в чипы, которые станут основой следующей волны премиальных телефонов Android, таких как Xiaomi 14. Хотя MediaTek не предлагала так много конкретных вариантов использования своего генеративного искусственного интеллекта, обе компании предложили что технология будет предлагать более персонализированные предложения, учитывая модели поведения людей и манипуляции с изображениями, например расширение фотографий за пределы их исходных границ.

Добавьте к этому новые модемы и чипы 5G Redcap (сокращение от «пониженной емкости») от MediaTek, которые призваны помочь устройствам с меньшей нагрузкой на данные (например, устройствами умного дома, наушниками и аксессуарами), и у вас есть основа для включения большего количества устройств, используемых людьми. и компании, чтобы поговорить друг с другом. Заявления MediaTek представляют собой модернизацию старых технологий в подключенном будущем, о котором мы слышали уже много лет.

Неопределенный новый рубеж генеративного искусственного интеллекта на устройствах

Существует множество предлагаемых преимуществ использования генеративного искусственного интеллекта на телефонах, таких как получение более персонализированных ответов и предложений быстрее, чем с помощью облачных решений, и мало способов, которыми технология сделает телефоны значительно лучше.

Ку предложил две потенциальные генеративные функции искусственного интеллекта: использовать его для удаления ненужных объектов на фотографиях, подобно тому, как функции Google Magic Eraser работают на телефонах Pixel (и в облачном сервисе хранения фотографий Google One), а также автоматическое составление текста вместе с фотографиями для опубликовать в социальных сетях.

Ку также отметил, как генеративный ИИ может улучшить функции личного помощника телефона с помощью контекстных подсказок. Если вы опаздываете на встречу и ваш телефон сообщает, что вы не приедете, он может предложить другим отправить сообщение о том, что вы уже в пути. А если ваш телефон отключен, но в ваш почтовый ящик попадает срочное электронное письмо, помощник все равно может вас предупредить.

Два новых телефонных чипа MediaTek, Размерность 9300 для топовых телефонов и Размерность 8300 для менее премиальных устройств оба имеют генерирующий искусственный интеллект на устройстве, но компания опубликовала информацию о производительности только для первого, заявив, что оно может генерировать изображение с помощью Stable Diffusion менее чем за одну секунду и запускать модели искусственного интеллекта с 7 миллиардами параметров в секунду со скоростью 20 токенов в секунду. Snapdragon 8 3-го поколения может достичь той же скорости количества токенов в секунду, но этот показатель не имеет большого количества сравнений, кроме искусственного интеллекта на устройстве для чипа ПК Qualcomm (30 токенов в секунду).

Младший Dimensity 8300 может обрабатывать модели изучения языка с количеством параметров до 10 миллиардов, а Dimensity 9300 — с LLM до 33 миллиардов параметров.

Справедливости ради надо сказать, что никто не разработал точную метрику для сравнения возможностей генеративного ИИ. На данный момент наиболее часто используются «токены в секунду» и «триллионы операций в секунду», но MediaTek работает с различными партнерами по экосистеме, чтобы выяснить это, сказал Ку.

«Мы пытаемся предоставить более подробное руководство и указать, какой истинный эталон будет более значимым с точки зрения пользователя», — сказал Ку.

С новыми границами приходят и проблемы. Уже есть опасения, что люди будут использовать генеративный искусственный интеллект, чтобы наводнить Интернет фейковыми изображениями и другой дезинформацией. Представляя свой генеративный искусственный интеллект на устройстве, Qualcomm предложила собственное решение: партнерство с платформой аутентификации Truepic позволяет ставить цифровые водяные знаки на любых изображениях, измененных или напрямую созданных с помощью генеративного искусственного интеллекта. MediaTek работает с разными партнерами над созданием аналогичного типа аутентификации, который будет работать как «невидимый водяной знак», — сказал Ку, — и независимо от того, использовался ли генеративный ИИ для изменения 50% или только 5% фотографии, это Я получу этот водяной знак.

«Возможно, это самые важные 5%», — сказал Ку. «Может быть, это твое лицо».

Читать далее: Насколько близко это фото к правде? Что нужно знать в эпоху искусственного интеллекта

MediaTek надеется, что помимо телефонов генеративный искусственный интеллект когда-нибудь сможет помочь в автомобильной сфере. Подтвердив на саммите свое партнерство с производителем графических процессоров Nvidia, компания предположила, что автомобили смогут использовать эту технологию в сочетании с внешними камерами для идентификации объектов впереди и в сочетании с жестами уточнять что-то на расстоянии, на что указывает водитель. Автомобили могут даже заметить беспорядочное вождение и спросить, не сонлив ли водитель, или предупредить их, когда загорится зеленый свет.

Личный помощник может пригодиться и в машине, отметил Ку. В жаркий день при повышении температуры в автомобилях водители, вероятно, включат кондиционер или опустят окно сразу после включения автомобиля, но ИИ может заметить, когда все остынет, и подтолкнуть водителя поднять окна или набрать номер вниз. холодный кондиционер. А если по пути на встречу они попадут в пробку, помощник может отправить сообщение другим участникам, сообщающее, что водитель опоздает.

Более связанный 2024 год

Хотя устройства могут использовать генеративный искусственный интеллект без подключения к Интернету, улучшение подключения к сетям и между устройствами дает большие преимущества. Первые чипы MediaTek, поддерживающие Wi-Fi 7, были выпущены в прошлом году, а чипы этого года стали лучше, хотя компания тоже смотрит на это.

«Когда мы смотрим на такие технологии, как Wi-Fi 7, и переходим к Wi-Fi 8, все они обеспечивают гораздо более высокую скорость передачи данных, но, что более важно, такие вещи, как меньшая задержка», — сказал Мойнихан.

Wi-Fi 7 имеет несколько преимуществ по сравнению со своим предшественником, например, многоканальную работу, которая позволяет устройствам одновременно подключаться к диапазонам Wi-Fi 2,4 ГГц, 5 ГГц и/или 6 ГГц для получения наилучшего соединения (аналогично тому, как используется агрегация несущих). несколько частот спектра 5G для улучшения сигнала для пользователей телефонов). А Wi-Fi 7 появится в чипах MediaTek, предназначенных для терминалов фиксированного беспроводного доступа в следующем году от ведущих операторов связи, что позволит людям воспользоваться этими достижениями в области подключения, используя домашний интернет-сервис 5G.

Читать далее: Лучшие телефоны 2023 года

RedCap 5G использует меньшую задержку и другие преимущества мобильных сетей 5G при меньших затратах, позволяя использовать более дешевые устройства, которые по-прежнему могут получать выгоду от сетей следующего поколения. По словам Мойнихана, нынешние модемы 5G обеспечивают мощность, производительность и дальность действия, что отлично подходит для мобильных телефонов, но излишне для небольших решений Интернета вещей и умного дома.

«Вам не нужны 10 гигабит в секунду, но что вам действительно нужно, так это пара сотен мегабит в секунду», — сказал Мойнихан. Благодаря автономным сетям 5G, разработанным операторами связи, и новым устройствам, созданным в соответствии с набором стандартов отраслевой коалиции 3GPP Release 17, более простые гаджеты смогут подключаться к 5G с низкой задержкой и энергопотреблением.

По словам Мойнихана, в будущем подключение может быть связано с генеративным искусственным интеллектом на устройствах, поскольку технология распространяется по домам каждого человека по мере распространения так называемых «окружающих вычислений». Это может выглядеть так, будто ваша сеть интеллектуальных устройств использует ваши предпочтения в качестве руководства для формирования вашей среды. Вместо того, чтобы заранее задавать, какое освещение и уровень обогрева или кондиционирования вы хотите, когда вы входите в дверь, устройства могут автоматически решить это сами в зависимости от того, что вам нравится и когда вы вернетесь домой, а затем активировать другую настройку для другие в домашнем хозяйстве.

MediaTek и дополненная реальность

Как и ее конкуренты, MediaTek изучает, в каком направлении могут развиваться ее чипы, в том числе в дополненной и виртуальной реальности. На прошлогоднем саммите компания сообщила, что ее чипы используются в Sony PSVR2, гарнитуре виртуальной реальности, работающей в паре с PS5. На этапе саммита в этом году MediaTek представила еще одно партнерство: она будет работать с материнской компанией Facebook Meta над разработкой специального чипа AR/VR.

Хотя MediaTek не уточнила, какое устройство будет использовать этот чип, нетрудно представить, что он может оказаться либо в гарнитуре AR/VR, такой как Meta Quest 3, либо в преемнике Ray Ban Meta Smart Glasses. Поскольку каждое из этих Meta-устройств оснащено новыми чипами Qualcomm Snapdragon XR Gen 2 и AR1 Gen 1 соответственно, неясно, узурпирует ли MediaTek роль производителя чипов для своих преемников или будет использовать будущий чип в новом проекте.

Читать далее: Новейшие чипы VR/AR от Qualcomm многое расскажут о Quest 3 и не только

Ясно одно: MediaTek входит в пространство AR/VR иначе, чем конкуренты. Ранее в этом году Qualcomm выпустила свои чипы в качестве общих чипов для устройств смешанной реальности. Но MediaTek работала с Sony и будет работать с Meta над чипами, адаптированными к индивидуальным потребностям каждого бренда, сказал Мойнихан, и будет стремиться к партнерству с большим количеством брендов в будущем.

«У нас есть определенные технологии, которые мы можем внедрить, а в будущем появятся возможности подключения, будь то Wi-Fi, даже RedCap или какие-то другие технологии», — сказал Мойнихан.

Примечание редактора: CNET использует механизм искусственного интеллекта для создания некоторых историй. Подробнее см. эта почта.