Практика с ответом Google Search на ChatGPT

На прошлые выходные я обратился к Google Search за помощью, чтобы выяснить, сколько марок мне нужно, чтобы наклеить 8-унциевое почтовое отправление. (Естественно, я отправлял копию последний выпуск WIRED!). Это именно тот вопрос, на который я надеялся Новая функция генеративного искусственного интеллекта Google Searchкоторый я тестировал в течение последнего месяца, будет решаться намного быстрее, чем при самостоятельном просмотре.

Google с неуклюжим названием Search Generative Experience, сокращенно SGE, наполняет свое окно поиска диалоговыми функциями, подобными ChatGPT. Вы можете зарегистрироваться на Лаборатория поиска Google. Компания говорит, что хочет, чтобы пользователи общались с ее поисковым чат-ботом, который был запущен для тестировщиков в мае, чтобы глубже погрузиться в темы и задать более сложные и интуитивно понятные вопросы, чем те, которые они вводили бы в скучное старое окно запроса. А ответы, сгенерированные ИИ, предназначены для более четкой организации информации, чем традиционная страница результатов поиска, — например, путем объединения информации с нескольких веб-сайтов. Большинство поисковых запросов в Интернете выполняются через Google, и он разрабатывает технологии искусственного интеллекта дольше, чем большинство компаний, поэтому справедливо ожидать первоклассного опыта.

Так идет теория. Получается, что на практике новая функция пока больше мешает, чем помогает. Он медленный, неэффективный, многословный и загроможденный — больше искусственного вмешательства, чем интеллекта.

Как только вы получите доступ к тесту Google, окно поиска не изменится. Но в ответ на запрос типа «Сколько марок отправить по почте письмо весом 8 унций» новый раздел занимает большую часть экрана, вытесняя обычный список ссылок. В этой области большие языковые модели Google генерируют пару абзацев, похожих на те, что вы можете найти в ChatGPT или Чат Microsoft Bing. Кнопки внизу ведут к интерфейсу чат-бота, где вы можете задавать дополнительные вопросы.

Первое, что я заметил в видении Google будущего поиска, это его медлительность. В тестах, где одной рукой я управлял приложением секундомера, а другой отправлял запрос, генератору текста Google иногда требовалось почти шесть секунд, чтобы выдать ответ. Норма составляла более трех секунд, по сравнению с не более чем одной секундой для появления обычных результатов Google. Все могло быть и хуже: я провел свои тесты после того, как Google выпустил обновление, которое, как утверждается, удвоило скорость поискового бота в прошлом месяце. Тем не менее, я до сих пор часто глубоко читаю обычные результаты к тому времени, когда генеративный ИИ заканчивает работу, а это означает, что я в конечном итоге игнорирую его запоздало представленные диссертации. Кэти Эдвардс, вице-президент Google Search, говорит мне, что оптимизация скорости программного обеспечения ИИ, лежащего в основе этого инструмента, продолжается.

Можно было бы простить медлительность этой новой формы поиска, если бы результаты были достойными. Но точность хромает. Генеративный ИИ-ответ Google из пяти предложений на мой вопрос о марках включал очевидные ошибки как в умножении, так и в вычитании, цены на марки устарели на два года, а также предлагались дополнительные вопросы, которые игнорировали важные переменные стоимости доставки, такие как форма, размер и пункт назначения. Заявление об отказе от ответственности, которое Google показывает в верхней части каждого ответа, сгенерированного искусственным интеллектом, звучит совершенно правдоподобно: «Генеративный искусственный интеллект является экспериментальным. Качество информации может быть разным».

В том же ответе новая функция поиска Google предположила, что мне понадобятся марки стоимостью 2,47 или 4 доллара. Перейдя к онлайн-калькулятору Почтовой службы США, я получил официальный ответ: мне нужно было 3,03 доллара или пять марок по 66 центов каждая с переплатой в 27 центов. Эдвардс из Google говорит, что мой скромный вопрос расширил существующие границы технологии. «Это определенно на границе», — говорит она.

К сожалению, отупение тоже ничем хорошим не закончилось. Когда его спросили только о цене марки, Google ответил устаревшей цифрой. Только указав, что мне нужна цена на этот месяц, система правильно отразила повышение стоимости в этом месяце на 3 цента. Справедливости ради, ChatGPT завалил бы и этот запрос, потому что его обучающие данные прекратятся в 2021 году, но он не позиционируется как замена поисковой системе.