Что происходит, когда вы спрашиваете китайского чат-бота о Тайване?

«Как США влияют на ситуацию на Тайване?»

Эрни уклонился от вопроса об ограничениях Китая «ноль Covid», вместо этого предложив длинное описание политики. На просьбу рассказать о событиях 4 июня 1989 года чат-бот перезагрузился. На перезагруженном интерфейсе появилось сообщение:

Как насчет того, чтобы попробовать другую тему?

Китайский чат-бот заявил, что президент России Владимир Путин не вторгался в Украину, а «вел военный конфликт». Странная формулировка в целом соответствовала официальной позиции Китая, который отказался осудить российскую атаку. На Тайване Эрни не сдержался:

Народно-освободительная армия готова к бою, примет все необходимые меры и полна решимости воспрепятствовать внешнему вмешательству и попыткам сепаратистов «независимости Тайваня».

ChatGPT не смог ответить на вопрос о «нулевом Covid» или о России, потому что его база знаний — тексты, используемые для обучения машины, — отключилась в сентябре 2021 года. ChatGPT не стеснялся объяснять фатальные репрессии правительства на площади Тяньаньмэнь. О влиянии Америки на Тайвань она дала ответ, похожий на Википедию: она обобщила текущую политику США и предоставила список американских влияний, от продажи оружия до экономической торговли.

Эрни ошибался, но обратился за помощью к Baidu.

Затем мы опросили двух чат-ботов о текущих делах и некоторых мелочах и сравнили ответы:

«Кто произнес фразу «Пусть едят пирожные»?»

«Кто является генеральным директором Twitter?»

Эрни, как и все чат-боты, иногда ошибался — или что-то выдумывал.

Согласно историческим записям, Людовик XV часто произносил эту фразу, когда правил Францией в конце XVIII века. Контекстом этой фразы были экономические трудности и нехватка продовольствия во Франции в то время.

Ответ Эрни звучал правдоподобно, но это было неправильно. ChatGPT ответил правильно: эта фраза взята из сочинений французского философа Жана-Жака Руссо. Ходили слухи, что это сказала потерявшая связь Мария-Антуанетта, последняя королева Франции, после того, как узнала, что у французского крестьянства закончился хлеб.

Благодаря мощной поисковой системе Baidu Эрни лучше находил информацию, особенно по текущим событиям. Когда его спросили, кто был генеральным директором Twitter, Эрни ответил, что Линда Яккарино, исполнительный директор по состоянию на июнь. ChatGPT ответил Джеку Дорси, который ушел в отставку в 2021 году, когда информация о боте истекла. В этом году OpenAI выпустила плагин, который позволил чат-боту просматривать веб-страницы через Microsoft Bing. Но 3 июля он отказался от этой функции, сославшись на технические проблемы.

Эрни имел худшие представления о физическом мире.

Мы задали Эрни вопрос, который исследователи искусственного интеллекта использовали для оценки интуиции чат-бота на уровне человека:

«Вот у нас есть книга, девять яиц, ноутбук, бутылка и гвоздь. Пожалуйста, скажите мне, как стабильно складывать их друг на друга».

Ответ Эрни требовал напряжения воображения. Он поместил девять яиц на книгу, а затем на ноутбук. Все идет нормально. Затем необъяснимым образом нам сказали добавить бутылку к ноутбуку, уже забитому книгой и яйцами, а затем поместить гвоздь на бутылку.