ИИ становится очень хорош в предсказаниях

Жить во времени – значит задаваться вопросом, что будет дальше. В каждом человеческом обществе есть люди, которые одержимы закономерностями мира, чтобы предсказать будущее. В древности царям сообщали, какие звезды появятся с наступлением темноты. Сегодня они строят количественные модели, которые подталкивают правительства к открытию кранов капитала. Они выбирают победителей на Уолл-стрит. Они оценивают вероятность землетрясений для страховых компаний. Они рассказывают трейдерам сырьевых товаров в хедж-фондах о погоде в следующем месяце.

В течение многих лет некоторые элитные прогнозисты соревнуются друг с другом в турнирах, где отвечают на вопросы о событиях, которые произойдут (или не произойдут) в ближайшие месяцы или годы. Вопросы охватывают разнообразную тематику, поскольку они предназначены для измерения общих способностей к прогнозированию, а не узкого опыта. Игроков могут спросить, произойдет ли переворот в нестабильной стране или спрогнозировать будущие темпы вырубки лесов в какой-то части Амазонки. Их могут спросить, сколько песен из грядущего альбома Тейлор Свифт возглавят стриминговые чарты. Прогнозист, который делает наиболее точные предсказания как можно раньше, может заработать денежный приз и, что, возможно, что более важно, уважение самых талантливых провидцев в мире.

Эти турниры стали гораздо более популярными во время недавнего бума рынков прогнозов, таких как Полимаркет и Калши, где сотни тысяч людей по всему миру теперь торгуют миллиардами долларов в месяц по аналогичным вопросам прогнозирования. А теперь в них играют и ИИ. Поначалу дела у ботов шли не слишком хорошо: в конце 2024 года ни одному ИИ не удалось даже занять 100-е место в одном из крупных соревнований. Но с тех пор они поднялись в списках лидеров. ИИ уже доказали, что они могут делать сверхчеловеческие предсказания в ограниченном контексте настольная играно вскоре они могут быть лучше нас в предсказании будущего всего нашего беспорядочного, случайного мира.

Три раза в год платформа прогнозов Metaculus проводит турнир, на котором, как известно, возникают особо сложные вопросы. Обычно это привлекает более серьезных прогнозистов, рассказал мне Бен Шиндел, ученый-материаловед, занявший третье место среди участников недавнего конкурса. В прошлом году на Летнем кубке лондонский стартап Mantic представил систему прогнозирования на базе искусственного интеллекта. Как и другим участникам, Мантический ИИ должен был ответить на 60 вопросов, присвоив вероятности определенным результатам. ИИ должен был угадать, как изменится линия фронта на Украине. Нужно было выбрать победителя Тур де Франс и оценить Суперменмировые кассовые сборы в первые выходные. Оно должно было сказать, запретит ли Китай экспорт редкоземельного элемента, и спрогнозировать, обрушится ли сильный ураган на Атлантическое побережье до сентября. Ему нужно было выяснить, будут ли Илон Маск и Дональд Трамп публично унижать друг друга в течение определенного периода времени.

Несколько месяцев спустя предположения системы прогнозирования Mantic и других участников турнира были сопоставлены с реальными результатами и друг с другом. ИИ занял восьмое место из более чем 500 участников, что стало новым рекордом для бота. «Это был неожиданный прорыв», по словам Тоби Шевлейна, генерального директора Mantic. Шевлейн рассказал мне, что он оставил удобную работу научного сотрудника в Google DeepMind, чтобы стать соучредителем компании. Он хотел отпраздновать триумф ИИ, но беспокоился, что это результат каких-то удачных догадок. Он и его команда представили его новую версию на турнире Metaculus Fall Cup. Этот бот справился еще лучше. Он не только финишировал четвертым, что стало еще одним рекордом, но и побил средневзвешенное значение всех прогнозов синоптиков. Оно оказалось мудрее мудрости довольно мудрой толпы.

Механизм искусственного интеллекта Mantic создан для того, чтобы делать точные прогнозы практически в любой области. Шевлан не показывал мне интерфейс движка и уклонялся от его точной конструкции. Он описал его лишь как «подмостки», состоящие из нескольких крупных языковых моделей с разными наклонностями. Эти отдельные LLM сами намного лучше справляются с общими прогнозами, особенно с прогнозами OpenAI, Anthropic и Google. Частично это связано с тем, что хорошее прогнозирование требует чтения и обработки огромных объемов информации. Например, чтобы угадать победителя Тур де Франс, человек-прогнозист может часами строить базовую регрессионную модель на основе результатов предыдущих лет, одновременно просматривая отчеты о травмах и физической форме и читая комментарии фанатов и экспертов. У ИИ здесь есть естественное преимущество. Они могут читать намного быстрее, чем люди, и их когнитивные способности не ухудшаются после продолжительной ночи напролет.

В прошлом году команда, которую консультировал профессор Чикагского университета Хайфэн Сюй, создала службу сравнительного анализа, которая на постоянной основе оценивает прогнозы ИИ. Почти каждый день он задает крупным моделям новые вопросы, полученные на рынках ставок на Калши. (Недавно их спросили, кто будет следующим генеральным директором Apple, а также кто сыграет главную роль в предстоящем сезоне сериала. Белый Лотос.) Их показатели точности постоянно обновляются по мере решения вопросов. «У них всех разные способности прогнозировать», — сказал мне Сюй. Версия ChatGPT, которую оценивает сервис, является консервативной, возможно, даже слишком консервативной; в таблице лидеров Сюя в настоящее время он уступает версиям Грока и Близнецов.

Механизм прогнозирования Mantic объединяет несколько LLM и назначает каждому разные задачи. Можно выступать в качестве эксперта по базе данных результатов выборов. Другого могут попросить просмотреть данные о погоде, экономические результаты или кассовые сборы, в зависимости от вопроса, который он атакует. Модели работают вместе как одна команда для создания окончательного прогноза. Шевлан рассказал мне, что Mantic использует свои вычислительные ресурсы для экспериментов с более сложными конструкциями, в которых используется еще больше моделей. Я спросил его, интересовались ли они мнением ИИ об общей структуре этих строительных лесов. Пока нет, сказал он, но, как и почти все остальные, они используют его для написания кода для своих систем прогнозирования.

Компания Lightning Rod Labs экспериментирует с прогнозирующими моделями, специально созданными для конкретных областей. Они даже разработали систему, позволяющую предсказать беспорядочное поведение Трампа. Бен Тертел, генеральный директор компании, рассказал мне, что его команда представила модели набор из более чем 2000 вопросов прогнозирования с известными результатами, которые не были включены в ее обучающие данные. Затем модель сверила свои ответы с тем, что на самом деле сделал Трамп, и извлекла уроки из своих ошибок. Когда у компании была небольшая модель, предсказывающая поведение Трампа по новому набору вопросов — например, встретится ли он с Си Цзиньпином лично или посетит футбольный матч армии и флота — она превзошла самые продвинутые модели OpenAI.

Читайте: Вы уже чувствуете AGI?

Этот год может стать важным для предсказаний ИИ. В январе Mantic представила свой последний усовершенствованный двигатель на весенний кубок Metaculus Spring Cup 2026 года. Уже задавался вопрос, сколько «Оскаров» Грешники победит и если США вскоре нападут на Иран. К маю эти вопросы будут решены, и мы посмотрим, как поведет себя двигатель. Если он поднимется на одну позицию по сравнению с последним результатом, он станет первым ИИ, завоевавшим медаль в крупном турнире по прогнозированию.

Если ИИ заберет золото, это может означать начало новой эры. Люди – предсказатели затмений, теоретики затмений космическая тепловая смерть— возможно, больше не являются лучшими проводниками в будущее. С этого момента, пока мы существуем, мы можем спрашивать ИИ, что будет дальше. Мы не всегда сможем понять, как они пришли к своим предсказаниям. Этот хрустальный шар может быть подобен черной дыре с горизонтом событий, мимо которого не может выйти свет его прозрения. Возможно, нам просто придется поверить на слово.

До сих пор элитные люди-предсказатели довольно хорошо относились к этой возможности. Когда я разговаривал с Шинделом, высокопоставленным прогнозистом, он не мог сказать ничего, кроме восхищения об ИИ. «У них очень хорошие способности к рассуждению», — сказал он мне. “У них нет таких предубеждений, как у людей. Они могут узнавать новости сразу же, как только они происходят, и не привязываются к своим предсказаниям”. На Метакулюсе группа синоптиков занялся оценкой того, когда у ИИ появится возможность превзойти прогнозы элитной команды людей. В январе прошлого года они заявили, что вероятность того, что это произойдет к 2030 году, составляет около 75 процентов. Теперь они думают, что она составляет около 95 процентов.