Исследование показывает, что ChatGPT умен, но не подходит для самых творческих людей

Новое австралийское исследование развенчало миф о том, что генеративные системы искусственного интеллекта, такие как ChatGPT, могут вскоре заменить самых творческих драматургов, авторов, авторов песен, художников и сценаристов.

Существующие модели больших языков (LLM) имеют встроенный математический предел творческих способностей, а это означает, что они никогда не смогут соперничать с оригинальностью или изобретательностью самых творческих людей.

К такому выводу пришел эксперт по креативности Дэвид Кропли, профессор инженерных инноваций Университета Южной Австралии, чье исследование математических ограничений генеративного ИИ было опубликовано в Журнал творческого поведения в статье под названием «Кот сидел на…?» Почему генеративный ИИ имеет ограниченную креативность»

Профессор Кропли рассчитал творческие способности студентов-магистров, используя стандартные математические принципы. Результаты показали, что LLM творчество имеет максимум 0,25 по шкале от 0 (отсутствие креативности) до 1 (максимальная креативность).

«Хотя ИИ может имитировать творческое поведение — временами весьма убедительно — его реальные творческие способности ограничены уровнем среднего человека и никогда не смогут достичь профессиональных или экспертных стандартов в соответствии с современными принципами проектирования», — говорит профессор Кропли.

Он говорит, что результаты бросают вызов широко распространенным представлениям о творческих способностях ИИ и вносят ясность в глобальные дебаты, которые часто омрачаются шумихой и непониманием.

«Многие люди думают, что поскольку ChatGPT может генерировать истории, стихи или изображения, он должен быть творческим. Но генерировать что-то — это не то же самое, что быть творческим. LLM обучаются на огромном количестве существующего контента. Они отвечают на подсказки, основанные на том, что они узнали, производя ожидаемые и неудивительные результаты.

«К сожалению, многие люди неправильно понимают значение творчества. Они думают, что оно означает «акт создания чего-то» или «генерации», хотя на самом деле это означает создание чего-то нового, оригинального и эффективного.

«Творческие способности, однако, не симметричны. Как правило, 60% людей имеют творческий потенциал ниже среднего, поэтому неизбежно, что значительная часть общества будет думать, что LLM, такие как ChatGPT, являются творческими, хотя это не так. Высокотворческие люди признают слабые стороны генеративных систем искусственного интеллекта».

Исследование профессора Кропли — это первый формальный расчет творческих способностей ИИ, основанный на внутренней механике программ LLM.

Он говорит, что, хотя ИИ может быть полезным инструментом поддержки, он не может заменить очень талантливыйтворческий человек.

«Квалифицированный писатель, художник или дизайнер может время от времени создавать что-то действительно оригинальное и эффективное. Магистр права никогда этого не сделает. Он всегда будет производить что-то среднее, и если отрасли будут слишком сильно полагаться на него, они в конечном итоге получат шаблонную, повторяющуюся работу.

«Чтобы ИИ достиг креативности экспертного уровня, потребуется новая архитектура, способная генерировать идеи, не привязанные к прошлым статистическим закономерностям».

По его словам, полученные результаты обнадеживают всех, кто ценит человеческие инновации.

«Это исследование показывает, что мир по-прежнему нуждается в творческих людях — возможно, больше, чем когда-либо».