ChatGPT много знает о ПЭТ-сканировании, но его советы непоследовательны.

Результаты усложняются рейтингами, присвоенными за последовательность. Некоторые ответы были оценены положительно за уместность, но чат-бот не отвечал на многократные запросы, что поставило под сомнение его надежность.

«В частности, ответы ChatGPT на более чем 90% вопросов были адекватными и полезными даже по стандартам, ожидаемым от общих рекомендаций, предоставляемых персоналом ядерной медицины. По трем ответам, оцененным как «совершенно бесполезные» или «совершенно неуместные», ответы, по крайней мере, в одном из повторных испытаний были точными и правильными», – ведущий автор Джулиан Рогаш, доктор медицинских наукиз Шарите – Университетская медицина в Берлине, и коллеги написали. «Хотя это наблюдение показывает, что ChatGPT сам по себе способен давать соответствующие ответы на все 25 задач, такое различие в ответах привело к оценке «значительной несогласованности»».

Авторы отметили, что ни один из ответов, сгенерированных ChatGPT, не причинил бы вреда. И в целом его ответы на вопросы пациентов, связанные с ПЭТ/КТ, соответствовали ответам медицинского работника. Окончательный рейтинг по каждому запросу определялся путем голосования исследователей.

«В медицинском контексте ChatGPT лучше всего рассматривать как информационный инструмент, а не как инструмент консультирования или принятия решений. Каждый ответ ChatGPT включал заявление о том, что результаты и их последствия всегда следует обсуждать с лечащим врачом», — написали они.

Некоторые из заданных вопросов были оценены по степени сочувствия, при этом ответ ChatGPT был оценен положительно в пяти из шести случаев. Это означает, что программа, похоже, также имеет хороший подход к постели больного.

«На вопросы, касающиеся важной информации, такой как стадия или лечение, отвечали с необходимым сочувствием и оптимистическим прогнозом», — пишут авторы.