Исследование Массачусетского технологического института показало, что использование ChatGPT повышает качество и производительность, когда речь идет о таких задачах, как написание электронных писем или коротких отчетов. (Фото Якуба Пожицкого/NurPhoto через Getty Images)
NurPhoto через Getty Images
Исследователи обнаружили, что использование генеративных чат-ботов с искусственным интеллектом повышает как скорость, так и качество выполнения простых письменных задач, но не принимали во внимание проверку фактов.
лпоследняя неделяа Гизмодо статья о звездных войнах написанные генеративными чат-ботами с искусственным интеллектом, вызвали хаос в отделе новостей, изобилующем ошибками, касающимися обширной вселенной. Это событие высветило одну из проблем генеративного ИИ и подняло серьезные вопросы о планах некоторых компаний автоматизировать сложные формы письма.
Но когда дело доходит до других форм коммуникации — более рутинных вещей, таких как электронная почта или короткие отчеты, — новое исследование Массачусетского технологического института опубликовано в журнале Наука предполагает, что генеративный ИИ может быть большим благом: использование чат-ботов для этих задач повышает производительность на 40% и повышает качество на 18%.
Для исследования авторы Шакед Ной и Уитни Чжан, кандидаты наук в Массачусетском технологическом институте, привлекли 453 человека с высшим образованием для выполнения общих письменных задач. Они включали в себя написание пресс-релиза для нового продукта, корпоративное электронное письмо о новой политике или консультационный отчет о новой тенденции. Каждому человеку было предложено выполнить два задания, которые сделал бы профессионал в данной области (например, кто-то мог бы выполнить два задания, связанных с связями с общественностью). Участники были набраны из сервиса Prolific, платформы, которая связывает исследователей с испытуемыми, и сказали, что выполняли аналогичные задачи раньше.
Между каждым заданием половине участников предлагалось зарегистрироваться в ChatGPT и разрешалось использовать его во втором задании. Из этого пула 80% использовали этот инструмент. Письменные задания затем оценивались другой группой профессионалов в этих областях с использованием пронумерованной системы подсчета очков. Участники также были рассчитаны на каждое задание и получали финансовые поощрения: базовая заработная плата в размере 10 долларов и до 14 долларов за качественные бонусы, что повышало ставки для достижения лучших результатов.
«Когда мы впервые начали играть с ChatGPT, было ясно, что это новый прорыв, не похожий ни на что из того, что мы видели раньше», — сказал Ной. Форбс. «И было совершенно ясно, что это окажет какое-то влияние на рынок труда».
Выводы исследования о том, что производительность выросла, возможно, неудивительны — первые черновики часто требуют много времени, а их создание одним нажатием кнопки — мощный инструмент, — но вывод о том, что качество также выросло, может оказаться неожиданным. Ной сказал, что причиной скачка качества может быть то, что ChaGPT хорошо пишет, создавая предложения, которых часто достаточно для простых задач.
При этом авторы подчеркнули ограничения исследования. Они специально выбирали задачи, где тщательная проверка фактов не представляла проблемы из-за бюджетных и временных ограничений проекта. В результате авторы не смогли сделать никаких выводов о производительности с точки зрения того, как время, потраченное на проверку фактов, может компенсировать выгоды, полученные с помощью технологии.
Исследование проводится в связи с тем, что генеративные приложения ИИ, такие как ChatGPT, чат-бот Google Bard и инструмент для создания изображений DALL-E II от OpenAI, вызвали сильное волнение и тревогу по поводу того, как ИИ может изменить будущее работы. МакКинзи оценки Повышение производительности за счет генеративного ИИ может ежегодно приносить мировой экономике от 2,6 до 4,4 трлн долларов. По оценкам OpenAI, 80 процентов рабочих мест могут включать возможности генеративного ИИ в свои рабочие процессы. Когда в мае голливудские писатели объявили забастовку, генеративный ИИ был в центре внимания переговоров по контракту.
Участники исследования также ответили на последующие опросы. Те, кто использовал ChatGPT, были одновременно взволнованы и обеспокоены ИИ, когда их спросили через две недели после эксперимента. Они также сказали, что в два раза чаще используют чат-бота на своей реальной работе. Однако при повторном опросе через два месяца после исследования эта вероятность снизилась примерно на 20%.
Тем не менее, по словам авторов, трудно предсказать, какие макроэкономические тенденции могут возникнуть по мере распространения технологии. «Это будет большое дело. Что именно это будет делать и как это повлияет на экономику, я думаю, еще слишком рано говорить», — сказал Ной. «И мы довольно радикально не уверены в этом».
БОЛЬШЕ В FORBES
2023-07-13 18:00:15
1689281740
#Исследование #показывает #что #ChatGPT #повышает #качество #рутинных #деловых #коммуникаций
