Field Experimental Evidence of the Effects of AI on Knowledge Worker

В исследовании, проведенном совместно с Boston Consulting Group, исследователи изучили влияние искусственного интеллекта (ИИ) на сложные задачи, выполняемые работниками, обладающими знаниями..

В ходе эксперимента 758 консультантов были случайным образом распределены на три группы: без доступа к искусственному интеллекту, с доступом к искусственному интеллекту GPT-4 или с доступом к искусственному интеллекту GPT-4 с оперативным инженерным обзором. Результаты показали, что при использовании искусственного интеллекта задачи в рамках его возможностей выполнялись более эффективно и с более высоким качеством. Консультанты, использующие искусственный интеллект, выполняли в среднем на 12,2% больше заданий, на 25,1% быстрее и более чем на 40% качественнее по сравнению с контрольной группой. Как консультанты с уровнем производительности ниже и выше среднего значительно выиграли от применения искусственного интеллекта: прирост составил 43% и 17% соответственно. Однако, столкнувшись с задачей, выходящей за рамки текущих возможностей ИИ, консультанты, использующие ИИ, на 19 процентных пунктов реже выдавали правильные решения по сравнению с консультантами без ИИ. Кроме того, анализ выявил две различные модели успешного использования ИИ: "Кентавры", которые разделяли свою деятельность по созданию решений между собой и ИИ, и "Киборги", которые полностью интегрировали свой поток задач с ИИ и постоянно взаимодействовали с технологией.

В целом исследование демонстрирует потенциальные преимущества и ограничения ИИ в повышении производительности и качества решения наукоемких задач.