Пользователи ИИ переоценивают свои знания — исследование

Исследование, проведенное учеными из Финляндии, Германии и Канады, показало, что использование ИИ-сервисов, таких как ChatGPT, влияет на способность людей адекватно оценивать свои знания. В рамках эксперимента 500 добровольцев решали задачи на логическое мышление, аналогичные тем, что используются при поступлении в юридические вузы США. Половина участников работала с ChatGPT, в то время как другая решала задачи самостоятельно. После тестирования их попросили оценить свои результаты и уровень владения ИИ. Выяснилось, что использование чат-ботов практически нивелирует эффект Даннинга-Крюгера, когда менее компетентные люди завышают свои способности. Пользователи ChatGPT действительно показывали лучшие результаты, но значительно меньше адекватно оценивали свои навыки, часто полагаясь на корректность ответов ИИ. Авторы исследования предлагают изменить работу чат-ботов, чтобы они побуждали пользователей к самопроверке и анализу, например, задавая уточняющие вопросы.