Эффект Даннинга-Крюгера — это не про глупых людей. И, возможно, его вообще не существует. Автор статьи собирался написать короткую заметку о знаменитой работе 1999 года, но, проверив академическую литературу, засомневался. Он переписался с Дэвидом Даннингом, поговорил со статистиками и пришёл к выводу: похоже, эффект — просто артефакт измерений.
По первоначальному определению эффект выглядит так: люди, которые плохи в каком-то деле, сильно переоценивают свой результат, а люди, которые хороши, — слегка его недооценивают. Сам Даннинг объяснил автору, что эффект всегда был про всех нас, а не про «тупых, которые не знают, что они тупые». Он про то, что нужно осторожно относиться к собственной компетентности. И дело чаще в дезинформации, а не в незнании: если спросить про столицу Шотландии, человек может быть уверен, что это Глазго, хотя правильный ответ — Эдинбург.
Но в 2016 и 2017 годах Эд Нуфер с коллегами опубликовал в журнале Numeracy статьи, где показал: эффект Даннинга-Крюгера можно воспроизвести на случайных данных. Патрик Макнайт и Симон Макнайт повторили эти результаты на R вместо Excel и убедились, что эффект — артефакт. В оригинальном эксперименте участников делили на квартили по реальным результатам и сравнивали их самооценку. Получалась знаменитая картинка: нижняя группа сильно завышает свои оценки, верхняя — занижает. Но точно такая же картинка выходит на полностью случайных числах. Проблема в ненадёжности самооценки: измерение того, как человек оценивает собственные навыки, всегда содержит ошибку. И чем больше ошибка измерения, тем сильнее проявляется «эффект». Макнайт замечает: в истории науки нет ни одного случая, чтобы явление становилось отчётливее при росте ошибки измерения.
Критики указывали и на регрессию к среднему, но здесь она ни при чём: ничего не измеряется во времени, а самооценка и реальный результат — разные величины. Случайные данные хорошо имитируют эффект, поэтому сомнения в нём возникли ещё в 2002-м — у Филлипа Акермана с коллегами была похожая симуляция. Тем не менее журналисты и скептики годами используют «Dunning-Kruger effect» как объяснение любой глупости. В Google News таких упоминаний больше 8 500. Если эффект окажется миражом, это не значит, что мозг безгрешен: есть подтверждённые искажения вроде лучше-среднего. Но заклинание, кажется, пора развеять.