Прайминг, Стэнфордский тюремный эксперимент, эксперимент Милграма (когда по приказу током били), истощение ego и силы воли (включая знаменитый эксперимент с судьями), пончиковый эксперимент с детьми, влияние “power pose” на стресс и тестостерон, влияние улыбки на хорошее настроение, эффект Даннинга-Крюгера, интерпретация теории перспектив, сомнения в концепции эмоционального интеллекта, закон 10,000 часов и другие очень известные штуки объединяет одно — эксперименты, которые привели к этим выводам, не могут сейчас воспроизвести. Выводы из этих экспериментов подвергаются сильным сомнениям, а многие и просто отвергаютcя как неверные.

Уже давно идет кризис воспроизведения психологических и социальных экспериментов. Поэтому читать околопсихологические книги десятилетней и более давности сейчас очень забавно. Многие штуки, на которые эти книги опирались, давно были опровергнуты. А ведь книги эти делали далеко идущие выводы про жизнь. А некоторые ученые и всю карьеру сделали на каком-то давнем известном эксперименте!

Вот тот добрый человек собрал хороший список популярных экспериментов/идей, которые сейчас не могут воспроизвести.

Причин этого может быть много. Ошибки в расчетах и оценке результата. Например рекомендую прочитать как эффект Даннинга-Крюгера может быть объяснен регрессией к среднему. И желание (явное или неявное) подогнать результат под идею: хороший эксперимент может обеспечить карьеру на всю жизнь. Важны не конкретные причины, а то, что проблема распространена и не только в психологии.

Это не критика научного метода. С ним как раз все хорошо — долговременно человечество научилось двигаться более-менее в правильном направлении. Но это указание на то, что в каждый конкретный момент времени какая-то часть научных концепций — чушь. Но мы не знаем точно какая. И это нормально.

Также это напоминание о том, что Twyman’s Law применим и в этой области тоже. Любой единичный эксперимент с интересным или неожиданным выводом должен подвергаться бóльшему сомнению чем обычно, а эффекты преуменьшаться. Чем лучше результат единичного эксперимент смотрится на газетной полосе — тем менее вероятно, что результат вызван реальным сильным эффектом, а не ошибкой самого эксперимента.