Результаты более половины психологических исследований оказались невоспроизводимы

Первые психологические эксперименты в лаборатории Вильгельма Вундта.

Фотография: Universität Leipzig

Группа психологов, возглавляемая специалистом в области социальной психологии Брайаном Ноузеком (Brian Nosek) из Center for Open Science (США) попыталась в рамках «Проекта по изучению воспроизводимости научных работ: Психология» повторить 100 различных исследований в разных отраслях психологии, опубликованных в ведущих научных журналах. Результат получился просто шокирующим – по мнению ученых, им удалось воспроизвести с разной степенью близости к оригинальному исследованию только 39 из 100 работ. А полный анализ, опубликованный сегодня в Science, показал, что статистически значимые результаты были получены только в 36 процентах работ, при этом уровень значимости был в среднем в два раза ниже, чем декларируемый в статьях.

Проект по проверке воспроизводимости результатов психологических работ начался в ноябре 2011 года на фоне нескольких отчетов о мошенничествах, натяжках и ошибках в области статистического анализа в статьях по психологии. Независимая группа отобрала 100 статей, опубликованных в ведущих специализированных журналах. Их тематика затрагивала разные отрасли психологического знания – от реакций детей и взрослых на страх, до сравнительного изучения разных методов обучения арифметике.

Затем исследователи попытались воспроизвести описанные исследования. В апреле 2015 года группа опубликовала предварительные результаты. Проводившие повторные работы ученые должны были оценить по ряду критериев – удалось или не удалось им воспроизвести то или иное исследование. Суммировав оценки, группа присуждала каждой работе один из семи рангов – от высшего («практически идентичная») до низшего («какое-либо сходство отсутствует»). В итоге 15 работ воспроизвести не удалось вообще, а всего нереплицируемыми были признаны результаты 61 статьи.

Опубликованный сегодня полный отчет выявил еще более печальную картину: вопреки заявленным в 97 процентах работ статистически значимым результатам, при воспроизведении они были повторены только в чуть больше трети случаев, а средняя оценка значимости эффекта снизилась почти вдвое.

В то же время ряд ученых выдвинул предположение, что невоспроизводимыми могут быть до 80 процентов всех исследований в области психологии, так как команда Нозека отбирала статьи только из наиболее уважаемых и рецензируемых журналов.

Результаты первого этапа исследований воспроизводимости 100 психологических работ.

Инфографика: Reproducibility Project: Psychology

В настоящий момент идет отдельная дискуссия о воспроизводимости в социальных и гуманитарных науках, а также такой пограничной области знаний как психология. Считается, что необходимо развести понятия репликация (воспроизводимость исследования так как она описана выше) и воспроизводимость для социальных наук. В этом случае к работе прилагается набор данных, с которым работал исследователь и описания способа их обработки (включая, например, программный код и алгоритмы). Если другой ученый, используя те же данные и тот же способ их обработки, получил сходные результаты – значит работа должна считаться воспроизводимой.

Даниил Кузнецов

Свежее

Гляциоизостазия повлияла на размытие Колумбийского плато в плейстоцене Введение вакцины AstraZeneca удвоило частоту тромбозов вен мозга «Хаббл» измерил температуру ночной стратосферы ультрагорячего юпитера В мозге человека нашли реагирующие на пение нейроны ОДК изготовила узлы для демонстратора двигателя SSJ-NEW

Нашли опечатку? Выделите фрагмент и нажмите Ctrl+Enter.

Читайте также Археологи обнаружили в Тульском кремле кость верблюда XVI века Американский транспортный конвертоплан признали готовым к боевым задачам Разработку Ил-112В приостановили до конца расследования катастрофы Игра на понижение

Когда нагревание и альтернативные процессы оказываются лучше горения

Гравитационное красное смещение уловили на миллиметровой высоте Физики разобрались с динамикой коллективного взаимодействия атомов с одним фотоном Метаматериалы помогут решать уравнения со скоростью света Нейросеть DeepMind научилась удерживать плазму в токамаке Игра на понижение Физики обнаружили притяжение между биомолекулами на расстоянии ста нанометров Интерферометр VLTI подтвердил единую модель активных галактических ядер Российские физики передали квантовый сигнал между зданиями по воздуху «Хаббл» измерил температуру ночной стратосферы ультрагорячего юпитера Выжившие после контакта с инсектицидами комары научились избегать их запаха Самое сложное

Использование всех текстовых материалов без изменений в некоммерческих целях разрешается со ссылкой на N + 1. Все аудиовизуальные произведения являются собственностью своих авторов и правообладателей и используются только в образовательных и информационных целях. Если вы являетесь собственником того или иного произведения и не согласны с его размещением на нашем сайте, пожалуйста, напишите на kirill@nplus1.ru

Материалы, опубликованные в разделе «Блоги», отражают позиции их авторов, которые могут не совпадать с мнением редакции.

📎📎📎📎📎📎📎📎📎📎