Большое сотрудничество исследования стало распространено — думают проект генома человека, марсоходы Марса, новая МОЗГОВАЯ Инициатива — но они почти неизвестны в психологии. Большинство психологических экспериментов выполняется единственной группой лаборатории, часто всего несколько исследователей. Но несколько сотрудничества, охватывающего десятки лабораторий психологии во всем мире, недавно сформировались.
Их целью является не что иное как испытание воспроизводимости психологической науки. Первый значительный результат одного из тех союзов был выпущен на этой неделе, и психологи вдыхают вздох облегчения, через которое их область проникла с относительно незначительными пятнами — 10 из 13 результатов эксперимента были тиражированы.
Воспроизводимость является молитвой в науке. Для большинства типов исследования, если результат эксперимента не может быть воспроизведен другой лабораторией, то ее авторитет подрывают.
Не воспроизвожу в многократных лабораториях, и оригинальный результат отклонен. Испытание воспроизводимости экспериментов крайне важно для вычищения научных ошибок, счастливых случайностей и мошенничества.
Но наука не управляет столь эффективными услугами по уборке, как она могла. Исследователям не дают почти профессионального стимула повторить работу других, уже не говоря о неудачах отчета повторить их собственные эксперименты.Теперь, мотивированный несколькими недавними высококлассными мошенничествами и полной озабоченностью, что многие результаты их области не являются заслуживающими доверия, некоторые экспериментальные психологи делают аудит. Тот, о котором объявляют на этой неделе, начался с трио: Брайан Нозек в Университете Вирджинии в Шарлоттсвилле, Кейт Рэтлифф в университете Флориды в Гейнсвилле и аспиранте Рэтлиффа Рике Кляйне.
Нозек был в центре деятельности усилий вымыть его область — он и больше чем 175 сотрудников повторяют случайную выборку сотен исследований, изданных в 2008 в трех главных журналах психологии — и он и Рэтлифф – оба часть Неявного Проекта, продолжительное сотрудничество, также обеспечивающее бесплатное программное обеспечение для управления поведенческими экспериментами со стандартизированными методами. Нозек хотел использовать программное обеспечение для наблюдения, как восстанавливаемые классические психологические эксперименты." Я спросил [Кляйна и Рэтлиффа], если они будут интересоваться попыткой увеличить масштаб этой идеи и принять на работу другие лаборатории для принятия участие». Они согласились.Таким образом, бригада обнародовала их намерения путем предварительной регистрации их исследования и представления идеи специальному выпуску Социальной Психологии, сосредоточенной на экспериментальной репликации, намеченной для выхода весной 2014 года. (Nosek является редактором той проблемы, таким образом, его подчинение было обработано его соредактором.) ScienceInsider взял интервью у Nosek ранее в этом году о проекте и его стремлениях сделать научное исследование больше открытый и ответственный.
«В том пункте мы действительно не знали, сколько примут участие другие лаборатории», говорит Нозек ScienceInsider в электронном письме. «Но когда мы отослали приглашения для факторов в феврале, и с другой стороны в июле … много коллег подскочил на борту». В конечном счете партнерство, назвавшее себя Проектом Репликации Many Labs, состояло из 36 лабораторий — 25 базируемых в США и 11 в других странах.
Экспериментами, все из которых включили короткие интерактивные задачи на компьютерах, управляли на в общей сложности семи языках." Рик Кляйн играл героическую роль в координировании всех бригад», говорит Нозек. Группа выбрала ряд 13 изданных экспериментов для репликации.
Некоторые – классика, такая как та, показавшая бросающий якорь результат, уклон в том, как люди используют информацию для принятия решений. Другие были изданы позже, такие как воспламенение флага, результат, привлекший значительное внимание средств массовой информации. Бригада управляла этими экспериментами на в общей сложности 6 344 предметах.
Мало того, что каждый эксперимент был проверен в различных лабораториях во всем мире, но девяти из сотрудников также, провел эксперименты по Интернету, а не живой в лаборатории. Таким образом, если бы эксперимент потерпел неудачу к тиражированному, то было бы возможно чесать, была ли неудача из-за проверяемой популяции, окружающая среда испытания, или просто сам эксперимент.Результатами являются хорошие новости для психологии. Десять из 13 экспериментов, тиражированных, и для пяти из них статистический результат, были более сильными, чем первоначально наблюдаемый.
Три, потерпевшие неудачу — два существенно и один незначительно — были все изданы в течение прошлых 3 лет. Эксперимент воспламенения флага был среди неудач. И едва имело значение, выполнялись ли эксперименты живые в лаборатории по сравнению с онлайновым, или с американскими предметами или международными. Эти три неудачи тиражироваться, кажется, происходят из-за самих экспериментов: результаты могут не просто быть реальными.
Все исследование, от первоначального предложения до данных, теперь доступно онлайн.Для Nosek определенные результаты менее важны, чем само сотрудничество. «Краудсорсинговая наука может быть эффективной и эффективной», говорит он. «Мы справились к коллекции полных данных со всех мест в течение 4 месяцев. Общая стоимость? 2 000$ для координации проекта, и затем каждая лаборатория пожертвовали свое время и запасы для их сборов данных».
Он надеется, что психологи будут вдохновлены следовать за лидерством проекта.Реакции от психологов, не непосредственно вовлеченных в сотрудничество, были в основном положительны. «Я считаю его героическим усилием, стоящим признания и похвалы», говорит Энтони Гринвалд, психолог в университете Вашингтона, Сиэтла, но «трудно сказать, что эта модель будет широко принята.
Это – вполне процесс effortful. Многие могут счесть вознаграждения недостаточными для усилия.
И еще неизвестно, являются ли журналы восприимчивыми к публикованию статей как это больше, чем иногда». Несколько исследователей, с которыми входит в контакт ScienceInsider, повторили то сомнение. «Надо надеяться, мы будем видеть еще несколько исследований мультилаборатории как это время от времени», говорит Хэл Пэшлер, психолог в Калифорнийском университете, Сан-Диего, «но не будет возможным сделать это на обычной основе».
Но другие рассматривают это как будущее исследования. Результаты “прокладывают путь к репликациям для входа в ново-нормальный способ провести исследование», говорит Ури Зимонзон, психолог в Университете Пенсильвании. «Если новое оригинальное исследование стоит издать, его репликацией стоит управлять».