Dutzende von Labors reagieren auf Aufruf zur Verbesserung der Zuverlässigkeit der Psychologieforschung - - Verstand - 2020

Inhaltsverzeichnis:

Anonim

Die internationale Zusammenarbeit repliziert 10 von 13 früheren Studien

Eine große internationale Gruppe, die die Zuverlässigkeit von psychologischen Experimenten getestet hat, hat die Ergebnisse von 10 von 13 früheren Experimenten erfolgreich reproduziert. Das Konsortium stellte auch fest, dass zwei Effekte nicht reproduziert werden konnten.

Die Psychologie wurde in den letzten Jahren durch die zunehmende Sorge um die Zuverlässigkeit ihrer Ergebnisse nach wiederholten Versagen bei der Wiederholung klassischer Studien erschüttert. Ein Versagen bei der Replikation könnte dazu führen, dass die ursprüngliche Studie fehlerhaft war, das neue Experiment schlecht durchgeführt wurde oder der untersuchte Effekt je nach Einstellung oder Personengruppe variiert.

Um dieser "Replizierbarkeitskrise" zu begegnen, gründeten 36 Forschungsgruppen das Many Labs Replication Project, um 13 psychologische Studien zu wiederholen. Das Konsortium kombinierte Tests aus früheren Experimenten in einem einzigen Fragebogen, der 15 Minuten in Anspruch nehmen sollte, und lieferte es an 6.344 Freiwillige aus 12 Ländern.

Das Team wählte eine Mischung von Effekten, die die Vielfalt der psychologischen Wissenschaften repräsentieren, von klassischen Experimenten, die wiederholt repliziert wurden, bis zu zeitgenössischen Experimenten, die dies nicht tun.

Zehn der Effekte wurden in verschiedenen Stichproben konsistent repliziert. Dazu gehörten klassische Ergebnisse des Nobelpreisträgers und Psychologen der Wirtschaftswissenschaftler Daniel Kahneman von der Princeton University in New Jersey, wie etwa das Verhältnis von Gewinn zu Verlust, bei dem die Menschen eher bereit sind, Risiken einzugehen, um Verluste zu vermeiden, anstatt Gewinne zu erzielen. und Verankerung, ein Effekt, bei dem die erste Information, die eine Person empfängt, Vorurteile in spätere Entscheidungen einbringen kann. Das Team zeigte sogar, dass die Verankerung wesentlich stärker ist als die ursprüngliche Studie von Kahneman.

Ermutigende Ergebnisse
"Dies ist eine wirklich wichtige Initiative für die Psychologie", sagt Danny Oppenheimer, ein Psychologe an der University of California in Los Angeles, dessen Arbeit zwar auf dem Prüfstand stand, sich aber nicht an der Zusammenarbeit beteiligte. "Das bedeutet, dass das Reproduzierbarkeitsproblem zwar keineswegs unbedeutend ist, aber möglicherweise nicht so weit verbreitet ist, wie einige Kritiker der Branche vorgeschlagen haben."

Der Projektleiter Brian Nosek, ein Psychologe am Center of Open Science in Charlottesville, Virginia, findet die Ergebnisse ermutigend. "Es zeigt, dass es in unserem Bereich wichtige Effekte gibt, die reproduzierbar sind und durchgängig so sind", sagt er. "Aber das bedeutet nicht, dass sich 10 von 13 Effekten replizieren werden."

Kahneman stimmt zu. Die Studie "scheint äußerst gut gemacht und völlig überzeugend zu sein", sagt er, "obwohl es sicherlich zu früh ist, aus dieser einzigen Anstrengung extreme Schlussfolgerungen über ganze Forschungsfelder zu ziehen". Kahneman veröffentlichte 2012 einen offenen Brief, in dem er eine "Daisy Chain" von Replikationen von Studien zu Priming-Effekten forderte, in denen subtile, unterbewusste Hinweise das spätere Verhalten beeinflussen könnten.

Von den 13 untersuchten Effekten der letzten Untersuchung wurde einer nur schwach unterstützt, und zwei wurden überhaupt nicht repliziert. Beide unwiederbringlichen Effekte betrafen das soziale Priming. In einer davon hatten die Menschen ihre Zustimmung zu einem gegenwärtigen Sozialsystem verstärkt, nachdem sie Geld ausgesetzt waren. Auf der anderen Seite hatten die Amerikaner nach einer US-Flagge eher konservative Werte befürwortet.

Der Sozialpsychologe Travis Carter vom Colby College in Waterville, Maine, der die ursprüngliche Studie zur Flag-Priming-Studie leitete, sagt, er sei enttäuscht, vertraue jedoch Noseks Team von ganzem Herzen, obwohl er ihre Daten überprüfen möchte, bevor er weiter kommentiert. Der Verhaltenswissenschaftler Eugene Caruso von der University of Chicago in Illinois, der die ursprüngliche Currency-Priming-Studie leitete, sagt: "Wir sollten diesen Mangel an Replikation nutzen, um unsere Überzeugungen über die Zuverlässigkeit und Generalisierbarkeit dieses Effekts auf den neuesten Stand zu bringen", angesichts der "weitaus größeren" und vielfältigeres Beispiel “des Many Labs-Projekts. Beide Forscher lobten die Initiative.

Dokumentation öffnen
Das Many Labs-Team, das ebenfalls von Richard Klein und Kate Ratliff von der University of Florida in Gainesville und von Michelangelo Vianello von der Universität von Padua, Italien, koordiniert wurde, stellte fest, dass die Ergebnisse von der Nationalität der Freiwilligen oder der Einstellung von Freiwilligen weitgehend unberührt waren die Experimente - ob online oder in einer Laborumgebung geliefert. Wenn es Variationen gab, beschränkte es sich auf die großen und offensichtlichen Effekte wie Verankerung und nicht auf die kleinen und subtilen Effekte, z. B. durch das Sehen einer Flagge.

Dies widerspricht der häufig zitierten Vorstellung, dass einige psychologische Studien, insbesondere solche mit subtilen Social-Priming-Effekten, schwer zu replizieren sind, da sie auf Faktoren wie die untersuchte Probe oder die Fähigkeiten der ursprünglichen Ermittler ansprechen. Die Tatsache, dass Social Priming-Studien schwer zu reproduzieren waren, "war für mich persönlich schwierig", sagt Nosek, "weil Social Priming ein Bereich ist, der für meine Forschung wichtig ist".

Der Plan für das Projekt Many Labs wurde, soweit möglich, von den Originalautoren überprüft, offen dokumentiert und in der Zeitschrift registriert Sozialpsychologie und seine Methoden wurden von Experten begutachtet, bevor irgendwelche Experimente durchgeführt wurden. Die Ergebnisse wurden nun der Zeitschrift übermittelt und stehen online zur Verfügung . "Diese Art von Offenheit sollte der Standard für jede Forschung sein", sagt Daniel Simons von der University of Illinois in Urbana-Champaign, der einen ähnlichen kooperativen Versuch koordiniert, einen klassischen psychologischen Effekt zu überprüfen, der in der vorliegenden Studie nicht behandelt wird. "Ich hoffe, dass dies zu einem Standardansatz in der Psychologie wird."

Oppenheimer sagt, dass viele Disziplinen von Many Labs 'Ansatz profitieren könnten. "Psychologie ist nicht der einzige Bereich, der in den letzten Jahren Probleme mit der Replikation hatte."

Dieser Artikel wird mit Genehmigung der Zeitschrift vervielfältigt Natur . Der Artikel wurde erstmals am 26. November 2013 veröffentlicht.