Thematisierung von Replikationen und Open Science Praktiken in Lehre und Studium – Die Rolle von Sekundärdatenanalysen
Psychologische Rundschau(2022)
摘要
Free AccessThematisierung von Replikationen und Open Science Praktiken in Lehre und Studium – Die Rolle von SekundärdatenanalysenClaudia Neuendorf, Aleksander Kocaj, Christin Rüdiger, and Malte JansenClaudia NeuendorfClaudia Neuendorf, Institut zur Qualitätsentwicklung im Bildungswesen, Humboldt-Universität zu Berlin, Unter den Linden 6, 10099 Berlin, claudia.neuendorf@iqb.hu-berlin.deForschungsdatenzentrum am Institut zur Qualitätsentwicklung im Bildungswesen (IQB), BerlinSearch for more papers by this author, Aleksander KocajForschungsdatenzentrum am Institut zur Qualitätsentwicklung im Bildungswesen (IQB), BerlinSearch for more papers by this author, Christin RüdigerForschungsdatenzentrum am Institut zur Qualitätsentwicklung im Bildungswesen (IQB), BerlinSearch for more papers by this author, and Malte JansenForschungsdatenzentrum am Institut zur Qualitätsentwicklung im Bildungswesen (IQB), BerlinSearch for more papers by this authorPublished Online:January 06, 2022https://doi.org/10.1026/0033-3042/a000575PDF ToolsAdd to favoritesDownload CitationsTrack Citations ShareShare onFacebookTwitterLinkedInRedditE-Mail SectionsMoreThematisierung von Replikationen und Open Science Praktiken in Lehre und Studium – Die Rolle von SekundärdatenanalysenWir begrüßen die Initiative der PsyFaKo, sich mit der Thematisierung der Replikationskrise in der universitären Lehre auseinanderzusetzen. Als Forschungsdatenzentrum (FDZ), das die Daten großer Schulleistungsstudien für wissenschaftliche Zwecke bereitstellt, ist es uns ein Anliegen, den Gedanken von Open Science und Forschungstransparenz in der Psychologie und der empirischen Bildungsforschung zu unterstützen. Die Befragung der Psychologiestudierenden zum Einsatz fragwürdiger Forschungspraktiken (QRPs) demonstriert, dass bereits in der Ausbildung des wissenschaftlichen Nachwuchses mehr zur Förderung von Open Science und Forschungsintegrität getan werden kann.Unser Kommentar nimmt die Perspektive ein, dass Sekundäranalysen existierender Forschungsdaten eine positive Rolle in der Vermittlung von Wissen über die Replikationskrise und möglichen Lösungsansätzen spielen können. So kann in der Lehre gemeinsam mit Studierenden selbst versucht werden, veröffentlichte Studien sekundäranalytisch zu replizieren. Solche Re- und Sekundäranalysen führen den Studierenden direkt vor Augen, welche Voraussetzungen gegeben sein müssen, um eine Studie tatsächlich replizierbar zu machen.Wir führten im WiSe 2019/2020 an der Humboldt-Universität zu Berlin ein Seminar zur Replikation von Aussagen über Bildung anhand von Schulleistungsstudien durch. Die Teilnehmenden informierten sich zum Thema Replikationskrise, Forschungsintegrität und Open Science und wählten selbst eine veröffentlichte wissenschaftliche Studie aus, um sie auf Basis eines an unserem FDZ verfügbaren Datensatzes zu replizieren. Die Veranstaltung war als Seminar zum Forschenden Lernen konzipiert. Bei dieser Lehr-Lernform nehmen Studierende aktiv am gesamten Forschungsprozess teil, bearbeiten eine selbst gewählte Fragestellung und generieren Erkenntnisse mit wissenschaftlichen Methoden (Sonntag et al., 2016). Zunächst mussten die Studierenden das Forschungsdesign der Primärforschenden nachvollziehen, um im nächsten Schritt die eigenen Analysen zur Replikation der Ergebnisse daran auszurichten. Im Forschungsprozess begegneten den Studierenden Herausforderungen, welche ihnen die Bedeutung der Verfügbarkeit von Originaldaten und Originalcode sowie der Genauigkeit von Beschreibungen im Methodenteil der Artikel verdeutlichten. Im Verlauf des Seminars reflektierten die Studierenden den eigenen Forschungsprozess, auch im Vergleich mit der Primärstudie. Auch die Korrespondenz mit den Primärforschenden, bei der zum Beispiel nach den Auswertungssyntaxen und dem analytischen Vorgehen bei der Originalstudie gefragt wurde, übernahmen sie selbstständig. Das Seminar mit abschließender Posterpräsentation ermöglichte den Teilnehmerinnen und Teilnehmern einen realistischen Einblick in die Forschungspraxis.Ein Vorteil der stärkeren Nutzung von Sekundäranalysen in der universitären Lehre ist, dass die Erhebungsplanung und die Datenerhebung, die einen großen Teil der Zeit des empirischen Forschungspraktikums ausmachen, ausgeklammert werden und damit mehr Raum für die Forschungsprozesse, die auf die Datenerhebung folgen, zur Verfügung steht. Bei Sekundäranalysen bereits existierender Daten spielen einige der am häufigsten benannten QRPs eine geringere Rolle, wie beispielsweise die Stichprobenplanung und die Poweranalyse oder das adaptive Nacherheben. Hingegen können Strategien vermittelt werden, die helfen, mit der größeren Flexibilität bei der Auswahl von Analysemethoden umzugehen. Beispielsweise können Freiheitsgrade bei der Datenanalyse sichtbar gemacht, die Befunde einer größeren Anzahl von alternativen Analysemodellen ausgewertet sowie Robustheits- und Generalisierbarkeitsprüfungen durchgeführt werden (Jansen, Neuendorf & Kocaj, im Druck). Die Datenqualität kuratierter Forschungsdaten, die an FDZn verfügbar sind, ist in der Regel hoch und erlaubt realistische Analysen und Replikationen. Sekundäranalysen sind daher eine ideale Ergänzung zu Experimentalpraktika – die sicherlich per se wichtig sind, um den vollen Zyklus eines empirischen Forschungsprojekts zu erleben – indem ein größerer Fokus auf eine transparente Datenauswertung sowie den Bericht und die Interpretation der Ergebnisse gelegt werden kann.Über die Nutzung in der Lehre hinaus können Sekundäranalysen eine gute Alternative zu eigenen Datenerhebungen für Abschlussarbeiten sein. Auch hier besteht durch einen sekundäranalytischen Ansatz die Möglichkeit, große Datensätze mit hoher Datenqualität zu nutzen und somit auch komplexe Datenanalyseverfahren (z. B. Mehrebenenmodelle, Strukturgleichungsmodelle) praktisch anzuwenden. Durch die Nutzung eines vorhandenen Datensatzes und die Möglichkeit der Veröffentlichung des Analysecodes lassen sich so auch relativ einfach Open Science Prinzipien umsetzen und ein vollständig reproduzierbares empirisches Projekt durchführen. Darüber hinaus gibt es bereits Vorschläge, wie sekundäranalytische Studien präregistriert werden können (z. B. Mertens & Krypotos, 2019; Van den Akker et al., 2019). FDZn können dabei unterstützen (z. B. durch Ausstellung eines Zeitstempels, wann die Daten übergeben wurden).Wir möchten daher Lehrende ermuntern, die Replikationskrise in der Psychologie anhand von Re- und Sekundäranalysen existierender Datensätze plastisch zu vermitteln. Dabei bietet sich eine Vermittlung dieser Kenntnisse über das Konzept des Forschenden Lernens an. Gut aufbereitete und kuratierte Datensätze hierzu sind beispielweise an FDZn verfügbar1.LiteraturJansen, M., Neuendorf, C. & Kocaj, A. (im Druck). Welche Potenziale bieten Sekundäranalysen für die Erhöhung von Forschungsqualität und Replizierbarkeit? Zur Rolle von Multiversumsanalysen und integrativen Datenanalysen für die Bestimmung der Robustheit und Generalisierbarkeit von Forschungsbefunden. Zeitschrift für Pädagogik. First citation in articleGoogle ScholarMertens, G. & Krypotos, A.-M. (2019). Preregistration of Analyses of Preexisting Data. Psychologica Belgica, 59, 338 – 352. https://doi.org/10.5334/pb.493 First citation in articleCrossref, Google ScholarSonntag, M., Ruess, J., Ebert, C., Friederici, K. & Deicke, W. (2016). Forschendes Lernen im Seminar. Ein Leitfaden für Lehrende. Verfügbar unter: https://doi.org/10.13140/RG.2.2.20857.67687 First citation in articleCrossref, Google ScholarVan den Akker, O., Weston, S. J., Campbell, L., Chopik, W. J., Damian, R. I., Davis-Kean, P. et al. (2019). Preregistration of secondary data analysis: A template and tutorial. PsyArXiv. https://psyarxiv.com/hvfmr/ First citation in articleGoogle Scholar1Eine Übersicht der vom RatSWD akkreditierten Forschungsdatenzentren und Archive findet sich unter: https://www.konsortswd.de/datenzentren/alle-datenzentren/FiguresReferencesRelatedDetailsCited byOpen Science in der Lehre – ein Kulturwandel mit systemimmanenten HürdenMaximilian Frank, Leonhard F. F. Schramm, Leonhard Volz, Johannes Brachem, and Tatiana Kvetnaya6 January 2022 | Psychologische Rundschau, Vol. 73, No. 1Related articlesReplikationskrise, p-hacking und Open Science06 Jan 2022Psychologische Rundschau Diskussionsforum: Replikationskrise, p-hacking und Open ScienceVolume 73Issue 1Januar 2022ISSN: 0033-3042eISSN: 2190-6238 InformationPsychologische Rundschau (2021), 73, pp. 44-45 https://doi.org/10.1026/0033-3042/a000575.© 2021Hogrefe VerlagPDF download
更多查看译文
关键词
thematisierung von replikationen,open science praktiken,lehre und studium
AI 理解论文
溯源树
样例
![](https://originalfileserver.aminer.cn/sys/aminer/pubs/mrt_preview.jpeg)
生成溯源树,研究论文发展脉络
Chat Paper
正在生成论文摘要