Studienbewertung in systematischen Reviews der Bildungsforschung – Planungsschritte und Kriterien zur Prüfung der internen Validität von Interventionsstudien

Abstract

ZusammenfassungSystematische Reviews, die in der evidenzbasierten Medizin heute fest etabliert sind, werden auch in der Bildungsforschung zunehmend umgesetzt. Mithilfe solcher Übersichtsstudien lassen sich Wirkungsbefunde zu pädagogischen Maßnahmen umfänglich zusammentragen und evaluieren. Da hierfür eine Einschätzung der Qualität der empirischen Datenlage notwendig ist, stellt die Qualitätsbewertung von Studien eine zentrale Aufgabe im Review-Prozess dar. Sofern die Durchführung eines Reviews nicht über externe Review-Organisationen erfolgt, muss die Studienbewertung selbstständig konzipiert werden. Dies birgt jedoch Herausforderungen angesichts der vielfältigen Forschungsdesigns von pädagogischen Interventionsstudien und möglichen Bewertungskriterien, die passend zum Evidenzkonzept in der Bildung und zum jeweiligen Untersuchungsgegenstand definiert werden müssen. Der Beitrag beleuchtet die selbstständige Konzeptionierung der Studienbewertung in systematischen Reviews der Bildungsforschung und fokussiert dabei die Beurteilung der internen Validität von Interventionsstudien. Es werden relevante Planungsschritte zusammengefasst und reflektiert, die aus einer Recherche in theoretisch-konzeptionellen Arbeiten und Kriterien-Checklisten zur Qualitätsevaluation hervorgehen. Die Umsetzung dieser Schritte wird anhand der Studienbewertung eines systematischen Reviews zur Wirkung sprachsensibler Unterrichtsansätze exemplarisch illustriert. Dabei wird auch das Kriterienraster zur Beurteilung der internen Validität von pädagogischen Interventionsstudien vorgestellt, das in diesem Review als Ergebnis des Konzeptionsprozesses entstanden ist. Der Beitrag macht deutlich, dass die Studienbewertung gründliche Planungen und Richtungsentscheide voraussetzt. Das vorgestellte Kriterienraster kann zur Orientierung für die Qualitätsbewertung in anderen systematischen Reviews der Bildungsforschung dienen.