Geleitwort...5. Vorwort...7. Inhaltsverzeichnis Einleitung Gesellschaftliche Entwicklungen und Qualitätssicherung im Bildungswesen...

Transkript

1 Gutknecht-Gmeiner, Maria: Externe Evaluierung durch Peer Review. Qualitätssicherung und -entwicklung in der beruflichen Erstausbildung. Wiesbaden: VS Verlag 2008, ISBN: Peer Review ist eines der traditionsreichsten Evaluierungsverfahren im Hochschulbereich. Doch wie lässt es sich definieren und welche Anwendungsgebiete für Peer Review kommen grundsätzlich in Frage? Kann Peer Review auch im Bereich der Evaluation von beruflicher Bildung und Schule nutzbringend eingesetzt werden? Welche Chancen und welche Grenzen ergeben sich dabei? Maria Gutknecht-Gmeiner gibt in einer vergleichenden Analyse internationaler Fallstudien Antworten auf diese Fragen und nimmt eine Neu-Definition von Peer Review im Hinblick auf eine Einführung im schulischen Bereich vor. Dabei werden auch die Güte des Peer Reviews als externes Evaluationsverfahren sowie Implementierungsvarianten innerhalb der aktuellen Steuerungsparadigma auf Ebene der Bildungssysteme thematisiert.

2 9 Inhaltsverzeichnis Geleitwort...5 Vorwort...7 Inhaltsverzeichnis Einleitung Ausgangslage und Problemdarstellung Status Quo der theoretischen Auseinandersetzung mit Peer Review Forschungsfragen, Abgrenzung und inhaltliche Übersicht Eingrenzung bezüglich des Bildungssektors Erste Hypothesen zu Vor- und Nachteilen des Einsatzes von Peer Review Fragestellungen und Struktur der Arbeit Methoden Geschlechtergerechter Sprachgebrauch Gesellschaftliche Entwicklungen und Qualitätssicherung im Bildungswesen Einfluss gesellschaftlicher Entwicklungen auf das Bildungswesen Neue Formen der Steuerung und Qualitätssicherung Peer Review als Evaluierungsverfahren Aktuelle Definition(en) von Peer Review Wörtliche Definition von Peer Review Peer Review Definitionen von Peer Review in der Evaluationsforschung... 41

3 Definition von Evaluation Einordnung von Peer Review als Evaluationsverfahren Exkurs: Definition von Selbstevaluation Weitere aktuelle Definitionen Definitionen von Peer Review im Hochschulbereich Peer Review als Begutachtungsverfahren im Forschungsbereich Peer Review als externe Evaluierung von Hochschulen Peer Review als Evaluierung von Unterrichtenden Zusammenfassung, erste Definition und weitere Fragestellungen Anwendungsbereiche von Peer Review Anwendungskontexte außerhalb von Forschung und Bildung Peer Review in der Forschung Anwendung von Peer Review im Bildungsbereich Peer Review auf verschiedenen Ebenen des Bildungssystems Peer Review in verschiedenen Bildungssektoren Peer Review of Teaching Entstehung und Zielsetzungen von Peer Review of Teaching Verwendungsformen und Funktionen des Peer Review of Teaching Methoden des Peer Review of Teaching Fallstudien Peer Assistance and Review Programs an U.S. Schulen Peer review of teaching an der University of Wisconsin-Madison Peer Review auf Organisationsebene im Hochschulbereich Vorläufer des modernen Peer-Review-Verfahrens Peer Review als Element der Qualitätssicherung von Universitäten Aktuelle Entwicklungen Offene Fragen... 94

4 Fallstudien: Peer Review im Hochschulbereich Academic peer review of higher education in England Peer Review im österreichischen Fachhochschulsektor Peer Review in der beruflichen Erstausbildung: Fallstudien Einleitung Auswahl der Fallstudien Methodisches Vorgehen bei der Erstellung des Erhebungsleitfadens Fallstudien Evaluating quality in school education. A European pilot project (Fallbeispiel 1) Peer Review an der Grund- und Hauptschule Buchholz Heideschule, Niedersachsen, Deutschland (Fallbeispiel 2) ISO-basierte Peer Reviews in der beruflichen Erstausbildung in Katalonien, Spanien (Fallbeispiel 3) Peer Review im Verband der Berufsbildungszentren des Salesianerwerks, Piemont, Italien (Fallbeispiel 4) Peer Review anhand von Benchmarks im Netzwerk finnischer Gastgewerbeschulen (Fallbeispiel 5) Projekt eiver Evaluation im Verbund als Beitrag zur Qualitätsentwicklung beruflicher Schulen in regionalen Bildungsnetzwerken, Hessen, Deutschland (Fallbeispiel 6) Intensivprojekt Schule IPS, Kanton Bern, Schweiz (Fallbeispiel 7) Peer Review an Regionalen Berufsbildungszentren (ROCs) in den Niederlanden (Fallbeispiel 8) Peer Review an Further Education Colleges in Schottland, Vereinigtes Königreich (Fallbeispiel 9) EVIT Externe schulische Evaluation im Team in Schleswig-Holstein, Deutschland (Fallbeispiel 10) Weitere ähnliche externe Evaluierungsverfahren

5 12 7 Peer Review in der beruflichen Erstausbildung: Analyse der Fallstudien Rahmenbedingungen für Qualitätssicherung und Evaluation Struktur der Bildungssysteme Steuerungsmodelle Exkurs: Definition der Bildungseinrichtung als (Handlungs)Einheit? Initiative für Peer Reviews, Ort der Steuerung und Reichweite Initiative Ort der Steuerung Reichweite Verbindung von Peer Review und Selbstevaluierung Ziele und Funktionen von Peer Review Definitionen Analyse Explizite oder implizite Evaluierungskriterien und Standards Gegenstand des Peer Reviews (Qualitätsbereiche) Umfang des Evaluationsgegenstands Lehren und Lernen als zentraler Evaluationsgegenstand Peer Review als Meta-Evaluation der Qualitätsevaluierung bzw. des Qualitätsmanagementsystems Peer Review des Unterrichts auf individueller Ebene Peers Wer sind die Peers? Woher kommen sie? Welche Qualifikationen werden von ihnen erwartet? Wer wählt die Peers aus? Wie groß ist das Peer-Team? Welche Rollen gibt es? Wie setzt sich das Team zusammen? Rolle, Funktion und Aufgaben der Peers Schulung der Peers Vorbereitung und Organisation Selbstberichte

6 Peer-Besuch Dauer Ablauf und Aktivitäten Beratungen im Peer-Team Rückmeldegespräche Einbezug von Betroffenen und Beteiligten Bericht Gibt es einen schriftlichen Bericht? Wer verfasst den Bericht? Wie wird der Bericht akkordiert? Wer sind die AdressatInnen? Wird der Bericht auch öffentlich zugänglich gemacht? Zusammenfassung: Funktion des Berichts Follow-up Planung, Vereinbarung und Umsetzung von Verbesserungsmaßnahmen Exkurs: Art der Rückmeldung und Ausmaß der Involviertheit der Peers Meta-Evaluation Zusammenfassung und allgemeine Charakteristiken von Peer Review Wie weit handelt es sich bei den dargestellten Verfahren um Peer Review? Abgrenzung zu anderen Verfahren der Qualitätssicherung und Qualitätsentwicklung Typologie von Peer Reviews in Hinblick auf Funktion sowie Einpassung in die Qualitätssicherung auf Systemebene Überprüfung und (Neu)Bestimmung der Definition von Peer Review Peer Review als Evaluationsverfahren Peer Review als mehrstufiges Verfahren Peer Review als externe Evaluation zwischen Staat und Profession Funktionen und Ort der Steuerung von Peer Review Evaluationsgegenstand von Peer Review auf Organisationsebene Standards, Evaluationskriterien und Qualitätsverständnis

7 Definition der Peers: Wer sind die Peers? Puristischer Peer-Begriff vs. erweiterte Definition Peers als ExpertInnen aus verschiedenen Institutionen und Professionen Peers als Personen, die aus gleichen/ähnlichen professionellen Arbeitszusammenhängen stammen Peers als Gleichgestellte Peers als unabhängige EvaluatorInnen Internationale Peers Resümee: Wer sind die Peers? Zusammenstellung von Peer-Teams Motivation der Peers und Kosten Rekrutierung von Peers Rolle und Aufgaben der Peers Aufgaben der Peers Sind Peers EvaluatorInnen? Kompetenzen der Peers Peer Review und Betroffene & Beteiligte Abgrenzung von Peer Review zu anderen Verfahren und Aktivitäten Peer Review und Audit Peer Review und Inspektion Peer Review und kollegiale Beratung (Peer Learning) Peer Review und Benchmarking Peers und kritische FreundInnen Zusammenfassung: Was ist Peer Review und was nicht? Chancen und Grenzen von Peer Review in der beruflichen Erstausbildung Güte von Peer Review als externes Evaluierungsverfahren Die Standards für Evaluation der Deutschen Gesellschaft für Evaluation Analyse und Empfehlungen anhand der Standards für Evaluation Resümee und Zusammenfassung der Empfehlungen

8 Chancen und Grenzen von Peer Review Grenzen von Peer Review Chancen von Peer Review aus der Sicht der Bildungseinrichtungen Chancen von Peer Review aus der Sicht der Systemebene Peer Review und Kompetenzerweiterung Peer Review und Professionsentwicklung Peer Review und eine neue Kultur der Aushandlung und Vereinbarung Peer Review und Vernetzung Peer Review und Internationalisierung Peer Review und Kosten Varianten der Implementierung und Positionierung von Peer Review Gestaltungsfaktoren und Maßnahmen zur Einführung von Peer Review Abstimmung mit anderen Verfahren der Qualitätssicherung und Qualitätsentwicklung in einem umfassenden Qualitätssystem Zusammenfassung und weiterführende Fragestellungen Zusammenfassung Weiterführende Fragestellungen Quellen Literatur Websites Handreichungen, ausgefüllte Leitfäden, Projektbeschreibungen Interviews