Maren Otten / Sabine Kurz. Leitfaden zur Durchführung einerpeer-review

Transkript

1 Maren Otten / Sabine Kurz Leitfaden zur Durchführung einerpeer-review

2 1. Allgemeines: Checkliste Peer-Review Bei einer Peer-Review handelt es sich um die Evaluation eines Fokusthemas einer Schule durch eine Gruppe gleich gestellter Externer Personen (sog. Kritische Freunde). Im Rahmen von Q2E kann dies z.b. die Steuergruppe einer Schule sein, die eine andere Schule besucht. Insofern unterscheidet sich eine Peer-Review von einer Externen Evaluation nach Q2E darin, dass nicht das Q-Managementsystem Gegenstand der Evaluation ist, sondern ein selbst gewählter Fokus der besuchten Schule. Eine Metaevaluation, wie sie die Externe Evaluation durch Q2E-Experten darstellt, kann dagegen durch Peers nicht geleistet werden. Dementsprechend soll eine Peer-Review auch einen weit geringeren Umfang haben als eine externe Evaluation. Als Richtlinie kann genannt werden: ein Vormittag mit Gesprächen bzw. Befragungen verschiedener Personen oder Gruppen, danach Auswertung der Ergebnisse und Rückmeldung an die. Es empfiehlt sich, auf eine gewisse Nähe bzw. Strukturähnlichkeit der zu besuchenden Schule und der Schule, die die Peers entsendet, zu achten, da den Peers somit die Strukturen und Abläufe der Schule vertraut sind und sie sich nicht vollständig neu in die zu besuchende Schule einarbeiten müssen. (z.b. Schulzentrum besucht Schulzentrum, nicht: Berufsschule besucht Grundschule). Die Nähe sollte allerdings nicht so weit gehen, dass ein Mitglied der Peer-Gruppe in beiden Schulen unterrichtet. Während der Vorbereitung der Peer-Review sind gezielte Absprachen zwischen der Steuergruppe der besuchten Schule und dem notwendig. Empfehlenswert sind mindestens zwei gemeinsame Termine: 1. mehrere Monate vor dem Review-Termin: Absprache von Termin, Thema, Ziel etc., Abschluss einer Vereinbarung 2. ca. einen Monat vor Review-Termin: Abstimmung der inhaltlichen und organisatorischen Planung zwischen Schule und Reviewern In der Zwischenzeit können der Austausch von Materialien und weitere Abstimmungen per stattfinden. Die folgende Checkliste zu Vorbereitung, Durchführung und Nachbereitung einer Peer-Review soll eine Hilfe zur Berücksichtigung wichtiger Aspekte sein, ist aber nicht als Aufgabenliste zu verstehen, die abzuarbeiten ist. 2. Vorbereitung der Peer-Review - Festlegen des Peer-Review-Themas und Klärung der Zielvorstellungen/Gütekriterien: Was sind unsere Ziele in Bezug auf dieses Thema? Wie soll es sein? - Formulierung einer Fragestellung für die Peer-Review - Suche von geeigneten Personen für eine Peer-Gruppe Steuergruppe und - Abstimmung von Zeitraum, Fragestellung, Zielsetzung etc. mit den Peers - Abschluss einer Vereinbarung zwischen der besuchten Schule und dem über Ziel, Gegenstand und Vorgehensweise der Peer-Review (s. Anhang/1.) 1

3 - Konkretisieren der Fragestellung durch die Erarbeitung von Kriterien bzw. Indikatoren - Überlegung: Wer kann zu welchem Thema wie befragt werden? (s. Anhang/2.) - Bereitstellen der relevanten Informationen über Schule und des Evaluationsthemas für die Peers - Information des Kollegiums über Durchführung einer Peer-Review und deren Schwerpunkt - Einarbeiten in die Schulinformationen - Festlegung der Erhebungsmethoden und -instrumente auf Basis der Fragestellung und der Kriterien (s. Anhang/2.) - Festlegen, welche Personen in welcher Gruppenzusammensetzung befragt werden sollen - Planung des Ablaufes für den Tag der Peer-Review (s. Anhang/4.) Steuergruppe und - Abstimmen der inhaltlichen Planung, des Ablaufs und der benötigten Materialien für das Peer-Re view - Ausarbeitung der Erhebungsinstrumente - Auswertungsschema entlang der Indikatoren festlegen - Eigene Vertretung am Peer-Review-Tag organisieren - Interne Organisation: Wer übernimmt welche Aufgaben, Befragungen,? Anmerkung: Es ist günstig, wenn das aus 4-5 Personen besteht, die parallel arbeiten. Die 5. Person kann sich z.b. um die Auswertung von Fragebögen kümmern, fehlendes Material besorgen, etc. und den Austausch zwischen den Befragungen bzw. die Auswertung moderieren und protokollieren. - Materialien besorgen: Ausdrucke, Plakate, Stifte etc., - Ansprache / Anschreiben der Personen, die an der Befragung teilnehmen sollen, Organisation ihrer Freistellung vom Unterricht für den entsprechenden Zeitraum - Regelung der Abmeldung von Personen, die verhindert sind an der Befragung teilzunehmen, ggf. Ersatzpersonen finden - Organisation eines festen Raumes für die Peer-Gruppe für den Tag des Besuchs. - Organisation von Arbeitsmaterialien: Flipcharts, Eddings, Metaplanpapier, Moderationskärtchen, Pins, Kreppklebeband, - Organisation der benötigten Räume für die Befragungen. - Organisation der Verpflegung des s - Erinnerung der zu befragenden Personen an Zeit und Ort der Befragung 2

4 3. Durchführung der Peer-Review - Den Peers Orientierung im Gebäude bzgl. der Räume geben, in denen die Befragungen stattfinden sollen - Bereitstellung der Arbeitsmaterialien - ggf. zu befragende Personen an den Termin erinnern - Eine Person als ständig zu erreichenden Ansprechpartner bereitstellen. Diese Person sollte nicht in den Gruppensitzungen anwesend sein, aber erreichbar bei Fragen und Problemen insbesondere organisatorischer Art. - Bereitstellung von Getränken und evtl. Mittagsimbiss - Raumorientierung, Materialcheck, Ansprechpartner, alles o.k.? - Erhebung der Daten gemäß Plan 4. Nachbereitung der Peer-Review - Auswertung der Daten: Formulieren und Protokollieren von Hypothesen, Verdichtung zu wenigen Kernaussagen, darauf achten, dass diese durch konkrete Beispiele belegt werden Steuergruppe und - Rückmeldung des s über die Ergebnisse der Peer-Review an die Steuergruppe der besuchten Schule. Anschließend sollte ein gegenseitiger Austausch über das Thema und die Peer- Review stattfinden, in dem die Peer-Gruppe aus ihrer Evaluatorenrolle entlassen ist. Anmerkung: Während der Rückmeldung und des Austausches sollte eine Person des s Protokoll führen. Dies entlastet die Reviewer bei der Aufgabe einen Bericht zu schreiben, bzw. kann bei entsprechender Strukturierung der Rückmeldung auch als Bericht genommen werden. - Übergabe des Datenmaterials an die Steuergruppe - Gegenseitige Durchführungsbestätigung über die Peer-Review (s. Anhang/5.) - Ausarbeitung des Berichtes bzw. Protokolls über die Peer-Review (s. Anhang/6.) - Ggf. Mitwirkung des s bei Rückmeldung der Ergebnisse an das Kollegium - Rückmeldung der Peer-Review-Ergebnisse an das Kollegium Anmerkung: Bei der Auswahl, wie eine solche Rückmeldung geschehen soll, kommt es auch auf Kommunikationskultur in der Schule an. Z.B.: Vorstellung der Ergebnisse für Interessierte evtl. mit Beteiligung der Reviewer, Wandzeitung, Kurzen Überblick auf Konferenz geben, Interessierte können Einsicht nehmen, nachfragen etc., Einsichtnahme Interessierter ins Protokoll der Rückmel dung an die Steuergruppe, 3

5 - Entscheidung über Weitergabe von Informationen über die Peer-Review und ihre Ergebnisse an interessierte Außenstehende - Weiterarbeiten an den Ergebnissen der Peer-Review Anhang 1. Vereinbarung über die Durchführung einer Peer-Review Diese Vereinbarung sollte folgende Punkte enthalten: - Name der besuchten Schule - Auftraggeber - Auftragnehmer/Peer-Gruppe - Thema der Peer-Review - Datum der Peer-Review - Vertraulichkeitsvereinbarung - Umgang mit erhobenem Datenmaterial - Art der Rückmeldung der Ergebnisse an die besuchte Schule Muster: Vereinbarung über die Durchführung einer Peer-Review Hiermit vereinbaren die Steuergruppe der Schule und die Steuergruppe der Schule (im folgenden genannt) die Durchführung einer Peer-Review zum Thema an der Schule. Die Peer-Review findet statt am. Das erhebt an diesem Tag Daten zum oben genannten Thema. Im Anschluss an die Peer-Review gibt das der eine mündliche Rückmeldung über die Ergebnisse der Peer-Review und erstellt einen schriftlichen Bericht darüber. Die von der Steuergruppe zum Zweck der Peer-Review bereitgestellten Daten sowie die im Rahmen der Peer-Review erhobenen Daten werden vom vertraulich behandelt. Das im Rahmen der Peer-Review erstellte Datenmaterial wird der bei der mündlichen Rückmeldung der Ergebnisse übergeben. Unterzeichnet von: 4

6 2. Auswahl der befragten Personen Bei der Auswahl der befragten Personen können folgende Aspekte als Hilfestellung dienen: - Wer kann etwas zu dem Thema beitragen? - Welche Personen haben unterschiedliche Perspektiven auf das Thema und können so zur Vielfalt beitragen? - Auf Ausgewogenheit in Dienstalter, Fachrichtungen, Dependancen, Geschlecht, achten, so dass es einen guten Querschnitt ergibt. - Richtgröße der befragten Gruppen: 8-12 Personen, nicht über Befragungsmethoden Die Befragungsmethoden müssen je nach Fragestellung und zu befragenden Personen ausgewählt werden. Dabei sollte darauf geachtet werden, dass verschiedene Personen zu denselben Fragestellungen befragt werden, um möglichst vielfältige Perspektiven zu berücksichtigen. Allerdings dürfen die Befragungen aufgrund des begrenzten Zeitrahmens nicht zu umfangreich und zahlreich ausfallen. Mögliche Befragungsmethoden sind: - Einzel- oder Gruppeninterview: ca Min, 4-5 Themen - Rating-Konferenz: ca. 45 Min, 6-8 Fragen - Stummes Schreibgespräch: ca Min, ca. 4 Themen Bei Gruppeninterviews sollte darauf geachtet werden, dass nur sehr kleine Gruppen befragt werden. Außerdem ist es ratsam, wenn hierbei und bei Rating-Konferenzen eine Person die Diskussionsleitung übernimmt, während eine zweite Person am Flipchart mitprotokolliert. Hierdurch wird die direkte Rücksprache mit den Beteiligten über das Gesagte ermöglicht. 4. Exemplarischer Tagesablauf 5

7 Die Rückmeldung über die Ergebnisse kann auch für den nächsten Tag geplant werden, um z.b. mehr Zeit für Befragungen oder die Auswertung zu lassen. Sie sollte allerdings möglichst zeitnah geschehen. 5. Durchführungsbestätigung Muster: Die Bestätigung über die Durchführung einer Peer-Review sollte folgende Punkte beinhalten: - Name der besuchten Schule - Auftraggeber - Auftragnehmer/Peer-Gruppe - Thema der Peer-Review - Datum der Peer-Review - Kurze Beschreibung dessen, was gemacht wurde - Art der Rückmeldung der Ergebnisse an die besuchte Schule - Umgang mit erhobenem Datenmaterial Bestätigung über die Durchführung einer Peer Review nach Q2E Die Peer-Review für die Schule in Auftrag von/ in Absprache mit fand statt am. Sie wurde durch das der Schule durchgeführt, das sich aus folgenden Personen zusammensetzte: Thema der Peer-Review war: Unter Einhaltung der vorher getroffenen Absprachen zwischen der Steuergruppe der Schule und dem wurden während der Peer-Review verschiedene Personengruppen mit unterschiedlichen Instrumenten zum oben angegebenen Thema befragt. Die erhobenen Daten soweit vorhanden wurden der besuchten Schule übergeben. Der Steuergruppe der Schule wurde mündlich Bericht über die Ergebnisse erstattet. Über diese Berichterstattung wurde ein Protokoll angefertigt. Unterzeichnet von: Bremen, den 6

8 6. Gliederung des Peer Review-Berichts Der Peer-Review-Bericht kann folgenderweise gegliedert werden (abgeändert aus: Hameyer, U. & Simon, R. (2003). Was Peer Reviews leisten. Schulleitung und Schulentwicklung. Sept.2003) - Kurzform: wesentliche Kernaussagen - Anlass, wie es zum Peer Review kam - Ziele und Leitfragen des Peer Reviews - Fokus (welches Thema) - Programm - Ergebnisse (Dokumentenanhang) - Methodeneinsatz - Empfehlungen (falls möglich) - Durchführungsbestätigung 7. Literatur und Links Basel, S. (2004). Peer Evaluation in berufl ichen Schulen als Beitrag zur schulischen Qualitätsentwicklung. In: berufsbildung (90), S Hamayer, U. & Simon, R. (2003). Was Peer Reviews leisten. In: Schulleitung und Schulentwicklung, September. Strahm, P. (2004). Von der internen zur externen Evaluation am Beispiel des Intensivprojekts Schule IPS. Universität Bern, Koordinationsstelle für Weiterbildung, Nachdiplomstudium und Weiterbildungsmanagement Ms, Bern. URL: 7

9 Gesamtprojektleitung: Senator für Bildung und Wissenschaft Rembertistraße Bremen Ansprechpartner: Reinhard Platter (Referat 22: Gestalterische + schulbetriebliche Aufgaben beruflicher Schulen) reinhard.platter@bildung.bremen.de Sabine Kurz (Referat 22) sabine.kurz@bildung.bremen.de Bernhard Langkau (Referat 22) bernhard.langkau@bildung.bremen.de Gaby Ackermann (Referat 22) gaby.ackermann@bildung.bremen.de Jürgen Ochs (Personalrat Schulen) pr-schulen@bildung.bremen.de Wissenschaftliche Projektberatung Institut Technik und Bildung Am Fallturm Bremen Ansprechpartnerin: Maren Otten (Institut Technik und Bildung) maren.otten@uni-bremen.de ReBiz Website: 8