Maren Otten / Sabine Kurz
Leitfaden zur Durchführung
einerPeer-Review
Checkliste Peer-Review
1. Allgemeines:
Bei einer Peer-Review handelt es sich um die Evaluation eines Fokusthemas einer Schule durch eine Gruppe gleich gestellter Externer Personen (sog. Kritische Freunde). Im Rahmen von Q2E kann dies z.B. die Steuer- gruppe einer Schule sein, die eine andere Schule besucht. Insofern unterscheidet sich eine Peer-Review von einer Externen Evaluation nach Q2E darin, dass nicht das Q-Managementsystem Gegenstand der Evaluation ist, sondern ein selbst gewählter Fokus der besuchten Schule. Eine Metaevaluation, wie sie die Externe Eva- luation durch Q2E-Experten darstellt, kann dagegen durch Peers nicht geleistet werden. Dementsprechend soll eine Peer-Review auch einen weit geringeren Umfang haben als eine externe Evaluation. Als Richtli- nie kann genannt werden: ein Vormittag mit Gesprächen bzw. Befragungen verschiedener Personen oder Gruppen, danach Auswertung der Ergebnisse und Rückmeldung an die Steuergruppe der besuchten Schule.
Es empfiehlt sich, auf eine gewisse Nähe bzw. Strukturähnlichkeit der zu besuchenden Schule und der Schule, die die Peers entsendet, zu achten, da den Peers somit die Strukturen und Abläufe der Schu- le vertraut sind und sie sich nicht vollständig neu in die zu besuchende Schule einarbeiten müs- sen. (z.B. Schulzentrum besucht Schulzentrum, nicht: Berufsschule besucht Grundschule). Die Nähe sollte allerdings nicht so weit gehen, dass ein Mitglied der Peer-Gruppe in beiden Schulen unterrichtet.
Während der Vorbereitung der Peer-Review sind gezielte Absprachen zwischen der Steuergruppe der besuchten Schule und dem Review-Team notwendig. Empfehlenswert sind mindestens zwei gemeinsame Termine:
1. mehrere Monate vor dem Review-Termin:
Absprache von Termin, Thema, Ziel etc., Abschluss einer Vereinbarung
2. ca. einen Monat vor Review-Termin:
Abstimmung der inhaltlichen und organisatorischen Planung zwischen Schule und Reviewern In der Zwischenzeit können der Austausch von Materialien und weitere Abstimmungen per E-mail stattfinden.
Die folgende Checkliste zu Vorbereitung, Durchführung und Nachbereitung einer Peer-Review soll eine Hilfe zur Berücksichtigung wichtiger Aspekte sein, ist aber nicht als Aufgabenliste zu verstehen, die abzuarbeiten ist.
2. Vorbereitung der Peer-Review
Steuergruppe der besuchten Schule
- Festlegen des Peer-Review-Themas und Klärung der Zielvorstellungen/Gütekriterien:
Was sind unsere Ziele in Bezug auf dieses Thema? Wie soll es sein?
- Formulierung einer Fragestellung für die Peer-Review - Suche von geeigneten Personen für eine Peer-Gruppe Steuergruppe und Review-Team
- Abstimmung von Zeitraum, Fragestellung, Zielsetzung etc. mit den Peers
Steuergruppe der besuchten Schule
- Konkretisieren der Fragestellung durch die Erarbeitung von Kriterien bzw. Indikatoren - Überlegung: Wer kann zu welchem Thema wie befragt werden? (s. Anhang/2.)
- Bereitstellen der relevanten Informationen über Schule und des Evaluationsthemas für die Peers - Information des Kollegiums über Durchführung einer Peer-Review und deren Schwerpunkt Review-Team
- Einarbeiten in die Schulinformationen
- Festlegung der Erhebungsmethoden und -instrumente auf Basis der Fragestellung und der Kriterien (s. Anhang/2.)
- Festlegen, welche Personen in welcher Gruppenzusammensetzung befragt werden sollen - Planung des Ablaufes für den Tag der Peer-Review (s. Anhang/4.)
Steuergruppe und Review-Team
- Abstimmen der inhaltlichen Planung, des Ablaufs und der benötigten Materialien für das Peer-Re view
Review-Team
- Ausarbeitung der Erhebungsinstrumente
- Auswertungsschema entlang der Indikatoren festlegen - Eigene Vertretung am Peer-Review-Tag organisieren
- Interne Organisation: Wer übernimmt welche Aufgaben, Befragungen,…?
Anmerkung: Es ist günstig, wenn das Review-Team aus 4 -5 Personen besteht, die parallel arbeiten.
Die 5. Person kann sich z.B. um die Auswertung von Fragebögen kümmern, fehlendes Material besorgen, etc. und den Austausch zwischen den Befragungen bzw. die Auswertung moderieren und protokollieren.
- Materialien besorgen: Ausdrucke, Plakate, Stifte etc., Steuergruppe der besuchten Schule
- Ansprache / Anschreiben der Personen, die an der Befragung teilnehmen sollen, Organisation ihrer Freistellung vom Unterricht für den entsprechenden Zeitraum
- Regelung der Abmeldung von Personen, die verhindert sind an der Befragung teilzunehmen, ggf.
Ersatzpersonen finden
- Organisation eines festen Raumes für die Peer-Gruppe für den Tag des Besuchs.
- Organisation von Arbeitsmaterialien: Flipcharts, Eddings, Metaplanpapier, Moderationskärtchen, Pins, Kreppklebeband,…
- Organisation der benötigten Räume für die Befragungen.
- Organisation der Verpflegung des Review-Teams
- Erinnerung der zu befragenden Personen an Zeit und Ort der Befragung
3. Durchführung der Peer-Review
Steuergruppe der besuchten Schule
- Den Peers Orientierung im Gebäude bzgl. der Räume geben, in denen die Befragungen stattfinden sollen
- Bereitstellung der Arbeitsmaterialien
- ggf. zu befragende Personen an den Termin erinnern
- Eine Person als ständig zu erreichenden Ansprechpartner bereitstellen. Diese Person sollte nicht in den Gruppensitzungen anwesend sein, aber erreichbar bei Fragen und Problemen insbesondere organisatorischer Art.
- Bereitstellung von Getränken und evtl. Mittagsimbiss Review-Team
- Raumorientierung, Materialcheck, Ansprechpartner, …alles o.k.?
- Erhebung der Daten gemäß Plan
4. Nachbereitung der Peer-Review
Review-Team
- Auswertung der Daten:
Formulieren und Protokollieren von Hypothesen, Verdichtung zu wenigen Kernaussagen,
darauf achten, dass diese durch konkrete Beispiele belegt werden Steuergruppe und Review-Team
- Rückmeldung des Review-Teams über die Ergebnisse der Peer-Review an die Steuergruppe der besuchten Schule. Anschließend sollte ein gegenseitiger Austausch über das Thema und die Peer- Review stattfinden, in dem die Peer-Gruppe aus ihrer Evaluatorenrolle entlassen ist.
Anmerkung: Während der Rückmeldung und des Austausches sollte eine Person des Review-Teams Protokoll führen. Dies entlastet die Reviewer bei der Aufgabe einen Bericht zu schreiben, bzw.
kann bei entsprechender Strukturierung der Rückmeldung auch als Bericht genommen werden.
- Übergabe des Datenmaterials an die Steuergruppe
- Gegenseitige Durchführungsbestätigung über die Peer-Review (s. Anhang/5.) Review-Team
- Ausarbeitung des Berichtes bzw. Protokolls über die Peer-Review (s. Anhang/6.)
- Ggf. Mitwirkung des Review-Teams bei Rückmeldung der Ergebnisse an das Kollegium Steuergruppe der besuchten Schule
- Rückmeldung der Peer-Review-Ergebnisse an das Kollegium
Anmerkung: Bei der Auswahl, wie eine solche Rückmeldung geschehen soll, kommt es auch auf Kommunikationskultur in der Schule an. Z.B.: Vorstellung der Ergebnisse für Interessierte evtl.
mit Beteiligung der Reviewer, Wandzeitung, Kurzen Überblick auf Konferenz geben, Interessierte können Einsicht nehmen, nachfragen etc., Einsichtnahme Interessierter ins Protokoll der Rückmel
- Entscheidung über Weitergabe von Informationen über die Peer-Review und ihre Ergebnisse an interessierte Außenstehende
- Weiterarbeiten an den Ergebnissen der Peer-Review
Anhang
1. Vereinbarung über die Durchführung einer Peer-Review
Diese Vereinbarung sollte folgende Punkte enthalten:
- Name der besuchten Schule - Auftraggeber
- Auftragnehmer/Peer-Gruppe - Thema der Peer-Review - Datum der Peer-Review - Vertraulichkeitsvereinbarung
- Umgang mit erhobenem Datenmaterial
- Art der Rückmeldung der Ergebnisse an die besuchte Schule
Muster:
Vereinbarung über die Durchführung einer Peer-Review
Hiermit vereinbaren die Steuergruppe der Schule ___________________________________
und die Steuergruppe der Schule ________________________________________________ (im folgenden Review-Team genannt) die Durchführung einer Peer-Review zum Thema ___________________________
_______________________________________________________________________________________
____________________________________ an der Schule _______________________________________
_______________________ .
Die Peer-Review findet statt am ________________________ .
Das Review-Team erhebt an diesem Tag Daten zum oben genannten Thema.
Im Anschluss an die Peer-Review gibt das Review-Team der Steuergruppe der besuchten Schule eine münd- liche Rückmeldung über die Ergebnisse der Peer-Review und erstellt einen schriftlichen Bericht darüber.
Die von der Steuergruppe zum Zweck der Peer-Review bereitgestellten Daten sowie die im Rahmen der Peer-Review erhobenen Daten werden vom Review-Team vertraulich behandelt.
Das im Rahmen der Peer-Review erstellte Datenmaterial wird der Steuergruppe der besuchten Schule bei der mündlichen Rückmeldung der Ergebnisse übergeben.
Unterzeichnet von:
Review-Team Steuergruppe der besuchten Schule
2. Auswahl der befragten Personen
Bei der Auswahl der befragten Personen können folgende Aspekte als Hilfestellung dienen:
- Wer kann etwas zu dem Thema beitragen?
- Welche Personen haben unterschiedliche Perspektiven auf das Thema und können so zur Vielfalt beitragen?
- Auf Ausgewogenheit in Dienstalter, Fachrichtungen, Dependancen, Geschlecht,… achten, so dass es einen guten Querschnitt ergibt.
- Richtgröße der befragten Gruppen: 8 -12 Personen, nicht über 15
3. Befragungsmethoden
Die Befragungsmethoden müssen je nach Fragestellung und zu befragenden Personen ausgewählt werden. Dabei sollte darauf geachtet werden, dass verschiedene Personen zu denselben Fragestel- lungen befragt werden, um möglichst vielfältige Perspektiven zu berücksichtigen. Allerdings dürfen die Befragungen aufgrund des begrenzten Zeitrahmens nicht zu umfangreich und zahlreich ausfallen.
Mögliche Befragungsmethoden sind:
- Einzel- oder Gruppeninterview: ca. 45-60 Min, 4-5 Themen - Rating-Konferenz: ca. 45 Min, 6-8 Fragen
- Stummes Schreibgespräch: ca. 45-60 Min, ca. 4 Themen
Bei Gruppeninterviews sollte darauf geachtet werden, dass nur sehr kleine Gruppen be- fragt werden. Außerdem ist es ratsam, wenn hierbei und bei Rating-Konferenzen eine Per- son die Diskussionsleitung übernimmt, während eine zweite Person am Flipchart mitprotokol- liert. Hierdurch wird die direkte Rücksprache mit den Beteiligten über das Gesagte ermöglicht.
4. Exemplarischer Tagesablauf
Die Rückmeldung über die Ergebnisse kann auch für den nächsten Tag geplant werden, um z.B. mehr Zeit für Befragungen oder die Auswertung zu lassen. Sie sollte allerdings möglichst zeitnah geschehen.
5. Durchführungsbestätigung
Die Bestätigung über die Durchführung einer Peer-Review sollte folgende Punkte beinhalten:
- Name der besuchten Schule - Auftraggeber
- Auftragnehmer/Peer-Gruppe - Thema der Peer-Review - Datum der Peer-Review
- Kurze Beschreibung dessen, was gemacht wurde
- Art der Rückmeldung der Ergebnisse an die besuchte Schule - Umgang mit erhobenem Datenmaterial
Muster:
Bestätigung über die Durchführung einer Peer Review nach Q2E
Die Peer-Review für die Schule ________________________________________
in Auftrag von/ in Absprache mit ________________________________________ fand statt am_________
_________________ .
Sie wurde durch das Review-Team der Schule ________________________________________________
durchgeführt, das sich aus folgenden Personen zusammensetzte:
1. ______________________________
2. ______________________________
3. ______________________________
4. ______________________________
5. ______________________________
Thema der Peer-Review war:
______________________________________________________________________________________
________________________________________________________________
___________________________________________________________________________
Unter Einhaltung der vorher getroffenen Absprachen zwischen der Steuergruppe der Schule_____________________________________________________________
und dem Review-Team wurden während der Peer-Review verschiedene Personengruppen mit unterschied- lichen Instrumenten zum oben angegebenen Thema befragt.
Die erhobenen Daten – soweit vorhanden – wurden der besuchten Schule übergeben.
Der Steuergruppe der Schule __________________________________________ wurde mündlich Bericht über die Ergebnisse erstattet. Über diese Berichterstattung wurde ein Protokoll angefertigt.
Unterzeichnet von: Bremen, den _________
Review-Team Steuergruppe der besuchten Schule
6. Gliederung des Peer Review-Berichts
Der Peer-Review-Bericht kann folgenderweise gegliedert werden (abgeändert aus: Hameyer, U.
& Simon, R. (2003). Was Peer Reviews leisten. Schulleitung und Schulentwicklung. Sept.2003) - Kurzform: wesentliche Kernaussagen
- Anlass, wie es zum Peer Review kam - Ziele und Leitfragen des Peer Reviews - Fokus (welches Thema)
- Programm
- Ergebnisse (Dokumentenanhang) - Methodeneinsatz
- Empfehlungen (falls möglich) - Durchführungsbestätigung
7. Literatur und Links
Basel, S. (2004). „Peer Evaluation in berufl ichen Schulen als Beitrag zur schulischen Qualitätsentwick- lung“. In: berufsbildung (90), S. 43-45.
Hamayer, U. & Simon, R. (2003). „Was Peer Reviews leisten“. In: Schulleitung und Schulentwicklung, September.
Strahm, P. (2004). „Von der internen zur externen Evaluation am Beispiel des Intensivprojekts Schule IPS“. Universität Bern, Koordinationsstelle für Weiterbildung, Nachdiplomstudium und Weiterbildungsmanagement 2002-2004. Ms, Bern.
URL: http://www.peer-review-education.net
Gesamtprojektleitung:
Senator für Bildung und Wissenschaft Rembertistraße 8-12
28195 Bremen Ansprechpartner:
Reinhard Platter
(Referat 22: Gestalterische + schulbetriebliche Aufgaben beruflicher Schulen)
reinhard.platter@bildung.bremen.de Sabine Kurz
(Referat 22)
sabine.kurz@bildung.bremen.de Bernhard Langkau
(Referat 22)
bernhard.langkau@bildung.bremen.de Gaby Ackermann
(Referat 22)
gaby.ackermann@bildung.bremen.de Jürgen Ochs
(Personalrat Schulen)
pr-schulen@bildung.bremen.de www.bildung.bremen.de
Wissenschaftliche Projektberatung
Institut Technik und Bildung Am Fallturm 1
28359 Bremen Ansprechpartnerin:
Maren Otten
(Institut Technik und Bildung) maren.otten@uni-bremen.de www.itb.uni-bremen.de
