Prof. Dr. Ludwig Haag, Universität Bayreuth Evaluationsprojekt in ...

Prof. Dr. Ludwig Haag, Universität BayreuthEvaluationsprojekt in der Praxis: Mentorenprogramm – von der Konzeption bis zurAuswertungSchulentwicklung in der Schule fand schon immer statt, doch neben eines systematischen undalle Schulen betreffenden Vorgehens kommt heute etwas Entscheidendes dazu:Schulentwicklung soll auch nach außen sichtbar gemacht werden.Und das Instrumentarium hierzu heißt Evaluation. Evaluation ist also kein Selbstzweck,sondern notwendiges Werkzeug von Schulentwicklung.Unter Evaluation versteht man die systematische und zielgerichtete Sammlung, Analyse undBewertung von Daten zur Qualitätssicherung und Qualitätskontrolle. Sie gilt der Beurteilungvon Planung, Entwicklung, Gestaltung und Einsatz von Bildungsangeboten bzw. einzelnerMaßnahmen dieser Angebote unter den Aspekten von Qualität, Funktionalität, Wirkungen,Effizienz und Nutzen.Dabei stehen folgende Fragen im Zentrum:(1) Welcher Gegenstand soll evaluiert werden?(2) Wie ist der aktuelle Ist-Zustand dieses zu evaluierenden Gegenstandes?(3) Welcher Soll-Zustand soll erreicht werden?Dabei ist die Frage 2 überhaupt nicht trivial. So manche Äußerungen nach erfolgterMaßnahme wie „viel kam dabei nicht raus“, hat häufig mit einer nicht im voraus geklärten Ist-Bilanz des Gegenstandes zu tun. Enttäuschungen sind so vorprogrammiert. Und das trifft ganzbesonders für folgendes Projekt zu, das hier vorgestellt wird:Mentoren-Projekt in der Realschule WunsiedelAn der Sigmund – Wann – Realschule in Wunsiedel wird ein gut funktionierendesMentorensystem praktiziert, nach dem Motto „Schüler helfen Schülern“. LeistungsstärkereSchüler greifen regelmäßig am Nachmittag leistungsschwächeren Schülern bei derBewältigung ihrer schulischen Aufgaben unter die Arme.Nachdem zwei Schuljahre lang erste Erfahrungen gesammelt werden konnten, wurde dasProjekt im Schuljahr 2005/06 von meinem Lehrstuhl, federführend Dr. Hopperdietzel,wissenschaftlich begleitet. Theoriegeleitet werden prozessbegleitende Fragebögen sowohl beiden Mentoren als auch den Nachhilfeschülern eingesetzt. Dazu wird eine Kontrollgruppemiteinbezogen, die keine Nachhilfe erhält.Zu drei Messzeitpunkten im Schuljahr 2005/06 wurden von allen Schülern über FragebogenDaten zum Leistungsstand und zu weiteren psychologischen Variablen erhoben. Dabei wurdesichergestellt, dass nur solche Teilnehmer des Mentorenprojekts berücksichtigt werden, dienicht noch zusätzlich außerhalb der Schule Nachhilfe erhalten. Die Stichprobe bestehtdadurch aus insgesamt 29 Mentoren, 63 Nachhilfeschülern (erfasst Mathematik und/oderEnglisch) und 361 weiteren Schülern der Schule.Ergebnisse- LeistungsstandDieser wurde über die Schulaufgaben in den Fächern Englisch und Mathematik erhoben.Im Folgenden werden für die vier gehaltenen Schulaufgaben in Mathematik und Englisch dieDifferenzwerte zwischen den Nachhilfeschülern und allen anderen Schülern wiedergegeben.

Diese stellen sozusagen die Null Linie dar. So lässt sich sehr übersichtlich abbilden, wie sichim Verhältnis dazu die Nachhilfeschüler entwickeln:1,510,50-0,5Schulaufgabe 1 Schulaufgabe 2 Schulaufgabe 3 Schulaufgabe 4NachhilfeschülerMentorenSchüler o. N.-1-1,5Entwicklung der Differenz in den Schulaufgaben im Fach Mathematik1,510,50-0,5Schulaufgabe 1 Schulaufgabe 2 Schulaufgabe 3 Schulaufgabe 4NachhilfeschülerMentorenSchüler o. N.-1-1,5Entwicklung der Differenz in den Schulaufgaben im Fach EnglischIn beiden Graphiken sieht man, dass mit den Mentoren tatsächlich überdurchschnittlicheSchüler rekrutiert werden konnten.In Mathematik haben sich die Nachhilfeschüler linear verbessert.In Englisch trat über die gesamte Zeit eine Verbesserung um eine halbe Notenstufe ein.- Fähigkeitsselbstkonzept im NachhilfefachHier änderte sich nichts, was auch zu schön wäre. Denn ein Fähigkeitsselbstkonzept baut sichüber mehrere Jahre auf, so dass sich kurzer Hand eine fachliche Verbesserung nicht gleichauswirkt. Hier sollten positive Ergebnisse nach längerer Zeit erwartet werden. Doch

interessant ist, dass auf einer vierstufigen Skala die Mentoren einen um über einen ganzenGrad höheren Wert angeben.- PrüfungsangstWährend das Niveau aller nicht am Mentorenprojekt beteiligten Schüler über das Schuljahrkonstant blieb, nahm die Prüfungsangst linear bei den Mentoren und Nachhilfeschülern ab,wie die Graphik zeigt. Und mehr kann zunächst pädagogisch nicht erreicht werden, als dassdie Problemschüler mit ihrem Problemfach entspannter umgehen. Auch den Mentoren scheintdie Mehrarbeit mit dem Gegenstand mehr Sicherheit in Prüfungssituationen zu geben.43,532,52NachhilfeschülerMentorenSchüler o.N.1,51Welle 1 Welle 2 Welle 3Entwicklung der Prüfungsangst (höhere Werte bedeuten geringere Angst)- SelbstregulationHier geht es darum zu prüfen, inwieweit die Schüler sich im Umgang mit von der Schulegeforderten Aufgaben selbst organisieren können. In diesem Bereich erzielten allein dieMentoren über den Zeitraum hinweg positivere Werte, also wiederum ein Gewinn für dieMentoren.Interpretation der ErgebnisseHier erlebe ich seit Jahren in der Zusammenarbeit mit den Profis vor Ort, den engagiertenPraktikern, große Unsicherheiten, was die Aussagekraft obiger Ergebnisse angeht. Eskommen Fragen wie „Sind denn diese Ergebnisse auch signifikant“? oder „Sind sie statistischabgesichert?“ Hierauf wird im Referat ein sehr einfacher und gangbarer Weg aufgezeigt, derdiese Zweifel gut ausräumen kann. Lehrer müssen in ihren Evaluationsprojekten keineStatistiker sein, sind aber sehr gut in der Lage, mit einfachen Mitteln die Aussagekraft dervorliegenden Ergebnisse „wissenschaftlich“ zu untermauern.

“Win – Win“ - SituationEin interessantes und ermutigendes Ergebnis ist gerade die Leistungsverbesserung derNachhilfeschüler. Auch zeigen die Ergebnisse, dass die Mentoren nicht nur investieren,sondern tatsächlich von ihrer Arbeit profitieren.So gesehen darf man „neudeutsch“ von einer „win-win“ Situation sprechen. Was will manmehr?Bei aller Bescheidenheit der Ergebnisse – „Wunderwaffen“ im täglichen Kampf gegen Notenwären eher verdächtig! – ist die Initiative mehr als zu begrüßen, nicht zuletzt deshalb, weilhier das manchmal strapazierte Wort „Schulfamilie“ hier sinnvoll ineinander greift. Freilichist noch eine Optimierung durch eine intensivere Vorbereitung und Betreuung der Mentorenzu erwarten und zu erreichen.Abschließend soll nochmals betont werden, dass Schulentwicklung sich konkret inüberschaubaren, doch wirksamen Aktionen zeigen kann und vor allem, dass Schulen selbst inder Lage sind, Auswirkungen nachvollziehbar und korrekt aufzuzeigen.