Evaluation und Evaluationsforschung - Universität Bremen

Ursula Carle / Heinz Metzen
Evaluationsforschung: Entwicklungsservice statt Werkzeugkiste
Forschungs- und Lehrinstitute, die sich auf die Förderung der sozialwissenschaftliche
Methodenkompetenz für Evaluationsprozesse konzentrieren (etwa das "Centrum für
Evaluation (Ceval)", z.B. Stockmann, Universität des Saarlandes)
Inhaltlich spezialisierte Forschungsinstitute bzw. Abteilungen sozialwissenschaftlicher
Forschungseinrichtungen, die Evaluationsstudien durchführen (beispielsweise die
"Konzeptstelle Evaluationsforschung" des Deutschen Jugendinstituts in München oder
EvaNet der deutschen Hochschulrektorenkonferenz)
Sozialwissenschaftliche Studien zur informativen Grundlegung von Evaluationen (z.B. zu
Schulentwicklungsprogrammen – Orth 2002, Carle 2002)
Die Verwendung der Begriffe Evaluation und Evaluationsforschung ist äußerst vielfältig
und reicht vom Fachgutachten eines Professors (Aufenanger 1998) über die langjährige
Schulbegleitforschung eines wissenschaftlichen Teams (Carle 2002; McEwan 1995) bis hin
zu landesweiten Schulprogramm-Evaluationen (Ministerium für Schule, Wissenschaft und
Forschung NRW 2002). Gut an dieser Beliebigkeit und der unscharfen Ausdrucksweise ist im
memetischen Sinne die Offenheit und Anschlussfähigkeit für Neues. Die Beliebigkeit und begriffliche
Unschärfe zeugt jedoch zugleich von einem geringen Professionalisierungsgrad.
Dafür spricht auch, dass sich die Methodik der Evaluationsforschung in nichts von der Methodik
der übrigen Sozialwissenschaften unterscheidet. Zudem handelt es sich bei Evaluationsforschung
zumeist nur um den sozialwissenschaftlichen Teil des (informatorischen) Evaluationssystems.
Die Kopplung zwischen Projekt- und Evaluationskonzept wird in der Regel
noch nicht systematisch betrieben.
Die gängigen Evaluationsdefinitionen helfen da auch nicht weiter, da sie sich allesamt auf den
Autoren jeweils nahe liegende Teilaspekte eines umfassenderen, systemischen Evaluationsverständnisses
beschränken – hier einige Kostproben mit aufsteigendem Komplexitätsniveau:
Evaluation ist jegliche Art der Festsetzung des Wertes einer Sache (Scriven 1980 –
Konzentration auf Effektbestimmung [Merit, Worth, Significance])
Evaluationsforschung ist die explizite Verwendung wissenschaftlicher Forschungsmethoden
und Forschungstechniken für den Zweck der Durchführung einer Bewertung
(Suchman 1968 – Wertbestimmung plus Sozialforschung)
Evaluation ist eine begriffliche (bis hin zur mathematischen) Modellierung in einem
Anwendungsfeld und dient dem Vergleich von angestrebter zu prognostizierter Veränderung
(Henninger 2000 – Ergebnisbewertung als Soll-Ist-Vergleich im Sinne der
Kybernetik 1. Ordnung)
Evaluation ist die systematische Anwendung sozialwissenschaftlicher Methoden zur
Bewertung der Konzeption, des Designs, der Implementation und des Nutzens einer
sozialwissenschaftlichen Interventionsmaßnahme (Rossi / Freeman / Lipsey 1985 –
prozessbegleitende Ergebnisbewertung plus Sozialforschung)
Unterscheidung von "Formativer Evaluation", der Bereitstellung von Informationen
und Bewertungen vor und während der Durchführung der Evaluation, um Probleme zu
klären und die Gestaltung der Intervention (die evaluiert wird) zu konzipieren, zu
steuern und zu optimieren) und "Summativer Evaluation", der Bewertung der Ausprägung
der intendierten Effekte und der Nebenwirkungen einer bereits durchgeführten
Intervention) (Bloom / Hastings / Madaus 1971 – Kennzeichnung der paradigmatischen
Differenz zwischen Ergebnisbewertung und Gestaltungsprozessverbesserung)
Evaluation ist Planungs- und Entscheidungshilfe und hat daher etwas mit Bewertung
von Handlungsalternativen zu tun. Sie dient dazu praktische Maßnahmen zu überprüfen,
zu verbessern oder über sie zu entscheiden. Die Vorgehensweise sollten dem ak-
camz2003evaluation_service.docx Seite 10 von 38