Evaluation und Evaluationsforschung - Universität Bremen

Ursula Carle / Heinz Metzen
Evaluationsforschung: Entwicklungsservice statt Werkzeugkiste
hältnis zu den Trägerinteressen oder die Trägerinteressen in Bezug auf die Politikinteressen.
Zielführungs- und Unterstützungssysteme einschließlich der Evaluation können diese Interessendifferenzen
intelligent nutzen. Dafür steht unsere Formel von der Integration von interner
und externer Evaluation. Diese Integration von interner und externer Evaluation auf den wichtigsten
Strukturebenen von Sozialprojekten lässt sich anhand eines kybernetischen Mehrebenenmodells
theoretisch und praktisch erläutern. Dieses soziologische Mehrebenenmodell 11 geht
davon aus, dass sich jede Entwicklung in einer mitgestaltenden Umgebung ("Ökosystem")
vollzieht und umgekehrt bezieht sich jede selbstgesteuerte Entwicklung auf diese mitwirkenden
Umfelder.
Abbildung 6: Mehrebenenmodell der Verbindung von interner und externer Evaluation
In der o. a. Abbildung modellieren die inneren Regelkreise die ebenenspezifische „interne
Evaluation“ 12 und die äußeren Verbindungslinien zwischen den Ebenen die „externe Evaluation“.
Extern bezieht sich dabei auf die Rechenschaft der jeweiligen Strukturebene gegenüber
der ihr übergeordneten Strukturebene - im Beispiel etwa die Kindergarten-Ebene gegenüber
dem lokalen Träger. Diese Ebenen können zusammengefasst oder auch differenziert werden.
Wichtig ist alleine die Bedeutsamkeit der evaluierenden / evaluierten Ebenen für den interessierenden
Entwicklungsprozess. Die interne Evaluation dient der Selbstvergewisserung der
Ebenen-Akteure, die externe Evaluation der Beratung der Zielvereinbarungserreichung. Die
Evaluationsziele leiten sich aus den Zielvereinbarungen zwischen den Ebenen ab. Durch diese
11 Das sozialogische Mehrebenenmodell sollte nicht verwechselt werden mit der statistischen Mehrebenenanalyse.
Die statistische Mehrebenenanalyse (engl. Multilevel Analysis; Multilevel Modelling), auch "Hierarchisch
Lineare Modellierung" (engl. Hierarchical Linear Modeling) bezeichnet, gehört zu den multivariaten statistischen
Verfahren zur statistischen Analyse hierarchisch gruppierter Daten ("Clustern" wie Familien, Berufsgruppen,
Kindergartengruppen etc.). In der empirischen Sozialforschung dient sie zum Herausrechnen von
Gruppierungseffekten auf das individuelle Verhalten (z. B. Bildungsstand, soziökonomische Schicht, Arbeitslosigkeit
etc.). Ein Paradebeispiel für dieses Herausrechnen soziaökonomischer Hintergrunddaten aus den
Lernerfolgsdaten in Kindergarten und Schule bietet die englische Längsschnittstudie "Effective Provision of
Pre-school Education Project (EPPE)" (Sylva et al. 2001); zur Einführung siehe Ditton 1998; ders. 2002.
12 „Interne Evaluation ist der in unserem Evaluationskontext treffendere Ausdruck für „Selbstevaluation“; siehe
hierzu DeGEVal 2002 (Standardsadaptation zur Selbstevalution, Buhren / Killus, / Müller 1998, Burkard 1999.
camz2003evaluation_service.docx Seite 24 von 38