Evaluation in der deutschen Entwicklungszusammenarbeit - HWWI
Evaluation in der deutschen Entwicklungszusammenarbeit - HWWI Evaluation in der deutschen Entwicklungszusammenarbeit - HWWI
Untersuchungsdesign 59 Für diese Erhebungsmethoden wurden die entsprechenden Erhebungsinstrumente entwickelt. Der Untersuchungsleitfaden ist in Anhang 2 wiedergegeben. Die Datenerhebung erfolgte auf der Grundlage der einschlägigen DeGEval-Standards für die Informationsgewinnung. Sie deckt den Zeitraum 2001 bis Oktober 2007 ab. Die mit den genannten Instrumenten erhobenen Informationen wurden auf der Grundlage der oben genannten Standards und Vorgaben sowie anhand nationaler und internationaler Erfahrungswerte beurteilt. Wo anerkannte Normen für Systemmerkmale fehlten, wurden relative Bewertungen durch kontextspezifische horizontale Vergleiche der untersuchten EZ-Organisationen (Benchmarking) vorgenommen. 2.4 Ablauf der Untersuchung Bei den von den einzelnen Gutachtern und der Gutachterin vorgenommenen Bewertungen wurde so vorgegangen, dass diese in enger Abstimmung mit der Leitung der Studie im Vergleich zu allen anderen Organisationen vorgenommen wurden. Es handelt sich also nicht um absolute, sondern relative Bewertungen. Alle Berichte haben eine mehrfache Qualitätskontrolle durchlaufen. Bei den Organisationen, in denen die Peers an den Interviews teilgenommen haben, sind die Berichte auch von diesen kommentiert und ergänzt worden. Die Systemprüfung umfasste sechs Phasen: Vorbereitungsphase Abstimmung der Evaluationskonzeption mit den EZ-Organisationen Auftragsvergabe Inception-Phase Präzisierung des Evaluationsansatzes und der Untersuchungsfelder Entwicklung der Evaluationsmethodik (Untersuchungsleitfaden, Self-Assessment- Fragebögen, Interviewleitfäden etc.) Erstellung eines Arbeitsprogramms für die Durchführungsphase Entwicklung eines Gliederungsentwurfes für Evaluationsbericht Abstimmung mit dem BMZ Briefing der Gutachter Self-Assessment der EZ-Evaluationseinheiten Darstellung des Evaluationssystems und Evaluationsaktivitäten nach vorgegebenem Leitfaden Aufzeigen von Veränderungen seit den letzten beiden Systemprüfungen 1999/2001 Bereitstellung grundlegender Dokumente und Statistiken
60 Axel Borrmann & Reinhard Stockmann Auswertungs- und Interviewphase Auswertung der Self-Assessments der EZ-Organisationen Interviews zur Ergänzung der Informationen aus der Dokumentenanalyse und den Self-Assessments mit den Evaluationsverantwortlichen, der Leitung und dem Management sowie den operativen Einheiten der EZ-Organisationen schriftliche Befragungen und/oder Telefon-/Vor-Ort-Interviews u.a. mit AwZ, Bundesrechnungshof, Wissenschaftlern, Gutachtern, PwC, DeGEval, VENRO. 16 Berichtserstellung Dokumentenauswertung zur Analyse des internationalen Kontexts, der nationalen Rahmenbedingungen Entwurf der Fallstudien für die ausgewählten EZ-Organisationen durch die Gutachter Abstimmung der Entwürfe mit den Co-Gutachtern und den beteiligten Peers Qualitätssicherung der Entwürfe durch die Leitung der Systemprüfung Schriftliche und mündliche Abstimmung der Entwürfe mit den EZ-Organisationen Überarbeitung der Fallstudien Entwurf des Syntheseberichts Abstimmung des Syntheseberichts mit Gutachtern und Peers im Rahmen eines Workshops Überarbeitung des Syntheseberichts und Rückspiegelung seiner Ergebnisse in die Fallstudien Versand der Fallstudien und des Syntheseberichts an das BMZ und die EZ-Organisationen Diskussion des Syntheseberichts auf einem Workshop mit allen beteiligten Institutionen Endfassung des Syntheseberichts und der Fallstudien Follow-up-Phase Publikation des Berichts auf Deutsch (ganz) und in Englisch (Synthesebericht) Vorstellung der Ergebnisse der Evaluation in den Medien Stellungnahmen des BMZ und der EZ-Organisationen zum Bericht (Management Response) Organisation eines Prozesses zur Umsetzung der Evaluationsergebnisse auf der Basis der Management Responses 16 Den Interviewpartnern wurde Anonymität zugesichert. Als eigenständige Quellen wurden sie nicht in das Literaturverzeichnis aufgenommen.
- Seite 10 und 11: Inhalt Abkürzungsverzeichnis......
- Seite 12: 4 Die Qualität der Evaluationssyst
- Seite 15 und 16: 14 HIPC Heavily Indebted Poor Count
- Seite 18 und 19: Zusammenfassung 17 0 Zusammenfassun
- Seite 20 und 21: Zusammenfassung 19 Evaluationspraxi
- Seite 22 und 23: Zusammenfassung 21 Nützlichkeit In
- Seite 24 und 25: Zusammenfassung 23 ein hohes Kompet
- Seite 26 und 27: Zusammenfassung 25 Organisationen,
- Seite 28 und 29: Zusammenfassung 27 Um die Unabhäng
- Seite 30 und 31: Zusammenfassung 29 Robuste Methoden
- Seite 32 und 33: Hintergrund und Ziele der Untersuch
- Seite 34 und 35: Hintergrund und Ziele der Untersuch
- Seite 36 und 37: Hintergrund und Ziele der Untersuch
- Seite 38 und 39: Hintergrund und Ziele der Untersuch
- Seite 40 und 41: Hintergrund und Ziele der Untersuch
- Seite 42 und 43: Hintergrund und Ziele der Untersuch
- Seite 44 und 45: Hintergrund und Ziele der Untersuch
- Seite 46 und 47: Hintergrund und Ziele der Untersuch
- Seite 48 und 49: Hintergrund und Ziele der Untersuch
- Seite 50 und 51: Hintergrund und Ziele der Untersuch
- Seite 52 und 53: Hintergrund und Ziele der Untersuch
- Seite 54 und 55: Untersuchungsdesign 53 2 Untersuchu
- Seite 56 und 57: Untersuchungsdesign 55 2.2 Untersuc
- Seite 58 und 59: Untersuchungsdesign 57 Nur sieben d
- Seite 62 und 63: Untersuchungsdesign 61 2.5 Gutachte
- Seite 64: Untersuchungsdesign 63 Ein besonder
- Seite 67 und 68: 66 Axel Borrmann & Reinhard Stockma
- Seite 69 und 70: 68 Axel Borrmann & Reinhard Stockma
- Seite 71 und 72: 70 Axel Borrmann & Reinhard Stockma
- Seite 73 und 74: 72 Axel Borrmann & Reinhard Stockma
- Seite 75 und 76: 74 Axel Borrmann & Reinhard Stockma
- Seite 77 und 78: 76 Axel Borrmann & Reinhard Stockma
- Seite 79 und 80: 78 Axel Borrmann & Reinhard Stockma
- Seite 81 und 82: 80 Axel Borrmann & Reinhard Stockma
- Seite 83 und 84: 82 Axel Borrmann & Reinhard Stockma
- Seite 85 und 86: 84 Axel Borrmann & Reinhard Stockma
- Seite 87 und 88: 86 Axel Borrmann & Reinhard Stockma
- Seite 89 und 90: 88 Axel Borrmann & Reinhard Stockma
- Seite 91 und 92: 90 Axel Borrmann & Reinhard Stockma
- Seite 93 und 94: 92 Axel Borrmann & Reinhard Stockma
- Seite 95 und 96: 94 Axel Borrmann & Reinhard Stockma
- Seite 97 und 98: 96 Axel Borrmann & Reinhard Stockma
- Seite 99 und 100: 98 Axel Borrmann & Reinhard Stockma
- Seite 101 und 102: 100 Axel Borrmann & Reinhard Stockm
- Seite 103 und 104: 102 Axel Borrmann & Reinhard Stockm
- Seite 105 und 106: 104 Axel Borrmann & Reinhard Stockm
- Seite 107 und 108: 106 Axel Borrmann & Reinhard Stockm
- Seite 109 und 110: 108 Axel Borrmann & Reinhard Stockm
60 Axel Borrmann & Re<strong>in</strong>hard Stockmann<br />
Auswertungs- und Interviewphase<br />
Auswertung <strong>der</strong> Self-Assessments <strong>der</strong> EZ-Organisationen<br />
Interviews zur Ergänzung <strong>der</strong> Informationen aus <strong>der</strong> Dokumentenanalyse und den<br />
Self-Assessments mit den <strong>Evaluation</strong>sverantwortlichen, <strong>der</strong> Leitung und dem Management<br />
sowie den operativen E<strong>in</strong>heiten <strong>der</strong> EZ-Organisationen<br />
schriftliche Befragungen und/o<strong>der</strong> Telefon-/Vor-Ort-Interviews u.a. mit AwZ, Bundesrechnungshof,<br />
Wissenschaftlern, Gutachtern, PwC, DeGEval, VENRO. 16<br />
Berichtserstellung<br />
Dokumentenauswertung zur Analyse des <strong>in</strong>ternationalen Kontexts, <strong>der</strong> nationalen<br />
Rahmenbed<strong>in</strong>gungen<br />
Entwurf <strong>der</strong> Fallstudien für die ausgewählten EZ-Organisationen durch die Gutachter<br />
Abstimmung <strong>der</strong> Entwürfe mit den Co-Gutachtern und den beteiligten Peers<br />
Qualitätssicherung <strong>der</strong> Entwürfe durch die Leitung <strong>der</strong> Systemprüfung<br />
Schriftliche und mündliche Abstimmung <strong>der</strong> Entwürfe mit den EZ-Organisationen<br />
Überarbeitung <strong>der</strong> Fallstudien<br />
Entwurf des Syntheseberichts<br />
Abstimmung des Syntheseberichts mit Gutachtern und Peers im Rahmen e<strong>in</strong>es<br />
Workshops<br />
Überarbeitung des Syntheseberichts und Rückspiegelung se<strong>in</strong>er Ergebnisse <strong>in</strong> die<br />
Fallstudien<br />
Versand <strong>der</strong> Fallstudien und des Syntheseberichts an das BMZ und die EZ-Organisationen<br />
Diskussion des Syntheseberichts auf e<strong>in</strong>em Workshop mit allen beteiligten Institutionen<br />
Endfassung des Syntheseberichts und <strong>der</strong> Fallstudien<br />
Follow-up-Phase<br />
Publikation des Berichts auf Deutsch (ganz) und <strong>in</strong> Englisch (Synthesebericht)<br />
Vorstellung <strong>der</strong> Ergebnisse <strong>der</strong> <strong>Evaluation</strong> <strong>in</strong> den Medien<br />
Stellungnahmen des BMZ und <strong>der</strong> EZ-Organisationen zum Bericht (Management<br />
Response)<br />
Organisation e<strong>in</strong>es Prozesses zur Umsetzung <strong>der</strong> <strong>Evaluation</strong>sergebnisse auf <strong>der</strong> Basis<br />
<strong>der</strong> Management Responses<br />
16 Den Interviewpartnern wurde Anonymität zugesichert. Als eigenständige Quellen wurden sie nicht<br />
<strong>in</strong> das Literaturverzeichnis aufgenommen.