Projekt-Kategorien: Entwicklungszusammenarbeit

Evaluation des Projekts: „Community Development in Maharashtra“

Seit 2004 fördert die AWO International e.V. das Projekt „Community Development in Maharashtra“ (Indien), durch das mit Hilfe eines partizipativen und nachhaltigen Managements der zur Verfügung stehenden natürlichen Ressourcen die Lebensgrundlage der armen ländlichen Bevölkerung in der Region gesichert werden soll. Hierfür wurden, in Kooperation mit ausgewählten Grassroots- und Gemeindeinstitutionen den Zielgruppen landwirtschaftliche Produktionsverfahren sowie Kompetenzen zur Selbstbestimmung und -regulierung vermittelt.

Im Rahmen der Evaluation sollte u.a. festgestellt werden, inwieweit die einzelnen Maßnahmewirkungen einen Beitrag zur Oberzielerreichung leisteten und wie effizient die dabei eingesetzten Mittel genutzt wurden. Darüber hinaus sollten die Zielgruppenangepasstheit sowie die zu erwartende Nachhaltigkeit der Projektwirkungen überprüft und mögliche Anknüpfungspunkte zu den politischen Strategien zur Unterstützung der Zielgruppen identifiziert werden.

Forschungsstudie: „Wirkungsevaluierungen/Impact Evaluations – Zum aktuellen internationalen Stand der Diskussion und dessen Relevanz für deutsche EZ-Evaluierungen“

Im Rahmen der Forschungsstudie wurde die aktuelle internationale Diskussion über „(Rigorous) Impact Evaluations“ und deren Durchführung im Rahmen der Entwicklungszusammenarbeit eingehend analysiert. Im Vordergrund standen dabei experimentelle bzw. quasi-experimentelle Designs und die verschiedenen Verfahren zur Bildung von Kontroll- oder Vergleichsgruppen. Methodisch wurden zentrale Dokument, Internetauftritte und Workshopdokumente relevanter Akteure analysiert.

Begleitende Evaluation des Projekts „Kopal II“

Das zu evaluierende Projekt zielte auf die Schaffung eines Bewusstseins in Politik und Medien zur Eindämmung des Problems der pränatalen Geschlechtsbestimmung und anschließenden Abtreibung weiblicher Föten sowie einer dauerhaften Verhaltensänderung in der Bevölkerung hinsichtlich der Thematik in vier nordindischen Bundesstaaten. Aufgabe der begleitenden Evaluation war es, die wesentlichen Erfahrungen aus der bisherigen Umsetzungsphase zu analysieren und zu dokumentieren. Weiterhin sollten auf Grundlage der Untersuchungsergebnisse Empfehlungen für die weitere Projektgestaltung entwickelt und der konkrete Nutzen der Erkenntnisse für die Strategien und Programme der Trägerorganisation und ihrer Partner aufgezeigt werden. Methodisch stützte sich die Untersuchung auf eine Begutachtung vorliegender Projektdokumente sowie auf die Durchführung qualitativer Intensivinterviews zur vertiefenden Analyse der Einschätzungen und Erfahrungen aller Projektbeteiligten.

GTZ-Rahmenvertrag 2007/2008 zur Durchführung von Fremdevaluationen von Projekten und Programmen der technischen Zusammenarbeit

Die Deutsche Gesellschaft für Technische Zusammenarbeit (GTZ) GmbH hatte ihr bestehendes Evaluierungssystem 2005 mit der Einführung von Ex-post Evaluierungen vervollständigt und ließ seither im Auftrag des BMZ jährlich weltweit ca. 30 Fremdevaluierungen in dessen Kooperationsländern durch unabhängige wissenschaftliche Institute und Consultingunternehmen evaluieren (je ca. zehn Evaluierungen laufender Vorhaben, zehn Schluss- und zehn ex-post Evaluierungen). Hierfür war u.a. mit dem CEval ein zweiter Rahmenvertrag für 2007/2008 geschlossen worden.

Im Rahmen des Auftrages führte das Ceval 2007 sechs der 30 Evaluationen durch. Zwei der Vorhaben evaluierten CEval-Mitarbeiter selbst, die übrigen Evaluationen wurden unter der Leitung von Frau Dr. Alexandra
Caspari und der Koordination von Nicolà Reade von zehn Gutachtern aus dem In- und Ausland umgesetzt:

    Laufende Evaluierung der GTZ Entwicklungsmaßnahme „Förderung produktiver Kleinwasserkraftnutzung, Nepal“
    Laufende Evaluierung der GTZ Entwicklungsmaßnahme „ProBEC Effiziente Nutzung von Biomasse-Energie im Südlichen Afrika“
    Schluss Evaluierung der GTZ Entwicklungsmaßnahme „Förderung von Klein- und Mittelunternehmen, Mongolei“
    Ex-post Evaluierung der GTZ Entwicklungsmaßnahme „Beratung zur Förderung der rationellen Energieverwendung (DEDP), Thailand“
    Ex-post Evaluierung der GTZ Entwicklungsmaßnahme „Energieeinsparung in Klein- und Mittelindustrie im Bundesstaat Rio de Janeiro, Brasilien“
    Ex-post Evaluierung der GTZ Entwicklungsmaßnahme „Förderung der Energieeffizienz in Gebäuden in Erzurum, Türkei“

Die Fremdevaluationen dienten in erster Linie dem Zweck der Rechenschaftslegung, darüber hinaus flossen die Erkenntnisse in das Wissensmanagement der GTZ ein und wurden für die Weiterentwicklung von Konzepten und die Gestaltung künftiger Vorhaben genutzt.

Ziel der Evaluationen war es entsprechend, fundierte Aussagen zum Erfolg der Projekte und Programme zu liefern, der auf der Grundlage einheitlicher Evaluationskriterien beschrieben und bewertet wurde. Diese waren in Anlehnung an OECD/DAC die entwicklungspolitische Relevanz des Vorhabens, die Effektivität sowie der Impact, die Effizienz der Mittelverwendung sowie die Nachhaltigkeit der Wirkungen.
Darüber hinaus wurden die zu evaluierenden Vorhaben jährlich wechselnden Schwerpunktthemen entnommen und entsprechende zusätzliche Evaluationsfragen formuliert, die für die weitere Konzept- und
Sektorentwicklung relevant erscheinen und eine vergleichende und übergreifende Auswertung der Evaluationsergebnisse
ermöglichten.

Evaluation des Moduls ‚“Famulaturen und PJ-Abschnitte‘“ des DAAD-Ärzteprogramms/ PAGEL

Gegenstand der Evaluation war das Modul ‚Famulaturen und PJ-Abschnitte‘ des DAAD-Ärzteprogramms/ PAGEL. Im Rahmen dieses Moduls wurden Medizinstudierenden deutscher Hochschulen aus Entwicklungsländern ein- bis zweimonatige Famulaturen bzw. viermonatige PJ-Tertiale in ihren Heimatländern oder anderen Entwicklungsländern ermöglicht. Durch diesen Aufenthalt hatten die Studierenden die Möglichkeit, sich mit der beruflichen Realität und den benötigten medizinischen Kompetenzen im Heimatland vertraut zu machen. Dies sollte letztendlich nach Abschluss des Studiums deren Rückkehr fördern, deren Reintegration erleichtern und somit dem ‚brain drain‘ entgegenwirken.
Im Rahmen der Evaluationsstudie wurde die Zielerreichung und Wirkung des Moduls ‚Famulaturen und PJ-Abschnitte‘ untersucht. Ziel der Evaluation war es, Optimierungspotentiale für die laufende Programmentwicklung herauszuarbeiten. Dabei wurde besonderes Augenmerk auf die am Ärzteprogramm beteiligten Universitäten und deren Interesse an diesem Modul gelegt.
Aus den Erkenntnissen der Evaluation wurden konkrete Schlussfolgerungen und Empfehlungen für die Programmausschreibung des Ärzteprogramms/ PAGEL im Frühjahr 2011 abgeleitet.

Schlussevaluation der „Child Legal Support and Protection Network Initiative“

Gegenstand der Schlussevaluation war das von Plan International Deutschland e.V. umgesetzte Programm „Child Legal Support & Protection Network Initiative“ in China, das auf eine umfassende Betreuung von Kindern abzielt, die misshandelt wurden oder selbst in Konflikt mit dem Gesetz gekommen sind.

Schwerpunkte der Schlussevaluation lagen auf der Identifikation und Bewertung der bislang erzielten Wirkungen und ihrer Nachhaltigkeit sowie der Rolle und der Zusammenarbeit der beteiligten Akteure. Darüber hinaus sollten auf Grundlage der Untersuchungsergebnisse Empfehlungen für die vorgesehene zweite Phase ab 2011 entwickelt werden. Gemäß dem Multimethodenansatz des CEval kamen bei der Datenerhebung neben leitfadengestützten Intensivinterviews mit den Programmverantwortlichen und Vertretern der Partnerorganisationen, standardisierte Befragungen weiterer Programmbeteiligter (z.B. freiwillige Unterstützer) sowie eine Dokumentenanalyse zum Einsatz.

Evaluation der DW-Akademie (2008/2009)

Seit 2003 arbeitet die DW-Akademie im Kontext der deutschen Medienentwicklungszusammenarbeit und zielt mit ihren Aktivitäten darauf ab, weltweit die Meinungsfreiheit zu fördern. Durch die Realisierung internationaler Projekte zu
Capacity Building will sie zu mehr Offenheit, Transparenz und Partizipation in den elektronischen Medien von Entwicklungs- und Transformationsländern beitragen. Gegenstand der Evaluation waren die Qualifizierungsmaßnahmen, die von der DW-Akademie in den Jahren 2004 bis 2007 durchgeführt worden waren. Im Rahmen einer bilanzierenden ex-post Evaluation sollten die Qualität der Planung und Durchführung dieser Maßnahmen sowie die entwicklungspolitischen Effekte und deren Nachhaltigkeit analysiert und bewertet werden.

Methodisch basierte die Evaluierung auf Sekundär- und Dokumentenanalysen, standardisierten Befragungen der Dozent:innen, Absolvent:innen und Vertreter:innen von Partnerorganisationen der DW-Akademie. Darüber hinaus wurden 2009 drei Länderfallstudien in Vietnam, Tansania und Kolumbien realisiert.

Systemprüfung der Evaluation in der deutschen Entwicklungszusammenarbeit

Aufgrund der Veränderungen der internationalen und nationalen Rahmenbedingungen und des weiter gewachsenen Drucks zu verbesserter Effektivität, Effizienz und Rechenschaftslegung entschloss sich das BMZ, die Qualität des deutschen EZ-Evaluationssystems erneut überprüfen zu lassen.
Mit der Planung und Durchführung der Untersuchung wurde das Hamburgische Weltwirtschafts-Institut (HWWI) betraut, das die Evaluierung in enger Kooperation mit dem Centrum für Evaluation (CEVAL) durchführte. Zudem waren die Leiter der Evaluierungsabteilungen der belgischen und schweizerischen Entwicklungszusammenarbeit an der Durchführung beteiligt.
Ziel der Evaluation war es, die Evaluationssysteme des BMZ und der staatlichen und nicht-staatlichen EZ-Institutionen im Hinblick auf ihre Organisation, Konzeption, Methoden und Verfahren sowie Umfang und Struktur zu bewerten und Ansatzpunkte zur Fortentwicklung des Gesamtsystems zu entwickeln.
Untersuchungsgegenstand der Systemprüfung waren insbesondere das BMZ, die staatlichen Durchführungsorganisationen (KfW, GTZ, InWEnt, DED, PTB, BGR), die DEG, die Politischen Stiftungen, die Kirchlichen Zentralstellen, die Deutsche Welthungerhilfe, das Institut für internationale Zusammenarbeit & Deutscher Volkshochschulverband, der Deutsche Caritasverband/Caritas International sowie die Sozial- und Entwicklungshilfe des Kolpingwerks.
Methodisch basierte die Evaluation auf einem standardisierten Self-Assessment der EZ-Organisationen, leitfadengestützten Intensivinterviews mit Vertretern der Organisationen, einer Dokumentenanalyse und einer standardisierten Befragung aller nicht in der Auswahl vorhandenen NROs der deutschen EZ.

InWEnt Training zu Qualitätsmanagement, Monitoring und Evaluation im TVET Bereich (2007)

Im Rahmen des Trainings wurden Module zu Qualitätsmanagement, Monitoring, Evaluation, Datenerhebungsmethoden, Datenauswertung, sowie Reporting, mit dem Schwerpunkt auf Berufsbildung angeboten.