Referenzen

Begleitend, Capacity Development, Entwicklung M&E-System
Projektstart: April 2023
Projektende: April 2027

Rahmenvertrag zur Weiterentwicklung und Implementierung von Ansätzen der systematischen Wirkungserfassung mittels Monitoring und Evaluationen für DAAD-Programme (2023)

Der DAAD versteht sich als moderne Wissenschaftsorganisation, die durch kontinuierliches Lernen und die Bereitschaft zur Veränderung ihrer Arbeit bestrebt ist, deren Wirksamkeit kontinuierlich zu verbessern. [Mehr anzeigen]Der DAAD versteht sich als moderne Wissenschaftsorganisation, die durch kontinuierliches Lernen und die Bereitschaft zur Veränderung ihrer Arbeit bestrebt ist, deren Wirksamkeit kontinuierlich zu verbessern. Dieser Ansatz ist in dem 2019 verabschiedeten Integrierten Monitoring- und Evaluationskonzept des DAAD ausformuliert, in dem institutionelles Lernen, Qualitätssicherung, Wirkungsorientierung, Transparenz in Prozessen und Legitimation als wichtige Dimensionen benannt werden, auf die die verschiedenen Monitoring- und Evaluationsaktivitäten ausgerichtet sind. Aus übergeordneter Perspektive soll so auch die strategische Ausrichtung des DAAD und seiner Programme evidenzbasiert unterstützt werden. Der Rahmenvertrag fokussiert auf die wirkungsorientierte Programmplanung, das wirkungsorientierte Monitoring und die Zielerreichung und damit auf Weiterentwicklungs- und Lernprozesse sowie auf die Berichtspflichten im Rahmen der Erfolgskontrolle. Er nimmt weitergehend aber auch die effektive und effiziente Nutzung der durch das WoM generierten Datenbasis im Rahmen monitoringbasierter Analysen und Evaluationen in den Blick und kann so maßgeblich zur Stärkung und Erhöhung des Nutzens des WoM beitragen. Hierfür werden Leistungen in folgenden Aufgabenbereichen erbracht: - Entwicklung von Wirkungsgefügen und Indikatorenkatalogen - Entwicklung programmspezifischer Monitoring-Instrumente und Überarbeitung der programmsteuernden Dokumente entsprechend der Anforderungen des Monitoring-Konzepts - Datenaufbereitung und -analyse - Durchführung von Mointoring-basierten Analysen und Evaluationen - Begleitung von Monitoring-Besuchen bei Projektnehmern - Interne und externe Workshops zur Umsetzung des Wirkungsorientierten Monitorings (WoM) - Beratung zu weiterführenden Ansätzen und Methoden im Bereich Monitoring und Evaluation - Zusätzliche Beratungs- und Schulungsleistungen
Management: Vera Hennefeld
|  Mitarbeiter:innen: Sandra Bäthge, Laszlo Szentmarjay
|  Kooperationspartner: uzbonn GmbH
Auftraggeber: Deutscher Akademischer Austauschdienst (DAAD)
Begleitend, Zu Projektabschluss
Projektstart: Februar 2023
Projektende: September 2023

Begleitende Evaluation des Förderprojektes “Female Producer Collective“ (2023)

Das Förderprogramm „Female Producer Collective“ der GOFORMUSIC gGmbH ist ein spezielles Förderprojekt für Produzentinnen, die Coachings in den Bereichen „Kreativität und Ideenfindung“, „Recording & Sound [Mehr anzeigen]Das Förderprogramm „Female Producer Collective“ der GOFORMUSIC gGmbH ist ein spezielles Förderprojekt für Produzentinnen, die Coachings in den Bereichen „Kreativität und Ideenfindung“, „Recording & Sound Design“, „Mixing & Mastering“ und „Business & Marketing“ erhalten. Ziel des Projektes ist es, gezielt Produzentinnen zu fördern, der geringen Frauenquote im Produktionsbereich entgegenzuwirken und Musikerinnen für das Produzieren zu begeistern. Die CEval GmbH wurde bereits in der ersten Förderrunde (2022) mit der begleitenden Evaluation des Förderprojektes beauftragt. 2023 startet das Förderprogramm „Female Producer Collective“ mit einer zweiten Förderrunde, wobei die CEval GmbH erneut eine begleitende Evaluation durchführen wird. In methodischer Hinsicht werden sowohl Fokusgruppeninterviews mit Teilnehmenden und Coaches des Programmes als auch eine Online-Befragung über einen standardisierten Fragebogen durchgeführt.
Management: Vera Hennefeld
|  Mitarbeiter:innen: Katharina Hary
Auftraggeber: GOFORMUSIC gGmbH
Begleitend, Zu Projektabschluss
Projektstart: Januar 2023
Projektende: April 2023

Unterstützung der Evaluation des Azubi Kollegs Lübeck

Das Azubi Kolleg Lübeck ist ein Programm der Joachim Herz Stiftung und der Lübecker Possehl-Stiftung, welches 25 talentierte und motivierte Lübecker Auszubildende über zwei Jahre [Mehr anzeigen]Das Azubi Kolleg Lübeck ist ein Programm der Joachim Herz Stiftung und der Lübecker Possehl-Stiftung, welches 25 talentierte und motivierte Lübecker Auszubildende über zwei Jahre in ihrer Persönlichkeitsbildung unterstützt und soziale Kompetenzen fördert. Durch Seminare, Workshops und Trainings in zwei Blockveranstaltungen pro Jahr sollen die Azubis dazu befähigt werden, ihre Stärken und Potenziale zu erkennen und zu entfalten und u.a. ihr Selbstbewusstsein, ihr Verantwortungsbewusstsein und ihr gesellschaftliches Engagement zu steigern. In den Blockveranstaltungen werden Fortbildungen in drei großen Themenblöcken angeboten: a) Kommunikation, b) Gesellschaft/ Politik/ Wirtschaft und c) kulturelle Bildung. Weitere Ziele des Programmes stellen der Austausch zwischen den Azubis, der gemeinsame Lernprozess und der Aufbau eines Netzwerkes dar. Langfristig soll das Programm einen Beitrag zur Persönlichkeitsbildung und beruflichen Etablierung der Azubis sowie zur Erhöhung der Attraktivität der beruflichen Ausbildung in Lübecker KMU leisten. Zudem soll es der Begabungsförderung für Auszubildende zu einer größeren gesellschaftlichen Präsenz verhelfen und insgesamt zur Persönlichkeitsbildung von Jugendlichen und jungen Erwachsenen beitragen. Als Pilotprojekt ist das Azubi Kolleg auf fünf Jahre angelegt. Im Jahr 2023 wurde die CEval GmbH erneut damit beauftragt, die Evaluation des Programms zu unterstützen. Auf Basis des bereits im Vorgängerprojekt erarbeiteten Wirkungsgefüges und Indikatorenkataloges werden 2023 nun zum einen die Baseline-Daten der 2. Kohorte einer vergleichenden Analyse mit den Daten der 1. Kohorte unterzogen Zum anderen sind im Sinne einer Wirkungserfassung erneut Online-Befragungen unter Azubis, Lehrer:innen, Betreuer:innen als auch Fokusgruppeninterviews mit Azubis und Leitfadeninterviews mit Lehrer:innen und Betreuer:innen zum Programmende als Basis für einen Vorher-nachher-Vergleich vorgesehen.
Management: Vera Hennefeld
|  Mitarbeiter:innen: Katharina Hary
Auftraggeber: Joachim Herz Stiftung
Wirkungsuntersuchung
Projektstart: Dezember 2022
Projektende: April 2025

Unterstützung des BfN bei der Evaluierung durch den Wissenschaftsrat (WR) 2023/2024

Als Ressortforschungseinrichtung des Bundes wird das Bundesamt für Naturschutz (BfN) in regelmäßigen Abständen durch externe Expert:innen evaluiert. Nach der ersten externen Evaluation durch den Wissenschaftsrat [Mehr anzeigen]Als Ressortforschungseinrichtung des Bundes wird das Bundesamt für Naturschutz (BfN) in regelmäßigen Abständen durch externe Expert:innen evaluiert. Nach der ersten externen Evaluation durch den Wissenschaftsrat (WR) im Jahr 2007 und der zweiten Evaluation 2015 steht nun 2024 die dritte Evaluierung an. Ziel des Vorhabens ist die Unterstützung des BfN bei der konzeptionellen Vor- und Nachbereitung des anstehenden Evaluierungsprozesses durch externe, wissenschaftliche Expertise. Dabei werden folgende Kernaufgaben erfüllt: - Unterstützung bei der Sammlung, Auswertung und Aufbereitung von Daten und Informationen, die zur Beantwortung der Fragen an das BfN benötigt werden und der Erstellung des Berichtes; - Unterstützung bei der Vorbereitung und Durchführung der Begehung durch den Wissenschaftsrat; - Unterstützung bei der Auswertung der Evaluierungsergebnisse sowie bei der Nachbereitung der Evaluierung; - Analyse der Wirksamkeit und Qualität der wissenschaftsbasierten Politikberatung und Wissenskommunikation des BfN einschließlich der Entwicklung von Empfehlungen zu deren systematischer Weiterentwicklung. Erarbeitung von Vorschlägen zur Integration dieser Empfehlungen in das Qualitätsmanagement des Wissenschaftlichen Arbeitens des BfN.
Management: Hansjörg Gaus
|  Mitarbeiter:innen: Susanne Johanna Väth, Katharina Hary, Laszlo Szentmarjay, Vanessa Krieger
Auftraggeber: Bundesamt für Naturschutz (BfN)
Instrumentenevaluation
Projektstart: November 2022
Projektende: Dezember 2022

Messung der Kundenzufriedenheit bei AIZ-Dienstleistungen für GIZ-Vorhaben, Folgeerhebung 2022

Um eine stetige Qualitätssicherung ihrer Dienstleistungen zu gewährleisten, hat die Akademie für Internationale Zusammenarbeit (AIZ) die CEval GmbH beauftragt, die Erhebungswelle 2022 Ihrer Kundenzufriedenheitsbefragung durchzuführen. [Mehr anzeigen]Um eine stetige Qualitätssicherung ihrer Dienstleistungen zu gewährleisten, hat die Akademie für Internationale Zusammenarbeit (AIZ) die CEval GmbH beauftragt, die Erhebungswelle 2022 Ihrer Kundenzufriedenheitsbefragung durchzuführen. Ziel ist es, die Zufriedenheit der GIZ-internen Kund:innen mit den Dienstleistungen der AIZ im Bereich der beruflichen Bildung sowie ggf. Optimierungspotenziale zu ermitteln. Zu diesem Zweck werden GIZ-interne Kund:innen im Rahmen einer teilstandardisierten Telefonbefragung zu den Bereichen Kommunikation, Beratung und Dienstleistung, Arbeitsweise und Entwicklungsorientierung befragt. Basierend auf den Befunden werden sowohl Stärken als auch Schwächen der von der AIZ durchgeführten Maßnahmen sowie daraus resultierende Verbesserungspotenziale identifiziert.
Management: Sandra Bäthge
|  Mitarbeiter:innen: Vanessa Krieger
Auftraggeber: Akademie für Internationale Zusammenarbeit (AIZ)
Zu Projektabschluss
Projektstart: November 2022
Projektende: Juni 2023

Evaluation des „Deutsch-Kolumbianischen Friedensinstituts/ Instituto Colombo-Alemán para la Paz (Instituto CAPAZ)“

Das Deutsch-Kolumbianische Friedensinstitut (CAPAZ) ist eines von fünf Exzellenzzentren für Forschung und Lehre im Ausland, welches seit Oktober 2016 aus Mitteln des Auswärtigen Amtes gefördert [Mehr anzeigen]Das Deutsch-Kolumbianische Friedensinstitut (CAPAZ) ist eines von fünf Exzellenzzentren für Forschung und Lehre im Ausland, welches seit Oktober 2016 aus Mitteln des Auswärtigen Amtes gefördert wird. Das Institut versteht sich als akademische Kooperationsplattform, die den Wissens- und Erfahrungsaustausch zwischen Institutionen aus Forschung und Lehre, Zivilgesellschaft und Staat im Bereich der Friedensforschung fördert und auf diese Weise zum Aufbau einer nachhaltigen Friedensordnung in Kolumbien beitragen will. Die Tätigkeitsfelder des Instituts umfassen die Bereiche Lehre, Forschung, Politikberatung und Wissenstransfer. Mit Blick auf das Ende der aktuell geförderten Institutionalisierungsphase des Instituts sowie auf eine angestrebte weitere Förderphase, hat der Deutsche Akademische Austauschdienst (DAAD) die CEval GmbH mit einer Evaluation des Instituto CAPAZ beauftragt. Ziel der Evaluation ist es, eine Projektfortschritts- und Erfolgskontrolle des Projekts zu realisieren und auf dieser Basis Vorschläge zur Optimierung des Projekts sowie zur Weiterentwicklung der Förderung zu entwickeln. Hierbei orientiert sich die Evaluation an den Kriterien der Relevanz, Effektivität (Zielerreichung und Wirkung), Effizienz, Nachhaltigkeit sowie Koordination, Komplementarität und Kohärenz. Der gewählte Evaluationsansatz ist theoriebasiert und partizipativ und kombiniert in methodischer Hinsicht einen Mix aus verschiedenen vornehmlich qualitativen Erhebungs- und Auswertungsmethoden. Unter anderem werden eine Dokumenten- und Sekundärdatenanalyse, explorative Einzel- bzw. Gruppeninterviews sowie vertiefende, leitfadengestützte Einzelinterviews und Fokusgruppendiskussionen realisiert.
Management: Sandra Bäthge
|  Mitarbeiter:innen: Vera Hennefeld
Auftraggeber: Deutscher Akademischer Austauschdienst (DAAD)
Begleitend
Projektstart: Oktober 2022
Projektende: Juni 2025

Datenerhebung zur Vergabe des Qualitätssiegels „Fanprojekt nach dem Nationalen Konzept Sport und Sicherheit“

In Deutschland existiert ein dichtes Netzwerk von Einrichtungen der sozialen Arbeit mit jugendlichen Fußballfans, die nach den Rahmenbedingungen und Vorgaben des Nationalen Konzepts Sport und [Mehr anzeigen]In Deutschland existiert ein dichtes Netzwerk von Einrichtungen der sozialen Arbeit mit jugendlichen Fußballfans, die nach den Rahmenbedingungen und Vorgaben des Nationalen Konzepts Sport und Sicherheit (NKSS) arbeiten. Das "Qualitätssiegel nach dem Nationalen Konzept Sport und Sicherheit" wurde im Jahr 2010 mit dem Ziel eingeführt, diesen sozialpädagogisch arbeitenden Fußballfanprojekten in Deutschland ein Instrument der Qualitätssicherung an die Hand zu geben, um gemeinsame Standards und mehr Handlungssicherheit herbeizuführen und die strukturellen Rahmenbedingungen der sozialpädagogisch arbeitenden Fußballfanprojekte zu verbessern. Das Qualitätssiegel wird auf Basis einer Empfehlung der AG Qualitätssicherung, welche durch die Koordinationsstelle Fanprojekte bei der Deutschen Sportjugend (KOS) koordiniert wird, durch den Beirat der KOS vergeben. In der AG Qualitätssicherung sind Vertreter aus dem Fußball, der obersten Landes- und Familienbehörden, der Wissenschaft und der Fanprojekte selbst vertreten. Nachdem in zwei Vorgängerprojekten bereits das Qualitätssiegel von der CEval GmbH überarbeitet, modellhaft getestet und im Anschluss die bundesweite Ausrollung durch die Erhebung der für die Vergabe notwendigen Informationen in allen Fanprojekten durchgeführt wurde, wurde die CEval GmbH nun mit den Datenerhebungen der dritten Phase zur Siegelvergabe für die aktuell 71 Fanprojekte beauftragt.
Management: Vera Hennefeld
|  Mitarbeiter:innen: Katharina Hary, Sandra Bäthge
Auftraggeber: Koordinationsstelle Fanprojekte bei der Deutschen Sportjugend (KOS)
Begleitend, Wirkungsuntersuchung
Projektstart: September 2022
Projektende: September 2023

Evaluation Dozenturen

Der DAAD als weltweit größte Förderorganisation für den Austausch von Studierenden und Wissenschaftler:innen fördert mit den Programmen der Auslandsdozenturen den Lehraufenthalt von Wissenschaftler:innen an Hochschulen [Mehr anzeigen]Der DAAD als weltweit größte Förderorganisation für den Austausch von Studierenden und Wissenschaftler:innen fördert mit den Programmen der Auslandsdozenturen den Lehraufenthalt von Wissenschaftler:innen an Hochschulen im Ausland. Mit den Dozenturen im Ausland verfolgt der DAAD außenkulturpolitische, entwicklungspolitische, hochschulpolitische und/oder programmpolitische Ziele. Je nach Gastland, gastgebender Institution und Zuschnitt der Dozentur weisen diese unterschiedliche Schwerpunkte in ihren Zielsetzungen auf. Gegenstand der Evaluation sind die Langzeit-, Kurzzeit- und Herder-Dozenturen im Betrachtungszeitraum 2012 bis 2022. Die Evaluation verfolgt drei zentrale Zielsetzungen: Überprüfung, ob die Programme in ihrer aktuellen Ausgestaltung zeitgemäß und bedarfsorientiert sind, Unterstützung der Rechenschaftslegung des DAAD gegenüber Auswärtigem Amt sowie Unterstützung der strategischen Positionierung der Programme durch Weiterentwicklung. In methodischer Hinsicht wird ein Mix aus qualitativen und quantitativen Erhebungs- und Auswertungsmethoden miteinander kombiniert. Unter anderem werden eine umfassende Dokumenten- und Sekundärdatenanalyse, virtuelle Standortbegehungen, Leitfadeninterviews, Gruppendiskussionen sowie Online-Befragungen realisiert.
Management: Vera Hennefeld
|  Mitarbeiter:innen: Sandra Bäthge
|  Kooperationspartner: uzbonn GmbH
Auftraggeber: Deutscher Akademischer Austauschdienst (DAAD)
Begleitend, Wirkungsuntersuchung
Projektstart: September 2022
Projektende: November 2023

Evaluation des digitalen Seniorenportals “digital.vital”

Das Seniorenportal „digital.vital“ ist ein Modellprojekt des Amtes Hüttener Berge, des Landkreises Germersheim und der Stadt Püttlingen. Ziel des Portals ist es, einen Beitrag zur [Mehr anzeigen]Das Seniorenportal „digital.vital“ ist ein Modellprojekt des Amtes Hüttener Berge, des Landkreises Germersheim und der Stadt Püttlingen. Ziel des Portals ist es, einen Beitrag zur Begegnung der Herausforderungen zu leisten, die mit dem demografischen Wandel und der fortschreitenden Digitalisierung einhergehen: Durch bedarfsgerechte Angebote sollen Menschen in den Bereichen Ernährung, Bewegung und Freizeitgestaltung/soziale Teilhabe (inkl. Wohnen, Mobilität, Unterstützung) darin unterstützt werden, im Alter eine hohe Lebensqualität zu erzielen und zu erhalten. Zugleich soll durch das Portal auch die digitale Teilhabe älterer Menschen gestärkt werden. Das Projekt startete im Juli 2020 und ab Herbst 2022 werden auf dem Portal verschiedene Service- und Informationsangebote zur Verfügung gestellt werden. Das Amt Hüttener Berge hat die CEval GmbH damit beauftragt, über eine Evaluation des Seniorenportals Erkenntnisse zur Qualität des Informations- und Serviceangebots zu erhalten und mögliche Optimierungspotenziale zur User Experience im Sinne der Portalfunktionalität sowie inhaltlicher Art (Content) zu identifizieren. Methodisch werden für die strukturierte Evaluierung der User Experience der Pilotnutzer:innen im Rahmen sog. Digitaler Werkstätten an verschiedenen Standorten insgesamt vier teilnehmende Beobachtungen durchgeführt. Ergänzt werden die teilnehmenden Beobachtungen um Nachbefragungen ausgewählter Teilnehmer:innen einige Tage nach dem Besuch der Digitalen Werkstätten, um Daten zum tatsächlichen Nutzen der Werkstätten und der Nutzung der Webseite durch die Teilnehmer:innen zu erfassen. Zudem wird eine teilstandardisierte Online-Befragung unter Trägern und Akteuren der Seniorenarbeit aus den Partnerkommunen zu deren Wahrnehmungen und fachlichen Einschätzungen zum Seniorenportal, zu seinen Angeboten sowie auch zu Weiterentwicklungspotenzialen durchgeführt.
Management: Vera Hennefeld
|  Mitarbeiter:innen: Katharina Hary
Auftraggeber: Amt Hüttener Berge
Projektstart: Juli 2022
Projektende: Juni 2023

Evaluation der International Sustainability Academy (ISA)

Die International Sustainability Academy (ISA) ist ein Projekt der Schutzgemeinschaft Deutscher Wald Hamburg e.V (SDW). Die ISA bietet ein 9-monatiges Stipendienprogramm, das durch das Bundesministerium [Mehr anzeigen]Die International Sustainability Academy (ISA) ist ein Projekt der Schutzgemeinschaft Deutscher Wald Hamburg e.V (SDW). Die ISA bietet ein 9-monatiges Stipendienprogramm, das durch das Bundesministerium für Wirtschaftliche Zusammenarbeit und Entwicklung (BMZ) gefördert wird, mit dem Ziel, die Internationale Zusammenarbeit bei der Umsetzung der Sustainable Development Goals (SDGs) zu unterstützen und zu stärken. Das Stipendium steht interessierten Personen offen, die an SDG-bezogenen Aktivitäten beteiligt sind und aus Ländern stammen, die auf der Liste des Entwicklungshilfeausschusses (DAC) stehen. Die erste Phase des Stipendiums umfasst einen achtmonatigen Aufenthalt in Hamburg, bei dem die Stipendiat:innen Trainings, Vernetzungsmöglichkeiten, individuelle Beratung und Unterstützung für die (Weiter-) Entwicklung ihrer wissenschaftlichen oder wirtschaftlichen Projekte und/oder Produkte erhalten. Das Stipendium schließt mit einer zweiten Phase, einem zusätzlichen Fördermonat im Heimatland ab, in dem der Abschluss bzw. die Implementation der individuellen Projekte im Fokus steht. ISA startete im September 2019 und befindet sich derzeit in der zweiten Förderphase von 2022 bis Ende 2024. Zur Halbzeit der aktuellen Förderphase wurde die CEval GmbH von der SDW mit der Durchführung einer Zwischenevaluierung beauftragt. Ziel der Evaluation ist, eine Zwischenbilanz zu ziehen und Optimierungspotenziale zur Ausgestaltung des Stipendien-programmes zu identifizieren. Die Evaluation basiert auf den OECD-DAC Kriterien und adressiert damit Fragen zur Relevanz, Kohärenz, Effizienz, Effektivität, Impact und zur Nachhaltigkeit des Stipendienprogramms. Methodisch wird für diese Evaluation einen Mixed-Methods-Ansatz eingesetzt, in dem qualitative und quantitative Instrumente und Analyseverfahren kombiniert werden. In qualitativer Hinsicht kommen die Auswertung Projektdokumenten, semi-strukturierte Leitfadeninterviews und Fokusgruppendiskussionen mit verschiedenen Stakeholdern sowie teilnehmende Beobachtungen des Auswahlverfahrens zum Einsatz. Weiterhin werden quantitative Online-Befragungen von aktuellen ISA Stipendiat:innen und Alumni zur Erfassung ihrer Erfahrungen und persönlichen Perspektiven auf das Stipendienprogramms durchgeführt.
Management: Vera Hennefeld
|  Mitarbeiter:innen: Nicolle Comafay-Heinrich
Auftraggeber: Schutzgemeinschaft Deutscher Wald Lv. Hamburg e.V. (SDW)