Monitoring und Evaluation (M&E) sind unentbehrliche Bestandteile unserer Projektarbeit und helfen uns, unerwünschte Entwicklungen zu erkennen und unsere Arbeit laufend zu verbessern. Externe Evaluationen führen wir auf Mandatsbasis in unseren inhaltlichen Kernbereichen durch. Ausserdem sehen wir M&E als ein dynamisches Feld, das uns inspiriert, neue Ansätze auszuprobieren und weiter zu entwickeln.

Unter Evaluation verstehen wir die systematische und objektive Auswertung von Informationen, um Antworten auf bestimmte Fragen zu finden und auf der Basis vorgängig vereinbarter Erfolgsindikatoren eine Beurteilung vorzunehmen. Mögliche Beurteilungskriterien von Projekten sind

• Relevanz: Stimmen die Projektziele mit den Bedürfnissen der Zielgruppe(n) überein?
• Effizienz: Sind die für die Intervention eingesetzten Ressourcen angemessen?
• Effektivität: Wurden die Projektziele erreicht?
• Wirkung: Welche positiven und negativen, direkten und indirekten, beabsichtigten und unbeabsichtigten Wirkungen sind aufgrund des Projekts aufgetreten?
• Nachhaltigkeit: Ist der Nutzen eines Projekts von Dauer?
  

Im Unterschied zur Evaluation ist Monitoring eine kontinuierliche Analyse von Informationen, die Hinweise darauf geben, ob ein Projekt so läuft, wie es ursprünglich geplant war. Auf dieser Grundlage kann ein Projekt je nach Bedarf angepasst und Prozesse optimiert werden.

Es ist uns ein zentrales Anliegen, nicht nur einfach festzustellen, ob bestimmte Zielgrössen erreicht worden sind oder nicht. Wir möchten eine Basis für die Weiterentwicklung eines Projekts schaffen und einen Beitrag zum Lernen innerhalb einer Organisation leisten. Deshalb gehen wir in der Regel partizipativ vor, indem wir die relevanten Stakeholder (z.B. die Zielgruppe eines Projekts, Projektmitarbeitende einer Organisation, etc.) so weit als möglich in die Entwicklung des Evaluationsdesigns und die Durchführung der Evaluation einbinden. Dies erlaubt uns, verschiedene Perspektiven zu berücksichtigen. Unsere Evaluationen zeichnen zudem der interdisziplinäre Ansatz und die Methodenvielfalt aus. Ausserdem orientieren wir uns an den Qualitätsstandards des Entwicklungsausschusses der OECD.

Schwerpunktmässig führen wir folgende Typen von Evaluationen durch:

• Summative und formative Evaluationen: Summative Evaluationen überprüfen, ob ein Projekt wirksam ist bzw. genauso wirkt, wie man es theoretisch erwartet hat. Hier wird in der Regel eine Kontrollgruppe benötigt, um nachzuweisen, dass die Wirkungen ohne das Projekt ausgeblieben wären. Formative Evaluationen begleiten ein Projekt, um dessen Umsetzung und Wirkung fortlaufend zu kontrollieren. Im Unterschied zur summativen Evaluation steht bei der formativen Evaluation die Verbesserung einer laufenden Intervention sowie die Optimierung der Steuerungsprozesse im Vordergrund.
• Evaluation von lokalen Partnerorganisationen in der Entwicklungszusammenarbeit (Organizational appraisal): Ein (Rapid) Organizational Appraisal umfasst das (rasche) Erheben und Analysieren von handlungsrelevanten Informationen zu institutionellen Kapazitäten, Strukturen, Ausrichtung, Vernetzung, Aktivitätsbereichen, Stärken und Schwächen möglicher Partnerorganisationen in der Entwicklungszusammenarbeit. Die Informationsbeschaffung geschieht unter partizipativem Einbezug der lokalen Stakeholder sowie anhand einer Anzahl von qualitativen und quantitativen Methoden. Ziel einer solchen Evaluation ist die Selektion von möglichen Projektpartnern sowie die Identifikation von effektiven Ansätzen für Massnahmen im Bereich des Capacity Building.

Nachfolgend eine Auswahl laufender und abgeschlossener Evaluationen der SAD:

• Evaluation von psychosozialen Interventionsprogrammen zur Unterstützung von AIDS-Waisen im südlichen Afrika
• Evaluation psychosozialer Wirkungen mittels konventioneller und kreativer Evaluationsmethoden (Foto-Monitoring) anhand unseres Projekts in Libanon
• Evaluation des Pilotprojekts „Sport und Spiel für traumatisierte Kinder in Bam , Iran“ (pdf, 77KB)
  
• Evaluation des Fussballentwicklungsprogramms HatTrick der UEFA
• Evaluation von in der Jugendarbeit tätigen NGOs in Iran
• Evaluation der Kampagne „Protect Children in War“ vom IKRK und der UEFA
• Evaluation zum islamischen Religionsunterricht an der Schule (pdf, 432 KB)

Weiterführende Links:

Monitoring and Evaluation NEWS

Evaluation von Entwicklungsprogrammen beim Entwicklungsausschuss (DAC) der OECD

Unabhängige Evaluationsgruppe (IEG) der Weltbank

Evaluationsgruppe (UNEG) der UNO

Evaluation bei der UNICEF

Portal zu Participatory Planning Monitoring & Evaluation der Universität Wageningen, Niederlande

Wilderdom: Tools, Instrumente und Fragebogen zur Erforschung und Evaluation von Interventionen

Insightshare: Partizipatives Video-M&E