Indikatorenformulierung für Good Governance Vorhaben: Typen und Kategorien

Transkript

1 Indikatorenformulierung für Good Governance Vorhaben: Typen und Kategorien Dr. Justine Hunter GIZ, Stabsstelle Monitoring & Evaluierung Frühjahrstagung AK DeGEval Evaluierung von Politikberatung, Juni 2014, Braunschweig Seite 1

2 Inhalt GIZ: Hintergrund Motivation Prozesse Indikatoren im Auftragsmanagement Das smodell der GIZ smessung im Governance Sektor: Herausforderungen und Ansätze Indikatorentypen und kategorien Seite 2

3 GIZ: Hintergrund Motivation - Prozesse GIZ Unternehmensebene Langfristige Unternehmensplanung: Wirksamkeit Interne und externe Qualitätskontrollen Bereich Afrika/ Fach- und Methodenbereich Governance Impact Initiative Africa Stabsstelle Monitoring & Evaluierung Qualitätskontrolle, Qualitätsstandards, Qualitätssicherung Seite 3

4 Indikatoren im Auftragsmanagement Angebotserstellung Projektdurchführung Berichterstattung & Evaluierung Für das an den Auftraggeber gerichtete und auf Grundlage des smodells erstellte Angebot werden Indikatoren erstellt In das sorientierte Monitoringsystem werden Indikatoren aus dem Angebot übertragen. Indikatoren für zusätzliche en werden gebildet. Indikatoren werden in Meilensteinintervallen überprüft. Indikatoren liefern Daten für die Berichterstattung an den Auftraggeber. Für Evaluierungen werden vorliegende Indikatoren anhand von Qualitätskriterien überprüft und ggf. angepasst um Evaluierbarkeit sicherzustellen. Seite 4

5 smodell der GIZ Ziel 9. Juli 2014 Stabsstelle Monitoring und Evaluierung Seite 5

6 smessung im Governance Sektor: Herausforderungen und Ansätze Hohe Komplexität und Kontextsensibilität Kurze Projektlaufzeiten/ Nachweis systemischer Veränderungen Attributionsproblem Veränderungen auf Ebene der Zielgruppe schwierig nachzuweisen Seite 6

7 Indikatorentypen und kategorien Aussagekräftige Indikatorensets : smessung ist nicht trennbar von der Konzeptualisierung von Governance Prinzip Ownership Anlehnung an Partnersysteme, partizipative Auswahl und Formulierung von Indikatoren, Kontextsensibilität Prinzip Verhältnismäßigkeit des Erhebungsaufwands Zuordnung zu Typen und Kategorien nicht exklusiv (Überlappungen) Seite 7

8 Indikatorentypen und -kategorien (Forts.) Indikatoren operationalisieren quantitative und qualitative Dimensionen von Veränderungsprozessen Quantitative Indikatoren nutzen Messgrößen wie Menge, Fläche, Masse, Anzahl etc., über die eine Veränderung vergleichend gemessen werden kann Qualitative Indikatoren messen die Güte und Qualität von Veränderungen und/ oder informieren zu Einschätzungen, Bewertungen und Meinungen Seite 8

9 Indikatorentypen und kategorien: Anwendungsbeispiele Quantitativer Indikator: Öffentliche Finanzen Die Zahl der registrierten Steuerpflichtigen steigt um xy%. Basiswert: xy, Zielwert: xy, Quellen: Verwaltungsdaten der Steuerbehörde, Unternehmensregister Qualitativer Indikator: Politische Teilhabe Die mit Unterstützung des Vorhabens erarbeiteten Regularien werden von xy% der Vertreter von Nichtregierungsorganisation als förderlich für die Teilhabe benachteiligter Gruppen eingestuft. Basiswert: 0 (da die Regularien erst mit Unterstützung des Vorhabens erarbeitet werden), Zielwert: xy% Quellen: Befragung mit standardisierten Fragebögen, Stichprobe von Vertretern von NRO Seite 9

10 Indikatorentypen und -kategorien (Forts.) Indikatoren lassen sich aus den jeweiligen Datenquellen und erhebungsmethoden ableiten Objektive Indikatoren Reported Behaviour/Events -based Indikatoren Subjektive Wahrnehmungsindikatoren Proxy- Indikatoren Seite 10

11 Indikatorentypen und kategorien: Anwendungsbeispiele Subjektiver Wahrnehmungsindikator: Dezentralisierung Der Anteil der Bevölkerung in den vom Vorhaben beratenen Kommunen x und y, die mit der Qualität von kommunalen öffentlichen Dienstleistungen zufrieden ist, steigt von xy% auf xy%. Basiswert: xy%, Zielwert: xy%, Quellen: Befragung mit standardisierten Fragebögen, Stichprobe Kunden Stadtverwaltung/ Kommunalverwaltung Objektiver Indikator: Dezentralisierung Die Einnahmen von im Rahmen des Vorhabens beratenen Kommunen (einschließlich Zuweisungen aus dem Staatshaushalt) steigen insgesamt um xy%. Basiswert: xy%, Zielwert: xy%, Quellen: Verwaltungsdokumente der kommunalen Haushalte, separat erhoben und zum Zwecke der Berichterstattung aggregiert Reported behaviour/ Events-based: Rechtsstaatlichkeit Die Zahl der registrierten Steuerpflichtigen steigt um xy%. Basiswert: xy, Zielwert: xy, Quellen: Verwaltungsdaten der Steuerbehörde, Unternehmensregister Seite 11

12 Indikatorentypen und -kategorien (Forts.) De jure vs. De facto Input-basiert vs. Output-basiert Veränderungsprozesse aus verschiedenen Blickwinken und Perspektiven betrachten Gendersensible Indikatoren Armutsorientierte Indikatoren Demand-side vs. Supply-side Seite 12

13 Indikatorentypen und kategorien: Anwendungsbeispiele De jure: Rechtstaatlichkeit Mit Unterstützung des Vorhabens wird ein Gesetzesentwurf erarbeitet, der die Rechte von außerehelich geborenen Kindern festschreibt. Basiswert: 0 (Gesetzesentwurf lag vor Beauftragung des Vorhabens nicht vor), Zielwert: 1, Quelle: Gesetzesentwurf De facto: Rechtstaatlichkeit Seit der Kinderschaftsrechtsreform, deren Umsetzung vom Vorhaben beraten wurde, haben xy Betroffene bzw. Elternteile/ Vormunde Anträge (Familienname, Unterhalt, Obsorge oder Erbschaft betreffend) bei Gericht eingereicht. Basiswert: xy, Zielwert: xy, Quellen: Statistik Justizministerium zu Vormundschaftsanträgen, Befragung von ausgewählten VertreterInnen in Kindschaftsangelegenheiten Seite 13

14 Indikatorentypen und kategorien: Anwendungsbeispiele Demand-side: Politische Teilhabe Die Zahl der Nichtregierungsorganisationen, die aktiv Advocacy und Lobbyarbeit leisten, ist um xy% gestiegen. Basiswert: xy%, Zielwert: xy%, Quelle: Befragung mit standardisierten Fragebögen, Stichprobe Vertreter Nichtregierungsorganisationen Supply-side: Politische Teilhabe Der Anteil der Gesetzesentwürfe, denen die aktive Konsultation von Nichtregierungsorganisationen vorangegangen ist, hat sich um xy% Prozent erhöht. Basiswert: xy, Zielwert: xy, Quellen: Protokolle von parlamentarischen Anhörungen Seite 14

15 Indikatorentypen und kategorien: Anwendungsbeispiele Armutsorientierter Indikator: Dezentralisierung Der Anteil besonders vulnerabler und benachteiligter Gruppen an der Gesamtbevölkerung, die öffentliche Dienstleistungen der Kommunalverwaltung nutzen, steigt um xy%. Basiswert: xy%, Zielwert: xy%, Quellen: Administrative Verwaltungsdaten, National Risk and Vulnerability Survey (NRVA) Gendersensibler Indikator: Rechtsstaatlichkeit In xy Verfahren der Transitionsjustiz werden Rechtsvorschriften zur juristischen Aufarbeitung von geschlechterspezifischer Gewalt angewandt. Basiswert: xy, Zielwert: xy, Quellen: Gerichtsunterlagen, Verfahrensdokumente Seite 15

16 Indikatorentypen und kategorien (Forts.) OECD/ DAC Terminologie Input-, Activity-, Output-, Outcome- und Impact-Indikatoren OECD/ DAC Evaluierungkriterien Neben Indikatoren zur Messung von Effektivität und Impact (entwicklungspolitische en) werden Indikatoren für Relevanz, Nachhaltigkeit und Effizienz gebildet Seite 16

17 Vielen Dank für Ihre Aufmerksamkeit. Seite 17