Empowerment Evaluation (EE) im Zertifizierungsverfahren Quifd? Cornelia Seiberl

Transkript

1 Empowerment Evaluation (EE) im Zertifizierungsverfahren Quifd? Cornelia Seiberl 1

2 Gliederung Die Fragestellung und wie ist sie beantwortbar? Der Empowerment Evaluation Ansatz Der Zertifizierungsprozess bei Quifd Die Methodik Die Diskussion 2

3 Forschungs und Diskussionsfrage Handelt es sich bei dem Zertifizierungsprozess von Quifd um eine Empowerment Evaluation? Wie kann diese Frage beantwortet werden? 3

4 Ziele und Forschungsfrage Erkenntnisinteresse: Prozessnutzen von Evaluationen Nutzen des Vergleichs: - Erkenntnisse über den EE-Ansatz - Erkenntnisse über Prozessnutzen von Zertifizierungen - Abgleich zwischen Intention und Erfolge von Quifd 4

5 Empowerment Evaluation Empowerment Evaluation is the use of evaluation concepts, techniques, and findings to foster improvement and self-determination (Fetterman,2005) Ziele: EE aims to increase the probability of achieving program success by: (a) providing program stakeholders with tools for assessing the planning, implementation, and selfevaluation of their program, and (b) mainstreaming evaluation as part of the planning and management of the program/organization (Wandersman, 2005) 5

6 Ein Konflikt seit den 90ern Collaborative evaluators enhanced data collection and analysis and results, which stakeholder understand and use. Participatory: Participation in an evaluation that is jointly designed and implemented by the evaluator and program staff members. They encourage participants to become involved. Empowerment: View program stuff and participants as in control of the evaluation, serve as critical friends or coaches to help keep the process on track. (Rodríguez-Campos,2012) 6

7 Prinzipien der Empowerment Evaluation 1. Improvement 2. Community Ownership 3. Inclusion 4. Democratic Participation 5. Social Justice 6. Community Knowledge 7. Evidence-based Strategies 8. Capacity Building 9. Organizational Learning 10. Accountability 7

8 Quifd Agentur für Qualität in Freiwilligendiensten Quifd zertifiziert - Träger & Einsatzstellen (Inlandsdienst) - Entsendeorganisationen (Auslandsdienst) Ausgangslage zum Auslandsdienst 251 dt. NGOs als Träger des weltwärts-programms - Seit Zertifizierungspflicht (3 mögliche Agenturen) Quifd vergibt Qualitätssiegel für Erst und Rezertifizierung Selbst- und Fremdevaluation Anbieten von Weiterbildungen, Beratung und Vernetzungen Preis orientiert an Anzahl der Freiwilligen ( Euro) gemeinnützig, Sitz in Berlin (Gründung 2003) 8

9 Quifd Leitbild schafft Forum für Qualitätsbewusstsein. Zusammen mit Wissenschaft, Paxis und externen Gutachter_innen entwickelt sie Qualitätsstandards und vergibt ein Qualitätssiegel. Qualität = Schlüssel, dass Freiwilligendienste ihre positiven Wirkungen entfalten können Freiwillige / Einrichtungen /Nutzer_innen haben Anspruch auf verlässliche Rahmenbedingungen Quifd setzt praxisorientiert Impulse für Qualitätsentwicklung 9

10 Quifd Struktur der Agentur 10

11 Protokolle der Zertifiziertenversammlungen Versammlung 2011 Entwicklungsziele Versammlung 2012 Projektvorstellung Ergebnisqualität Abstimmung über verschiedene Zeitmodelle der Gültigkeit des Siegels Versammlung 2013 Entscheidung über Veränderung der Standards 11

12 Quifd - Aufgaben der Agentur Selbst- und Fremdevaluation Verfügung stellen eines Verfahrens zur Selbstevaluation und der Durchführung von externer Begutachtung. Zertifizierung als ein sichtbares Element von Qualität in Freiwilligendiensten zu Transparenz und Vergleichbarkeit Weiterentwicklung des Qualitätsverständnisses, der Qualitätsinstrumente in Freiwilligendiensten. Austausch zwischen den Anbietern von Freiwilligendiensten Innovation Labor für die Entwicklung neuer Instrumente, setzt Impulse durch Veranstaltungen. Transfer lernende Organisation, die durch Zertifizierungsverfahren praktisches Wissen über wirkungsvolles Qualitätsmanagement erwirbt 12

13 Der Zertifizierungsprozess Aus dem Qualitätshandbuch für Entsendeorganisationen 13

14 Der Zertifizierungsprozess Aus dem Qualitätshandbuch für Entsendeorganisationen 14

15 Die Methode 15

16 Die Methode 1. Dokumentenanalyse 2. Leitfadengestütze Expert_inneninterviews 16

17 Beispiel: Assessing Levels of Commitment 17

18 1. Methode Dokumentenanalyse Potentiell relevante Quifd-Dokumente: 1. Leitbild 2. Satzung des Quifd Forum 3. Protokolle der Zertifiziertenversammlungen 4. Arbeitsordner 5. Gutachter_innenberichte? 18

19 19 Beispiel: Principle 1: Improvement

20 Beispiel: Assessing Levels of Commitment 20

21 2. Methode Expert_inneninterviews - Interview mit der Quifd Geschäftsstelle (3) - Interviews mit den zertifizierten NGOs 21

22 2. Methode Expert_inneninterviews Relevante Aspekte bei der Auswahl der Stichprobe - Kenntnis über Vorgehensweise und Themen bei der Zertifiziertenversammlung - Teilnahme an Weiterbildungen/Arbeitsgruppen usw. von Quifd - Mitglied der Kommission? - Doppelrolle als ehemalige Honorarkraft? 22

23 Diskussion Wie lässt sich beantworten, ob Quifd eine EE ist? Kann ein Zertifizierungsverfahren eine EE sein? 23

24 Aspekte der Diskussion Methodik: - Welches Level der Übereinstimmung muss erreicht werden, damit ein Principle gegeben ist? Programmatisch: - Ist der Einsatz externer Gutachter_innen mit EE vereinbar? - Steht EE im Widerspruch mit einer aufgezwängten Evaluation? - Unterschiedliche Principles werden auf unterschiedlichen Ebenen erfüllt - Sponsoren werden außen vor gelassen 24

25 Vielen Dank für Eure Aufmerksamkeit und die Diskussion! 25

26 Quellenverzeichnis Cox, Pamela J., Wandersman, A.. et al.: A Seven- Step Empowerment Evaluation Approach For Violence Prevention Organizations. Centers for Disease Control and Prevention (2009) Miller, Robin L., Campell, Rebecca: Taking Stock of Empowerment Evaluation. An Empirical Review, American Journal of Evaluation (2006) Rodríguez-Campos, Liliana: Stakeholder Involvement in Evaluation, Journal of MultiDisziplinary Evaluation (2012) Wandersman, Abraham et. al.: The Principles of Empowerment Evaluation. In: Emppowerment Evaluation Principles in Practice. Gulford Press (2005) 26