Wann ist Good Enough nicht Good Enough? Zur Diskussion der Minimierung methodischer Standards bei EZ-Evaluationen

Transkript

1 Wann ist Good Enough nicht Good Enough? Zur Diskussion der Minimierung methodischer Standards bei EZ-Evaluationen Dr. Wolfgang Meyer Universität des Saarlandes Contact: Center for Evaluation Box D Saarbrücken Phone.: (0) info@ceval.de

2 Inhalt Ausgangspunkt und Fragestellung Der Good Enough Guide When will we ever learn? Rigorous Impact Evaluation Die EZ in der Kritik welche Evaluationsmethode hilft? Fazit Dr. Wolfgang Meyer 2

3 Ausgangspunkt und Fragestellung Dr. Wolfgang Meyer 3

4 Der Good Enough Guide Dr. Wolfgang Meyer 4

5 Der Good Enough Guide Zielsetzungen: Wirkungsmessung Einfache und schnell handhabbare methodische Werkzeuge Speziell für den Einsatz in der Nothilfe Rechenschaftslegung speziell für Leute vor Ort Zielgruppe: Nicht-Regierungsorganisationen Projektverantwortliche Stakeholder Zentrale Frage: What difference are we making? Dr. Wolfgang Meyer 5

6 Der Good Enough Guide Einige grundlegende Prinzipien Dr. Wolfgang Meyer 6

7 Der Good Enough Guide Der methodische Background Dr. Wolfgang Meyer 7

8 Der Good Enough Guide Der methodische Background Dr. Wolfgang Meyer 8

9 Der Good Enough Guide Der methodische Background Dr. Wolfgang Meyer 9

10 Der Good Enough Guide Der methodische Background Dr. Wolfgang Meyer 10

11 Der Good Enough Guide Fragen die der Good Enough Guide aufwirft: Brauchen wir externe Evaluatoren für die Wirkungsmessung? Brauchen wir Methodenexperten oder können die Projektmanager das alles nicht besser und schneller selbst? Brauchen wir elaborierte Methoden der empirischen Sozialforschung in der EZ oder genügt unser Erfahrungswissen? Welche Rolle spielen die Betroffenen vor Ort bei der Wirkungsmessung? Dr. Wolfgang Meyer 11

12 Dr. Wolfgang Meyer 12

13 Zielsetzungen: Wirkungsmessung Einfache und schnell handhabbare methodische Werkzeuge Speziell für den Einsatz in der Nothilfe Rechenschaftslegung speziell für Leute vor Ort Zielgruppe: Nicht-regierungsorganisationen Projektverantwortliche Stakeholder Zentrale Frage: What difference are we making? Dr. Wolfgang Meyer 13

14 Einige grundlegende Prinzipien Dr. Wolfgang Meyer 14

15 Einige grundlegende Prinzipien Dr. Wolfgang Meyer 15

16 Einige grundlegende Prinzipien Dr. Wolfgang Meyer 16

17 Einige grundlegende Prinzipien Dr. Wolfgang Meyer 17

18 Einige grundlegende Prinzipien Dr. Wolfgang Meyer 18

19 Einige grundlegende Prinzipien Dr. Wolfgang Meyer 19

20 Der methodische Background Dr. Wolfgang Meyer 20

21 Der methodische Background Dr. Wolfgang Meyer 21

22 Der methodische Background Dr. Wolfgang Meyer 22

23 Der methodische Background Dr. Wolfgang Meyer 23

24 Der methodische Background Dr. Wolfgang Meyer 24

25

26 Der methodische Background Dr. Wolfgang Meyer 26

27 Der methodische Background Dr. Wolfgang Meyer 27

28 Der methodische Background Dr. Wolfgang Meyer 28

29 Der methodische Background Dr. Wolfgang Meyer 29

30 Der methodische Background Dr. Wolfgang Meyer 30

31 Der methodische Background Dr. Wolfgang Meyer 31

32 Der methodische Background Dr. Wolfgang Meyer 32

33 Der methodische Background Dr. Wolfgang Meyer 33

34 Der methodische Background Dr. Wolfgang Meyer 34

35 Fragen die When will we ever learn aufwirft: ***Brauchen wir externe Evaluatoren für die Wirkungsmessung? ***Brauchen wir Methodenexperten oder können die Projektmanager das alles nicht besser und schneller selbst? ***Brauchen wir elaborierte Methoden der empirischen Sozialforschung in der EZ oder genügt unser Erfahrungswissen? ***Welche Rolle spielen die Betroffenen vor Ort bei der Wirkungsmessung? Dr. Wolfgang Meyer 35

36 Die EZ in der Kritik - Beispiele Dr. Wolfgang Meyer 36

37 Die EZ in der Kritik - Beispiele WDR / ARD Die teuerste Ampel der Welt Dunkle Geschäfte mit der Entwicklungshilfe Ein Film von Ghafoor Zamani *** hier Videoclip einfügen zentrale Message: technische Voraussetzungen wurden ungenügend berücksichtigt was brauchen wir in der Evaluation? Dr. Wolfgang Meyer 37

38 Die EZ in der Kritik - Beispiele *** Text (Audio) einfügen *** Zentrale Message: Lokale Hierarchien Zerstörung der Lebensgrundlage kleiner Leute durch Förderung großer Projekte - Wie lässt sich das Problem in der Evaluation erkennen? Brigitte Erler (2003, 1. Auflage 1985) Tödliche Hilfe Bericht von meiner letzten Dienstreise in Sachen Entwicklungshilfe. Hayit Diskurs, 14. Auflage, 96 Seiten ISBN ,95 EUR Dr. Wolfgang Meyer 38

39 Die EZ in der Kritik - Beispiele *** Text (Audio) einfügen *** Zentrale Message: Mikro-Makro Problem Zerstörung des Marktes durch Import verbilligter, nicht marktfähiger Güter - Wie lässt sich das Problem in der Evaluation erkennen? Dambisa Moyo (2009) Dead Aid. Why Aid is not working and how there is a better way for Africa London: Penguin Books Ms. Moyo was named by Time Magazine as one of the "100 Most Influential People in the World", and was nominated to the World Economic Forum s Young Global Leaders Forum. Her writing regularly appears in economic and finance-related publications such as the Financial Times, the Economist Magazine and the Wall Street Journal Dr. Wolfgang Meyer 39

40 Die EZ in der Kritik - Beispiele Die Zeit Ein wichtiges Buch, durch und durch nachvollziehbar und spannend geschrieben, und es hebt sich damit deutlich von vielen Sachbüchern ab. Seitz bezieht sein Wissen nicht allein aus Fachliteratur und von Podiumsdiskussionen. Er hat in Afrika gelebt und er hat dort mit Marktfrauen, Bauern und Politikern gesprochen. Volker Seitz (2010) Afrika wird arm regiert oder Wie man Afrika wirklich helfen kann München: dtv Dr. Wolfgang Meyer 40

41 Die EZ in der Kritik - Beispiele Bryce Christensen Though he acknowledges that such projects have succeeded in some tasks--reducing infant mortality, for example--easterly adduces sobering evidence that Western nations have accomplished depressingly little with the trillions they have spent on foreign aid. That evidence suggests that in some countries--including Haiti, Zaire, and Angola--foreign aid has actually intensified the suffering of the poor. William Easterly (2006) The White Man s Burden. Why the West's Efforts to Aid the Rest Have Done So Much Ill and So Little Good Oxford: Oxford University Press Dr. Wolfgang Meyer 41

42 EZ in der Kritik Zusammenfassung Korrupte Eliten verschwenden die Gelder der Entwicklungshilfe Die Entwicklungshilfe verschlimmert die Lage ***Brauchen wir elaborierte Methoden der empirischen Sozialforschung in der EZ oder genügt unser Erfahrungswissen? ***Welche Rolle spielen die Betroffenen vor Ort bei der Wirkungsmessung? Dr. Wolfgang Meyer 42

43 Fazit: Welche Methoden brauchen wir? Dr. Wolfgang Meyer 43

44 2010 Dr. Wolfgang Meyer