Transparenzgutachten: Wirkungen (in) der Freien Wohlfahrtspflege messen

Transkript

1 Transparenzgutachten: Wirkungen (in) der Freien Whlfahrtspflege messen Berlin, Dr. Vlker Then CSI, Universität Heidelberg Centrum für sziale Investitinen Dr. Vlker Then 1

2 Inhaltsübersicht: Transparenzgutachten Inhaltsübersicht Trend zur Wirkungsmessung Wirkungsmessung und Sziale Investitinen Wirkungsrientierung in der Freien Whlfahrtspflege Gesellschaftliche Wirkungsdimensinen Wirkungsdimensinen auf der Klienten-Ebene Kriterien der Analyse vn Ansätzen der Wirkungsmessung und ergänzender Verfahren Analyse gängiger Ansätze der Wirkungsmessung und ergänzender Verfahren Vergleichende Bewertung Fazit und Schlussflgerung Centrum für sziale Investitinen Dr. Vlker Then 2

3 Sziale Investitinen als Sektr-übergreifendes Phänmen Grafik: Then & Kehl 2012 Centrum für sziale Investitinen Dr. Vlker Then 3

4 Der Trend Wachsendes Interesse an Wirkungsmessung Investren Organisatinen Unternehmerische Mtivatin Effektive sziale Prblemlösung Sziale Investitinshaltung! Wettbewerbsdruck für effektive sziale Prblemlösung Effizienzaspekte hängen vn Effektivität ab Ntwendigkeit einer Datenbasis für strategische Entscheidungen! Gesellschaft Wettbewerb bei der Suche nach effektiven szialen Prblemlösungen Sziale Innvatin und ihre Verbreitung/Replikatin Evidenz-basierte Plitik Experimentalism! Centrum für sziale Investitinen Dr. Vlker Then 4

5 Therien Plitischen Wandels Plicy Change Plitikunternehmer - eröffnen windws f pprtunity: Individuen, die Richtung und Ablauf vn Plitik verändern mit Zeit, Energie, Ideen, Reputatin, Geld Wichtig: Gruppenzusammenhalt und kllektive Identität! Strategie Entwicklung Identifizieren bestehende Kalitinen und Plitikunternehmer Werden Teil einer (starken) Kalitin/ Plitikunternehmer der bauen neue Kalitinen Evidence-based Plitics Fkus auf sziale Prblemlösung Verschiebung der Aufmerksamkeit vn Effizienz zu Effektivität Pluralistische Vielfalt lkaler und reginaler szialer Innvatinen bttm up Plitiklösungen Centrum für sziale Investitinen Dr. Vlker Then 5

6 Weshalb und wzu Wirkungsmessung? Weshalb? - Trend Wzu? - Ziele Öffentliche Frderungen nach Transparenz Wertvrstellungen der (Geld-)geber Legimität Rechenschaftslegung Strategische Steuerung bei knappen Ressurcen Ressurcenmbilisierung Strategische Steuerung Rechenschaftslegung Kperatins- und Kalitinsbildung Themenanwaltschaft Centrum für sziale Investitinen Dr. Vlker Then 6

7 Sziale Wirkungsmessung: Ansätze Evaluatin (Organisatin) Ergebnisse individueller Prjekte der Prgramme, ggf. Prgrammcluster Prf f Cncept Es funktiniert! Wirkungsmessung (Gesellschaft) Kundenzufriedenheit Gesellschaftliche Wirkung über die eigene Organisatin hinaus: Zielerreichung! Verbesserung an Lebensqualität und Sziale Prblemlösung Vergleichsperspektive: gegenüber Status Qu Was funktiniert mit welcher Reichweite? Partnerzufriedenheit! Wahrnehmung der unmittelbar beteiligten Stakehlder Perceptin Reprting Centrum für sziale Investitinen Dr. Vlker Then 7

8 Wirkungsmessung: Pragmatischer Ansatz Einfache Lösung Pragmatische Lösung Gld Standard Wirkungsmdell genau herausarbeiten Strategie in Hypthesen exakt frmulieren Wirkungserwartung! Wirkungsmdell empirisch testen Öffentlich verfügbare der geschätzte Daten Plausibilitätstest Redliche Gegenfrage: Was wäre hnehin passiert? Kein Kausalnachweis Attributin! Empirische Erhebung eigene Daten Kntrllgruppen-/Längsschnittdesign Attributin methdisch gelöst Kausalnachweis mit sicherer Datenlage! Centrum für sziale Investitinen Dr. Vlker Then 8

9 Was bedeutet Impact? Input: Alle Ressurcen, die in die Aktivitäten einer Organisatin, eines Leistungsbereichs der eines Prjekts investiert werden. Aktivitäten: Spezifische Handlungen und Tätigkeiten, die ntwendig sind, um die (Organisatins-/Bereichs-/Prjekt-)Ziele zu erreichen. Output: Direkt messbare Prdukte und Dienstleistungen, die aus den (kmbinierten) Aktivitäten resultieren. Outcme: Spezifische Veränderungen in Verhaltensweisen, Haltungen, Wissen, Fähigkeiten, Lebensqualität usw., die aus den (kmbinierten) Outputs miztel- bis langfristig resultieren. Deadweight: Grad, zu dem der Outcme auch hne das Zutun der Organisatin bzw. des Prjekts entstanden wäre. Impact: Anteil des attribuierbaren Outcmes. Quelle: Simsa et al Centrum für sziale Investitinen Dr. Vlker Then 9

10 Wirkung in der Freien Whlfahrtspflege QM: Beurteilung der prf. Dienste nach fachlichen, ethischen & nrmativen Kriterien (z.b. DIN EN ISO 9001 ff.) = Outputs Standrtbestimmung der BAGFW (2015) Wirkung als Kernelement der Szialen Arbeit Ziel aller Aktivitäten der Spitzenverbände ist die Verbesserung vn Lebenslagen und die sziale Mitgestaltung unserer Gesellschaft Wirkung auf der Klienten-Ebene: (Gesteigerte) Lebensqualität, z.b. durch psitive Gesundheitseffekte (Gesteigerte) Allgemeine Lebenszufriedenheit Gesellschaftliche Wirkungen Öknmische Wirkungen = Erstellung vn Dienstleistungen (SGB) Plitische Wirkungen durch Themenanwaltschaft Sziale Wirkungen im Aufbau vn Netzwerken und Szialkapital Kulturelle Wirkungen durch Werteentwicklung Centrum für sziale Investitinen Dr. Vlker Then 10

11 Wirkungsdimensinen Wirkungsdimensinen und Wirkungsebenen Wirkungsebenen Micr (Individuen) Mes (Organisatinen, Prgramme, Prjekte) Makr (Gesellschaft) Physilgisch & psychlgisch (Lebensqualität, Zufriedenheit) Öknmisch Plitisch Kulturell Szial Aggregierte Öknmisch Plitisch Kulturell Szial Gesundheit, Whnsituatin, Selbstvertrauen, Inklusin Mikr-Wirkungen Öklgisch (fall ntwendig) ( ) Centrum für sziale Investitinen Dr. Vlker Then 11

12 Wirkungsdimensinen auf der Klienten-Ebene Psychische und physilgische Wirkungen OECD Better Life Index (QL) Dimensin Materielle Lebensbedingungen: Einkmmen/Vermögen Beschäftigungssituatin Whnsituatin Dimensin Lebensqualität: Gesundheitszustand Bildung und Kmpetenzen Wahrgenmmene Umweltqualität Gesellschaftliches Engagement Wrk-Life-Balance Sziale Netzwerke/Gemeinsinn Persönliche Sicherheit Subjektives Whlbefinden Stiglitz-Sen-Fitussi- Kmmissin (QL) Materielle Lebensbedingungen Gesundheit Bildung Persönliche Aktivitäten in Beruf & Freizeit Plitische Einflussnahme und Kntrlle Sziale Kntakte und Beziehungen Umweltbedingungen Persönliche und öknmische Unsicherheit Lebenszufriedenheit Wie zufrieden sind Sie gegenwärtig, alles in allem, mit Ihrem Leben? Centrum für sziale Investitinen Dr. Vlker Then 12

13 Kriterien der Analyse vn Ansätzen der Wirkungsmessung & ergänzender Verfahren Methdik Datenbasis: Befragung, Bebachtung, Sekundäranalyse, Datenverwendung: Deskriptiv, Aggregatin, Wirkungsanalyse Methdische Qualität hch = fundierte szialwissenschaftliche Methdik (transparent) mittel = szialwissenschaftliche Methdik teilweise angewendet niedrig = keine szialwissenschaftliche Methdik angewendet Quantifizierung und Mnetarisierung mnetär qualitativ Erfasste Wirkungsdimensin und Wirkungsebenen Standardisierungsgrad & benötigte Ressurcen/Kmpetenz Stark standardisiert: in zahlreichen und hetergenen Bereichen anwendbar, sehr nutzerfreundlich (Anwendung hne spezielles Vrwissen) Standardisiert: nicht hne weiteres überall und durch jeden anwendbar Wenig standardisiert: geschultes Persnal ntwendig Einsatzfelder und Adressaten Öffentlichkeit, Ressurcengeber, Entscheider Centrum für sziale Investitinen Dr. Vlker Then 13

14 Fünf Typen vn Wirkungsmessung Cst Benefit Analyse (CBA) Quality f Life (QL) Impact Reprting and Investment Standard (IRIS) Scial Return n Investment (SROI) Plitische Diskursnetzwerkanalyse (Pl DNA) Centrum für sziale Investitinen Dr. Vlker Then 14

15 Fünf Typen im direkten Vergleich CBA QL IRIS Pl. DNA SROI Impact Level Mikr Mikr Mikr Makr Makr Impact Dimensinen Öknmisch Szial Kulturell Szial Öknmisch Szial Plitisch Öknmisch Szial Kulturell Impact Mdel Quantifizierung Teilweise Teilweise Teilweise Möglich Teilweise Mnetarisierung Teilweise Nein Nein Nein Teilweise Methdlgische Qualität Zielgruppen Ressurcenaufwand (einmalig) ~ ~ bis bis Ressurcengeber & interne Entscheider Entscheider & Öffentlichkeit Ressurcengeber & Investren Entscheider & Öffentlichkeit Ressurcengeber, Entscheider & Öffentlichkeit Ressurcenaufwand (Verstetigung) Benötigte Methdenkmpetenz bis Centrum für sziale Investitinen Dr. Vlker Then 15

16 SROI Scial Return n Investment Grafik: Krlev, Münscher & Mülbert 2013 Misst psitive Wertschöpfungsbei träge und Kstenreduzierungen in der Gesellschaft swie Veränderungen im Leben der Klienten durch eine sziale Investitin Umfassende empirische Wirkungsanalyse Kmbinatin wirtschaftlichen und szialen Werts Quantitative & qualitative Ansätze Ergebnisse: Mnetär und mehr Basis: Dkumentatin des Prgramms & speziell entwickelte Empirie Jede SROI-Analyse maßgeschneidert Centrum für sziale Investitinen Dr. Vlker Then 16

17 Ziel und Knjunktur vn SROI-Analysen Wfür? Strategieentscheidungen (Was funktiniert?) Ressurcenmbilisierung/ Argumente (Wert der eigenen Arbeit zeigen) Plitische Verallgemeinerung getesteter Mdelle Legitimität (Gemeinnützigkeit, Gemeinwhlbeitrag Grafiken: Krlev, Münscher & Mülbert 2013 Centrum für sziale Investitinen Dr. Vlker Then 17

18 Wandel plitischer Steuerung im Knzept szialer Investitinen Grafik: Then & Kehl 2012 (ergänzt) Centrum für sziale Investitinen Dr. Vlker Then 18

19 Plitische Diskursnetzwerkanalyse Ansatz, um systematisch und strukturiert zu analysieren, wie sich Akteure in plitischen Diskursen psitinieren, Welcher/n Kalitin(en) vn öffentlichen und privaten Akteuren (Parteien, Verbände usw.) sie angehören, und wie erflgreich sie Einfluss in einem plitischen Knflikt bzw. auf plitische Entscheidungen genmmen haben (und wran dies gelegen hat). Instrument, um Wirkungen im Sinne der plitischen Anwaltschaft und Durchschlagskraft vn Organisatinen zu peratinalisieren. Centrum für sziale Investitinen Dr. Vlker Then 19

20 Plitische Diskursnetzwerkanalyse Quelle: Leifeld & Haunss 2010 Centrum für sziale Investitinen Dr. Vlker Then 20

21 Plitische Diskursnetzwerkanalyse Quelle: Kehl 2016 Centrum für sziale Investitinen Dr. Vlker Then 21

22 Fazit und Empfehlungen (1) Es gibt keinen Königsweg der Wirkungsmessung Alle vrhandenen Ansätze haben Defizite Je nach Handlungsfeld müssen verschiedene fachliche Hintergründe und Knzepte integriert werden Je nach Handlungsfeld und verbandlicher Ebene haben je andere Ansätze Vrzüge (lkale Einrichtungen/Reginalverbände vs. Spitzenverbandsebene) Leistungsfähigkeit der Ansätze hängt vn den Zielen der Messung und ihres gewünschten Anwendungskntextes ab: Mdellierung und anekdtisches Mnitring Mdellierung und infrmierte Schätzung Mdellierung und rigide empirische Frschung (2) SROI könnte als knzeptinelle Basis dienen Weiterentwicklung im abgestimmten Vrgehen der Verbände Ressurcenprblem wird durch Bündelung gemildert Datenlage wird durch geteilte Indikatren verbessert Gewisse Standardisierung fördert Aufbau vn Knw-Hw Centrum für sziale Investitinen Dr. Vlker Then 22

23 Abschließende Gedanken WM muss dienstleistende und themenanwaltschaftliche Rllen berücksichtigen. Es geht um mehr als Geld! Der Rahmen muss umfassender sein als z.b. GECES für Szialunternehmen. Es gibt ein grßes Ptential für rigrse Sample- Studien zur Validierung innvativer Interventinen! Die WM muss rigrse Standards einhalten wenn es um Advcacy und Evidenz-basierte Plitik geht. Centrum für sziale Investitinen Dr. Vlker Then 23

24 Vielen Dank für Ihre Aufmerksamkeit! Literatur: Kehl, Knstantin; Glänzel, Gunnar; Then, Vlker & Mildenberger, Gerg (2016): Möglichkeiten, Wirkungen (in) der Freien Whlfahrtspflege zu messen. Transparenzgutachten für die Bundesarbeitsgemeinschaft der Freien Whlfahrtspflege (BAGFW); Berlin & Heidelberg. Online: Kehl, Knstantin (2016): Szialinvestive Pflegeplitik in Deutschland: Familiäre und zivilgesellschaftliche Ptenziale im Abseits whlfahrtsstaatlichen Handelns. Wiesbaden: Verlag Springer-VS. Online: Kehl, Knstantin; Then, Vlker & Münscher, Rbert (2012): Scial Return n Investment: Auf dem Weg zu einem integrativen Ansatz der Wirkungsfrschung; in: Anheier/Schröer/Then (Hg.): Sziale Investitinen: Interdisziplinäre Perspektiven; Wiesbaden: Online: Krlev, Grgi; Münscher, Rbert & Mülbert, Katharina (2013): Scial Return n Investment (SROI): State-f-the-Art and Perspectives. A Meta-Analysis f practice in Scial Return n Investment (SROI) studies published ; Heidelberg. Online: Leifeld, Philipp & Haunss, Sebastian (2010): A Cmparisn between Plitical Claims Analysis and Discurse Netwrk Analysis: The Case f Sftware Patents in the Eurpean Unin, Wrking Paper; Bnn. Online: Then, Vlker & Kehl, Knstantin (2012): Sziale Investitinen. Ein knzeptineller Entwurf; in: Anheier, Schröer & Then (Hrsg.): Sziale Investitinen: Interdisziplinäre Perspektiven; Wiesbaden: Online: Simsa, Ruth; Rauscher, Olivia; Schber, Christian; Mder, Clara (2014): Methdlgical Guideline fr Impact Assessment. Third Sectr Impact Wrking Paper; Wien. Online: Centrum für sziale Investitinen Dr. Vlker Then 24