Inhaltsverzeichnis Kurzübersicht

Transkript

1 Inhaltsverzeichnis I Inhaltsverzeichnis Kurzübersicht Kapitel 1 Einführung in die Problemstellung: Evaluatoren über die Schulter geschaut... 1 Kapitel 2 Fragestellung und Aufbau der Arbeit... 5 Kapitel 3 Definitorische Grundlagen... 9 Kapitel 4 Evaluationstheorien, -ansätze und -modelle Kapitel 5 Empirische Studie zu Bedingungen erfolgreicher Evaluationsprojekte Kapitel 6 Integrierender theoretischer Ansatz zum Evaluationsprozess Kapitel 7 Zusammenfassende Schlussbetrachtung und Ausblick Kapitel 8 Literatur Kapitel 9 Anhänge

2 II Wie werden Evaluationsprojekte erfolgreich? Inhaltsverzeichnis Detailübersicht Kapitel 1 Einführung in die Problemstellung: Evaluatoren über die Schulter geschaut...1 Kapitel 2 Fragestellung und Aufbau der Arbeit...5 Kapitel 3 Definitorische Grundlagen Was ist Evaluation? Evaluation und (Grundlagen-)Forschung...16 Kapitel 4 Evaluationstheorien, -ansätze und -modelle Methodenorientierte Ansätze Objectives-oriented Evaluation (Programmziel-/Lernzielorientierte Evaluation; Ralph Tyler) The Methodological View (die methodologische Sicht; Donald T. Campbell) Evaluative Research (Evaluationsforschung; Edward A. Suchman) Causal Generalization (ursächliche Generalisierung; Thomas Cook) Evaluation A Systematic Approach (ein systematischer Evaluationsansatz; Peter H. Rossi) Theory-driven Evaluation (theoriegeleitete Evaluation; Huey-Tsyh Chen) Evaluation as Art (Evaluation als Kunst; Lee J. Cronbach) Bewertungsorientierte Ansätze Valuing (Bewertung; Michael Scriven) Adversary Evaluation (Gegnerschaftsgesteuerte Evaluation; Thomas Owens/Robert L. Wolf) Responsive Evaluation and Qualitative Methods (Antwortende Evaluation und qualitative Methoden; Robert E. Stake) Connoisseurship Model (Kennerschaftsgesteuerte Evaluation; Elliot W. Eisner)...49

3 Inhaltsverzeichnis III Fourth Generation, Constructivist Evaluation (Evaluation der vierten Generation, konstruktivistische Evaluation; Egon G. Guba/Yvonna S. Lincoln) Nutzungsorientierte Ansätze The Four Levels (die vier Ebenen; Donald L. Kirkpatrick) CIPP Model (CIPP-Modell; Daniel L. Stufflebeam) Evaluation Research, Political Context and Enlightenment (Evaluationsforschung, politischer Kontext und Aufklärung; Carol H. Weiss) Utilization-focused Evaluation (Nutzungsorientierte Evaluation; Michael Quinn Patton) Empowerment Evaluation (Befähigende Evaluation; David Fetterman) Weitere Ausdifferenzierungen Evaluationsstandards und -richtlinien Aufbau und Inhalte der Standards Weiterentwicklung der Standards Anwendung und Diskussion von Standards Kennzeichen erfolgreicher Evaluationsprojekte aus der Sicht theoretischer Evaluationsansätze Phase 0 Ursprünge Phase 1 methodische Entwicklung Phase 2 Nutzungskrise und Paradigmenstreit Phase 3 Nutzungsorientierung Phase 4 Standardisierung und Integration Kapitel 5 Empirische Studie zu Bedingungen erfolgreicher Evaluationsprojekte Exkurs: zur Delphi-Methode Vorbereitungen der empirischen Studie: Fragestellung und Organisation Delphi-Welle 1 deutschsprachige Stichprobe

4 IV Wie werden Evaluationsprojekte erfolgreich? Zielsetzung Datenerhebung Stichprobenbeschreibung Ergebnisse Anzahl genannter Bedingungen erfolgreicher Evaluationsprojekte Inhaltliche Beschreibung der Bedingungen erfolgreicher Evaluationsprojekte Ergebnisrückmeldung Zusammenfassung der ersten Welle Delphi-Welle 2 deutschsprachige Stichprobe Ziele Datenerhebung Stichprobenbeschreibung Ergebnisse Bewertung der Wichtigkeit von Bedingungen erfolgreicher Evaluationsprojekte Aktuelle Evaluationspraxis Ergebnisrückmeldung Zusammenfassung der zweiten Welle Delphi Welle 2 englischsprachige Stichprobe Ziele Datenerhebung Stichprobenbeschreibung Ergebnisse Bewertung der Wichtigkeit von Bedingungen erfolgreicher Evaluationsprojekte Aktuelle Evaluationspraxis Ergebnisrückmeldung Zusammenfassung der zweiten Welle (englischsprachig) Zusammenfassung: Kennzeichen erfolgreicher Evaluationsprojekte gemäß der Empirie...165

5 Inhaltsverzeichnis V Kapitel 6 Integrierender theoretischer Ansatz zum Evaluationsprozess Evaluationsbedarf Evaluationsauftrag Evaluationsgrundlagen Bestimmung des Evaluationsgegenstandes Bestimmung der Akteure der Evaluation Auftraggeber Entscheidungsträger Evaluatoren Weitere Beteiligte Betroffene Akteure im Zusammenspiel Evaluationsziele und -fragebereiche Entscheidungsorientierte Evaluationen Verbesserungsorientierte Evaluation Wissengenerierende Evaluation Verdeckte Zielsetzungen Bestimmung von Bewertungskriterien Bestimmung theoretischer Grundlagen Rahmenbedingungen des Projektes Zur Bedeutung der Rahmenbedingungen Ethische Rahmenbedingungen Rechtliche Rahmenbedingungen Ressourcen Merkmale des Untersuchungsfeldes Zeitpunkt der Einbindung der Evaluation Öffentlichkeitsarbeit Methodische Projektplanungen Datenerhebungsmethoden Evaluationsdesign Ein-Gruppen Designs

6 VI Wie werden Evaluationsprojekte erfolgreich? Ein-Gruppen Design mit Posttest-Messung Ein-Gruppen Design mit Pretest-Messung und Posttest-Messung Ein-Gruppen Design mit Pretest-Messung, Verlaufs-Messung, Posttest-Messung Ein-Gruppen Design mit Zeitreihe Ein-Gruppen Designs in der Zusammenfassung Mehr-Gruppen Designs Datenerhebungsmethoden und Evaluationsdesigns im Zusammenspiel Durchführung der Evaluation (Datensammlung) Datenauswertung Präsentation und Berichtlegung Adressaten Zeitpunkt Verantwortung Darbietungsart Erweiterungen der Berichterstattung Dissemination der Ergebnisse Nutzung der Ergebnisse Bewertung der Evaluation Kapitel 7 Zusammenfassende Schlussbetrachtung und Ausblick Kapitel 8 Literatur Kapitel 9 Anhänge...289