1.1.3 Kausale Hypothesen Exhaustion Praktisches Vorgehen Statistische Hypothesenprüfung... 23

Transkript

1 IX Inhaltsverzeichnis Zu diesem Buch XVII 1 Empirische Forschung im Überblick Begriffe und Regeln der empirischen Forschung Variablen und Daten Alltagsvermutungen und wissenschaftliche. Hypothesen Der Informationsgehalt von Wenn-dann-Sätzen Wenn- und Dann-Teil als Ausprägungen von Variablen Statistische Hypothesen Prüfkriterien Kausale Hypothesen Mono- und multikausale Erklärungen Wenn-dann-Heuristik Messfehler und Störvariablen Theorien, Gesetze, Paradigmen Grenzen der empirischen Forschung Deduktiv-nomologische Erklärungen Verifikation und Falsifikation Korrespondenz- und Basissatzprobleme Exhaustion Praktisches Vorgehen Statistische Hypothesenprüfung Untersuchungsplanung Statistisches Hypothesenpaar Auswahl eines Signifikanztests Das Stichprobenergebnis Berechnung der Irrtumswahrscheinlichkeit. mittels Signifikanztest Signifikante und nicht signifikante Ergebnisse Signifikanzniveau Erkenntnisgewinn durch statistische. Hypothesentests? Das»Good-enough-Prinzip«eine Modifikation. des Signifikanztests 1.4 Aufgaben der empirischen Forschung Hypothesenprüfung und Hypothesen-. erkundung Empirische Forschung und Alltagserfahrung.. 31 Systematische Dokumentation Präzise Terminologie Statistische Analysen Interne und externe Validität Umgang mit Theorien 2 Von einer interessanten Fragestellung zur empirischen Untersuchung Themensuche Anlegen einer Ideensammlung Replikation von Untersuchungen Mitarbeit an Forschungsprojekten Weitere Anregungen Bewertung von Untersuchungsideen Wissenschaftliche Kriterien Präzision der Problemformulierung Empirische Untersuchbarkeit Wissenschaftliche Tragweite Ethische Kriterien Güterabwägung: Wissenschaftlicher Fortschritt. oder Menschenwürde Persönliche Verantwortung Informationspflicht Freiwillige Untersuchungsteilnahme Vermeidung psychischer oder körperlicher. Beeinträchtigungen Anonymität der Ergebnisse 2.3 Untersuchungsplanung Zum Anspruch der geplanten Untersuchung Literaturstudium Orientierung Vertiefung Dokumentation Wahl der Untersuchungsart Erstes Kriterium: Stand der Forschung..Zweites Kriterium: Gültigkeit der. Untersuchungsbefunde Thema der Untersuchung Begriffsdefinitionen und Operationalisierung.. 60 Real- und Nominaldefinitionen Analytische Definitionen Operationale Definitionen Messtheoretische Probleme Was ist Messen? Skalenarten Praktische Konsequenzen Auswahl der Untersuchungsobjekte Art und Größe der Stichprobe Anwerbung von Untersuchungsteilnehmern..Determinanten der freiwilligen Untersuchungs-..teilnahme Studierende als Versuchspersonen Empfehlungen

2 X Inhaltsverzeichnis Durchführung, Auswertung. und Planungsbericht Planung der Untersuchungsdurchführung Aufbereitung der Daten Planung der statistischen Hypothesenprüfung Interpretation möglicher Ergebnisse Exposé und Gesamtplanung 2.4 Theoretischer Teil der Arbeit Durchführung der Untersuchung Versuchsleiterartefakte Praktische Konsequenzen Empfehlungen Auswertung der Daten Anfertigung des Untersuchungsberichtes Gliederung und Inhaltsverzeichnis Die Hauptbereiche des Textes Abstract Einleitung Forschungsstand und Theorie Methode Ergebnisse Diskussion Literatur Gestaltung des Manuskripts Literaturhinweise und Literaturverzeichnis Veröffentlichungen Besonderheiten der Evaluationsforschung Evaluationsforschung im Überblick Evaluationsforschung und Grundlagen-. forschung Gebundene und offene Forschungsziele..Entscheidungszwänge und wissenschaftliche Vorsicht Technologische und wissenschaftliche Theorien Evaluationsforschung und Interventionsforschung Der Evaluator Soziale Kompetenz Fachliche Kompetenz Rahmenbedingungen für Evaluationen Wissenschaftliche und formale Kriterien Ethische Kriterien 3.2 Planungsfragen Hintergrundwissen Wahl der Untersuchungsart Evaluation durch Erkundung Evaluation durch Populationsbeschreibung Evaluation durch Hypothesenprüfung Operationalisierung von Maßnahme-. wirkungen Varianten für unabhängige Variablen Erfassung der abhängigen Variablen Überlegungen zur Nutzenbestimmung Abstimmung von Maßnahme und Wirkung Stichprobenauswahl Interventionsstichprobe Evaluationsstichprobe Abstimmung von Intervention und Evaluation Exposé und Arbeitsplan Durchführung, Auswertung und Berichterstellung Projektmanagement Ergebnisbericht Evaluationsnutzung und Metaevaluation Hinweise Quantitative Methoden der Datenerhebung Zählen Qualitative Merkmale Quantitative Merkmale Indexbildung Auswahl und Art der Indikatoren Zusammenfassung der Indikatoren Gewichtung der Indikatoren Index als standardisierter Wert Quantitative Inhaltsanalyse Geschichte der Inhaltsanalyse Anwendungsfelder Das Kategoriensystem Die Textstichprobe Kodierung und Kodiereinheit Statistische Auswertung 4.2 Urteilen Rangordnungen Direkte Rangordnungen Methode der sukzessiven Intervalle»Law of Categorical Judgement«4.2.2 Dominanzpaarvergleiche Indirekte Rangordnungen»Law of Comparative Judgement«Die Konstanzmethode Das»Signalentdeckungsparadigma«4.2.3 Ähnlichkeitspaarvergleiche Die»klassische«multidimensionale Skalierung (MDS) Die nonmetrische multidimensionale Skalierung (NMDS) Die Analyse individueller Differenzen (INDSCAL)

3 Inhaltsverzeichnis XI Ratingskalen Varianten für Ratingskalen Messtheoretische Probleme bei Ratingskalen Urteilsfehler beim Einsatz von Ratingskalen Mehrere Urteiler Besondere Anwendungsformen von Ratingskalen Magnitude-Skalen Testen Testethik Aufgaben der Testtheorie Klassische Testtheorie Die fünf Axiome der klassischen Testtheorie Die drei Testgütekriterien Die Multitrait-Multimethod-Methode (MTMM) Item-Response-Theorie (IRT) Itemcharakteristiken Das dichotome logistische Modell Verallgemeinerungen und Anwendungen Latente Klassenanalyse Adaptives Testen..Klassische und probabilistische Testtheorie: Testitems Itemformulierungen Ratekorrektur Itemanalyse Testskalen Thurstone-Skala Likert-Skala Guttman-Skala Edwards-Kilpatrick-Skala Rasch-Skala Coombs-Skala Testverfälschung Selbstdarstellung Soziale Erwünschtheit Antworttendenzen 4.4 Befragen Mündliche Befragung Formen der mündlichen Befragung Aufbau eines Interviews Der Interviewer Die Befragungsperson Durchführung eines Interviews Schriftliche Befragung Fragebogenkonstruktion Postalische Befragung Computervermittelte Befragung Delphi-Methode 4.5 Beobachten Alltagsbeobachtung und systematische. Beobachtung Kriterien der systematischen Beobachtung Modellierungsregeln Formen der Beobachtung Teilnehmende oder nichtteilnehmende Beobachtung? Offene oder verdeckte Beobachtung? Nonreaktive Beobachtung Mehrere Beobachter Apparative Beobachtung Automatische Beobachtung Selbstbeobachtung Durchführung einer Beobachtungsstudie Vorbereitung des Beobachtungsplanes Ereignisstichprobe oder Zeitstichprobe? Technische Hilfsmittel Beobachtertraining Beobachterübereinstimmung 4.6 Physiologische Messungen Methodische Grundlagen und Probleme Allgemeine Messprinzipien Messprobleme Indikatoren des peripheren Nervensystems Kardiovaskuläre Aktivität Elektrodermale Aktivität Muskuläre Aktivität Indikatoren des zentralen Nervensystems Elektrophysiologische ZNS-Aktivität Neurochemische Indikatoren Bildgebende Verfahren Indikatoren endokriner Systeme. und des Immunsystems Aktivität endokriner Systeme Aktivität des Immunsystems 5 Qualitative Methoden Qualitative und quantitative Forschung Qualitative und quantitative Daten Quantitative Daten Verbale Daten Informationsgehalt Vor- und Nachteile..Transformation qualitativer Daten. in quantitative Daten Gegenüberstellung qualitativer. und quantitativer Verfahren Nomothetisch versus idiografisch Labor versus Feld Deduktiv versus induktiv Erklären versus Verstehen

4 XII Inhaltsverzeichnis Historische Entwicklung des qualitativen. Ansatzes Dominanz des quantitativen Ansatzes Hermeneutik und Phänomenologie Chicagoer Schule Der Positivismusstreit Qualitative Forschung als eigene Disziplin Kanon qualitativer Methoden 5.2 Qualitative Datenerhebungsmethoden Qualitative Befragung Auswahlkriterien für qualitative Interviews Arbeitsschritte bei qualitativen Interviews Dokumentation einer Befragung Techniken der Einzelbefragung Techniken der Gruppenbefragung Qualitative Beobachtung Beobachtung von Rollenspielen Einzelfallbeobachtung Selbstbeobachtung Nonreaktive Verfahren Gütekriterien qualitativer Datenerhebung Objektivität Reliabilität Validität 5.3 Qualitative Auswertungsmethoden Arbeitsschritte einer qualitativen Auswertung Besondere Varianten der qualitativen. Auswertung Globalauswertung Qualitative Inhaltsanalyse nach Mayring Grounded Theory Sprachwissenschaftliche Auswertungsmethoden Gütekriterien qualitativer Datenanalyse Gültigkeit von Interpretationen Generalisierbarkeit von Interpretationen 5.4 Besondere Forschungsansätze Feldforschung Geschichte der Feldforschung Arbeitsschritte in der Feldforschung Aktionsforschung Methodische Grundsätze Praktische Durchführung Frauen- und Geschlechterforschung Geschlecht als Konstrukt Methodische Besonderheiten Biografieforschung Biografisches Material Auswertungsverfahren Genealogie Psychohistorie 6 Hypothesengewinnung und Theoriebildung Theoriebildung im wissenschaftlichen Forschungsprozess Exploration in Alltag und Wissenschaft Exploration im Alltag Exploration in der Wissenschaft Exploration in Grundlagen- und Evaluationsforschung Inhaltliche und instrumentelle. Voruntersuchungen Exploration als Untersuchungstyp. und Datenerhebungsverfahren Vier Explorationsstrategien Theoriebasierte Exploration Theoriequellen Alltagstheorien Wissenschaftliche Theorien Theorieanalyse Zusammenfassung und Bewertung Vergleich und Integration Formalisierung und Modellbildung Metatheorien Theoriebasierte Exploration:. Zusammenfassung Methodenbasierte Exploration Methoden als Forschungswerkzeuge Methodenvergleiche Methodenvariation Methoden als Denkwerkzeuge Analogien bilden Metaphern aufdecken Methodenbasierte Exploration:. Zusammenfassung Empirisch-quantitative Exploration Datenquellen Nutzung vorhandener Daten Datenbeschaffung durch Dritte Eigene Datenbeschaffung Explorative quantitative Datenanalyse Einfache deskriptive Analysen Grafische Methoden: der EDA-Ansatz Multivariate Explorationstechniken Exploratives Signifikanztesten Data-Mining 6.5 Empirisch-qualitative Exploration

5 Inhaltsverzeichnis XIII Datenquellen Nutzung vorhandener Daten Datenbeschaffung durch Dritte Eigene Datenbeschaffung Explorative qualitative Datenanalyse Inventare Typen und Strukturen Ursachen und Gründe Verläufe Systeme Der Bayes sche Ansatz Skizze der Bayes schen Argumentation Diskrete Zufallsvariablen Stetige Zufallsvariablen Resamplingansatz Übersicht populationsbeschreibender. Untersuchungen Populationsbeschreibende Untersuchungen Stichprobe und Population Zufallsstichprobe Zum Konzept»Repräsentativität«Ziehung einer einfachen Zufallsstichprobe Probleme der Zufallsstichprobe Probabilistische und nichtprobabilistische. Stichproben Punktschätzungen Zufallsexperimente und Zufallsvariablen Verteilung von Zufallsvariablen Kriterien für Punktschätzungen Parameterschätzung: Maximum-Likelihood-Methode Intervallschätzungen Konfidenzintervall des arithmetischen Mittels. bei bekannter Varianz Konfidenzintervall des arithmetischen Mittels. bei unbekannter Varianz Konfidenzintervall eines Populationsanteils Stichprobenumfänge Orientierungshilfen für die Schätzung. von Populationsstreuungen Möglichkeiten der Präzisierung von Parameterschätzungen Geschichtete Stichprobe Klumpenstichprobe Die mehrstufige Stichprobe Wiederholte Stichprobenuntersuchungen Hypothesenprüfende Untersuchungen Grundprinzipien der statistischen Hypothesenprüfung Hypothesenarten Signifikanztests Zur Logik des Signifikanztests Ein Beispiel. Der t-test Probleme des Signifikanztests Varianten hypothesenprüfender Untersuchungen Interne und externe Validität Gefährdung der internen Validität Gefährdung der externen Validität Übersicht formaler Forschungshypothesen Zusammenhangshypothesen Bivariate Zusammenhangshypothesen Multivariate Zusammenhangshypothesen Kausale Zusammenhangshypothesen Unterschiedshypothesen Kontrolltechniken Zweigruppenpläne Mehrgruppenpläne Faktorielle Pläne Hierarchische Pläne Quadratische Pläne Pläne mit Kontrollvariablen Multivariate Pläne Veränderungshypothesen Experimentelle Untersuchungen Quasiexperimentelle Untersuchungen Untersuchungspläne Veränderungshypothesen für Entwicklungen Veränderungshypothesen für Zeitreihen

6 XIV Inhaltsverzeichnis Hypothesen in Einzelfalluntersuchungen Individuelle Veränderungen Einzelfalldiagnostik 9 Richtlinien für die inferenzstatistische Auswertung von Grundlagenforschung und Evaluationsforschung Statistische Signifikanz und praktische Bedeutsamkeit Teststärke Theorie»optimaler«Stichprobenumfänge Festlegung von Effektgrößen und Stichprobenumfängen Effektgrößen der wichtigsten Signifikanztests. 605 Bedeutung der Effektgrößen Klassifikation der Effektgrößen Optimale Stichprobenumfänge für die. wichtigsten Signifikanztests Tabelle der optimalen Stichprobenumfänge Erläuterungen und Ergänzungen Verallgemeinerungen 9.3 Überprüfung von Minimum-Effekt- Nullhypothesen Signifikanzschranken und Teststärkeanalysen. 636 Prüfung von H 00 Prüfung von H 01 Prüfung von H 05 Hinweise zur Untersuchungsplanung Transformation statistischer Test- und Kennwerte. in die F-Statistik Anwendungen Zwei- und mehrfaktorielle Varianzanalysen Kurzanleitung zur Nutzung von Tab. F11. (»Alles auf einen Blick«) Zur Frage der»bestätigung«. von Nullhypothesen Beispiele für H 00 -Hypothesen 9.4 Beispiele für die Planung und Auswertung hypothesenprüfender Untersuchungen Vergleich von zwei Mittelwerten Unabhängige Stichproben Abhängige Stichproben Korrelation Vergleich von zwei Korrelationen Abweichung eines Anteilswertes P. von p=0, Vergleich von zwei Anteilswerten P A und P B Häufigkeitsanalysen Kontingenztafel Varianzanalysen Einfaktorielle Varianzanalyse Zweifaktorielle Varianzanalyse Multiple Korrelation Metaanalyse Zielsetzung Auswahl der Untersuchungen Selektionskriterien Abhängige Untersuchungsergebnisse Vereinheitlichung von Effektgrößen: das Δ-Maß Zusammenfassende Analysen Homogenitätstest für verschiedene Δ-Maße Signifikanztest für den Gesamteffekt Moderatorvariablen Teststärke von Metaanalysen Homogenitätstest Signifikanztest Moderatorvariablenanalyse Ein kleines Beispiel Fünf Untersuchungen zum Lehrerurteil 10.5 Probleme und Alternativen Signifikante und nichtsignifikante. Untersuchungsergebnisse Exakte Irrtumswahrscheinlichkeiten Publikationsbias Anhang Anhang A. Lösungen der Anhang B. Glossar Anhang C. Literatur- und Informationsquellen Anhang D. Auswertungssoftware Anhang E. Forschungsförderung

7 Inhaltsverzeichnis XV Anhang F. Tabellen Standardnormalverteilung Zufallszahlen t-verteilungen Beta-Verteilungen (Abbildungen) Beta-Verteilungen (Tabellen) Iterationshäufigkeitstest Rangsummentest χ 2 -Verteilungen Fishers Z-Werte Arcus-sinus-Transformationen »Alles auf einen Blick« Untere Grenzen des 95%igen Konfidenzintervalls für ρ Anhang G. SAS-Syntax für die Berechnung einiger Konfidenzintervalle Literatur Namenverzeichnis Sachverzeichnis

8