Testen von Hypothesen

Ähnliche Dokumente
Testen von Hypothesen

Testen von Hypothesen

Jost Reinecke. 7. Juni 2005

3. Das Prüfen von Hypothesen. Hypothese?! Stichprobe Signifikanztests in der Wirtschaft

THEMA: "STATISTIK IN DER PRAXIS TESTEN IST BESSER ALS VERMUTEN" TORSTEN SCHOLZ

Beurteilende Statistik

R. Brinkmann Seite

Allgemeines zu Tests. Statistische Hypothesentests

Einführung in Quantitative Methoden

Testen von Hypothesen:

8. Konfidenzintervalle und Hypothesentests

Wiederholung Hypothesentests Zusammenfassung. Hypothesentests. Statistik I. Sommersemester Statistik I Hypothesentests I (1/36)

STATISTIK Teil 2 Wahrscheinlichkeitsrechnung und schließende Statistik

2.4 Hypothesentests Grundprinzipien statistischer Hypothesentests. Hypothese:

: p= 1 6 ; allgemein schreibt man hierfür H : p = p. wird Gegenhypothese genannt und mit H 1 bezeichnet.

9 Prinzipien der statistischen Hypothesenprüfung

Analyse von Querschnittsdaten. Signifikanztests I Basics

Hypothesen: Fehler 1. und 2. Art, Power eines statistischen Tests

WB 11 Aufgabe: Hypothesentest 1

Analytische Statistik II

10 Der statistische Test

Statistische Tests für unbekannte Parameter

Pflichtlektüre: Kapitel 12 - Signifikanztest Wie funktioniert ein Signifikanztest? Vorgehensweise nach R. A. Fisher.

Exakter Binomialtest als Beispiel

Um zu entscheiden, welchen Inhalt die Urne hat, werden der Urne nacheinander 5 Kugeln mit Zurücklegen entnommen und ihre Farben notiert.

Hypothesentest, ein einfacher Zugang mit Würfeln

Einführung in die Induktive Statistik: Testen von Hypothesen

Prüfgröße: Ist die durch eine Schätzfunktion zugeordnete reelle Zahl (etwa Mittelwert 7 C).

Hypothesentest. Ablehnungsbereich. Hypothese Annahme, unbewiesene Voraussetzung. Anzahl Kreise

Statistik Testverfahren. Heinz Holling Günther Gediga. Bachelorstudium Psychologie. hogrefe.de

Schließende Statistik

Mögliche Fehler beim Testen

Die Abfüllmenge ist gleich dem Sollwert 3 [Deziliter].

Testen von Hypothesen, Beurteilende Statistik

Grundlagen der Statistik

Statistik II. Statistische Tests. Statistik II

Statistisches Testen: Signifikanz und Relevanz Christiane Spiel

R. Brinkmann Seite

9. StatistischeTests. 9.1 Konzeption

Schließende Statistik: Hypothesentests (Forts.)

Statistik II: Signifikanztests /1

Kapitel XIII - p-wert und Beziehung zwischen Tests und Konfidenzintervallen

Statistische Tests. Kapitel Grundbegriffe. Wir betrachten wieder ein parametrisches Modell {P θ : θ Θ} und eine zugehörige Zufallsstichprobe

VS PLUS

KATA LOGO Mathematik Statistik Roadmap: Von der Hypothese zum p-wert

Aufgabenblock 4. Da Körpergröße normalverteilt ist, erhalten wir aus der Tabelle der t-verteilung bei df = 19 und α = 0.05 den Wert t 19,97.

Statistischer Rückschluss und Testen von Hypothesen

Übungsaufgaben zu Kapitel 5

Auswertung und Lösung

Kapitel 13. Grundbegriffe statistischer Tests

Konfidenzintervalle Grundlegendes Prinzip Erwartungswert Bekannte Varianz Unbekannte Varianz Anteilswert Differenzen von Erwartungswert Anteilswert

Unterschiedshypothesen Vergleiche von Häufigkeiten bzw. Mittelwerten zwischen (mindestens) zwei Gruppen Zusammenhangshypothesen Korrelationsanalysen

Kapitel 3 Schließende Statistik

Lösungen zu den Übungsaufgaben in Kapitel 10

Chi-Quadrat Verfahren

Online-Aufgaben Statistik (BIOL, CHAB) Auswertung und Lösung

Glossar Biometrie / Statistik. Auszug für Fragebogen Fallzahlberechnung/-begründung

Entscheidung zwischen zwei Möglichkeiten auf der Basis unsicherer (zufälliger) Daten

Ablaufschema beim Testen

Hypothesenprüfung. Darüber hinaus existieren zahlreiche andere Testverfahren, die alle auf der gleichen Logik basieren

Kapitel VIII - Tests zum Niveau α

Eine Einführung in R: Statistische Tests

Diagnose und Prognose: Kurzfassung 4

Grundlagen der Statistik

Test auf den Erwartungswert

11 Tests zur Überprüfung von Mittelwertsunterschieden

Aussagen hierzu sind mit einer unvermeidbaren Unsicherheit behaftet, die statistisch über eine Irrtumswahrscheinlichkeit bewertet wird.

Überblick Hypothesentests bei Binomialverteilungen (Ac)

Testen von Hypothesen

1.4 Der Binomialtest. Die Hypothesen: H 0 : p p 0 gegen. gegen H 1 : p p 0. gegen H 1 : p > p 0

Alternativtest Einführung und Aufgabenbeispiele

Hypothesentests mit SPSS. Beispiel für einen t-test

k np g(n, p) = Pr p [T K] = Pr p [T k] Φ. np(1 p) DWT 4.1 Einführung 359/467 Ernst W. Mayr

TESTEN VON HYPOTHESEN

6. Statistische Hypothesentests

Biomathematik für Mediziner, Klausur SS 2001 Seite 1

Inferenzstatistik Vortrag: Alpha und Beta Fehler

Zweiseitiger Test für den unbekannten Mittelwert µ einer Normalverteilung bei unbekannter Varianz

Test auf einen Anteilswert (Binomialtest) Vergleich zweier Mittelwerte (t-test)

Testen von Hypothesen

Kinga Szűcs Friedrich-Schiller-Universität Jena Fakultät für Mathematik und Informatik Abteilung Didaktik

Dipl.-Volksw. Markus Pullen Wintersemester 2012/13

e) Beim klassischen Signifikanztest muß die Verteilung der Prüfgröße unter der Nullhypothese

Übungen mit dem Applet Vergleich von zwei Mittelwerten

Mathematische und statistische Methoden II

Chi Quadrat-Unabhängigkeitstest

Tests einzelner linearer Hypothesen I

Brückenkurs Statistik für Wirtschaftswissenschaften

Testentscheidungen. Worum geht es in diesem Modul? Kritische Werte p-wert

Anpassungstests VORGEHENSWEISE

9. Schätzen und Testen bei unbekannter Varianz

Statistik 2 für SoziologInnen. Normalverteilung. Univ.Prof. Dr. Marcus Hudec. Themen dieses Kapitels sind:

Klausur zu Statistik II

Standardisierte Vorgehensweisen und Regeln zur Gewährleistung von: Eindeutigkeit Schlussfolgerungen aus empirischen Befunden sind nur dann zwingend

Biometrische Planung von Versuchsvorhaben

Ein- und Zweistichprobentests

Statistische Tests zu ausgewählten Problemen

3 Konfidenzintervalle

Transkript:

Statistik 2 für SoziologInnen Testen von Hypothesen Univ.Prof. Dr. Marcus Hudec Statistik für SoziologInnen 1 Testtheorie

Inhalte Themen dieses Kapitels sind: Erklären der Grundbegriffe der statistischen Testtheorie Vorgehensweise zur Formulierung und Prüfung von Hypothesen Eine erste praxisrelevante Fragestellung: Durchführen von Hypothesentests betreffend dem Anteilswert Statistik für SoziologInnen 2 Testtheorie

Hypothesen über die Grundgesamtheit Aufgabenstellung der Testtheorie Hypothesen (Annahmen, Vermutungen oder Behauptungen) über die unbekannte Grundgesamtheit anhand einer Stichprobe als richtig oder falsch einzustufen. Arten von Hypothesen Hypothesen über Parameter (z.b.: Merkmalsanteil; Mittelwert) Hypothesen über die Unabhängigkeit von Merkmalen Hypothesen über Form der Verteilung (z.b.: Normalverteilung) Hypothesen über die Güte der Anpassung von Modellen (z.b.: passt eine lineare Trendgerade) Statistik für SoziologInnen 3 Testtheorie

John Arbuthnot (1667-1735) Leibarzt von Queen Anne Wissenschaftler und Satiriker (Freund von Jonathan Swift) Auszählung von Geburtsregistern von 82 Jahrgängen (1629 1710) Anzahl Knabengeburten > Anzahl Mädchengeburten Ergebnis: 82 zu 0 Schlussfolgerung: Das kann kein Zufall sein Die Hypothese, dass Knaben- und Mädchengeburten gleich wahrscheinlich seien war damit bereits 1710 widerlegt. Statistik für SoziologInnen 4 Testtheorie

Wo sind objektive Grenzen? Was wäre gewesen, wenn das Ergebnis nicht 82:0 sondern etwa 60:22, oder gar 50: 32 gelautet hätte? Ab welchem empirischen Ergebnis hätte sich Arbuthnot getraut, in seinen wissenschaftlichen Aufzeichnungen zu notieren? Das kann kein Zufall sein Statistik für SoziologInnen 5 Testtheorie

Testverfahren Ein statistischer Test (Signifikanztest) ist ein Verfahren, das es erlaubt auf der Basis einer empirischen Stichprobe mit einer gewissen Irrtumswahrscheinlichkeit sich zwischen zwei konkurrierenden wissenschaftlichen Hypothesen zu entscheiden. Statistik für SoziologInnen 6 Testtheorie

Knaben- vs. Mädchengeburten Nullhypothese: Knaben- und Mädchengeburten sind gleich wahrscheinlich Prob(K)=Prob(M)=0,5 Alternativhypothese: Knaben- und Mädchengeburten sind nicht gleich wahrscheinlich Prob(K)<>Prob(M) Anmerkung: Es handelt sich hier um eine sog. zweiseitige Fragestellung (two-sided test), da keine spezifische Richtung einer Abweichung von der Nullhypothese festgelegt wird. Statistik für SoziologInnen 7 Testtheorie

Prinzipielles Vorgehen der Testtheorie 1. Unter der Annahme, dass die Nullhypothese stimmt, bestimmen wir die Wahrscheinlichkeit der Stichprobe. 2. Wenn diese Wahrscheinlichkeit kleiner als eine vorher gewählte Irrtumswahrscheinlichkeit ist, können wir mit die Nullhypothese verwerfen. Prob(Knaben)= 0,5 Prob(Mädchen)= 0,5 Prob(Mehr Knabengeburten in einem Jahr)= 0,5 Prob(Mehr Mädchengeburten in einem Jahr)= 0,5 Anzahl der Jahre 82 Wahrscheinlichkeit, dass in allen 82 Jahren Knabengeburten überwiegen = 0,5 82 0,0000000000000000000000002068 Statistik für SoziologInnen 8 Testtheorie

Arten von Hypothesen Nullhypothese (Ausgangshypothese) H 0 Alternativhypothese H 1 oder H A Wichtigste Form von Hypothesen: einseitige Hypothesen bezügl. eines Parameters H 0 : < 0 H 1 : 0 Oder H 0 : 0 H 1 : 0 zweiseitige Hypothesen bezügl. eines Parameters H 0 : = 0 H 1 : 0 Hinweis: Einseitige Hypothesen setzen voraus, dass die Richtung der Abweichung bekannt ist. Statistik für SoziologInnen 9 Testtheorie

Beziehung Hypothesentest zu Konfidenzintervall Zweiseitige Fragestellung: Null-Hypothese: 25% der Haushalte verfügen über mehr als ein KFZ. Alternativ-Hypothese: Anteil der Haushalte mit mehr als ein KFZ weicht von 25% ab. N=10.000 Haushalte einer Kleinstadt Eine Stichprobe unter n=100 Haushalten hat ergeben, dass 30 der befragten Haushalte über mehr als ein Auto verfügen. p=30% Ist damit unsere Hypothese widerlegt? Statistik für SoziologInnen 10 Testtheorie

Beziehung Hypothesentest zu Konfidenzintervall Einen Indikator für die Beantwortung liefert das Konfidenzintervall, das wir im vorigen Kapitel für =0,05 mit [21%;39%] ermittelt haben. s p2 =0,3*0,7/99=0,0021 Standardfehler: s p =0,046 Für 95% (=0,05) Konfidenzintervall: z=1,96 0,3-1,96*0,046 < < 0,3 + 1,96*0,046 Offensichtlich werden wir unsere Hypothese, wenn wir mit 95% Sicherheit argumentieren wollen, nicht verwerfen, da das Intervall den Wert von 25% inkludiert. Umgekehrt: hätten wir die Null-Hypothese gehabt, dass 20% der Haushalte über mehr als ein KFZ verfügen, könnten wir diese wohl verwerfen, da der Wert von 20% nicht mehr im Intervall liegt. Statistik für SoziologInnen 11 Testtheorie

Zusammenfassung Zweiseitige Hypothesentests über einen Parameter entsprechen mathematisch dem Prinzip des Konfidenzintervalls Ein zweiseitiger Parameter-Test kann daher auch durch das Berechnen eines Konfidenzintervalls für diesen Parameter beantwortet werden Beachte: bei einseitigen Hypothesentests hilft das symmetrisch konzipierte Konfidenzintervall nicht unmittelbar zu Entscheidungsfindung! Statistik für SoziologInnen 12 Testtheorie

Testverfahren Ein statistischer Test (Signifikanztest) ist ein Verfahren, das es erlaubt auf der Basis einer Stichprobe entweder die Nullhypothese H 0 abzulehnen (auch zurückweisen oder verwerfen) und sich für die Alternativhypothese H 1 zu entscheiden oder aber die H 0 beizubehalten (anzunehmen). Das Annehmen oder Ablehnen von H 0 kann entweder die richtige oder die falsche Entscheidung sein. Insgesamt gibt es 4 Konstellationen Statistik für SoziologInnen 13 Testtheorie

Entscheidungsproblem Ergebnis des Test H 0 verworfen statistisch signifikant H 0 beibehalten statistisch nicht signifikant Wahrer Zustand H A O.K. -Fehler H 0 -Fehler O.K. Statistik für SoziologInnen 14 Testtheorie

Fehlerarten Die Irrtumswahrscheinlichkeit (Fehler 1.Art) ist die Wahrscheinlichkeit, mit der die Nullhypothese fälschlicherweise abgelehnt wird. Entscheidung für die Alternativhypothese, obwohl die Nullhypothese richtig ist. <false positive> Die Fehlerwahrscheinlichkeit (Fehler 2.Art) ist die Wahrscheinlichkeit, mit der die Alternativhypothese nicht als richtig erkannt wird. Entscheidung für die Nullhypothese, obwohl die Alternativhypothese richtig ist. <false negative> Statistik für SoziologInnen 15 Testtheorie

Neyman-Pearson Prinzip Da die simultane Minimierung beider Fehlerarten scheitert, erfolgt eine asymmetrische Behandlung Der -Fehler (Fehler 1. Art) wird a priori festgehalten (meist 0,01 oder 0,05) Die interessierende Hypothese wird dabei als Alternativhypothese festgelegt ==> für signifikante Ergebnisse [Entscheidung für Alternativhypothese] kennen wir dann die Irrtumswahrscheinlichkeit, die wir a priori festsetzen ==> nicht signifikante Ergebnisse [Entscheidung für Nullhypothese] implizieren aber nicht, dass die Nullhypothese tatsächlich gilt (Fehler 2.Art) Statistik für SoziologInnen 16 Testtheorie

Einstichprobentest für den Anteilswert (1) Fragestellung: Wir wollen zeigen, dass der Anteil (einer Minderheit X in einer Population größer als 10%. H 0 : =0,10 (bzw. 0,10) versus H 1 : > 0,10 Irrtumswahrscheinlichkeit =0,05 bzw. Signifikanzniveau 1-=0,95 Hinweise: (1) Für die Berechnung der Verteilung der Teststatistik genügt es den kritischen Fall =0,10 zu betrachten. (2) Da der Fehler bei der Rückweisung der Nullhypothese kontrolliert ist, formuliert man das Forschungsziel als Alternativ- Hypothese Statistik für SoziologInnen 17 Testtheorie

Einstichprobentest für den Anteilswert (2) Bestimmung einer sinnvollen Prüfgröße Idee: Als Teststatistik eignet sich die standardisierte Abweichung des empirisch beobachteten Anteils vom hypothetisch unterstellten Anteil Bestimmung der Verteilung dieser Prüfgröße unter der Annahme, dass die Nullhypothese gültig ist Vergleich des kritischen Wertes aus der Verteilung mit dem empirisch beobachteten Wert der Teststatistik Statistik für SoziologInnen 18 Testtheorie

Einstichprobentest für den Anteilswert (3) p ~N(, (1-)/n) Falls H 0 zutrifft: p ~ N(, (1- )/n)...grenzwert (in unserem Beispiel = 0,10) Prüfgröße Z p p 0 0 p 0( 1 0) n Die Prüfgröße Z ist bei Gültigkeit der Nullhypothese für große Stichproben und kleinem Auswahlsatz approximativ standardnormal verteilt Statistik für SoziologInnen 19 Testtheorie

0.0 0.1 0.2 0.3 0.4 Der kritische Bereich Der Ablehnungsbereich (Kritischer Bereich) wird so gewählt, dass die Wahrscheinlichkeit einen Wert aus dem kritischen Bereich zu erhalten bei Gültigkeit der H 0 höchstens genau beträgt. Der kritische Tabellenwert ist 1,645. 1-= 0,95 = 0,05-2 2 Annahmebereich 1,645 kritischer Bereich Statistik für SoziologInnen 20 Testtheorie

Kritischer Wert In unserem Beispiel ist also der kritische Wert 1,645 Liegt die standardisierte Abweichung des Stichprobenwertes vom zu testenden Wert der Nullhypothese unter diesem Wert, fällt die Beobachtung in den Annahmebereich und wir entscheiden uns für die Nullhypothese H 0. Liegt die Beobachtung oberhalb dieses Wertes, d.h. sie liegt im kritischen Bereich (Rückweisungs-, Ablehnungsbereich), so entscheiden wir uns für die Alternativhypothese H 1. Man spricht dann auch von einem signifikanten Ergebnis. Statistik für SoziologInnen 21 Testtheorie

Beispiel: Stichprobe: n=100; x=15 p=0,15 p 0 015, 010, 005, Z 0 1 0 0109 003 166, ( ),,, n 100 Das bedeutet wir entscheiden uns (knapp aber doch) für H 1. Wir können die Nullhypothese bei einem Signifikanzniveau von 0,95 verwerfen. Auf der Basis unseres Stichprobenergebnisses können wir bei Vorgabe einer Irrtumswahrscheinlichkeit von 5%, die Hypothese, dass der Anteil der Minderheit kleiner gleich 10% ist, zurückweisen bzw. die Hypothese, dass der Anteil größer als 10% ist annehmen. Statistik für SoziologInnen 22 Testtheorie

Alternative zum Beispiel: Stichprobe: n=100; x=12 p=0,12 Z p 0( 1 0) n 0,12 0,10 0,1 0,9 100 0,02 0,03 0 0,66 Das bedeutet wir entscheiden uns für die Beibehaltung der H 0. Wir können die Nullhypothese bei einem Signifikanzniveau von 0,95 nicht verwerfen. Auf der Basis unseres Stichprobenergebnisses können wir bei Vorgabe einer Irrtumswahrscheinlichkeit von 5%, die Nullhypothese, dass der Anteil der Minderheit kleiner gleich 10% ist, nicht zurückweisen bzw. die Hypothese, dass der Anteil größer als 10% ist nicht annehmen. Statistik für SoziologInnen 23 Testtheorie

Alternative Angabe des kritischen Bereichs In manchen Anwendungen will man den kritischen Bereich in der eigentlich untersuchten Dimension ausdrücken, dazu errechnet man durch Umformung der Teststatistik die sog. Annahmekennzahl. In unserem Beispiel sucht man jenen Wert für die Anzahl der deklarierten Mitglieder einer Minderheit in einer Stichprobe von n=100, ab welchem die Nullhypothese 0,10 abzulehnen ist? z c p 0 ( 1 ) n c 0 0 p z ( 1 ) n Statistik für SoziologInnen 24 Testtheorie c 0 c 0 0

Beispiel p c =0,10+1,645*0,03=0,1494 Bei einer Stichprobe von 100 können wir die H 0 daher ab einer Anzahl von 15 oder mehr deklarierten Mitgliedern der Minderheit in der Stichprobe mit einer Irrtumswahrscheinlichkeit von =0,05 ablehnen. Hat man weniger als 15 (also maximal 14) deklarierte Mitglieder empirisch erhoben, so kann die Nullhypothese nicht verworfen werden. Hätte man etwa x=13 beobachtet, so ergibt sich für die Testgröße z = (0,13-0,10)/0,03=1, was zur Beibehaltung der H 0 geführt hätte. Statistik für SoziologInnen 25 Testtheorie

Kritischer Bereich ausgedrückt als Anteilswert 1-= 0,95 p c =0,1494 = 0,05 0.0 0.05 0.10 0.15 0.20 0.25 Statistik für SoziologInnen 26 Testtheorie

Zusammengesetzte Nullhypothese 0 5 10 15 p=0,08 p=0,09 p=0,10 Es genügt den Grenzfall (p=0,10) zu betrachten, um auf der sicheren Seite zu sein (darf maximal 5% sein) p c =0,1494 0.0 0.05 0.10 0.15 0.20 0.25 Statistik für SoziologInnen 27 Testtheorie

Beispiel: Der Stimmenanteil einer Partei betrug bei der letzten Wahl 40%. Eine Umfrage unter n=600 Wahlberechtigten soll zeigen, ob sich der Anteil der Partei verändert hat. H 0 : = 0,40 H 1 : 0,40 (zweiseitige Alternative) Irrtumswahrscheinlichkeit = 0,05 Signifikanzniveau 1- = 0,95 Prüfgröße: Z p p 0 0 p 0( 1 0) n Beachte: keine gerichtete Fragestellung zweiseitiger Test Statistik für SoziologInnen 28 Testtheorie

Beispiel: Kritischer Bereich: [-,-1,96] [1,96,+ ] Annahmebereich: [-1,96,+1,96] Alternative Angabe des Kritischen Bereichs entspricht dem Schwankungsintervall bei Gültigkeit von H 0 : 0( 1 0) 04, 06, p 00004, 002, n 600 0( 1 0) pc 0 zc 04, 196, 002, 04, 00392, n [ 0, 3608; 0, 4392] Annahmebereich in Anteilen [ 217; 263] Annahmebereich in Anzahl Statistik für SoziologInnen 29 Testtheorie

Beispiel: Durchführen der Befragung ergibt: n=600 x=261 p=0,435 43,5% Teststatistik: Z p p 0 0 0435, 04, 175, p 0( 1 0) 002, n Entscheidung: Beibehaltung der Nullhypothese Aufgrund des Stichprobenergebnisses kann, die Nullhypothese =0,40 mit einer Irrtumswahrscheinlichkeit von =0,05 nicht abgelehnt werden. Keinesfalls ist damit die Nullhypothese bewiesen! Fehler 2.Art!!! Statistik für SoziologInnen 30 Testtheorie

Einseitige Formulierung der Fragestellung Wir wollen mit 95% Wahrscheinlichkeit nachweisen", dass der Stimmenanteil gewachsen ist: H 0 : 0,40 H 1 : 0,40 (einseitige Alternative) Irrtumswahrscheinlichkeit = 0,05 Konfidenzniveau 1- = 0,95 Prüfgröße bleibt unverändert Einseitiger Annahmebereich: [-,+1,645] Beachte die Wahl von H 0 und H 1! bzw. Rückweisungsbereich in Anteilen ausgedrückt 0,40+1,645*0,02==> [43,29%; 100%] Im Beispiel: ==> signifikantes Ergebnis bei =0,05 Statistik für SoziologInnen 31 Testtheorie

Einseitige versus Zweiseitige Hypothesen Offensichtlich sind einseitige Fragestellungen trennschärfer als zweiseitige (d.h. wir erzielen ceteris paribus leichter ein signifikantes Ergebnis) Bei einseitiger Hypothese geht Richtung der vermuteten Abweichung in die Testprozedur als zusätzliche Annahme ein Festlegen der Hypothesen muss immer vor der Durchführung der Untersuchung festgelegt werden Eine nachträgliche datengesteuerte Spezifikation verfälscht das Signifikanzniveau Statistik für SoziologInnen 32 Testtheorie

0,5 2,5% 2,5% 0-4 -3-2 -1 0 1 2 3 4 Oben: Zweiseitiger Test liefert kein signifikantes Ergebnis 0,5 5,0% 0-4 -3-2 -1 0 1 2 3 4 Unten: Einseitiger Test liefert signifikantes Ergebnis Statistik für SoziologInnen 33 Testtheorie

Formulierung der Hypothesen Formulierung der Hypothesen wird vom Forschungsinteresse determiniert Statistik für SoziologInnen 34 Testtheorie

Auswirkungen auf den Annahmebereich Statistik für SoziologInnen 35 Testtheorie

Streng konfirmatorische Vorgangsweise Vor der Datenerhebung Nach Aufstellen von Null- und Alternativhypothese Festlegen des Signifikanzniveaus Festlegen einer Prüfgröße (Stichprobenfunktion) Bestimmen der Testverteilung bei Gültigkeit der Nullhypothese Ermittlung des kritischen Bereichs (Ablehnungsbereich) Berechnung der Prüfgröße Entscheidung & Interpretation Statistik für SoziologInnen 36 Testtheorie

Empirisches Signifikanzniveau (p-value) Das empirische Signifikanzniveau ist jene Wahrscheinlichkeit *, mit der die Prüfgröße einen Wert T annimmt, der unter H 0 genauso oder sogar noch unplausibler ist als der in der Stichprobe beobachtete Wert für die Teststatistik. Häufige Schreibweise für das empirische Signifikanzniveau: p-value= Die Nullhypothese ist bei vorgegebenen immer dann abzulehnen, wenn der p-value kleiner als das gewählte ist. Statistik für SoziologInnen 37 Testtheorie

Beispiel zum p-value: Eine Umfrage unter n=400 Wahlberechtigten ergab für einen Kandidaten A 220 Befürworter. Kann man aus dieser Stichprobe schließen, dass die Befürworter in der Mehrheit sind? H 0 : <= 0,50 H 1 : 0,50 (einseitige Alternative) Irrtumswahrscheinlichkeit = 0,05 Signifikanzniveau 1- = 0,95 Prüfgröße: Z p p 0 0 p 0( 1 0) n Statistik für SoziologInnen 38 Testtheorie

Beispiel: Kritischer Bereich (Rückweisungsbereich): [1,645, +] Annahmebereich Nullhypothese: [-+1,645] p=220/400=0,55 Z p p p 0( 10) n 0,550,50 0,025 0 0 2 Statistik für SoziologInnen 39 Testtheorie

Der kritische Bereich Verteilung der Teststatistik bei Gültigkeit der Nullhypothese Kritischer Wert aus der Tabelle Z =1,645 1-=95% =5% Annahmebereich der Nullhypothese Rückweisungsbereich Statistik für SoziologInnen 40 Testtheorie

p-value und kritischer Bereich Beobachteter Wert der Teststatistik Z =2 Kritischer Wert aus der Tabelle Z =1,645 p-value = 0,0228 Fläche unter der Kurve rechts vom Testwert Annahmebereich der Nullhypothese Rückweisungsbereich Statistik für SoziologInnen 41 Testtheorie

Empirisches Signifikanzniveau Der p-value ist eine deskriptive Zusatzinformation, die angibt, wie weit die Teststatistik im Ablehnungsbereich liegt bzw. wie weit sie vom kritischen Bereich entfernt ist. Der p-value kann für eine objektive Entscheidungsfindung nicht die a priori Wahl des Signifikanzniveaus ersetzen. Die datengesteuerte Wahl des Signifikanzniveaus verändert den Fehler 2.Art! Beim zweiseitigen Test müssen die Abweichungen auf beiden Seiten berücksichtigt werden! Statistik für SoziologInnen 42 Testtheorie

Kommunikation von p-values Statistik für SoziologInnen 43 Testtheorie

Beispiel: Wirksamkeit von Medikamenten Eine Pharmafirma hat ein neues Medikament entwickelt, von dem vermutet wird, dass es die Heilungschance bei einer bestimmten Krankheit von 20% (Erfolgschance bei Standardmedikation) erhöht. Man plant eine Studie mit n=100 Patienten. Ab welchem Ergebnis, sprechen wir von einer signifikanten Verbesserung? Ab welchem Ergebnis, würden Sie die Entscheidung treffen, dass das neue Medikament besser als die Standardmedikation ist? Statistik für SoziologInnen 44 Testtheorie

Hypothesen Nullhypothese: Die Wirksamkeit des neuen Medikamentes ist höchstens gleich gut, wie die der bisherigen Standardmedikation: Prob(Response) <= 0,2 Alternativhypothese: Die Wirksamkeit des neuen Medikamentes ist besser, als die der bisherigen Standardmedikation: Prob(Response) > 0,2 Anmerkung: einseitige Fragestellung (one-sided test) Statistik für SoziologInnen 45 Testtheorie

Einstichprobentest für den Anteilswert bei großem n Berechnen einer standardisierten Prüfgröße Z p0 0(1 0) n p ist der tatsächlich beobachtete Anteil, 0 ist der zu testende Anteil, n ist die Fallzahl Z ist unter Gültigkeit der Nullhypothese standardnormalverteilt und kann als Normierung der Responserate interpretiert werden Statistik für SoziologInnen 46 Testtheorie

Der kritische Bereich 0.0 0.1 0.2 0.3 0.4 1-= 0,95 = 0,05 Annahmebereich -2 2 1,645 krit. Bereich Statistik für SoziologInnen 47 Testtheorie

Berechnung der Testgröße n= 100 p 0 = 0,2 Anzahl der Respondenten= 29 Response-Rate in der Studie p= 0,29 Standardabweichung= 0,04 Differenz= 0,09 Teststatistik= 2,25 p-value= 0,012224 Aufgrund der durchgeführten Studie können wir bei einer Irrtumswahrscheinlichkeit von =0,05 die Nullhypothese, dass die Wirksamkeit kleiner gleich 20% ist zurückweisen. Der p-value beträgt 0,0122. Statistik für SoziologInnen 48 Testtheorie

Der kritische Bereich 0.0 0.1 0.2 0.3 0.4 1-= 0,95 Beobachteter Wert =2,25 = 0,05 p-value = 0,012 Fläche unter der Kurve rechts vom Testwert Annahmebereich -2 2 1,645 krit. Bereich Statistik für SoziologInnen 49 Testtheorie

Anmerkungen Ein signifikantes Ergebnis eines Hypothesentests besagt: die Daten sind bei einer vorgegebenen Irrtums-Wahrscheinlichkeít mit der H 0 inkompatibel, daher sollten wir die H 0 verwerfen. Es sagt nichts darüber, wie wahrscheinlich die H 1 tatsächlich ist sondern lediglich, dass die beobachtete Abweichung von der H 0 mit einer gewissen Irrtumswahrscheinlichkeit nicht rein zufällig ist. Insbesondere kann aus einem Signifikanztest nicht unmittelbar auf Kausalität geschlossen werden! Auch sagt das Ergebnis eines Signifikanztests nichts darüber aus, ob ein Unterschied (Effekt) wichtig oder groß ist. Bei kleinem Standardfehler (geringe Streuung und/oder große Stichprobe) besteht eine starke Tendenz zu signifikanten Ergebnissen. Ein nicht signifikantes Ergebnis ist ohne Überlegungen zur Power nicht direkt sinnvoll interpretierbar. Statistik für SoziologInnen 50 Testtheorie

Was wir uns merken sollten Für das Testen von Hypothesen benötigen wir, eine sinnvolle Teststatistik (z.b. standardisierte Abweichung eines empirisch erhobenen Wertes vom Parameterwert der Nullhypothese) sowie die Kenntnis der Verteilung der Teststatistik bei Gültigkeit der Nullhypothese Der Rückweisungsbereich enthält jene Werte der Teststatistik, die bei Gültigkeit der Nullhypothese insgesamt eine Wahrscheinlichkeit von maximal haben. Liegt der empirische Wert der Teststatistik im Rückweisungsbereich, bedeutet dies, dass die empirische Beobachtung bei Gültigkeit der Nullhypothese sehr unwahrscheinlich ist, und wir daher die Nullhypothese verwerfen können. Statistik für SoziologInnen 51 Testtheorie

Was wir uns merken sollten Der p-value (empirisches Signifikanzniveau) drückt aus, wie weit der empirische Wert der Teststatistik im Rückweisungsbereich liegt. Er ist eine deskriptive Zusatzinformation zum Entscheidungsproblem des Hypothesentestens. Die Formulierung der Hypothesen ist nicht symmetrisch. Nur für die Ablehnung der Nullhypothese wird der Fehler ex ante festgelegt. Einseitige Fragestellungen sind trennschärfer als zweiseitige. Statistik für SoziologInnen 52 Testtheorie