RETESTRELIABILITÄT. Teststabilität. Korrelation wiederholter Testdurchführungen. Persönlichkeitstests. Stabilität des Zielmerkmals.

Ähnliche Dokumente
Tutorium Testtheorie. Termin 3. Inhalt: WH: Hauptgütekriterien- Reliabilität & Validität. Charlotte Gagern

Vorlesung Testtheorien. Dr. Tobias Constantin Haupt, MBA Sommersemester 2007

4.2 Grundlagen der Testtheorie

Messtherorie Definitionen

Vorlesung Testtheorien. Dr. Tobias Constantin Haupt, MBA Sommersemester 2007

Gütekriterien: Validität (15.5.)

Hausaufgaben. Antwort und 4 guten Distraktoren zum gelesenen Text!

TESTTHEORIE UND TESTKONSTRUKTION - PRAKTISCHE ANWENDUNG - TEIL 3

(1) Was sind wichtige Kriterien von Diagnostik im Sinne zweckgebundenen Messens? (2) Warum sollte Diagnostik so systematisch wie möglich erfolgen?

Messung Emotionaler Intelligenz. Prof. Dr. Astrid Schütz - Universität Bamberg

Markt- und Werbepsychologie. Band 1 Grundlagen

Rekodierung invertierter Items

Gütekriterien. Gütekriterien. Gütekriterien. Reliabilität Validität. Spezifität. Sensitivität. Praktikabilität.

Standardisierte Vorgehensweisen und Regeln zur Gewährleistung von: Eindeutigkeit Schlussfolgerungen aus empirischen Befunden sind nur dann zwingend

Definition von Validität

Forschungsmethoden: Definition

Methodenlehre. Vorlesung 10. Prof. Dr. Björn Rasch, Cognitive Biopsychology and Methods University of Fribourg

GÜTEKRITERIEN SPEZIFISCH p. 1

Parametrische vs. Non-Parametrische Testverfahren

Prof. Dr. Walter F. Tichy Dr. Matthias Müller Sommersemester 2006

GLIEDERUNG Das Messen eine Umschreibung Skalenniveaus von Variablen Drei Gütekriterien von Messungen Konstruierte Skalen in den Sozialwissenschaften

4. Die Klassische Testtheorie (KTT)

Messung, Skalen, Indices

Grundlagen der psychologischen Testtheorie. WS 2016 Dr. Michael Weber

SPSS-Beispiel zu Kapitel 6: Methoden der Reliabilitätsbestimmung 1

Konfidenzintervalle Grundlegendes Prinzip Erwartungswert Bekannte Varianz Unbekannte Varianz Anteilswert Differenzen von Erwartungswert Anteilswert

Sozialwissenschaftliche Methoden und Methodologie. Begriffe, Ziele, Systematisierung, Ablauf. Was ist eine Methode?

Aufgaben und Ziele der Wissenschaften

Lehrstuhl für Personalentwicklung und Veränderungsmanagement Prof. Dr. Jens Rowold. FIF Fragebogen zur Integrativen Führung

VS PLUS

Grundlagen sportwissenschaftlicher Forschung Test

Befehl: Analysieren > Deskriptive Statistiken > Häufigkeiten. Unter: Statistiken: Angabe Kurtosis/ Schiefe/ andere Lagemasse

6. Faktorenanalyse (FA) von Tests

Überblick. (1.1) Gebärdensprachtests (I) (1.1) Gebärdensprachtests (II)

SF-36 Fragebogen zum Gesundheitszustand. Seminar: Testen und Entscheiden Dozentin: Susanne Jäger Referentin: Julia Plato Datum:

Concept-Map. Pospeschill / Spinath: Psychologische Diagnostik 2009 by Ernst Reinhardt Verlag, GmbH und Co KG, Verlag, München

Korrelation, Regression und Signifikanz

Kritik standardisierter Testverfahren. am Beispiel des IST-70

DATENERHEBUNG: MESSEN-OPERATIONALISIEREN - SKALENARTEN

Kontrolle und Aufbereitung der Daten. Peter Wilhelm Herbstsemester 2014

Teilbereich der medizinischen Reha Schmerz/ Diabetes Typ-I - Diagnostik

Lesediagnostik mit dem

Modulprüfung Methoden der Dienstleistungsforschung

Methodenlehre. Vorlesung 5. Prof. Dr. Björn Rasch, Cognitive Biopsychology and Methods University of Fribourg

Einführung in die Testkonstruktion

Evaluation (10.7.) Definition Beschreibungsmerkmale von Evaluation Zu den Hausaufgaben Methodische Aspekte der (summativen) Evaluation

Aufgaben zu Kapitel 8

Prof. Dr. Gabriele Helga Franke TESTTHEORIE UND TESTKONSTRUKTION

Einführung in die Test- und Fragebogenkonstruktion

Präzision in der Analytik Ein unentbehrlicher Teil der Methodenvalidierung

Klausur Statistik I. Dr. Andreas Voß Wintersemester 2005/06

Ich bin ein geselliger Mensch. Mich an andere anzupassen fällt mir schwer.

Statistik II Übung 2: Multivariate lineare Regression

BIP. Bochumer Inventar zur berufsbezogenen Persönlichkeitsbeschreibung

Evaluation von Fragebogen in der Medizin

Begriffe und Methoden (8.5.)

Inhaltsverzeichnis Danksagung Einleitung Forschungshintergrund Sprachkompetenz...20

Grundlagen der psychologischen Testtheorie

Messungen in größerem Umfang Fragebögen und Tests Gute Tests, schlechte Tests Gütekriterien Testtheorie und Testkonstruktion Forschungsethik

Was ist ein Test? Grundlagen psychologisch- diagnostischer Verfahren. Rorschach-Test

Einfache Varianzanalyse für unabhängige Stichproben

Lösungen zu Janssen/Laatz, Statistische Datenanalyse mit SPSS 1

Die Erfassung der Feedbackkultur in Organisationen

Messen im psychologischen Kontext II: Reliabilitätsüberprüfung und explorative Faktorenanalyse

Ziel der linearen Regression

Dr. habil. Rüdiger Jacob Methoden und Techniken der empirischen Sozialforschung Vorlesung mit Diskussion

I Überblicksartige Beschreibung. II Testgrundlage. III Testdurchführung. IV Testverwertung. V Erfahrungen BDI-II

Faktorenanalysen mit SPSS. Explorative Faktorenanalyse als Instrument der Dimensionsreduktion. Interpretation des SPSS-Output s

Korrelation - Regression. Berghold, IMI

Aufbau des Experiments Reihung von Versuchsitems und Distraktoren

BIP-R6 (6. revidierte Forschungsversion des Bochumer Inventars zur berufsbezogenen Persönlichkeitsbeschreibung)

Diagnostik und Personalauswahl mit computergestützten Problemlöseszenarien?

Übersicht zur Veranstaltung

KATA LOGO Mathematik Statistik Roadmap: Von der Hypothese zum p-wert

Eine Skala ist also Messinstrument, im einfachsten Fall besteht diese aus einem Item

BEGLEITTEXT: METHODEN DER RELIABILITÄTSSCHÄTZUNG (P. SCHMOLCK)

I-S-T 2000-R: INTELLIGENZ- STRUKTUR TEST 2000-R BITTE HANDBUCH ANSEHEN

Familiäre Pflege: Welche Bedeutung haben Ressourcen für pflegende Angehörige? Assessment zur Erfassung Ressourcen pflegender Angehöriger (RPA)

Einführung in SPSS. Sitzung 5: Faktoranalyse und Mittelwertsvergleiche. Knut Wenzig. 22. Januar 2007

2.4 Hypothesentests Grundprinzipien statistischer Hypothesentests. Hypothese:

Intrinsisch motivierte Mitarbeiter als Erfolgsfaktor für das Ideenmanagement: Eine empirische Untersuchung

9 Faktorenanalyse. Wir gehen zunächst von dem folgenden Modell aus (Modell der Hauptkomponentenanalyse): Z = F L T

Unsystematische Störvariablen

Neuere Konzepte von Intelligenz und deren Probleme. Thomas Hoch Martina Weber

Brückenkurs Statistik für Wirtschaftswissenschaften

VU Testtheorie und Testkonstruktion WS 08/09; Lengenfelder, Fritz, Moser, Kogler

Übungsaufgaben zu Statistik II

Stichprobenauslegung. für stetige und binäre Datentypen

Statistische Tests. Kapitel Grundbegriffe. Wir betrachten wieder ein parametrisches Modell {P θ : θ Θ} und eine zugehörige Zufallsstichprobe

THEMA: "STATISTIK IN DER PRAXIS TESTEN IST BESSER ALS VERMUTEN" TORSTEN SCHOLZ

Lösungen zur Biomathe-Klausur Gruppe A Montag, den 16. Juli 2001

Testtheoretische Kritik mündlicher und schriftliche Prüfungen (29.5)

Aufgaben zu Kapitel 7:

Beispiel 1: Zweifache Varianzanalyse für unabhängige Stichproben

Pflichtlektüre: Kapitel 12 - Signifikanztest Wie funktioniert ein Signifikanztest? Vorgehensweise nach R. A. Fisher.

Vergleich von Gruppen I

IMPULS-Test 2 Wissenschaftliche Basis. Mag. Leonard Schünemann

Chi-Quadrat Verfahren

Klausur zur Vorlesung Multivariate Verfahren, SS Kreditpunkte, 90 min

Transkript:

Basiert auf RETESTRELIABILITÄT Wird auch genannt Teststabilität Geeignet für Korrelation wiederholter Testdurchführungen Abhängig von beeinflusst Stabilität des Zielmerkmals Persönlichkeitstests Speedtests Dilemma des optimalen Zeitintervalls Löst aus

Königsweg der Reliabilitätsbestimmung daher Gilt als PARALLELTESTRELIABILITÄT Basiert auf verringert Basiert auf Größerer Itempool Korrelation paralleler Testformen Basiert auf Breiteres Aufgabenspektrum Hat zum Vorteil praxisnah Parallel bedeutet: Parallel bedeutet: - gleiche Mittelwerte - gleiche Standardabweichungen - hohe Korrelationen zwischen den Werten

Schwankungen in Motivation, ausgeschlossen verhältnismäßig Höchste Messgenauigkeit Vorteil TESTHALBIERUNG Basiert auf durch Korrelation zweier äquivalenter Testhälften Odd-even- Methode 1. vs. 2. Hälfte Zufall Itemschwierigkeit und Trennschärfe Testzeit Nur für Speedtest Berechnen der Korrelation der Rohwerte beider Testhälften anschließend Cronbachs α Aufwertung durch Spearman-Brown-Formel Setzt identische Standardabweichungen voraus Führt zu

Grad an Genauigkeit, mit dem vom Testverhalten auf das Verhalten außerhalb bezeichnet Inhaltsvalidität der Testsituation geschlossen werden kann 1. Schritt Wird erfasst durch alternativ erfasst durch 1. Schritt 1. Schritt Konstrukt explifizieren Konstrukt explifizieren + festlegen Generativer Regeln Generativer Regeln / Operationaler Definitionen Pro Item beobachtbaren Urteilsstreuungen zwischen den Beurteilern 2. Schritt mithilfe Verwendet werden 3. Schritt 4. Schritt Itemgenerierung Expertenbeurteilung Maß der Beurteilerübereinstimmung liefert Werden vorgegeben Mind. 2 Vp-Gruppen Generieren unabhängig voneinander Items bilden 2 unabhängige Tests Werden bearbeitet von Große Stichprobe Koeffizient für die Inhaltsvalidität liefert Korrelation zwischen den beiden Tests

Synthese aus inhaltlicher und kriteriumsbezogen er Validität bezeichnet Konstruktvalidität sieht Validierung als Prozess Grundgedanke: Testergebnisse werden auch immer von der Operationalisierung beeinflusst Allgemeine Methode Ausgehend von Konstrukt Wird erfasst mithilfe Hat zum Ziel Herausrechnen Multitrait- konfundierter Multimethod-Analyse Varianz erfordert Mind. 2 Konstrukte und mind. 2 Methoden 1. Schritt Ableiten von daraus entstehen 1. Schritt Möglichst viele verschiedene Und zwar Hypothesen 4 Messwertreihen 2. Schritt Werden bearbeitet durch 2. Schritt Möglichst viele Verhaltensweisen Abdecken von Experimentelle Überprüfung 1 große Stichprobe 3. Schritt 3. Schritt Möglichst viele Methoden mithilfe Datenanalyse Analyse der Korrelationen Konvergente vs. Diskriminante Validität Gesamtheit aller Resultate = Konstruktvalidität

Konkurrente Validität besagt Varianz des Kriteriums lässt sich durch Varianz des Tests erklären Wenn die Items nicht alle Bereiche des Konstruktes abbilden Unterformen Prädiktive Validität besagt Testergebnis lässt auf zukünftiges Verhalten schließen Korrelation eines Tests mit einem Kriterium bedeutet Kriteriumsvalidität Basiert auf Binnenkriterium it i Außenkriterium Beeinflusst durch unterteilen KRITERIUM sich in Unterscheiden sich hinsichtlich ihrer Qualifizierung Reliabilität des Tests Reliabilität des Kriteriums Kommunalität / Zulänglichkeit von Test und Kriterium Grad der konzeptuellen Gemeinsamkeit von Test und Kriterium Klassifikation nach Echte Kriterien Quasi- Kriterien Target- Variablen Führt zu Korrelation Test- Targetvariable Bezeichnet Effektivität Haben höheren Status Sind verlässlicher als der Test Bedürfen selbst einer Validierung an einem echten Kriterium Variablen, die augrund von Sachzwängen vorhergesagt werden MÜSSEN