Mobile psychometrische Diagnostik

Transkript

1 Mobile psychometrische Diagnostik Eigenschaften von konventionellen und elektronischen Versionen von Fragebögen Otto B. Walter Psychologisches Institut IV, Westfälische-Wilhelms-Universität Münster WWU Münster Möglichkeiten des Fragebogeneinsatzes Papier und Bleistift Computer gestützt PDA gestützt -mobil - leichte Handhabung - benötigt kein Personal während des Ausfüllens - sofortige Auswertung - effizientes Datenmanagement -mobil - sofortige Auswertung - kein Personal während des Ausfüllens erforderlich -teures Datenmanagement - verzögerte Auswertung - stationär - Personalbedarf zur Einweisung - Investition in PCs und Räumlichkeiten -Akzeptanzbei Patienten u. Personal? - geringer Administrations-bedarf Psychometrische Eigenschaften? 1

2 Stichprobe Daten wurden zwischen 1989 und 2005 in der Medizinischen Klinik mit Schwerpunkt Psychosomatik der Charité, Berlin gesammelt. Einsatz von Fragebögen an der Charité Verwendung von standardisierten Fragebögen seit 1980 Überwiegend standardisierte Fragebögen zur Erfassung von Depression, Angst und Stress Zielsetzung: Diagnostik / Screening Qualitätskontrolle wiss. Studien 2

3 Mobile psychometrische Diagnostik Sekretärin oder Datentransfer Schwester über Kabel übergibt PDA oder WLAN dem Patienten Patient beantwortet die Fragebögen in der Warteregion oder im Bett Diskussion der Ergebnisse mit Arzt oder Psychologen Akzeptanz der mobilen psychometrischen Diagnostik 3

4 Akzeptanz von PDA gestützter Diagnostik Akzeptanz beim Personal Sofortige Auswertung Geringer Verwaltungsaufwand Kosten Akzeptanz bei Patienten Psychometrische Eigenschaften Kosten PDA basierte Erhebung etwa 40% günstiger als Papier- und Bleistift Methode 4

5 Akzeptanz bei Patienten? < 1 % lehnte psychometrische Untersuchung ab (gleiche Rate wie bei Papier- und Bleistift Erhebungen Aber sind die Patienten mit der PDA gestützten Erhebung zufrieden? Stichprobe n=454 stationäre und poliklinische Patienten Medizinische Klinik mit Schwerpunkt Psychosomatik, Charité Berlin Nov 2004 Apr 2005 Methoden Prospektive Studie 10 Fragen über Nutzerfreundlichkeit der PDAs und Einstellung gegenüber der Erhebung Alter 41±15 (Median 41, > 25 % älter 50) Geschecht 67 % Frauen 5

6 Verwendung des PDAs war Verwendung des PDAs war 6

7 Verwendung des PDAs war Akzeptanz von PDA gestützter Diagnostik Akzeptanz beim Personal Sofortige Auswertung Geringer Verwaltungsaufwand Kosten Akzeptanz bei Patienten Psychometrische Eigenschaften 7

8 Stichprobe n=10,547 n=2,892 Paper-Bleistift / n=7,655 PDA Methoden poliklinische und stationäre Patienten Behandlungszeitraum Medizinische Klinik mit Schwerpunkt Psychosomatik, Charité, Berlin Verschiedene standardisierte Fragebögen z.b. CES-D, BDI, STAI, HADS, Berliner Stimmungsfragebogen (BSF) Altger 39±13 / 41±14 Geschlecht 59.4% / 65.2% Frauen Psychometrische Eigenschaften der mobilen Diagnostik BSF besteht aus 6 psychometrischen Skalen: Ärger Engagement Gehobene Stimmung Teilnahmslosigkeit Depress. Verstimmtheit Müdigkeit Jede Skala besteht aus 5 6 Items In der Faktorenanalyse werden Skalen durch hohe Faktorladungen identifiziert 8

9 Psychometrische Eigenschaften mobiler Diagnostik Invariante Faktorstruktur? Psychometrische Eigenschaften mobiler Diagnostik Invariante Faktorstruktur? Exploratorive Faktorenanalyse Konfirmatorische Faktorenanalyse Modellierung mit Strukturgleichungen (AMOS): - Ansatz mit zwei Gruppen - Faktorladungen sollten in beiden Gruppen identisch sein (BSF) Guter Fit (TLI.90, CFI.90, RMSEA.05) 9

10 Psychometrische Eigenschaften mobiler Diagnostik Invariante Faktorstruktur? Explorative Faktorenanalyse Konfirmatorische Faktorenanalyse Mittelwertvergleich Psychometrische Eigenschaften mobiler Diagnostik Invariante Faktorstruktur? Explorative Faktorenanalyse Konfirmatorische Faktorenanalyse Mittelwertvergleich Psychometrischen Eigenschaften PDAgestützter Diagnostik sind identisch mit Erhebung mit Papier und Bleistift 10

11 Ausblick Die computergestützte mobile Erhebung eröffnet die Möglichkeit für innovative neue Verfahren wie Computeradaptives Testen (CAT) Stresserleben Stressoren Angst Depression Itembank 39 und 46 Items Itembank 50 Items Itembank 64 Items Computeradaptives Testen hoch depressiv niedrig depressiv 11

12 hoch depressiv 1. Frage -0,6 niedrig depressiv hoch depressiv 2. Frage -0,3 niedrig depressiv 12

13 hoch depressiv 3. Frage Computeradaptives Testen präzise -0,5 Messung mit wenigen Items niedrig depressiv XML-RPC LAN WLAN CAT-Engine Berechung der Merkmalsausprägung Server Itempräsentation Benutzereingabe Frontend 13

14 Eigenschaften von CATs Anzahl der benötigten Items für Testwert- Berechnung 60,00 50,00 40,00 30,00 20,00 10,00 innerhalb ±2SD um MW genügen 7±3 Items 0,00-3,50-2,50-1,50-0,50 0,50 1,50 2,50 3,50 niedrig Theta hoch Abbruchbedingung SE<.32 ( r>.90) Zusammenfassung PDA gestützte Diagnostik: zeigt identische psychometrische Eigenschaften wie konventionelle Diagnostik spart Zeit und Geld erfreut sich einer hohen Akzeptanz bei Patienten und Personal ermöglicht innovative Ansätze wie computeradaptives Testen 14

15 Vielen Dank! 15