Qualität in der Diagnostik in Berufs-, Studien- und Laufbahnberatung

Transkript

1 Qualität in der Diagnostik in Berufs-, Studien- und Laufbahnberatung 5. Zürcher Diagnostik-Kongress Qualität und Innovation psychologischer Diagnostik Dr. Daniel Jungo, Datum, Seite 1

2 Inhalt Aktuelle Situation mit Beispielen International National Kantonal Stellen Aktuelle Themen mit Beispielen Schweizer Normen Tests und Arbeitsmittel Quantitativ und qualitativ Norm- und Rohwerte Datum, Seite 2

3 International Ethische Standards und Qualität Internationale Vereinigung für Bildungs- und Berufsberatung Ethische Standards Suchen: Diagnost Treffer: 1 Satz, Standard 6 Die Mitglieder der IVSBB erklären die Inhalte, Zwecke und Ergebnisse von Testverfahren sprachlich in einer Art und Weise, die für ihre Klienten verständlich ist. Entsprechend benutzen sie angemessene Standards bei der Auswahl, Anwendung und Interpretation diagnostischer Verfahren. Datum, Seite 3

4 International Richtlinien und Qualität Internationale Richtlinien für die Testanwendung > Dienste > Veröffentlichungen > Richtlinien Bsp.: Checkliste für Testdurchführung und Testauswertung Datum, Seite 4

5 International Beurteilung der Qualität Testbeurteilungssystem des Diagnostik- und Testkuratoriums > Diagnostik- und Testkuratorium Bsp. Rezension NEO-PI-R Datum, Seite 5

6 International Beurteilung der Qualität DIN-Norm Anforderungen an Verfahren und deren Einsatz bei berufsbezogenen Eignungsbeurteilungen Aber: Trotz Zertifizierung Anwendung unseriöser Tests möglich! Datum, Seite 6

7 International Beurteilung der Qualität: Seriöser Test? Datum, Seite 7

8 National Fachgruppe und Qualität Datum, Seite 8

9 Datum, Seite 9

10 National Beurteilung der Qualität Mindestanforderungen für die Seriosität eines psychometrischen Diagnoseinstruments Objektivität Reliabilität Validität Normen oder Beleg der Validität der Rohwerte Vgl. Diagnostischer Grundkoffer Datum, Seite Zweck Kriterien sind dabei: Tests sollen die gängigen Gütekriterien erfüllen, eine hohe Akzeptanz in der Beraterschaft aufweisen und in der Ausbildung, Praxis, Forschung und Entwicklung sowie Weiterbildung gepflegt werden.

11 National Fachkommissionen und Qualität Datum, Seite 11

12 National QM und Qualität Swiss Counseling Quality (SCQ) KBSB / UNIL D5. Diagnostische Abklärungen 4 Kriterien Bsp. 3: Es werden wissenschaftlich validierte Instrumente eingesetzt. Die Durchführung, Korrektur und Interpretation diagnostischer Verfahren werden nur von dafür ausgebildeten Fachpersonen geleistet. Datum, Seite 12

13 National Qualifikationsprofil und Qualität Qualifikationsprofil Berufs-, Studien- und Laufbahnberater/in Grundkompetenz C Diagnostizieren / Evaluieren Beschreibung des Handlungskompetenzbereichs Das Ziel der psychologischen Diagnostik besteht darin, die individuellen Voraussetzungen zu analysieren und zu beschreiben (Interessen, kognitive und affektive Funktionen, Fähigkeiten der Klientin, etc.) und das soziokulturelle Umfeld zu umschreiben. Die Methodik der Diagnostik umfasst Gespräche, Fragebogen, Tests usw. Datum, Seite 13

14 Kantonal, Beispiele Kanton / Stelle, z.b. Bern Zürich St. Gallen Name Testzentrum Fachstelle Diagnostik Fachgruppe Diagnostik Diagnostikverantwortliche Neu: Fachstelle Beratung und Diagnostik Datum, Seite 14

15 Kantonal Kanton Bern Testzentrum > Berufsberatung > BIZ-Standorte > BIZ (Zentrale Dienste) > Testzentrum Bern Angebot: Testdurchführungen und Testauswertungen Potenzialanalysen und Entwicklungsassessments Schulung und Beratung Einführung Marktbeobachtung Testbibliothek Datum, Seite 15

16 Kantonal Kanton Zürich Fachstelle Diagnostik Qualitätssicherung Diagnostik: Qualität der eingesetzten Verfahren sicherstellen, aktuelle Entwicklungen verfolgen, Wissen intern zur Verfügung stellen Erstellen jährlicher Teststatistik, Massnahmen ableiten Kantonales Angebot definieren und laufend bewirtschaften (Testliste) Leitung Fachgruppe Diagnostik (mit Abteilungsleitende bzw. Ressortverantwortliche pro biz Fachliche Stellungnahmen, Richtlinien und Empfehlungen im Bereich Diagnostik erarbeiten (Neue) diagnostische Verfahren evaluieren Verantwortung Testpreise (inkl. Erfassung) Weiterentwicklung diagnostischer Instrumente (unterstützen und vorantreiben) Ansprechperson für Anliegen/Fragen der Mitarbeitenden sowie ex-ternen Partnern (z.b. LBZ, SDBB, diverse Testautoren etc.) im Bereich Diagnostik. Schnittstelle zwischen Forschung und Praxis. Netzwerken mit verschiedenen Anspruchsgruppen im Bereich Diagnostik Datum, Seite 16

17 Kantonal Kanton St. Gallen Fachgruppe Diagnostik Wichtiges: Jede BSLB-Stelle ist vertreten Kantonales Diagnostikkonzept «Kantonskoffer»: zugelassene Verfahren Datum, Seite 17

18 Stellen Beispiel Diagnostik- Verantwortliche Testleiterinnen Diagnostikpraktikum Datum, Seite 18

19 Stellen Beispiel Neu: Fachstelle für Beratung und Diagnostik Beratungsinstrumente Beratungsfertigkeiten Datum, Seite 19

20 Beispiel Beratungsinstrument Datum, Seite 20 20

21 Aktuelle Themen mit Beispielen Schweizer Normen IST-2000, PSB-R, SPM / Interessenfragebogen und Interessenkompass Tests und Arbeitsmittel: Ist eine Mittelschule das Richtige für mich? Berufsfotos sortieren Quantitativ und qualitativ: visuell-narrative Berufsberatung Norm- und Rohwerte: BFT22 Datum, Seite 21

22 Qualitätssicherung: Aktuelle Schweizer Normen IST-2000, PSB-R, SPM / Interessenfragebogen und Interessenkompass Aktualität der Normen? IQ-Tests: problematisch, aber mit OTP Chance Interessenfragebogen und Interessenkompass: Aktualität belegt mit Daten! 136 > 90 Items Kürzung Aktualität und Kürzung empirisch belegt Neues Heft: 2013 Datum, Seite 22

23 Tests und Arbeitsmittel «Dies ist kein Test, sondern nur ein Arbeitsmittel.» Keine Überprüfung nötig? Aber: Psychometrisches Instrument mit Profil. Interesse 1 Interesse 2 Interesse 3 Interesse 5 Interesse 5 Interesse 6 Arbeitsmittel x Interesse 7 Datum, Seite 23

24 Überprüfter Fragebogen «Ist eine Mittelschule das Richtige für mich?» Ergebnisse der Überprüfung: Theorie: Interessen, Fähigkeiten und Arbeitsverhalten Objektivität: Reliabilität Alpha =.78: Validität: Erfolgreiche vs. Nicht- Erfolgreiche: Gesamt: positiv Datum, Seite 24

25 Tests und Arbeitsmittel Berufsfotos sortieren Qualitatives Instrument «vocational card sort» Validität: hohe Treffgenauigkeit Hohe Akzeptanz bei den Ratsuchenden Aber: englischsprachige Studien aktuell? Kombination quantitativ und qualitativ oft sinnvoll Datum, Seite 25

26 Quantitativ und qualitativ Visuell-narrative Berufsberatung Nationalfondprojekt Qualität der Diagnostik quantitativ und qualitativ PHZH und Datum, Seite 26

27 Elemente der visuell-narrativen Berufsberatung Methode Bezeichnung Forschungs richtung Visuell Foto- Quantitative Interessen- Testdurchführung Test (F-I-T) Narrativ Berufsfotos sortieren Narrative Beratung Qualitatives Sortieren Qualitatives Interview Ergebnis Interessenprofil und Zuordnung zu passenden Berufen Individuelle Konstrukte Entwicklungsaufgaben Tätigkeiten (Umfeld und Umsetzen) Lebensthemen Datum, Seite 27

28 Norm- und Rohwerte Berufsfeldertest BFT22 Norm- und Rohwerte ungleich Welche sind relevant? Metalabel von Dr. Simone Jörin (Testautorin Explorix) Empfehlung Datum, Seite 28

29 Was fällt auf? Funktioniert die Qualitätssicherung und Qualitätsentwicklung?? Datum, Seite 29

30 Schlussfolgerungen 1. Durch Vielfalt gegenseitiger Nutzen möglich -> voneinander lernen und Neues entwickeln 2. Praxis und Theorie ist wichtig -> Instrumente sollen praxisrelevant sein UND Gütekriterien erfüllen -> nicht Rezepte lernen, sondern psychologische Theorien kritisch reflektieren und anwenden 3. Geprüfte Qualität -> Profession statt Konfession -> nicht überall möglich, aber wenn möglich notwendig -> sonst Gefahr der Scheinaktivität Datum, Seite 30

31 Besten Dank Datum, Seite 31