Dr. Jens Bücking / Alexander Schulz. GML FU Berlin 1. Juli

Größe: px

Ab Seite anzeigen:

Download "Dr. Jens Bücking / Alexander Schulz. GML FU Berlin 1. Juli"

Angelika Grosse
vor 6 Jahren
Abrufe

1 Qualität bei eklausuren Wege zur guten Prüfungsfrage Dr. Jens Bücking / Alexander Schulz GML FU Berlin 1. Juli

2 Workshop-Programm 10:00 Einführung 10:15 Lernziel Taxonomien (Bloom, Anderson & Krathwohl, Metzger) 10:45 Test your Testwiseness (Life eassessment) 10:30 Grundprinzipien der Gestaltung von Multiple Choice Fragen (MC Leitfaden) 10:45 Übung: Erstellung einer eigenen MC Frage (5er Gruppen) 11:00 Pause 11:15 Exemplarische Vorstellung und Diskussion von Teilnehmer Fragen 11:30 Präsentation weiterer Fragenformate 11:45 Tipps und Tricks: Höhere Taxonomiestufen mit geschlossenen Antwortformaten prüfen 12:00 Ende 2

3 Inhaltsqualität Objektivität Lernziele Prüfung Püf Prüfungsqualität Reliabilität Validität Integration fachspezifischer Software Internetrecherche Integration von Multimedia Ökonomie Hoher Initialaufwand

4 Fazit zur Qualitätsverbesserung durch eklausuren Gestiegene Auswertungs- und Durchführungsökonomie Objektivität Lehrende schätzen Arbeitsersparnis + Objektivität Studierende schätzen die schnellere Ergebnisrückmeldung Püf Prüfungsqualität Reliabilität Validität Auswendiglernen hat bei einigen Prüfungen zugenommen Einfluß auf die Validität ist stark unterschiedlich h Ökonomie

5 Streitpunkt: Validität von eklausuren eklausuren = 100% MC? MC = Reproduktion von Faktenwissen 100% Faktenwissen geringe Validität eklausuren = Freitext t Kurztexte und Zahlen Zuordnungen Videoessays Hörverständnis. MC = Beurteilung Synthese! Analyse Anwendung Verständnis Faktenwissen ABER

6 4% Freie Antwort Aktuell mögliche Fragetypen Freitextfragen Kurzeingabe Zahlen/Texte Freies Positionieren Anteil (n=1613) SoSe09 + WS09/10 16% 80% Antwort-Wahl-Verfahren Offen Geschlossen (autom. Bewertung) Multime edia, Software, Internet cripte, PDF) Zuordnen / Sortieren (Texte, Graphiken) Antwortpaare (z.b. Ja/Nein) Multiple Choice Single Choice 6 Komplexe Anlagen (S

7 Prüfungszusammenstellungen (SoSe09 + WS09/10, n=52) Nur Freitext 2% A.W.V. + Kurzeingabe +Freitext 27% 29% Nur Antwortwahlverfahren (A.W.V.) 42% A.W.V. + Kurzeingabe 7

8 Aufwände, Kompetenzen und Konsequenzen AUFWA AND: F ragen LERNZIEL: Information Erinnern Verarbeiten Erzeugen Mangelndes Know How zur Erstellung guter MC-Fragen Lösungswege schwer zu prüfen Erfinden Nachbewertung von Frei- und Kurztexten aufwändig Erstellen Auswerten Hauptmotiv Zeitersparnis Hoher Anteil an Erinnerungs- Fragen Antwortwahl Kurztext/Zahlen Freitext 8

9 Lernziel-Taxonomien Handout 9

10 Beurteilung von Kompetenz und Validität Die Graphiken geben wesentliche volkswirtschaftliche Daten eines Landes wieder 10

11 Life-eAssessment: CPS-Clicker Anzeige OK Eingabe löschen Eingabe senden 11

12 Test Wiseness Test Grammatikalischer Hinweis The answer of this one refers to an (a) overture (b) mountain (c) building (d) misnomer

13 Test Wiseness Test Wortwiederholung In which pifflerock did zorkrans inkle? (a) gi hien (b) gis inkle (c) gish frankel (d) gishen fronk

14 Test Wiseness Test Längste Alternative Hixek norfolken piffle? (a) Hiku nippon ibitus (b) Efil Yadlan Ruoj (c) Yokon Gnithol (d) Ikkek zippo unkerzotz notiaplan hippolslumg enslife yolent

15 Test Wiseness Test Ausschluss über Ähnlichkeit Dome ukerland dimmel? (a) Nepal (b) Canada (c) Britain (d) United States

16 Test Wiseness Test Rechtschreibung Die richtige Antwort ist? (a) Parrallele (b) Absisse (c) Koordinate (d) Tangennte

17 Test Wiseness Test Kein Hinweis: Antwort c Zarfarkle, en Ko day? (a) Henkledorf (b) Ricktoffen (c) Ifetain (d) Krator

18 MC-Leitfaden Do s and Don ts mc_leitfaden.php Handout 18

19 Übung: Konzipieren und skizzieren Sie eine Prüfungsfrage zum Thema: Die Entwicklung des elearnings von 2000 bis Ihre Frage muss im Antwortwahlverfahren vorliegen und mindestens die Lernzielstufe Verständnis erreichen. 15 min Zeit Flippchart + Eddings Lernzielstufe Fragenstamm Key min. 2 Distraktoren Fragenaufbau siehe eassessment.uni-bremen.de/fragenaufbau.php 19

20 PAUSE (bis 11:15h) 20

21 PRÄSENTATION (bis 11:30h) 21

22 Tipps und Tricks: Höhere Taxonomiestufen mit geschlossenen Antwortformaten prüfen mc_leitfaden.php Handout 22

Ähnliche Dokumente

eklausuren in der Praxis: Zur Vereinbarkeit von Qualität und Effizienz

eklausuren in der Praxis: Zur Vereinbarkeit von Qualität und Effizienz Dienst eassessment Erwartungen - Prüfungsqualität bei eklausuren Erfahrungen Fazit Studierende Lehrende Dienstleister Dr. Jens Bücking