CaseTrain Konzeption und Einsatz eines universitätsweiten fallbasierten Trainingssystems Jürgen Helmerich helmerich@wiinf.uni-wuerzburg.de Alexander Hörnlein hoernlein@uni-wuerzburg.de Marianus Ifland ifland@informatik.uni-wuerzburg.de
CaseTrain Konzeption und Einsatz eines universitätsweiten fallbasierten Trainingssystems Motivation Anforderungen Umsetzung Einsatz und Erfahrungen Prüfungen mit CaseTrain Ausblick
Motivation Idee: Fakultätsübergreifender Einsatz virtueller Problemfälle zur Verbesserung der Lehre Medizin, Jura, Wirtschaftswissenschaften, Psychologie, Pädagogik, Geographie, Bioinformatik, Sprachendidaktik, Mediendidaktik, Mathematik, Theologie, Sinologie, Politikwissenschaften,
CaseTrain Konzeption und Einsatz eines universitätsweiten fallbasierten Trainingssystems Motivation Anforderungen Umsetzung Einsatz und Erfahrungen Prüfungen mit CaseTrain Ausblick
Inhaltliche Anforderungen Unterstützung verschiedener Fallkonzepte Diagnose & Therapie (z. B. Medizin, klinische Psychologie) Inkrementelle Erstellung einer Lösungsstruktur (Jura) Inkrementelle Auswertung vorgegebener statistischer Daten (Psychologie, Bioinformatik, Geographie) Analyse einer per Video präsentierten Situation (z. B. Pädagogik, Psychologie) Schrittweise Lösung eines betrieblichen Problems (BWL, Wirtschaftsinformatik)...
Inhaltliche Anforderungen Lineare Sequenz von Informationen / Situationsbeschreibungen Optional: (bewertete) Infowahl Beschränkung auf einfache Formatierung Einbinden multimedialer Elemente (Bilder, Audio, Video)
Inhaltliche Anforderungen - Fragen Single Choice / Multiple Choice (Hierarchische) Auswahllisten Eingabe numerischer Werte (optional mit Toleranzfaktor) Worteingabe (optional mit Fehlertoleranzen und regulären Ausdrücken) Freitextfragen (nicht automatisch bewertbar) Ausführliche Erklärungen Frage- & Gesamtbewertung konfigurierbar
Technische Anforderungen Einfaches Autorensystem Rapid elearning Fallplayer browserunabhängig und intuitiv bedienbar Integration in LMS wuecampus (Moodle) Evaluation Qualitätssicherung
CaseTrain Konzeption und Einsatz eines universitätsweiten fallbasierten Trainingssystems Motivation Anforderungen Umsetzung Einsatz und Erfahrungen Prüfungen mit CaseTrain Ausblick
Umsetzung Existiert geeignetes System? NEIN! Domänenspezifisch (Medizin) Komplexes (Online)-Authoring Keine Unterstützung von Infowahl Player schwierig zu bedienen oder plattformabhängig
Neuentwicklung CaseTrain Autorentool: Standard-Textverarbeitung (Microsoft Word, OpenOffice Writer, Apple Pages) Fall-Player: Flash 9 + ActionScript 3 Fall-Verwaltung: Webapplikation Nutzung vorhandener Komponenten z.b. Textmarker zur Extraktion von Informationen aus schwach strukturierten Dokumenten (http://sourceforge.net/projects/textmarker) Anbindung an wuecampus (Verlinkung von Fällen, Anmeldung)
Fallerstellung Microsoft Word-Dokument (Ausschnitt)
Fallverwaltung im CaseTrain-Manager Übersicht
Fallverwaltung im CaseTrain-Manager Übersicht Fallsammlung
Fallverwaltung im CaseTrain-Manager Übersicht Fallsammlung Fallverwaltung
Lernplattform wuecampus Fallbereitstellung
Fallbearbeitung CaseTrain-Player: Infoblock & Frage
Fallbearbeitung CaseTrain-Player: Feedback
Statistiken für den Lerner (Selbstkontrolle) Fall-Ergebnis Persönliche Statistiken
Statistiken für Dozenten Kursübersicht Fallübersicht Frage
Statistiken für Dozenten Kursübersicht Fallübersicht Frage
Statistiken für Dozenten Kursübersicht Fallübersicht Frage
Statistiken für Dozenten Kursübersicht Fallübersicht Frage
CaseTrain Konzeption und Einsatz eines universitätsweiten fallbasierten Trainingssystems Motivation Anforderungen Umsetzung Einsatz und Erfahrungen Prüfungen mit CaseTrain Ausblick
Einsatz in der Lehre Sommersemester 2009 Über 180 Autoren, Hilfskräfte, Reviewer Mehr als 900 Fälle in ca. 50 Lehrveranstaltungen Über 2.500 Benutzer Ca. 70.000 Fallaufrufe, 80 % davon zu Ende bearbeitet, ca. 2/3 davon erfolgreich
Nutzungsentwicklung Gesamter Zeitraum: 161.395 115.183 76.837 4.786 1.383
Nutzungsverteilung WS 2007/08 SS 2008 255 2285 Vorlesungszeit Vorlesungszeit WS 2008/09 3875 SS 2009 4049 Vorlesungszeit Vorlesungszeit
SS 2008 Ca. 2400 Rückmeldungen Fallinhalt: 1,9 Bedienung: 1,7 SS 2009 Ca. 1000 Rückmeldungen Fallinhalt: 2,0 Bedienung: 1,8 Evaluation: Integriertes Feedback
Evaluation: Fragebogen (SS 2008) Gesamtbewertung Welche Schulnote wu rden Sie dem Angebot interaktiver Trainingsfälle insgesamt geben? n = 608; mw = 2,3; s = 0,7 Sehr gut Ungenügend
Evaluation: Fragebogen (SS 2008) Ausweitung des Angebots? Sollten interaktive Fallstudien zu weiteren Veranstaltungen angeboten werden? n = 622
Weitere Erfahrungen Ich habe den richtigen Begriff eingegeben, aber das System hat es falsch gewertet. Eigenkorrektur Verbessertes Feedback Die Klausuraufgaben sollten genauso sein wie die Übungsaufgaben. eklausur mit CaseTrain Ich möchte CaseTrain auch für den Übungsbetrieb einsetzen. Korrektur von Textfragen
CaseTrain Konzeption und Einsatz eines universitätsweiten fallbasierten Trainingssystems Motivation Anforderungen Umsetzung Einsatz und Erfahrungen Prüfungen mit CaseTrain Ausblick
CaseTrain-exam Aufgabentext & Frage
CaseTrain-exam Übersicht
CaseTrain-exam (Papierversion)
CaseTrain-exam Auswertung
CaseTrain-exam erste Erfahrungen Querschnittsbereich Prävention Papier - 136 Teilnehmer Klinische Immunologie/Rheumatologie Papier - 132 Teilnehmer Allgemeinmedizin Papier - 127 Teilnehmer Quantitative Methoden A Hybrid (73 Papier, 22 elektronisch) Stochastik elektronisch - 18 Teilnehmer Anwendungsorientierte Informatik elektronisch - 16 Teilnehmer (480 Teilnehmer mit Papierklausur aus anderem System)
CaseTrain Konzeption und Einsatz eines universitätsweiten fallbasierten Trainingssystems Motivation Anforderungen Umsetzung Einsatz und Erfahrungen Prüfungen mit CaseTrain Ausblick
Ausblick Semi-automatische Auswertung von Freitextfragen Verzweigungen, zeitkritische Fragen, graphische Eingaben Internationalisierung eprüfungen Einsichtnahme bei eprüfungen Sicheres Boot-OS (Studentenlaptops) Partiell lineare Prüfungen Instant-ePrüfungen ( dynamisiert, on demand )
Danke für Ihre Aufmerksamkeit Fragen, Anregungen, Kritik? Web: http://casetrain.uni wuerzburg.de Kontakt: helmerich@wiinf.uni-wuerzburg.de hoernlein@uni wuerzburg.de ifland@informatik.uni-wuerzburg.de