eassessment im Testcenter der Universität Bremen objektiv valide sicher

Transkript

1 eassessment im Testcenter der Universität Bremen objektiv valide sicher

2 eassessment Der elearning-dienst eassessment des Zentrums für Multimedia in der Lehre (ZMML) ermöglicht es allen Lehrenden der Universität Bremen, computergestützte Einstufungstests, Übungen und Prüfungen durchzuführen. Die für die Nutzer kostenlosen Serviceangebote des ZMML umfassen die Bereitstellung der IT-Infrastruktur, Produktion und Qualitätssicherung der Fragenkataloge, Beratung, Schulung und Support sowie Managementaufgaben wie Prüfungs-, Qualitäts- und Prozessmanagement. Das Testcenter mit 120 Prüfungsplätzen ermöglicht auch für große Teilnehmerzahlen alle Formen computergestützter Assessments. Dort werden aktuell etwa 4000 Prüfungsleistungen pro Semester abgelegt; in mehr als 50 Veranstaltungen aus 10 Fachbereichen werden eklausuren, Softwareprüfungen und Sprachtests durchgeführt. Vorteile eassessments sind nicht nur effektiv, sie bieten auch vielfältige Verbesserungen der Prüfungsqualität und eröffnen neue prüfungsdidaktische Möglichkeiten. Schnelle Ergebnisbekanntgabe und differenziertes Feedback für Studierende Hohe Durchführungs-, Auswertungs- und Interpretationsobjektivität Effektive, webbasierte Nachbewertung offener Aufgaben Kontinuierliche Qualitätssicherung der Fragenkataloge und Prüfungen Erweiterung der prüfungsdidaktischen Möglichkeiten durch Integration von Multimedia und Computeranwendungen Deutliche Zeitersparnis für Dozenten bei Korrektur und Organisation Der Erstellung valider, auf die Lernziele abgestimmter eassessments sind Dank vielfältiger Aufgabentypen kaum Grenzen gesetzt, erfordern aber Know-how und Zeit. Das Know How vermittelt das ZMML, der Erstellungsaufwand amortisiert sich bei großen Teilnehmerzahlen meist schon bei der zweiten Verwendung des Fragenkataloges. 1

3 Elektronische Prüfungen Ablauf einer eklausur Im Anschluss an eine Beratung zu didaktischen, organisatorischen und technischen Fragen begleitet das Supportteam die Lehrenden bei allen Prüfungsprozessen, von der Editorschulung bis hin zu Klausureinsicht und Archivierung der Ergebnisse. Detaillierte Arbeitspaketbeschreibungen, individuelle Ablaufpläne, Checklisten und Leitfäden unterstützen das Prüfungsmanagement. 2

4 Medienschrank Das Testcenter Das Testcenter ist eine speziell auf die technischen und organisatorischen Erfordernisse bei computergestützten Prüfungen ausgerichtete Serviceeinrichtung der Universität Bremen. Es verfügt über einen separaten Anmeldeund Wartebereich, einen PC-Pool mit 120 modernen Arbeitsplätzen und mehrere Technik- und Aufenthaltsräume für Aufsichten und Servicepersonal. Mit seiner geschlossenen Server- und Netzarchitektur erfüllt das Testcenter alle Voraussetzungen, um auch sensible Abschlussprüfungen in hoher Qualität sicher und störungsfrei durchzuführen. Notausgang 17,20m Dozent WC D D D E D D D D E D D D D D D D B B Wartebereich Anmeldung Prüfungssaal 1,00m E D D D D D D D B Heizung 2,30m 2,30m 17,50m 1,60m 15 E D D D D D D D ,95m Lüftung Lager Server Netz Strom Administration Eingang D E Doppeltisch Einzeltisch Bodenverkabelung Tisch mit Kabelkanal B Beamer 3

5 Elektronische Prüfungen Ausstattung: 120 ergonomisch gestaltete Arbeitsplätze mit Desktop-PCs, leiser Tastatur, Headset und Webcam. Schnelles, autonomes und gegen Zugriffe von und nach außen abgeschirmtes Netzwerk. Auf Datensicherheit ausgelegte Serverausstattung. Client-Management-System für eine effektive Steuerung, Konfiguration und Wartung der Arbeitsstationen. Dozentenrechner mit Remote-Control-Software und Mediensteuerung für Datenprojektion und Soundanlage. 4

6 Fragetypen offen freie Eingabe Multiple-Choice Fragen sind nur eine von zahlreichen Optionen, die das im Testcenter genutzte LPLUS Prüfungssystem ( bietet. Die Fragen können frei gestaltet und beliebig mit Graphiken, Tabellen, Videofilmen, Sound, Flash-Objekten, Java-Applets oder umfangreichen Dokumenten als HTML, PDF oder RTF-Datei angereichert werden. Die Möglichkeit zur Integration zusätzlicher Softwareanwendungen oder die optionale Freigabe des Internetzugangs unterstützt die Konstruktion kompetenzorientierter Prüfungen. 5

7 Elektronische Prüfungen Qualitätssicherung Die Qualitätssicherung der Fragenkataloge ist der wichtigste Schritt im Erstellungsprozess und nimmt großen Raum bei der Vorbereitung der Prüfungen ein. Prüfkriterien Inhaltsvalidität Konstruktvalidität Fragestellung Bewertung Schwierigkeitsgrad Trennschärfe Thematische Zuordnung Layout Zeitbedarf Bei jeder Verwendung des Fragenkataloges können die Kommentare der Studierenden sowie die Ergebnisse und Antworten ausgewertet werden. Wie war der Schwierigkeitsgrad der Fragen und Themen? Waren alle Fragen klar verständlich und wurden korrekt bewertet? War das Zeitkontingent angemessen? Entsprechend dieser Analyse werden Fragenkatalog und Prüfungsdesign angepasst und verbessert. 6

8 Das eassessment Team Management Dr. Jens Bücking Testcenter Kai Schwedes Katalog + Systementwicklung Spyros Abatielos Kontakt Universität Bremen Zentrum für Multimedia in der Lehre (ZMML) Bibliothekstr. 1, MZH D Bremen eassessment@uni-bremen.de Zentrum für Multimedia in der Lehre