Anleitung für ILIAS Test

Transkript

1 Supportstelle für ICT-gestützte Lehre der Universität Bern! Anleitung für ILIAS Test Erstellen von Selbsttests und Online-Übungen! Supportstelle für ICT-gestützte Lehre und Forschung Fabrikstrasse 8 0 Bern info@ilub.unibe.ch Diese Anleitung zur Lernplattform ILIAS ist folgender Creative Commons-Lizenz (V..5) unterstellt: This work is licensed under a Creative Commons License: - by: Namensnennung - nc: Nicht-Kommerziell - sa: Weitergabe unter gleichen Bedingungen

2 Inhalt Diese Anleitung informiert über den Einsatz des ILIAS Testtools, mit welchem Online-Übungen und Selbsttest erstellt werden können. Das ILIAS Testtool kann sowohl für schnelle, einfache Online-Übungen wie auch für erweiterte, aufwendigere Selbsttests angewendet werden. Je nach dem ob Sie einen «Express-Test» oder einen «Erweiterten-Test» anlegen wollen, müssen Sie mehr oder weniger Vorgehensschritte durchlaufen und Einstellungen vornehmen. Kapitel Seite. Neuen Test anlegen. Alternativ einen Fragenpool verwenden 4. Einstellungen 6 4. Eine neue Frage erstellen 4 5. Der Frageneditor 5 6. Fragetypen 6 Express-Modus Erweiterter-Modus 7. Feedbacks und Musterlösungen hinzufügen 8. Fragen zu einem Fragenpool hinzufügen 6 9. Test starten 7 0. Eigene Testergebnisse anzeigen 8 Wichtig: Bitte setzen Sie das ILIAS-Werkzeug «Test» ausschlies-slich für Übungen oder Prüfungsvorbereitungen ein. Für rechtlich verbindliche Leistungskontrollen fehlen vorläufig die universitären Richtlinien.. Manuelle Bewertung 9. Testergebnisse einsehen und verwalten 4

3 . Einen neuen Test anlegen Über «Neues Objekt hinzufügen» kann ein «Test» in ILIAS angelegt werden. Die Fragen werden in der Regel direkt in einem Test gespeichert. Sie können aber auch einen «Fragenpool für Tests» anlegen, um Ihre Fragen in einem Pool zu speichern und so später in einem anderen Test wieder neu einzusetzen (siehe Kapitel «Alternativ einen Fragepool anlegen». Fragen aus einem Test können Sie auch nachträglich in einen Fragenpool verschieben. Klicken Sie auf «Neues Objekt hinzufügen» und wählen Sie «Test». Geben Sie Ihrem Test einen Titel und klicken Sie «Test hinzufügen». HINWEIS: Wollen Sie ohne Fragenpool arbeiten, kann es sinnvoll sein, in den «Allgemeinen Einstellungen» (siehe Kapitel ) die Option «Poolauswahl beim Anlegen von Fragen» zu deaktivieren. Sie werden dadurch beim Anlegen von neuen Fragen nicht mehr gefragt, ob Sie die Frage in einen Fragenpool speichern wollen. Ihre Fragen werden direkt im Test gespeichert.

4 . Alternativ einen Fragenpool verwenden Sie können Fragen in einem Test vorgängig in einem Fragenpool für Tests vorbereiten oder nachträglich in einen solchen abspeichern. Anschliessend können diese Fragen in beliebige Tests übernommen werden. Es stehen Ihnen grundsätzlich zwei Möglichkeiten zur Verfügung, um Fragen zu erstellen: Sie generieren die Aufgaben direkt in einem Test. Bei der ersten Frage, die Sie erstellen möchten, werden Sie aufgefordert anzugeben, ob Sie einen Fragenpool verwenden wollen oder nicht. Ohne Fragepool, werden die Fragen nur im Test selber gespeichert. «Keinen Fragenpool verwenden»: Die Fragen werden direkt im Test gespeichert. Sie können jederzeit nachträglich einem Fragenpool zugeordnet werden. «Vorhandenen Fragenpool verwenden»: Sie erhalten eine Liste Ihrer bestehenden Fragenpools und können auswählen, in welchen Ihre Fragen gespeichert werden sollen. Sie sehen nur Fragenpools, welche Sie in den Einstellungen auf «online» gestellt haben. «Neuen Fragenpool erstellen und verwenden»: Sie können direkt einen neuen Fragenpool erstellen und ihn benennen. Der Fragenpool wird im Hintergrund am selben Ort wie der Test in ILIAS hinzugefügt. Für die Mitglieder in Ihrem Kurs ist dieser nicht sichtbar. Sie erstellen zuerst über «Objekt hinzufügen» einen Fragenpool, erstellen und editieren die Testaufgaben und fügen sie erst danach über «Aus Pool hinzufügen» Ihrem Test hinzu. 4

5 Wenn Sie die Fragen direkt in Ihrem Test bearbeiten, können Sie sicher sein, dass geänderte Aufgaben im Test sofort aktualisiert werden. Ist die Frage bereits in einem Fragepool abgelegt, werden Sie gefragt, ob die Änderungen auch im Fragepool (Originalfrage) übernommen werden sollen. Test Fragepool Wenn Sie die Fragen direkt im Fragenpool bearbeiten, geht ILIAS davon aus, dass Sie die entsprechende Aufgabe nur für kommende Tests ändern möchten. Die Frage wird im laufenden Test nicht angepasst. Fragepool Test 5

6 . Einstellungen Das Testwerkzeug von ILIAS ist umfassend und bietet daher sehr viele Einstellungsmöglichkeiten, die in die Bereiche «Allgemeine Einstellungen», «Notenschema», «Auswertung», «Zertifikat» und «Persönliche Standardeinstellungen» unterteilt sind. a) Allgemeine Einstellungen: Hier werden die wichtigsten Grundeinstellungen aufgezeigt, die Sie vor Start eines Tests beachten müssen. Zusätzlich werden Ihnen einige Hinweise zu Darstellungseigenschaften, Einstellungen in Bezug auf die Reihenfolge der Fragen, Kiosk-Modus und zufällige Fragenauswahl beim Einsatz eines Fragepools näher erklärt. b) Weitere Einstellungen: Wie Sie mit Notenschema, Auswertung, Zertifikat und persönlichen Standardeinstellungen umgehen, können Sie in dieser Anleitung nachlesen. Die Voreinstellungen dieser Bereiche gewährleisten, dass der Test ohne Einstellungsänderung bereits funktioniert. Sie können jedoch Einstellungen ändern, um den entsprechenden Bereich auf Ihre Bedürfnisse anzupassen. 6

7 a. Allgemeine Einstellungen Die wichtigsten Einstellungen bietet der Bereich «Allgemeine Einstellungen»: Online: Während dem Erstellen von Fragen und Vorbereiten des Tests ist dieser «offline», d.h. niemand ausser Administrator/innen haben Zugriff auf den Test. Damit Personen den Test ausfüllen können, müssen Sie ihn «Online» schalten. Anonymität: Sie können festlegen, ob die Ergebnisse der Teilnehmer/innen anonymisiert werden sollen oder nicht. Folgende Einstellungen können zusätzlich festgelegt werden: Informationen zu Beginn und Ende des Tests: Sie können auf der Startseite und am Ende des Tests einen eigenen Text anzeigen lassen. Um die abschliessende Bemerkung anzuzeigen, müssen Sie die entsprechende Option «Abschliessende Bemerkung anzeigen» aktivieren. Komplette Info-Seite anzeigen: Informationen zu den Einstellungen, die Sie vornehmen, sind im Reiter «Info» des Tests über die Schaltfläche «Weitere Informationen anzeigen» für alle zugänglich. Möchten Sie alle Informationen zu diesen Eigenschaften zugänglich machen, aktivieren Sie diese Option. Einstellungen Arbeitssitzung: Hier können Sie u.a. «Start- und Endzeit» des Tests auf ein Datum und eine Uhrzeit festlegen. Die «maximale Anzahl von Testdurchläufen» legt fest, wie oft Teilnehmende Ihren Test ausfüllen dürfen. 7

8 Mit den Optionen unter «Darstellungseigenschaften» können Sie in den «Allgemeinen Einstellungen» die Darstellung der Fragen beeinflussen. JavaScript für die Ausgabe von Testfragen erzwingen: Bei einigen Fragetypen gibt es JavaScript-basierte Ausgaben, womit die Handhabung anders funktioniert. Es handelt sich hierbei oft um Verschiebeaufgaben (Drag and Drop) wie z.b. die Zuordnungsaufgabe. Mit der Option «JavaScript für die Ausgabe von Testfragen erzwingen» wird diese Variante der herkömmlichen Ausgabe vorgezogen. Mit dem «JS»-Button können Sie zwischen den Darstellungsoptionen umschalten. Herkömmliche Ausgabe JavaScript-basierte Ausgabe Ausgabe der Fragentitel: Wählen Sie eine der drei Optionen, um Teilnehmenden den Fragentitel anders anzuzeigen. Fragentitel und erreichbare Punktezahl Nur Fragentitel Weder Fragentitel noch erreichbare Punktezahl 8

9 Mit folgenden Optionen in den «Allgemeinen Einstellungen» können Sie zusätzliche Einstellungen zur «Reihenfolge» der Fragen aktivieren: «Fragen zurückstellen»: Fragen können ans Ende des Testes verschoben und am Ende noch einmal bearbeitet werden. «Fragen mischen»: Bei jedem neuen Durchgang wird die Reihenfolge automatisch neu gemischt. «Fragenübersicht anzeigen»: Eine Übersicht mit allen Fragen des Tests wird gezeigt. In einer Tabelle wird ersichtlich, welche Fragen bereits beantwortet wurden. 4 «Fragenmarkierungen anzeigen»: Jede Frage kann markiert werden, um später wieder zu dieser zurückzukehren. Die Markierungen werden in der «Fragenübersicht» angezeigt, sofern diese aktiviert wurde. 5 «Test unterbrechen Option anzeigen»: Der Test kann jederzeit unterbrochen und später fortgesetzt werden

10 Die Option «Kiosk-Modus» (in den «Allgemeinen Einstellungen») erlaubt es, die gesamte ILIAS-Navigation auszublenden. Hiermit haben die Teilnehmer/innen keine Möglichkeit den Test zu verlassen (ausser die Option «Test unterbrechen-option anzeigen» ist aktiviert). Teilnehmer/innen müssen den gesamtem Test beenden, ehe Sie wieder die gewohnte ILIAS- Navigation sehen. Sie können zusätzlich den Test-Titel und den Namen des Teilnehmenden im Kopf der Seite anzeigen lassen. 0

11 Sie können Fragen des Tests für jeden Teilnehmenden mit einem Zufallsgenerator zusammenstellen lassen. Dazu benötigen Sie in den «Allgemeinen Einstellungen» die Option «Zufällige Auswahl von Fragen». HINWEIS: Für diese Einstellung benötigen Sie zwingend bestehende Fragen in einem Fragenpool. Bei der Auswahl der Fragen im Reiter «Fragen» müssen Sie einen oder mehrere Fragenpools angeben. Zudem können Sie für jeden Fragepool bestimmen, wie viele Fragen daraus für den laufenden Test verwendet werden sollen. ILIAS erzeugt für jeden Testdurchlauf anhand der Fragen der gewählten Fragenpools eine neue zufällige Auswahl.

12 b. Weitere Einstellungen Neben den «Allgemeinen Einstellungen» gibt es weitere Möglichkeiten, Ihren Test und die Ergebnisse Ihren Bedürfnissen anzupassen: Die Art und Weise der Benotung Ihres Tests legen Sie unter «Notenschema» fest. Im Bereich «Auswertung» müssen Sie Entscheidungen zur Auswertung Ihres Tests fällen. Sie legen hier fest, ob Teillösungen möglich sein sollen, wie Multiple-Choice-Aufgaben bewertet werden, ob negative Punkte möglich sein sollen, wie die Bewertung bei mehreren Testdurchläufen oder die Rückmeldung an die Teilnehmerinnen und Teilnehmer aussehen soll. Zu guter Letzt müssen Sie auch entscheiden, wie die Testergebnisse bekannt gegeben werden sollen und wie der Zugang zu den Ergebnissen aussehen wird. Feedback: Wenn Sie das Prüfen eines Ergebnisses direkt bei der Frage ermöglichen möchten, müssen Sie diese Option bei der Auswertung unter «Sofortige Rückmeldung» aktivieren. Sie entscheiden, ob die antwortspezifischen Rückmeldungen, Anzahl erreichter Punkte und/oder die Lösungen angezeigt werden sollen. Die antwortspezifischen Rückmeldungen müssen bei jeder Frage hinterlegt sein, um diese Option zu nutzen (siehe Kapitel 5). Musterlösungen: Wenn Sie Musterlösungen bei einer Frage hinterlegen, müssen Sie diese im Bereich «Präsentation der Testergebnisse» anzeigen lassen, damit die Teilnehmenden die Musterlösungen nach Beenden des Tests einsehen können.

13 Unter «Zertifikat» können Sie ein solches entwerfen und bei erfolgreichem Absolvieren Ihres Tests ausstellen lassen. 4 Unter «Persönliche Standardeinstellungen» haben Sie die Möglichkeit einmal in einem Test vorgenommene Einstellungen zu speichern, um diese in weiteren Tests ohne Aufwand übernehmen zu können. Sie erhalten damit beim Anlegen eines neuen Tests die Möglichkeit Ihre Standardeinstellungen direkt vorzunehmen

14 4. Eine neue Frage erstellen Im Reiter «Fragen» können Sie mit der «Seitenansicht» schnell neue Testfragen erstellen. Sie sehen dabei auch gleich in einer Vorschau, wie die Frage aussehen wird. In der Listenansicht haben Sie die Möglichkeit zu sehen, ob und wenn, ja in welchem Fragenpool die Frage abgespeichert ist. Um eine neue Frage hinzuzufügen, gehen Sie zum Reiter «Fragen». Klicken Sie auf «Frage erstellen». Wählen Sie den gewünschten «Fragetyp» aus. Sie können bei jeder Frage unter «Poolauswahl» neu auswählen, ob Sie die Frage im Test (keinen Fragenpool), in einem bestehenden Fragenpool speichern wollen oder einen neuen Fragenpool erstellen und verwenden möchten. 4

15 5. Der Frageneditor Jeder Fragentyp besitzt einen WYSIWYG-Editor (What you see is what you get) zum Beschreiben der Frage. Sie können damit zum Beispiel Ihren Fragentext formatieren (fett, kursiv, Schriftgrösse, usw.), in Tabellen strukturieren und Bilder einfügend (). Bilder können mit dem «Bild-Manager» hochgeladen und in den Fragetext eingefügt werden: Klicken Sie auf den Bild-Manager (Symbol mit grünem Baum). Wählen Sie anschliessend mit «Durchsuchen» ein Bild auf Ihrem Computer aus und klicken Sie «Hochladen». Falls Sie die Grösse des Bildes anpassen wollen, können Sie dies in den «Bild Informationen» tun (Höhe und Breite werden in Pixel angegeben). 4 Wählen Sie neben Ausrichtung die gewünschte Option. 5 Klicken Sie auf «Einfügen» ganz unten am Fenster. Damit wird Ihr Bild in den Fragentext eingefügt

16 6. Fragetypen In ILIAS gibt es zur Zeit verschiedene Fragetypen. Davon sind für die Erstellung der beiden Fragetypen «Eingebettete Frage - Java Applet» und «Eingebettete Frage - Flash» zusätzliche Programmierkenntnisse notwendig und werden deshalb hier nicht behandelt. Zusätzliche Informationen zu beiden Fragetypen «Java-Applet» und «Flash» finden Sie auf der offiziellen ILIAS-Webseite: Auf den folgenden Seiten finden Sie zu den weiteren Fragetypen eine Erklärung zum Erstellen der Frage und eine Vorschau des Fragetyps. a) Single Choice b) Multiple Choice c) Fehler/Worte markieren d) Hotspot/Imagemap e) Lückentextfrage f) Numerische Antwort g) Begriffe benennen h) Anordnungsfrage (vertikal & horizontal) i) Zuordnungsfrage j) Freitext eingeben k) Datei hochladen Alle Fragetypen verfügen über einen ähnlichen Aufbau. Zu jeder Frage müssen/können folgende Eigenschaften eingetragen werden. Name des Autors (automatisch durch ILIAS) Titel der Frage (wird je nach Einstellung im Test angezeigt) Fragentext Punkte für richtige Antworten Ausführlichere Beschreibung der Frage Erwartete Bearbeitungszeit (Diese kann optional eingetragen werden. Wenn Sie Tests ohne maximale Bearbeitungsdauer verwenden, hat diese Einstellung keinen Einfluss.) 6

17 6a. Single Choice Aus verschiedenen vorgegebenen Antworten wählen die Teilnehmenden des Tests eine Antwort. Geben Sie Ihre Frage in des Feld «Frage» ein. Es empfiehlt sich, die Antworten zu mischen vor allem wenn der Test mehrmals durchgeführt werden kann. Im Bereich «Antworten» geben Sie Ihre Antwortmöglichkeiten an. Mit den Aktionen + und können neue Antwortmöglichkeiten hinzugefügt und entfernt werden. 4 Mit dem Vergeben der Punkte geben Sie auch gleich die korrekte Antwort an. 4 Sie können Antwort-Text mit Antwort- Grafiken ergänzen oder auch nur Antwort-Grafiken zur Auswahl zur Verfügung stellen. In diesem Fall klicken Sie auf «Durchsuchen», wählen Ihr Bild auf dem Computer aus und bestätigen mit «Hochladen». 7

18 6b. Multiple Choice Frage Aus vorgegebenen Antwortmöglichkeiten können Teilnehmende bei der Multiple Choice Frage verschiedene Antworten auswählen. Es können im Prinzip auch alle Antworten ausgewählt werden. Formulieren Sie Ihre Frage im Editor «Frage». Es empfiehlt sich, die Antworten zu mischen vor allem wenn der Test mehrmals durchgeführt werden kann. Im Bereich «Antworten» geben Sie Ihre Antwortmöglichkeiten an. Mit den Aktionen + und können neue Antwortmöglichkeiten hinzugefügt bzw. entfernt werden. 4 Geben Sie die Anzahl zu erhaltenden Punkte, wenn eine Antwort «ausgewählt» oder «nicht ausgewählt» ist. Wie bei der Single Choice Frage können auch hier Text und Grafiken kombiniert werden. 4 8

19 6c. Fehler/Worte markieren Mit dem Fragentyp «Fehler/Worte markieren» können fehlerhafte Worte zum Erkennen erfragt werden. Die Test- Teilnehmenden müssen die falschen Wörter per Mausklick markieren, welche sodann hervorgehoben werden. Dieser Fragentyp eignet sich zum Beispiel im Bereich Rechtschreibung, Grammatik, falscher Angaben, etc. Der Fehlertext besteht aus zwei separaten Teilen: Fehlertext eingeben und Fehlertext analysieren. Als erstes wird der Fehlertext eingegeben. Mit einem Raute- Zeichen (#) wird angegeben, welche Wörter fehlerhaft sind. In einem zweiten Schritt werden die korrekten Antworten eingetragen. Klicken Sie dazu auf den Button «Fehlertext analysieren». Sofort erscheint unterhalb des Fehlertexts ein neuer Abschnitt «Fehlerdaten», wo die fehlerhaften Wörter mit den korrekten kombiniert werden können.4 9

20 Im zweiten Teil des Fragentyps («Fehlerdaten») werden die korrekten Wörter und Punktzahlen eingegeben. Im Abschnitt «Fehlerdaten» können Sie den fehlerhaften Text mit der korrekten Lösung ergänzen (dies ist zwingend, falls die Lösung über sofortige Rückmeldung eingesehen werden soll). 4 Weiter geben Sie für jedes Wort eine bestimmte Anzahl Punkte, wenn dieses ausgewählt wurde. 5 Mit «Falsche Selektionen» werden Minuspunkte vergeben, sollten Wörter vergessen werden. 4 5 Für die Teilnehmenden eines Tests, sieht die Fehlertext-Frage wie links abgebildet aus. Angeklickte Wörter werden blau markiert. 0

21 6d. Hotspot/Imagemap Bei Imagemaps handelt es sich um Bilder, in denen aktive Bereiche (so genannte Hotspots) definiert werden können. Bei Imagemap-Fragen laden Sie ein Bild von Ihrem lokalen Rechner auf die ILIAS-Installation und definieren darin klickaktive Felder ("Regionen"), unter denen die Testpersonen durch Anklicken im Bild das richtige finden müssen. Im ersten Teil müssen Sie eine Frage eingeben. Über «Durchsuchen» können Sie das passende Bild hochladen. Nun müssen im zweiten Teil auf dem Bild die Koordinaten für die aktiven Bereiche festgelegt werden. Falls Sie bereits im Besitz einer fertigen ImageMap-Datei sind, können Sie auch diese inkl. Koordinaten über «Imagemap importieren» hochladen.

22 Ihnen stehen drei unterschiedliche Form-Werkzeuge für die zu definierenden Bereiche zur Verfügung: Rechteck, Kreis und Polygon (Freizeichnungswerkzeug). Legen Sie nicht nur den richtigen sondern auch ein paar falsche Bereiche fest. Wenn man mit dem Mauszeiger über die aktiven Bereiche fährt, wird der Mauspfeil zu einem Hand-Symbol und zeigt somit, dass hier ein aktiver Link vorhanden ist. Im zweiten Teil müssen Sie die aktiven Bereiche im Bild festlegen. Entscheiden Sie sich zwischen «Rechteck hinzufügen», «Kreis hinzufügen» oder «Polygon hinzufügen» und legen Sie jeden Bereich einzeln fest. 4 Sie können einen Hinweis mitgeben, der beim Berühren des aktiven Bereichs am Mauszeiger angezeigt wird. Zudem müssen Sie die Punkte für den richtigen Bereich festlegen. Es kann nur ein Bereich als «richtig» markiert werden. Eine Mehrfachauswahl ist zur Zeit noch nicht möglich.

23 6e. Lückentextfrage Diese Frage besteht aus einer Textpassage (mit Code zum Erzeugen der Lücken, sogenannte «gaps») in der die Antworten entweder aus Text-Lücken oder Auswahl-Lücken bestehen. Dies definieren Sie im zweiten Teil. Im Bereich «Lückentextfrage» kommt sowohl der Aufgabenbeschrieb, wie auch der eigentliche Lückentext hinein. Lücken können Sie mit dem Code [gap]...[/gap] erzeugen. Zwischen beide Teile schreiben Sie das korrekte Lösungswort. Mit «Speichern» können Sie bei längeren Texten zwischenspeichern. 4 Klicken Sie nun auf die Schaltfläche «Lücken erzeugen», um zum Bearbeitungsmodus der Lücken zu gelangen. 4 Die «Methode für Textvergleiche» erlaubt das Konfigurieren der Fehlertoleranz, z.b. indem nicht zwischen Gross- und Kleinschreibung unterschieden oder mit dem Levenshtein-Abstand korrigiert wird (der Wert bedeutet, dass ein Zeichen in beliebiger Form falsch sein darf: gross/klein geschrieben, falsches Zeichen, fehlendes/ zusätzliches Zeichen). Mit der «Länge des Textfeldes» können Sie allen Lückentext-Feldern dieselbe Grösse geben, so dass nicht anhand der Länge auf ein bestimmtes Wort geschlossen werden kann. WICHTIG: Wenn mehrmals dasselbe Wort in Lücken vorkommen kann, muss die Option «Identische Bewertung» aktiviert bleiben.

24 Nach dem Erzeugen der Lücken entscheiden Sie, ob eine Lücke ein leeres Eingabefeld zeigt (Text-Lücke) oder ob Sie eine Auswahl an Antworten vorgeben möchten, aus denen die richtige Antwort ausgewählt werden kann (Auswahl-Lücke). 5 Mit «Lücken erzeugen» wird unterhalb der Lückentext- Frage für jeden Code [gap][/gap] eine Lücke erzeugt. Sie können bei jeder Lücke entscheiden, ob es sich um eine Textlücke (Eingabefeld) oder eine Auswahllücke (Dropdown-Liste) handeln soll. 5 6 Mit den Aktionen + und können Sie zusätzliche Antwortmöglichkeiten einfügen. 6 7 Geben Sie bei der korrekten Antwort die gewünschte Punktzahl an (z.b. ). Klicken Sie auf «Speichern», damit die Werte einer Auswahllücke in den Lückentext weiter oben übernommen werden. 7 Wenn Sie Änderungen am Lückentext vornehmen und neue Lücken erstellen oder entfernen, müssen Sie die Schaltfläche «Lücken erzeugen» erneut klicken, damit die Lücken im Bearbeitungsmodus aktualisiert werden. HINWEIS: Die Alternative zum Levenshtein- Abstand (siehe Teil ) besteht immer darin alle Schreibweisen, die für Sie noch akzeptabel erscheinen, als Antwortmöglichkeit anzulegen. Sie können durch differenzierte Punktevergabe aber durchaus den Effekt erzielen, dass eine auch orthografisch richtige Antwort mehr erzielbare Punkte bietet als eine, die inhaltlich korrekt, aber orthografisch falsch ist. 4

25 6f. Numerische Antwort Bei numerischen Antworten müssen Teilnehmende am Test selbständig numerische Werte eintragen. Mittels einer Oberund einer Untergrenze kann damit ein Bereich korrekter Zahlen festgelegt werden. Geben Sie Ihre Frage in des Feld «Frage» ein. Mit «Maximale Anzahl von Zeichen» können Sie die Grösse des Eingabefeldes bestimmen. Geben Sie die Anzahl Punkte für diese Aufgabe an. 4 Alle Zahlen im Bereich der unteren und oberen Grenze werden als korrekt bewertet und mit der entsprechenden Anzahl Punkte vergütet. 4 Durch Angabe desselben Wertes für Ober- und Untergrenze des Korridors kann auch genau eine Lösung als richtig vorgegeben werden. ILIAS überprüft nicht die Stimmigkeit der eingegebenen Ober- und Untergrenzen. 5

26 6g. Begriffe benennen Frage Bei Textteilmengen-Fragen müssen die Testpersonen selbständig eine vorgegebene Anzahl von Begriffen angeben, die ein beliebiger Ausschnitt aus einem (grösseren) Set korrekter Antwortmöglichkeiten sein können. Geben Sie Ihre Frage und Ihren Text in des Feld «Frage» ein. Geben Sie an, wie viele Antwortfelder die Teilnehmenden angezeigt bekommen. Im Bereich «Antworten» geben Sie eine beliebige Anzahl von korrekten Antwortmöglichkeiten an. 4 Vergeben Sie für jeden Antworttext die Anzahl machbaren Punkte. 4 6

27 6h. Anordnungsfrage (vertikal & horizontal) Mit einer «Anordnungsfrage» können Terme oder Bilder von oben nach unten in eine korrekte Reihenfolge gebracht werden (vertikal). Die Variante «Anordnungsfrage (horizontal)» ermöglicht eine Reihenfolge von links nach rechts. Fügen Sie Ihre «Frage» in den Frage- Editor und die «Antworten» hinzu. Um anstelle von Text Bilder zu ordnen, klicken Sie auf «Bilder ordnen». Nun können Sie im Bereich der Antworten Bilder auf Ihrem Computer durchsuchen und hochladen. Um weitere Antworten hinzuzufügen, klicken Sie auf das grüne Plus. Mit dem roten Minus können Sie zu viele Antworten entfernen. Mit den schwarzen Pfeilen können Sie die Antworten für die richtige Reihenfolge sortieren. 7

28 6i. Zuordnungsfrage Bei Zuordnungsfragen müssen die Testpersonen vorgegebene Paare aus Text oder Text/Bild einander zuordnen. Es ist dabei auch möglich überzählige, nicht zuzuordnende Elemente zur Auswahl anzubieten. Eine Zuordnungsfrage besteht aus «Termen» und «Definitionen». Die «Terme» können einer «Definition» zugeordnet werden. Im ersten Teil des Frageeditors geben Sie die «Frage» ein. Entscheiden Sie sich, ob Antworten gemischt werden sollen. Da auch Bilder zugeordnet werden können, haben Sie unter «Vorschaugrösse» die Möglichkeit, die Grösse der Vorschaubilder zu definieren. Für diesen Fragentyp gibt es im Präsentationsmodus des Tests eine JavaScript-unterstützte Anzeigemöglichkeit, in der die Lösungsreihenfolge mit Ziehen und Loslassen (Drag & Drop) angeordnet werden kann (siehe Kapitel a unter «Darstellungsoptionen»). Die Testpersonen können diese alternative Anzeigemöglichkeit beim Aufrufen des Tests aktivieren. 8

29 Bevor Sie die Paare erstellen, muss mindestens eine Definition bzw. sollten am besten alle Definitionen und Terme angegeben werden, d.h. die Begriffe, die jeweils einen Bestandteil des Paares ausmachen. 4 4 Geben Sie nun die Definitionen an (für die Testpersonen werden diese im Test links am Bildschirm angezeigt und können nicht zugeordnet werden). Sie können Text oder Bilder oder die Kombination von beidem angeben. Mit Aktionen + und können Sie weitere Definitionen festlegen. 5 Nun geben Sie die Terme an, welche den Definitionen zugeordnet werden können (für die Testpersonen werden diese rechts am Bildschirm angezeigt und können zugeordnet werden). 5 6 Unter «Zuordnungspaare» geben Sie an, welche Definitionen und Terme zusammengehören und wie viele Punkte eine richtige Zuordnung erhält. Hier entscheiden Sie, wie viele korrekte Zuordnungen zwischen den Definitionen und Termen möglich sind. Zur Zeit sind nur : Zuordnungen möglich. Ein Term kann nicht mehreren Definitionen zugeordnet werden. 5 9

30 Die Zuordnung mit JavaScript erfolgt über «Drag and Drop», d.h. mit der Maus packen und an der richtigen Stelle loslassen. Um einen Term (zum Beispiel «Dom Santa Maria Assunta») einem Bild zuzuordnen, muss dieser mit der Maus gepackt und über der richtigen Definition (zum Beispiel «Bild Dom innen») losgelassen werden. Weisen Sie Ihre Teilnehmenden daraufhin, dass ein schwarzer dicker Rahmen erscheint, sobald der Term auf den aktiven Bereich der Definition gelegt wird. Erst wenn der Term bei der Definition hängen bleibt, ist die Zuordnung gemacht. 0

31 6j. Freitext Freitextfragen eignen sich für offene Textfragen. Dieser Fragentyp muss manuell bewertet werden. Sie können unter «Maximale Anzahl von Zeichen» angeben, wie viele Zeichen geschrieben werden dürfen. Dies kann hilfreich sein, damit Teilnehmende einen Richtwert erhalten, wie viel Text erwartet wird. Es ist möglich, Begriffe festzulegen, die eine automatische Auswertung erlauben. Allerdings sind Freitextfragen beim bisherigen Stand der Technik nicht zuverlässig maschinell auswertbar, sie müssen auf jeden Fall nachträglich nachbewertet werden.

32 6k. Datei hochladen Mit dem Fragentyp «Datei hochladen» können Sie eine offene Frage stellen und zugleich das Einfordern von dazugehörigen Dateien (z.b. Skizzen, Berechnungen, Präsentationen, Computer-Programme) ermöglichen. Dieser Fragentyp muss manuell bewertet werden. Unter «Erlaubte Dateierweiterungen» können Sie einschränken, welche Dateiformate hochgeladen werden dürfen. Mit dem Frageneditor können Sie auch Bilder in Ihren Fragentext einbauen (Bild- Manager öffnen). Die hochgeladenen Dateien können über das Register «Statistik» im Menü «Ergebnisse zu Einzelfragen» gesammelt heruntergeladen werden (siehe Kapitel 8b «Statistiken einsehen»).

33 7. Feedbacks und Musterlösungen hinzufügen Bei jeder Frage können sogenannte «Feedbacks» (Sofortige Rückmeldungen) und «Musterlösungen» hinterlegt werden. Damit können Sie Lösungen zu jeder Frage hinterlegen, welche die Test-Teilnehmenden einsehen können. Nachfolgend werden Ihnen die beiden Optionen genauer erklärt: a) Feedbacks b) Musterlösungen

34 7a. Feedback hinzufügen Sie können jeder Frage ein individuelles Feedback hinzufügen. Das Feedback kann von Test-Teilnehmenden sofort beim Beantworten einer Frage aufgerufen werden aktivieren Sie dazu in den Einstellungen «Auswertung» die Option «Sofortige Rückmeldungen anzeigen» (siehe Kapitel b unter «Auswertung»). Um ein Feedback hinzuzufügen, klicken Sie im Bearbeitungsmodus einer Frage auf das Register «Feedback». Hier können Sie Ihre sofortigen Rückmeldungen in einem Editor eintragen. a Je nach Fragentyp stehen Ihnen folgende Rückmeldungsmöglichkeiten zur Verfügung: a) bei richtige Lösung b) bei mindestens einer falschen Antwort c) für jede Antwortmöglichkeit eine spezifisch formulierte Rückmeldung (nicht bei allen Fragetypen möglich) b c Das Feedback ist für Test-Teilnehmende während dem Beantworten der Frage über die Schaltfläche «Prüfen» aufrufbar. Damit diese Schaltfläche angezeigt wird, muss in den «Allgemeinen Einstellungen» die Option «Sofortige Rückmeldungen anzeigen» aktiviert sein. c 4

35 7b. Musterlösungen hinzufügen Die Musterlösungen können am Ende eines Tests beim Begutachten der eigenen Testergebnisse aufgerufen werden - aktivieren Sie dazu «Musterlösungen anzeigen» in den Einstellungen unter «Auswertung» (siehe Kapitel b «Auswertung»). Klicken Sie im Bearbeitungsmodus einer Frage auf den Reiter «Musterlösung» und entscheiden Sie sich für eine Art der Musterlösung. Klicken Sie dann auf «Auswählen» und hinterlegen Sie die Musterlösung. Folgende Arten von Musterlösungen sind möglich: Lernmodul ILIAS Kapitel Seite Glossarbegriff Datei-Download Text Klicken Sie am Schluss des Testdurchlaufs auf Aktionen und dann «Details anzeigen» und Sie können die Musterlösungen einsehen (siehe Kapitel 7b). 5

36 8. Fragen zu einem Fragenpool hinzufügen Fragen, die Sie direkt im Test erstellt haben, können nachträglich in einen Fragenpool kopiert werden. Damit Sie eine Frage zu einem Fragenpool hinzufügen können, muss letzterer «Online» sein. Gehen Sie in die Listenansicht der Fragen (Register «Fragen», Menü «Listenansicht»). Markieren Sie die gewünschten Fragen mit einem Häkchen (Checkbox) neben dem Titel. Wählen Sie aus dem Auswahlmenü unterhalb der Tabelle die Option «Zu Fragenpool hinzufügen» aus und klicken Sie daneben auf «Ausführen». 4 ILIAS bietet nun alle für Sie verfügbaren Fragenpools in einem Auswahlmenü an, d.h. solche in denen Sie Bearbeitungsrechte haben. Wählen Sie einen der Fragenpools aus und klicken Sie auf «Abschicken». 4 5 In der Spalte «Fragenpool für Test» können Sie jederzeit einsehen, ob bzw. in welchem Pool die entsprechende Frage abgelegt ist. 5 6

37 9. Test starten Die Teilnehmenden starten den Test, indem Sie auf das Test-Objekt klicken und mit der Schaltfläche «Test starten» den Test beginnen. ACHTUNG: Sie können den Test zu Testzwecken ausprobieren, müssen dann aber Ihre Testdatensätze im Register «Teilnehmer» wieder löschen, bevor Sie Fragen weiterbearbeiten und verändern können (siehe Kapitel 8a «Teilnehmenden-Daten verwalten»). Sollte sich Ihr Test nicht starten lassen, haben Sie womöglich den Test nicht «Online» gestellt. Standardmässig können die Testergebnisse nach Beenden des Tests direkt eingesehen werden. Sie können als Test- Administrator/in in den Test-Einstellungen unter «Auswertung» festlegen, ob der Zugang zu den Testergebnissen vorhanden ist («Zugang zu den Testergebnissen») und welcher Testdurchlauf bewertet werden soll («Bewertung bei mehreren Testdurchläufen»). 7

38 0. Eigene Testergebnisse anzeigen In den «Allgemeinen Einstellungen» kann festgelegt werden, wie oft ein Test durchgeführt werden kann. Die «Maximale Anzahl von Testdurchläufen» ist standardmässig auf 0 (= unbegrenzt) eingestellt. D.h. der Test kann beliebig oft wiederholt werden. Hat man einen Test beendet, kann man sich seine eigenen Testergebnisse im Normalfall anzeigen lassen. Auf diese kann beim Reiter «Info» über «Testergebnisse anzeigen» zugegriffen werden. Mehrere Testdurchläufe werden untereinander aufgelistet. Je nach Einstellung ist der letzte oder der beste Testdurchlauf als bewertet markiert (rot). Über «Aktionen» und dann «Details anzeigen» kann auf die einzelnen Fragen zugegriffen werden. 8

39 . Manuelle Bewertung Offene Fragentypen wie z.b. Freitextfragen müssen manuell bewertet werden. Bei der «Manuellen Bewertung» kann eine individuelle Rückmeldung und die Anzahl erreichter Punkte eingegeben werden. Klicken Sie im Test auf den Reiter «Manuelle Bewertung» und klicken bei jenem Teilnehmer, den Sie bewerten möchten auf «Ändere Bewertung». Ihnen werden nun alle offenen Fragen aufgelistet, die Sie manuell bewerten müssen. Sie können nun eine «Manuelle Rückmeldung» verfassen. Geben Sie die Anzahl erreichter Punkte ein und «Speichern» Sie Ihre Bewertung. 4 Wenn Sie die Option «Als bewertet markieren» auswählen, können Sie aktivieren und speichern, damit diese Person im Filter «Benutzerstatus» (siehe j) unter «bestanden» aufgelistet wird. 4 9

40 WICHTIG: Damit die Teilnehmenden die individuelle Rückmeldung in ihren Testergebnissen sehen, muss in den Test- Einstellungen unter «Auswertung» die Option «Antwortspezifische Rückmeldungen in den Testergebnissen anzeigen» aktiviert sein! Die manuelle Rückmeldung können Test-Teilnehmende in ihren eigenen Testergebnissen ansehen: Reiter «Info» > «Testergebnisse anzeigen» > «Aktionen» und dann «Details anzeigen» > entsprechende Frage anklicken 40

41 . Testergebnisse einsehen und verwalten Tests weisen drei Bearbeitungsdialoge auf, in denen Teilnehmenden-Daten eingesehen und/oder verwaltet werden können: a) Teilnehmer b) Statistik c) Export a b c Die einzelnen Reiter werden auf den nachfolgenden Seiten genauer vorgestellt. 4

42 a. Teilnehmenden-Daten verwalten Über das Register «Teilnehmer» können Nutzerdaten des Tests eingesehen und gelöscht werden. In einer Liste werden Ihnen alle Teilnehmende aufgeführt, die den Test begonnen oder abgeschlossen haben. Sie können über «Testergebnisse anzeigen» direkt auf die Antworten der Person zugreifen (auch auf Ergebnisse der nicht bewerteten Testdurchgänge) oder über das Dropdown-Menü zwischen drei weiteren Ansichten wählen: 4 Wenn Sie selber den Test zu Testzwecken ausgefüllt haben, müssen Sie über «Testdaten aller NutzerInnen löschen» Ihre Testdaten erst wieder löschen, ehe Sie Fragen bearbeiten können. Denn sobald Nutzerdaten vorhanden sind, können Sie keine Änderungen mehr an den Fragen vornehmen. Wählen Sie nun «Ergebnisübersicht (bewerteter Testdurchlauf)», um eine Übersicht zu erhalten und um (fals vorhanden) die Musterlösung einzusehen. Wählen Sie «Antworten (bewerteter Testdurchlauf)», um sämtliche Antworten einsehen zu können 4 Wählen Sie «Detaillierte Testergebnisse (bewerteter Testdurchlauf)», um eine Kombination aus den Punkten und zu erhalten. 4

43 b. Statistiken einsehen Im Reiter "Statistik" stehen neben aggregierten Ergebnissen (z. B. Notendurchschnitt) auch individuelle Daten für alle oder einzelne Testpersonen zur Verfügung. Die angezeigten Testergebnisse können in den Formaten Excel oder CSV (kommagetrennte Werte) exportiert werden. «Auswertung für alle Benutzer»: Übersicht für alle Test-Teilnehmenden mit Anzahl erreichter Punkte, bestanden/nicht bestanden und Bearbeitungsdauer. «Aggregierte Testergebnisse»: Allgemeiner Überblick über wichtige statistische Daten (Gesamtzahl der Personen, die den Test gestartet haben; mittlere Bearbeitungsdauer; durchschnittliche Punktezahl der Fragen; u.a.) «Ergebnisse zu Einzelfragen»: Detaillierte Informationen zu jeder Einzelfrage als PDF. Diese Ansicht ist u.a. sinnvoll, wenn Sie Fragen haben, welche separat begutachtet und bewertet werden müssen (z.b. Textaufgaben). Hier können Sie sich alle Antworten zu einer Frage in einem PDF exportieren und ausdrucken. 4 Zudem lassen sich hier die hochgeladenen Dateien einer Datei-Upload-Frage herunterladen. 4 4

44 c. Ergebnisdatei exportieren Im Reiter Export" finden Sie die Schaltfläche «Erstelle Ergebnisdatei» mit welcher Sie sich zwei Dateitypen (im Format CSV und XLS) generieren lassen können. Die Dateien enthalten alle Ergebnisse der Teilnehmenden. Markieren Sie die gewünschte Datei bzw. den gewünschten Dateityp, den Sie herunterladen möchten, wählen Sie aus dem Dropdown-Menü «Herunterladen» aus und klicken Sie auf «Ausführen» um die Datei/en auf Ihrem Computer zu speichern. Die Schaltfläche «Erstelle Exportdatei» können Sie benutzen, um Ihren Test inkl. Fragen und Testeinstellungen in Form einer komprimierten XML-Datei zu exportieren und auf einer anderen ILIAS-Installation importieren zu können. Beachten Sie aber, dass der XML-Export keine Antwortdaten der Benutzer enthält, da der Sinn des Exports darin besteht, die Testfragen als solche zu exportieren. 44