USABILITYTESTING LEICHT GEMACHT

Transkript

1 USABILITYTESTING LEICHT GEMACHT Julia Küfner

2 USABILITY? BENUTZERFREUNDLICHKEIT? WARUM? AISBILDUNGSFORSCHUNG IN DER MEDIZIN

3 WARUM? Häufig wird viel Aufwand in gute E-Learning Anwendungen gesteckt. Eigentlich gute Anwendungen scheitern häufig. Selten werden Nutzer befragt (nur über Fragebogen) Skepsis gegenüber Usabilitytesting Moodle kann sehr unterschiedlich eingesetzt werden. (Schule, Hochule, Firmen,.) Jeder Anwendungsbereich bedeutet individuelle Anforderungen an die Plattform Was in meinem Moodle gut funktioniert, funktioniert nicht unbedingt in Ihrem

4 > Sie müssen kein Experte sein! 4

5 > Learning by doing 5

6 USABILITYTESTING? USER-CENTRED DESIGN? AISBILDUNGSFORSCHUNG IN DER MEDIZIN

7 SOFTWARE ENTWICKLUNGSPROZESS FRÜHER Anforderungsanalyse Entwurf Realisierung Auslieferung/ Nutzung Fokus auf Auftraggeber. Endnutzer werden gar nicht oder erst am Ende befragt und involviert 7

8 USER CENTRED DESIGN "Human-centered design is characterised by: the active involvement of users and a clear understanding of user and task requirements; an appropriate allocation of function between users and technology; the iteration of design solutions; multidisciplinary design." - ISO Anforderungs analyse Entwurf Realisierung Nutzung 8

9 > Sie sind nicht der Nutzer! 9

10 > Know your users! 10

11 UCD METHODEN Paper Prototyping Personas Card Sorting Usabilitytest Fokusgruppen Expertenreview Eyetracking Cognitive walkthrough 11

12 UCD METHODE: USABILITYTESTING 12 AISBILDUNGSFORSCHUNG IN DER MEDIZIN

13 USABILITYTEST Im Allgemeinen ist ein Usabilitytest ein 1:1 Interview. (teilweise mit Assistenten) 1 Proband benutzt das Testobjekt und wird dazu vom Interviewer beobachtet und befragt 13

14 PLANUNG USABILITYTEST Was möchten Sie auswerten, wem wollen sie ihre Ergebnisse präsentieren? Reicht es wenn sie während des Tests mitschreiben? (Zitate, Probleme) Benötigen sie quantitative Daten? Zitate mitschreiben (mit Uhrzeit) 14 Brauchen Sie Audio/Videoaufzeichung? Eyetracking? man braucht weniger als man denkt! No equipment? That's no excuse for not testing your design. ing-usability-lab/

15 PLANUNG USABILITYTEST Was möchten Sie testen? z.b. die Moodle Plattform oder eine spezielle Aktivität Was möchten Sie herausfinden? konkretes Nutzerziel? z.b. Anmeldung für Kurs, Aufgabe abgeben, Werden alle relevanten Inhalte schnell gefunden Out-of the Box test > z.b. Wie finden Erstsemesterstudenten eigentlich die moodle Plattform im Internet und was ist ihr erster Eindruck/Nutzung Vergleichstest > Ist Kursformat A oder B besser? 15

16 PLANUNG USABILITYTEST REKRUTIERUNG Wen müssen Sie folglich testen? Welche Personengruppe/n ist/sind betroffen? Ziel: 5-6 Personen je Gruppe (Leicht verfügbar/ schwer verfügbar?) Tipp für die Rektrutierung: Vermitteln Sie Ihren potentiellen Probanden dass Sie den Test durchführen um moodle für sie zu verbessern! Moodle soll schöner werden 16

17 BEISPIEL KURSFORMATE /KURSSTRUKTUR Pro Block ein gesonderter Kurs (-> viele Kurse, komplexe Struktur) 17

18 BEISPIEL KURSFORMATE /KURSSTRUKTUR Ein Kurs pro Block, pro Abschnitt eine Veranstaltung (-> lange Kurse) 18

19 BEISPIEL KURSFORMATE /KURSSTRUKTUR Vergleich Collapsed Topics Format vs. 1 Seiten Format (ab moodle 2.3) 19

20 PLANUNG USABILITYTEST LEITFADEN - BEISPIEL Vorbefragung Alter, Semester Durchgang 1 Bitte stellen Sie sich vor Sie möchten Information.. in Moodle herausfinden. Wie würden Sie dafür vorgehen? Wie/Wo loggt Student sich ein? Wie kommt er zum entsprechenden Kurs (Seitennavigation, Meine Kurse, Startseite) Probleme bei Navigation? Probleme Information zu finden? Kommentare / Probleme / Bemerkungen? Wie hat Ihnen das jetzt gefallen? 20

21 TIPPS FÜR DIE TESTUMGEBUNG Je nach Testgegenstand können Sie direkt in Ihrem vorhandenen Moodle testen Bei Vergleichstest oder Test von neuen Inhalten/Aktivitäten können Sie neue Kurse in einem Testbereich anlegen Bei Tests die ganze Umstrukturierungen in Moodle bedeuten, empfiehlt es sich eine Testversion anzulegen moodle kann man auch lokal auf Ihrem Rechner installieren 21

22 PLANUNG USABILITYTEST TESTDURCHLAUF Testdurchlauf mit Kollegen oder Testproband (Technik, Ablauf, Zeit) Bitten Sie den Testprobanden um Feedback zum Test aber auch zu Ihrem Verhalten während des Testablaufs. Überlicherweise dauert ein Testdurchlauf je nach Testgegenstand zwischen Minuten 22

23 > Testen Sie früher als Sie denken dass es sinnvoll ist! 23

24 TIPPS EINFÜHRUNG FÜR DEN PROBANDEN Begrüßung nicht zu viel verraten! Heute wollen wir uns mal XXX anschauen Ablauf erklären und Angst nehmen Hierzu werde ich Ihnen erst einmal ein paar allgemeine Fragen stellen und dann ein paar konkrete Aufgaben geben. Hier würde ich Sie bitten dass sie diese genauso ausführen wie sie es auch zu Hause tun würden. Ganz wichtig! Ich teste nicht Sie sondern die Anwendung und möchte sehen ob die Anwendung Sie bei Ihrer Nutzung unterstützt. Sie können also keine Fehler machen. 24

25 TIPPS EINFÜHRUNG FÜR DEN PROBANDEN Laut Denken Wenn Sie die konkreten Aufgaben durchführen würde ich Sie bitten laut zu denken damit ich einen Eindruck davon habe was in Ihnen vorgeht. Ich persönlich bin an der Entwicklung dieser Anwendung nicht beteiligt / Ich arbeite nicht in der Lehre Sie haben also nichts zu befürchten / Ich bin mit der Anwendung nicht verheiratet und möchte wirklich herausfinden wie man sie verbessern kann ich bin Ihnen daher in keinster Weise böse wenn Sie die Anwendung kritisieren. 25

26 TIPPS WÄHREND DEM TEST Bleiben Sie neutral! Auch wenn Sie die Anwendung entwickelt haben versuchen Sie sich so zu verhalten als ob es nicht Ihre wäre und Sie nur für den Test bezahlt werden! Wenn Proband etwas nicht versteht/falsch macht /negativ kommentiert. Nehmen Sie es nicht persönlich! Nicht eingreifen/berichtigen/helfen (nur in Notfällen wenn Testfortgang sonst gefährdet) Fragen Sie nach! Wo sind wir jetzt? Was ist gerade passiert? Was können Sie hier alles machen? Verwenden sie keine Fachsprache! (nicht dropdown Menü, Coverflow ) 26

27 AUSWERTUNG Machen Sie eine Kurzauswertung direkt nach dem Test z.b. Mitschrift als Exceltabelle Themenbezogen Wenn Sie die Ergebnisse anderen präsentieren möchten: Schreiben Sie einen kleinen Bericht mit Screenshots und wichtigen Problemen Schneiden Sie Highlights als Video zusammen 27

28 ERGEBNISSE UMSETZEN Usability ist kein Hexenwerk, oft reichen schon banale Änderungen Probanden nennen häufig konkrete Verbesserungsvorschläge Bei komplexen Problemen mit anderen Diskutieren, Guidelines zu Rate ziehen Evaluieren Sie ihre Änderungen 28

29 MEHR INFORMATION Usability Professionals Association 29

30 VIELEN DANK FÜR IHRE AUFMERKSAMKEIT ANSPRECHPARTNER: Julia Küfner Klinikum der Universität München Lehrstuhl für Didaktik und Ausbildungsforschung in der Medizin 30 NAME DER EINRICHTUNG. KANN AUCH 2 ZEILIG SEIN