Kriterien und Instrumente zur Evaluation von E-Learning Angeboten

Transkript

1 Kriterien und Instrumente zur Evaluation von E-Learning Angeboten E. Bratengeyer 1

2 Selbstevaluation Empfehlungen, Auflagen, Neueinreichung, Labelzuordnung das Studienprogramm (Lehrgang) auf Moodle Umsetzung auf niedriger, mittlerer oder hoher Stufe Auditprotokoll mit Punkteauswertung (nach Buhren, Killus & Müller, 1999) eingesetzte Funktionen, genutzte Tools, durchgeführte Aktivitäten Audit, Objektdemonstration (Moodle) Bewertungen und Angaben in den eingereichten Fragebögen Fragebogen mit Bewertungsskalen, Auswahlbox und Freitext 2

3 Instrumente DUK Excel Formular 1/2 3

4 Instrumente elqe Web Formular 2/2 4

5 Didaktische Szenarien A Präsenz mit EL Ergänzung B Blended Learning C E-Learning betreut D Selbstlernprogramm unbetreut E-Learning Einsatz optional obligatorisch obligatorisch obligatorisch E-Learning Nutzen dient der Bereitstellung von zusätzlichen Unterlagen dient der didaktischen Ergänzung. Präsenz und E- Learning sind wechselseitig erforderlich erfüllt alle Lernerfordernisse, einschließlich Betreuung erfüllt alle Lernerfordernisse, keine Betreuung erforderlich Vermittlung erfolgt in Präsenz erfolgt sowohl in Präsenz als auch per E-Learning erfolgt nur per E-Learning erfolgt nur per E-Learning Betreuung erfolgt in Präsenz erfolgt sowohl in Präsenz als auch per E-Learning Erfolgt nur per E-Learning keine Betreuung Lernziele sind auch ohne E-Learning erreichbar sind nicht ohne E-Learning erreichbar. sind nicht ohne E-Learning und nicht ohne Betreuung erreichbar sind nicht ohne E-Learning, aber ohne Betreuung erreichbar 5

6 Zertifizierungen Extern von Dienstleistern Projekt elqe Zielsetzung? Intern an Universitäten Adressaten? Umsetzungsform? Tools? Evaluationskriterien? Konsequenz für elqe? 6

7 Genannte Kategorien (von 16 Institutionen) KATEGORIEN (teilw. zusammengefasst) Anzahl Nennungen 1. Lernprozess, Pädagogik, Didaktik 8 2. Mediendesign, Inhaltsqualität 7 3. Information 4 4. Zielgruppenorientierung, Wahlmöglichkeiten 4 5. Programm, Kurs 4 6. Technologie 4 7. Evaluation, Review 4 8. Curriculumdesign, Planung 3 9. Organisation Management, Strategie, Vision, Kultur Kommunikation Personal- und Studierendenunterstützung, Skills Andere 7

8 Gewählte Kategorien KATEGORIEN (teilw. zusammengefasst) Anzahl Nennungen 1. Lernprozess, Pädagogik, Didaktik 8 2. Mediendesign, Inhaltsqualität 7 3. Information 4 4. Zielgruppenorientierung, Wahlmöglichkeiten 4 5. Programm, Kurs 4 6. Technologie 4 7. Evaluation, Review 4 8. Curriculumdesign, Planung 3 9. Organisation Management, Strategie, Vision, Kultur Kommunikation Personal- und Studierendenunterstützung, Skills Andere: Kompetenzen 8

9 Erstellte Kategorien Fünf Hauptkategorien I. Didaktische Planung II. Lernmaterialien/Content III. Lehr/Lernprozesse IV. Kompetenzen V. Information & Administration 9

10 Haupt- und und Unterkategorien Fünf Hauptkategorien I. Didaktische Planung I.1 Didaktisches Szenario I.2 Didaktische Methode I.3 Lehr/Lernziele und Leistungsüberprüfung I.4 Medien- und Materialienauswahl I.5 Auswahl der Werkzeuge II. Lernmaterialien/Content II.1 Statische Inhalte II.2 Dynamische Inhalte II.3 Externe Quellen II.4 Von Studierenden erzeugte Inhalte II.5 Ergänzende Materialien Unterschiedliche statische Formate werden Drei bis fünf Unterkategorien dem Lehrstoff eingesetzt Komplexe Sachverhalte sind in anschaulicher Form aufbereitet im Einsatz Externe Quellen sind erschlossen und werden genutzt Die Erstellung von Inhalten durch Studierende wird unterstützt Ergänzende unterstützende Materialien sind vorhanden III. Lehr/Lernprozesse IV. Kompetenzen III.1 Moderation und Beratung III.2 Monitoring und Feedback III.3 Kommunikation III.4 Vertiefung III.5 Lernerfolgskontrolle IV.1 Medien/Informationskompetenz (Digital Literacy) IV.2 IT-Kompetenz IV.3 emoderationskompetenz IV.4 Inhaltserstellungskompetenz V. Information & Administration V.1 Programm/Kurs/Modul/LV Information V.2 Formalkriterienerfüllung V.3 Nutzerverwaltung 10

11 elqe.at 11

12 Instrumente Excel Formular 1/2 12

13 Erstellte Kategorien Vier Hauptkategorien I. Informationen und Materialien II. Kommunikation III. Lernprozesse IV. E-Kompetenzen 13

14 Auswertung Kategorie 1 Information & Materialien Metadaten, Kursbeschreibung, Lernergebnisse, Verwaltungsdaten 2.1 Kommunikation Support Studierende <> Lehrgangsmgmt 2.2 Kommunikation Lehrende Studierende <> Lehrende/Studierende 3.1 Lernprozesse Umfang Inhalte 3.2 Lernprozesse Support Moderation 3.3 Lernprozesse Lehrende Interaktionen Faktor % Evaluation Punkte 17% % % % % % >90 >55 4 E-Kompetenzen Lehrgangsmgmt, Lehrende, Administratoren 17% TOTAL

15 E-Learning Label - Entwicklung niedrig mittel hoch Qualität niedrig mittel hoch Quantität

16 Kriterien und Indikatoren Selbstevaluation nach 4 Kriterien und 50 Indikatoren 1. Informationen und Materialien Sämtliche Informationen und für das Studium notwendige Materialien sind auf Moodle in strukturierter Form zugänglich. 2. Kommunikation a) Die Kommunikation zw. Betreuenden und Studierenden wird aktiv betrieben. b) Die Kommunikation zw. Lehrenden und Studierenden wird aktiv betrieben. 3. Lernprozesse a) Lernprozesse werden in Form von E-Learning kompetent umgesetzt. b) Die Studierenden werden beim Lernprozess kompetent betreut. c) Externe Lehrende sind im E-Teachingprozess eingebunden. 4. E-Kompetenzen Die betreuenden Personen (Leitung, Assistenz, Lehrende) verfügen als Team über die nötigen E-Kompetenzen. 16

17 Vergabeprozess für alle Master- und Zertifikatsprogramme (Lehrgänge) freiwillig in Kooperation mit Stabstelle für Qualitätsmanagement und Lehrentwicklung Prozess gemäß Rektoratsrichtlinie Selbstevaluation 4 Kriterien, 50 Indikatoren Audit Reflexion, Verifikation Feedback Label, Empfehlung, Auflagen Studierendenbefragung Re-Audit 17

18 Vielen Dank! 18