Schwerpunkte der Evaluation des Intel Lehren-Aufbaukurs Online

Transkript

1 Schwerpunkte der Evaluation des Intel Lehren-Aufbaukurs Online Prof. Dr. Barbara Jürgens Institut für Pädagogische Psychologie Technische Universität Braunschweig Prof. Dr. B. Jürgens 1

2 Gliederung 1. Zielsetzung des Programms 2. Zielsetzung der Evaluation 3. Evaluationskriterien 4. Zielgruppen der Evaluation 5. Schwerpunkte der Evaluation Prof. Dr. B. Jürgens 2

3 Zielsetzung des Programms Lehrerinnen und Lehrer mit neuen Unterrichtsmaterialien auf der Basis der Nutzung digitaler Medien bekanntmachen Sie bei der Entwicklung neuer Unterrichtspraktiken und -methoden auf der Basis der Nutzung digitaler Medien unterstützen Positivere Einstellung zu digitalen Medien fördern Nachhaltige Integration Medien- und IT-gestützter Materialien, Praktiken und Methoden in den Unterricht Befähigen der Schüler zu 21 st century skills Prof. Dr. B. Jürgens Programm: Ziele 3

4 Zielsetzung der Evaluation Ziel Optimierung Der technischen/ optischen Gestaltung der Plattform Der inhaltlichen Gestaltung des Programms Prozessbegleitend: formativ Überprüfung Der Auswirkungen des Programms auf Nutzung Neuer Medien Unterrichtsgestaltung Einstellungen/subjektive Urteile Nach Abschluss: summativ Kontexteinflüsse Prof. Dr. B. Jürgens Evaluation: zentrale Zielsetzungen 4

5 Zielsetzung der Evaluation Verwendbarkeit bei unterschiedlichen Formen der Intel-Weiterbildung Sparsamkeit Aussagekräftige und längerfristig zur Verfügung stehende Daten Schnelle Abrufbarkeit von Ergebnissen Datenschutz Prof. Dr. B. Jürgens Evaluation: weitere Zielsetzungen 5

6 Evaluationskriterien Prozessbegleitend: formativ Plattform Technische Gestaltung (Funktionalität, Erreichbarkeit, Zugang, Häufigkeit und Art von Fehlern, Abbrüchen, Support etc.) Optische Gestaltung (intuitive Benutzerführung, Prägnanz, Navigation, Verlinkung, Hilfefunktionen etc.) Weitere Wünsche/Bedürfnisse der Nutzer Prof. Dr. B. Jürgens Kriterien formative Evaluation 6

7 Evaluationskriterien Prozessbegleitend: formativ Programm Struktur/Konzept Angemessenheit in Bezug auf Wünsche und Bedürfnisse der Nutzer Transparenz Arbeitsformen (Mail, Chatroom, Forum etc.) Funktionalität Intensität der Nutzung Zusätzliche Bedürfnisse der Nutzer Prof. Dr. B. Jürgens Kriterien formative Evaluation 7

8 Evaluationskriterien Prozessbegleitend: formativ Inhalte/Arbeitsaufträge Verständlichkeit der Informationen und Instruktionen Anpassung an Bedürfnisse der Nutzer/Übertragbarkeit Schwierigkeit Unterstützung/Begleitung Art der Unterstützung Nutzen Prof. Dr. B. Jürgens Kriterien formative Evaluation 8

9 Evaluationskriterien Nach Abschluss: Summativ (Unmittelbar nach Beendigung des Programms und nachhaltig) Nutzung der Arbeitsergebnisse des Programms Häufigkeit Breite Nachhaltigkeit Einsatz digitaler Medien im Unterricht Einsatz allgemein Einbindung in Unterrichtsplanung und -durchführung Nutzung durch Schüler Prof. Dr. B. Jürgens Kriterien summative Evaluation 9

10 Evaluationskriterien Nach Abschluss: summativ Unterrichtsgestaltung Schülerzentrierte Unterrichtsformen Kooperative Unterrichtsformen Forschungsorientierung Prof. Dr. B. Jürgens Kriterien summative Evaluation 10

11 Evaluationskriterien Nach Abschluss: summativ Einstellungen/Urteile Beurteilung des Erfolgs des Programms Beurteilung der Anwendbarkeit der einzelnen Elemente des Programms Beurteilung der Wirkung auf das Verhalten der Schüler im Unterricht Einstellung zur Nutzung digitaler Medien Selbstwirksamkeit im Umgang mit dem Computer Prof. Dr. B. Jürgens Kriterien summative Evaluation 11

12 Zielgruppen Personen, die an der Intel-Fortbildung teilnehmen und diese abschließen Personen, die ohne Fortbildung auf die Plattform zugreifen bzw. die Intel-Fortbildung nicht beenden Moderatoren Personen, die andere Fortbildungen absolvieren Prof. Dr. B. Jürgens Zielgruppen 12

13 Schwerpunkte der Evaluation Teilnehmer Intel Fortbildung (TI) Website-Nutzer ohne Intel Fortbildung (WN) Andere Lehrerfortbildung (LF) Moderatoren (M) Optimierung, Kontext FB Optimierung, Kontext FB Kontext FB Teamarbeit FB Mitgebrachte Einstellungen, Urteile FB Mitgebrachte Einstellungen, Urteile FB Einstellungen, Unterricht FB Wirkung auf Unterricht, Einstellungen, Urteile Nachhaltigkeit FB (I, B) FB FB: Fragebogen I : Interview B : Beobachtung Prof. Dr. B. Jürgens Evaluationsschwerpunkte 13

14 Schwerpunkte der Evaluation Teilnehmer Intel Fortbildung (TI) Einstellungen, Urteile 1 Optimierung, Kontext Wirkung auf Unterricht, Einstellungen, Urteile. Kontext 2 3 Nachhaltigkeit 4 Website-Nutzer ohne Intel Fortbildung (WN) Optimierung, Kontext 2 Andere Lehrerfortbildung (LF) Einstellungen, Kontext 1 Unterricht, Einstellungen 3 Teamarbeit Moderatoren (M) 4 Prof. Dr. B. Jürgens Evaluation: zeitlicher Verlauf 14

15 Schwerpunkte der Evaluation (Weiterbildende) Trennen von Personenbezogene Informationen Befragungsdaten (Evaluatoren) Gesonderter Server für Befragungsinstrumente Bei Mehrfachbefragungen: nicht-sprechender Code Anonymisierte Auswertung von Gruppendaten Prof. Dr. B. Jürgens Datenschutz 15

16 Schwerpunkte der Evaluation Teilnehmer Intel Fortbildung (TI) Website-Nutzer ohne Intel Fortbildung (WN) Andere Lehrerfortbildung (LF) Moderatoren (M) Präsenzphase Arbeit mit Plattform Fragebogen- Server (anonymisierte Daten) Intel- Plattform Auswertung Prof. Dr. B. Jürgens Datenschutz 16

17 Schwerpunkte der Evaluation Prof. Dr. B. Jürgens Fragebogen 17

18 Schwerpunkte der Evaluation Prof. Dr. B. Jürgens Fragebogen 18

19 Schwerpunkte der Evaluation Prof. Dr. B. Jürgens Fragebogen 19

20 Schwerpunkte der Evaluation Erste Abstimmung mit Auftraggeber/Weiterbildenden Sichtung der Ergebnisse der vorangegangenen Evaluationen Zusammenstellung Evaluationskriterien Synopse Befragungsinstrumente Konzeption Evaluationsdesign Prüfen technischer Lösungen für datenschutzrechtliche Fragen Erster Entwurf Evaluationsinstrument Prof. Dr. B. Jürgens Arbeitsschritte: abgeschlossen 20

21 Schwerpunkte der Evaluation Weitere Abstimmungen mit Auftraggeber/Weiterbildenden Präzisierung der Fragen zu formativer Evaluation der inhaltlichen Programmgestaltung Ggf. Modifikationen am Evaluationskonzept Endfassung des Instruments Letzte Sichtung durch Auftraggeber/Weiterbildende Beginn der Evaluation Prof. Dr. B. Jürgens Zukünftige Arbeitsschritte 21

22 Vielen Dank für Ihre Aufmerksamkeit! Prof. Dr. B. Jürgens 22