E-Learning in Sportgymnasien. Evaluation des Modellversuchs ELEAS.

Transkript

1 Media Design Center (MDC) E-Learning in Sportgymnasien. Evaluation des Modellversuchs ELEAS. Thomas Köhler, Claudia Börner Technische Universität Dresden Media Design Center MEDIA DESIGN CENTER Technische Universität Dresden Dresden Gliederung der Präsentation 1.Design und Instrumentarium der Evaluation 2.Befunde für Schüler und Lehrer.Diskussion Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 2 von 29 1

2 1. Design und Instrumentarium der Evaluation: Ziele Zweck der wissenschaftlichen Untersuchung ist, zu prüfen, ob das Hauptziel des Schulversuches, die Verbesserung der unterrichtlichen Unterstützung für sportlich stark belastete Schüler an sportbezogenen Schulen durch den Einsatz von E-Learning in einem ökonomisch vertretbaren Rahmen erreicht wird. Weiterhin muss die wissenschaftliche Untersuchung feststellen, inwieweit die Arbeit mit Onlinelernumgebungen die Selbstlernkompetenz der Schüler verbessert. Ausgehend davon leiten sich folgende inhaltliche Schwerpunkte ab: 1) Bestimmung der erzielten unterrichtlichen Verbesserung, 2) Bestimmung der erworbenen Selbstlernkompetenz, ) Bestimmung des ökonomischen Aufwandes. Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie von Design und Instrumentarium der Evaluation: Angenommener Wirkungszusammenhang A) Schüler Soziodemographie Selbstlernkompetenz Medienkompetenz B) Lehrer Kommunikation C) Rahmenbedingungen Fachdidaktik Ökonom. Aufwand > > > D) Unterrichtssituation Arbeitsblatt vs. elearning Keine Befragung der Trainer. Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie von 29 2

3 1. Design und Instrumentarium der Evaluation: Evaluationsinstrumente Merkmale: Fragebogenbasierte, schriftliche, prozessbegleitende Evaluation Anonymisierte Befragung unter Einhaltung des Datenschutzes Skalen auf Grundlage etablierter Fragebögen Auswahl der Skalen für Schüler: unterrichtliche Verbesserung: Skala Einsatz der Arbeitsblätter Selbstlernkompetenz: Skalen Selbstgesteuertes Lernen, Lernüberwachung und Regulation (Konrad, 1997) Zusätzlich: Fragen zur Sozidemographie Fragen zur Nutzung des Computers und anderer Medien Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 5 von Befunde: Stichprobe - 6 Sportgymnasien in Sachsen paper & pencil / online Befragung, 2007 online Befragung - 2 Wellen 2006 und Ca. 50 Lehrer und ca. 200 Schüler (freiwillig) - Vollständig anonymisiert - Validierung durch Gruppendiskussionen mit beteiligten Lehrern aller Sportgymnasien und Vor-Ort-Besuche an von 6 Sportgymnasien - Diskussion der Ergebnisse auf mehreren Expertenworkshops Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 6 von 29

4 2. Befunde: Kommunikationsformen 2006 Nur ein kleiner Teil (12,9%) der befragten Schüler ist mit E-Learning- Modulen überhaupt in Berührung gekommen. Typisch für die Schüler- Lehrer-Kommunikation sind eher klassische Kommunikationsformen, das Internet spielt dabei (noch) keine wesentliche Rolle: Kanal / Kommunikation / Dokumentenaustausch Fax / Dokumentenaustausch Fax / Kommunikation Telefon BSCL / Dokumentenaustausch durch Lehrer genutzt 16 (2) 11 (1) 2 (2) 10 (0) 1 (2) 1 (7) durch Schüler genutzt 15 (2) 9 (1) 9 (2) 6 (9) 26 (2) 1 (7) Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 7 von Befunde: Schüler E-Learning Nutzung Frage: Haben Sie bereits mit E-Learning Tools, wie zum Beispiel mit BSCL oder WebCT im Unterricht gearbeitet (in der Schule, im Trainingslager oder auf Wettkämpfen)? Ja (2) 12,9% () 6.% (57) Nein (1) 8,6 (21) 6.67% () Datenbasis: alle 6 SG befragt Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 8 von 29

5 2. Befunde: Schüler Interesse E-Learning Tools im Unterricht Die Frage richtete sich ausschließlich an Schüler die bisher noch nicht mit E- Learning Tools im Rahmen des Unterrichts gearbeitet haben. Hätten Sie Interesse E-Learning Tools im Unterricht zu nutzen? Ja (1) Nein (2) Es ist mir egal () Ich weiß nicht () % 9.8% 9.8% 12.50% GESAMT 2 Datenbasis: alle 6 SG befragt Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 9 von Befunde: Schüler Kaderstatus der antwortenden Schüler 2007 A (1) B (2) C () D () keiner/anderer (5) %.9% 22.22% 5.80% 5.80% Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 10 von 29 5

6 2. Befunde: Schüler Nutzung der Arbeitsblätter / Probleme Was sind aus Ihrer Sicht die drei größten Probleme beim Lernen mit Arbeitsblättern? Offene Aussagen Alle 187 befragten Schüler antworten! Typische Aussagen: Das "Allein sein/lernen"; zu viel in einem kurzem Zeitraum ersetzen keine Unterrichtsstunden, großer Zeitaufwand Arbeitsblätter verlegt Ungenauigkeit / schlecht erklärt keine Lust Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 11 von Befunde: Schüler BSCL In welchem Fach haben Sie mit BSCL gearbeitet? (Mehrfachnennung waren möglich) Deutsch Englisch Geschichte Mathematik Andere: 2x Französisch, 16x Informatik, 1x Biologie (Freiantworten) % 22.6% 7.55% 5.72% 5.85% N = 92 n = 5 Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 12 von 29 6

7 2. Befunde: Schüler webct In welchem Fach haben Sie mit webct gearbeitet? (Mehrfachnennung war möglich) Deutsch Englisch Geschichte Mathematik Andere (x Informatik, 1x Französisch) n 1 11 % N = 92 n = 16 Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 1 von Befunde: Schüler el versus Arbeitsblätter Angenommen Sie könnten selber entscheiden, ob Sie mit Arbeitsblättern oder mit E-Learning Tools wie BSCL oder WebCT im Trainingslager oder auf Wettkämpfen arbeiten möchten. Wie würden Sie entscheiden? Ich würde es vorziehen, Arbeitsblätter mitzunehmen (1) Ich würde es vorziehen mit den E- Learning Tools zu arbeiten (2) Es wäre mir egal () Ich weiß nicht () % 57.1% 2.07% 1.85% GESAMT ungültig (fehlend) N = 92 n = 57 5 Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 1 von 29 7

8 2. Befunde: Schüler el versus Arbeitsblätter Gruppenvergleich: Sie erhalten ein Arbeitsblatt/eLearning für das Trainingslager. - Wenn ich ein Problem habe, kann ich den Lehrer schnell erreichen. P =.000** [bei el stärker] - Während des Trainingslagers habe ich in der Regel Zugang zum Internet. P =.09* [bei el stärker] Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 15 von Befunde: Schüler Anstrengung beim E-Learning Untersucht man diese Befunde näher, so sind beim E-Learning die Mittelwerte für die Schüler (2,8) etwas geringer als für die Schülerinnen (,0), während beim Lernen mit Arbeitsblättern keine deutlichen Geschlechtsunterschiede auffallen. Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 16 von 29 8

9 2. Befunde: Schüler Selbstlernen - Dimensionen des Selbstlernens (Selbststeuerung, Dozentenverhalten, intrinsische Motivation, extrinsische Motivation, Handlungsspielraum, Kognitive Strategie, Regulation; - 1. Erhebungswelle: Auf keiner der Dimensionen des Selbstlernens kann ein signifikanter Unterschied zwischen der Nutzung von Arbeitsblättern versus elearning nachgewiesen werden, d.h. in Bezug auf die Unterrichtsqualität stellt elearning keine Verschlechterung dar; - 2. Erhebungswelle: Differenzen auf 2 Dimensionen, die Schüler- Lehrer-Kommunikation und Selbstregulation betreffen: das el schneidet signifikant besser bzw. anders ab! Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 17 von Befunde: Schüler Skalen zum Selbstlernen Selbststeu erung Handlungsspielraum Dozentenverhalten Intrinsische Motivation Extrinsisch e Motivation Kognitive Strategie Regulation Mann-Whitney- U 6, , , ,000 7,000 61,000 11,000 Wilcoxon-W 199, ,500 12, , ,000 77, ,000 Z -1,207-2,088 -,0 -,982 -,565 -,598-2,598 Asymptotische Signifikanz (2- seitig),227,07,72,26,572,550,009 Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 18 von 29 9

10 2. Befunde: Schüler Selbstlernen Einzelitems Einzelitems, die die Schüler-Lehrer-Kommunikation betreffen: Beim el / Lernen mit Arbeitsblättern - werden wir sachlich und detailliert über unsere Fehler informiert. P=.059* - erhalten wir, wenn nötig, kompetenten Rat. P=.010* - nehme ich Kontakt mit dem Lehrer auf, wenn ich etwas nicht verstehe. P=.000** Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 19 von Befunde: Schüler Selbstlernen Einzelitems Einzelitems, die die (Selbst-)Regulation betreffen: Beim el / Lernen mit Arbeitsblättern - setze ich mir selbst Ziele. P=,055 [bei el stärker] - verschaffe ich mir zunächst einen Überblick über das Lernmaterial. P=.089 [bei el stärker] Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 20 von 29 10

11 2. Befunde: Schüler Persönliches Lernverhalten Einzelitems, die das persönliche Lernverhalten der Schüler betreffen: Bitte geben Sie an, inwiefern die Aussagen für Ihr persönliches Lernverhalten zutreffen: - versuche ich herauszufinden, welchen Lehrstoff ich noch nicht verstehe. P=.00* [bei el höher] - wenn ein Arbeitsblatt mich verwirrt, lese ich es noch einmal und versuche, es dann zu verstehen. P=.006 [bei el höher] - versuche ich die Art, wie ich lerne, den Anforderungen der Veranstaltungsform (Unterrichtstunde, Projektarbeit, Arbeitsblatt etc.) anzupassen. P=.01* [bei el höher] - wenn ich beim Lernen durcheinander komme, ordne ich das Material auf jeden Fall hinterher. P=.078 [bei el höher] Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 21 von Befunde: Lehrer E-Learning Nutzung Haben Sie bereits E-Learning Tools wie zum Beispiel BSCL, WebCT oder andere für ihren Unterricht genutzt? (2007) Ja (2) Nein (1) % 5.2% GESAMT ungültig (fehlend) 2 0 N = n = 2 sys-missing = 2 Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 22 von 29 11

12 2. Befunde: Lehrer E-Learning Nutzung Bitte nennen Sie Gründe, warum sie bisher keine E-Learning Tools für den Unterricht genutzt haben. (Mehrfachnennung möglich, 2007) Technische Probleme Kein Internetzugang außerhalb des Präsenzunterrichts (z.b. im Trainingslager) Der Aufwand für die Erstellung der E-Learning Inhalte ist mir zu groß Der Aufwand für die Betreuung bzw. Durchführung von E-Learning Kursen ist mir zu groß Ich habe das Gefühl, dass meine Computerkenntnisse nicht ausreichend sind Ich habe das Gefühl, dass die Computerkenntnisse meiner Schüler nicht ausreichend sind Mir wurde die Nutzung von E-Learning Tools noch nicht angeboten N = Köhler & n Börner, = 192. sächsischer sys-missing elearning Workshop = 25 Dresden Folie 2 von % 52.6% 15.79% 10.5% 15.79% 0.00% 21.05% 2. Befunde: Lehrer E-Learning Nutzung Welche der folgenden E-Learning Tools haben Sie bereits genutzt? (Mehrfachnennung möglich, 2007) BSCL WebCT Tutorial Respondus Tutorial Lecturnity Tutorial StudyMate Hot Potatoes N = n = 25 sys-missing = %.0% 12.0% 12.0% 8.0% 28.0% Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 2 von 29 12

13 2. Befunde: Lehrer webct Kurse Wie viele Kurse haben Sie aus den zur Verfügung stehenden Kursen in WebCT bereits genutzt? (2007) Keine 1 Kurs 2 Kurse Kurse Kurse 5 Kurse ,1, 0, 0 11,1 90% der Antworten auf die Frage Wünschen Sie sich ein größeres Repertoire an Kursen auf WebCT? sind positiv. Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 25 von Befunde: Lehrer Aufwand bei E-Learning Betreuung Ergebnisse der Lehrer die bisher keine E-Learning Tools im Rahmen des Unterrichts genutzt haben AUFWAND ist sehr hoch (1) (2) () () sehr gerin g (5) kann es nicht einschätzen Summ e Mittel E-Learning Materialien selber erstellen (z.b. digitale Arbeitsblätter) 29.% (5) 29.% (5) 29.% (5) 0.0% (0) 0.0% (0) 11.8% (2) Schüler mit Hilfe von E-Learning Tools betreuen 6.2% (1) 18.7% ().7% (7) 18.7% () 0.00 % (0) 12.5% (2) N = n = 19 sys-missing = 25 Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 26 von 29 1

14 2. Befunde: Lehrer Aufwand bei E-Learning Betreuung / Erstellung Ergebnisse der Lehrer, die bereits E-Learning im Unterricht genutzt haben:,5 2,5 2 2,6,19 2,86,8,58,8 1,5 1 0,5 0 Aufwand und Nutzen stehen im richtigen Verhältnis. Den zeitlichen Aufwand den ich benötige, finde ich gerechtfertigt. Der Aufwand ist für mich größer als bei klassischen Arbeitsblättern. Köhler & Börner, 2. sächsischer elearning E-Learning Workshop BetreuungDresden Erstellung von Folie E-Learning 27 von Materialien 29. Diskussion Befunde der Untersuchung: - Problem der Kommunikation / Kooperation mit dem Lehrer (nicht oder kaum mit Schülern); - Koordination zwischen Arbeit im Trainingslager und Arbeit in der Schule aufwendig; - Kompetenz zur Nutzung von elektronischen Medien und E-Learning durch Lehrer oft noch zu gering; - Bedenken der Nichtnutzer vor dem Betreuungsaufwand z.t. zu Recht - el Autorenschaft kann durch Lehren kaum geleistet werden - Schwierigkeiten der Schüler in Bezug auf die Selbstmotivation; - Selbstlernen: keine Verschlechterung beim el (Selbststeuerung, Dozentenverhalten, intrinsische Motivation, extrinsische Motivation, Handlungsspielraum, Kognitive Strategie, Regulation) - Selbstlernen: signifikant bessere Unterstützung der Schüler-Lehrer- Kommunikation beim el! Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 28 von 29 1

15 . Diskussion Fazit der Untersuchung: - Entscheidung, wie el über die 6 SG hinaus eingesetzt wird; - Hohes Potential für die Freiarbeit auch im Präsenzunterricht; - Ideal wäre eine regelhafte Nutzung von Lernmanagementsystem o.ä. Online-Orten für die Bereitstellung der Unterrichtsszenarien; - Potential der peer-to-peer Nutzung durch die Schüler nicht ausgeschöpft; - Schüler wie Lehrer benötigen eine systematische Einführung zur Nutzung; - Bei der Einführung sollten insbesondere auch nicht-technische Aspekte trainiert werden (Lernstrategien, Selbststeuerung, Kollaboration). Köhler & Börner, 2. sächsischer elearning Workshop Dresden Folie 29 von 29 15