Die Verwendung von Rubrics zur Bewertung von Lernergebnissen in Projekten

Transkript

1 Die Verwendung von Rubrics zur Bewertung von Lernergebnissen in Projekten Entwicklung eines neuen Prüfungsinstrumentariums für Projektarbeit im Masterstudium In Kooperation mit Prof. S. Schabel, Studiendekan a.d., FB Maschinenbau 1

2 Inhalte 1 Was sind Rubrics? 2 Welche Vorteile haben Rubrics? 3 Wie werden Rubrics entwickelt ein Beispiel 4 Wie werden soziale Kompetenzen abgebildet? 2

3 Was sind Rubrics? Rubrics (dt. ~Bewertungsbogen) sind Teil eines Prüfungsinstrumentariums Sie dienen der kriterien-geleiteten Bewertung von Lernergebnissen / Produkten (z.b. Masterarbeit / Projektarbeit) Das Beurteilungsraster beinhaltet auch Leistungsstufen, d.h. es unterscheidet gute von schlechten Leistungen 3

4 Ein Beispiel: Ausschnitt aus einem Bewertungsbogen Schriftliche Ausarbeitung: Struktur Struktur der Arbeit nicht erkennbar bzw. nicht nachvollziehbar; Umfang viel zu lang; Detailergebnisse im Text ; ohne Anhang Struktur vorhanden und mit Einschränkungen erkennbar; Umfang der Arbeit vertretbar; Anhang vorhanden sorgfältige, überzeugende Gliederung, die Verständnis fördert und Lesen erleichtert; Konzentration auf das Wesentliche im Textteil; gut strukturierter Anhang mit Verweisen 4

5 Welche Vorteile haben Rubrics? Für Lehrende: +Lehrende können gezielter Feedback geben, in welchen Bereichen noch Entwicklungsbedarf besteht -> formatives Prüfen + die Bewertung wird objektiver und konsistenter + die Bewertung kostet weniger Zeit + auch neue Mitarbeiter_innen können eine gute Bewertung vornehmen 5

6 Welche Vorteile haben Rubrics? Für Studierende: + Die Studierenden können ihre Leistung verbessern, indem sie sich an klaren Beurteilungskriterien orientieren können + Studierende können sich leichter Peer-Feedback geben. 6

7 Konsistenz von Lernzielen und Prüfung Dozenten Perspektive: Lernziele Lehraktivitäten Assessment Studentische Perspektive: Assessment Lernaktivitäten Lernergebnisse In Anlehnung an: Biggs, Teaching for Quality Learning 7

8 Wie werden Rubrics entwickelt? ein Beispiel Advance Design Projects (ADP) aus dem Maschinenbau TU Darmstadt aktuelle, komplexe und ergebnisoffene Aufgabenstellung konstruktive Produktentwicklung im Vordergrund kann mit Industriepartnern erstellt werden 4-7 Studierende 2-6 Wochen im Masterstudium 12 CP für 2 ADPs Prüfung: Projektdokumentation (incl. Projektmanagement), schriftliche Selbstreflexion, mündl. Präsentation mit Fragen 8

9 Wie werden Rubrics entwickelt? ein Beispiel Überarbeitung der Lernziele Ableitung von Beurteilungskriterien aus dem Maschinenbau TU Darmstadt Gewichtung der Kriterien Formulierung der Leistungsstufen Test phase Bekannt machung im Fachbereich 9

10 Überarbeitung der Ziele: Fach- und Methodenkompetenzen Studierende sind in der Lage, als Gruppe in vorgegebener Zeit eine strukturierte und validierbare Aufgabenlösung mit eigenständigen Ideen für eine konstruktive Produktentwicklung zu erarbeiten. Sie können die Ergebnisse nach wissenschaftlichen Standards erarbeiten, dokumentieren und präsentieren. Bei der Bearbeitung des ADP ordnen sie geeignete Bausteine ihres Fachwissens in den aufgabenspezifischen Kontext ein, vernetzen diese und wenden sie produktiv an. Wo notwendig, erweitern sie ihr Fach- und Methodenwissen. Bei der Bearbeitung des ADP ist die Gruppe in der Lage, selbstständig zu arbeiten und situations- und aufgabenspezifisch Methoden der Konstruktionsmethodik sowie des Projekt- und Zeitmanagements anzuwenden. 11

11 Überarbeitung der Ziele: Fach- und Methodenkompetenzen Aufgabenlösung nach wissenschaftlichen Standards erarbeiten, dokumentieren und präsentieren. Fachwissen vernetzen u. anwenden Gruppe selbstständig Methoden der Konstruktionsmethodik sowie des Projekt- und Zeitmanagements 12

12 Überarbeitung der Lernziele: General Skills Die Studierenden können die Aufgabenstellung arbeitsteilig bearbeiten, indem sie die Fähigkeiten aller Teammitglieder im Sinne der bestmöglichen Lösung integrieren. Sie können aktiv konstruktive Kommunikation innerhalb der Gruppe, mit dem Betreuer und ggf. externen Partnern gestalten. Dabei schließen sie Kompromisse und lösen Konflikte, um gemeinsame Lösungen zu finden. Jede/r Studierende bringt eigene Ideen ein und vertritt diese vor der Gruppe. Desweiteren setzt er/sie sich mit eigenen Stärken und Schwächen in Bezug auf die Teamaufgabe auseinander. Die Studierenden können die Angemessenheit ihres Vorgehens (Lösungsansätze, Methoden, Gruppenprozess, eigene Rolle) in Bezug auf die Zielerreichung reflektieren und bewerten. 13

13 Überarbeitung der Lernziele: General Skills Aufgabenstellung arbeitsteilig aktiv konstruktive Kommunikation eigene Ideen vertreten Sich mit eigenen Stärken und Schwächen auseinandersetzen Vorgehen reflektieren 14

14 Ableiten der Beurteilungskriterien Inhaltliche Bearbeitung Qualität der Arbeitsergebnisse Kreativität / eigene Ideen Anwendung Fachwissen Wissenschaftlichkeit Lösungsgrad Klärung Zielsetzung Analytisches Denken Verwertbarkeit 15

15 Gewichtung der Kriterien Inhaltliche Bearbeitung 0,20 0,05 Kreativität / eigene Ideen 0,05 Anwendung von Fachwissen 0,05 Klärung der Aufgabenstellung und Zielsetzung 0,05 Analytisches Denken Qualität der Arbeitsergebnisse 0,10 0,03 Lösungsgrad 0,03 Wissenschaftlichkeit der Arbeitsergebnisse 0,03 Umsetzbarkeit /Verwertbarkeit 16

16 Formulierung der Leistungsstufen Qualität der Arbeitsergebnisse 0,10 Lösungs grad Arbeit nur unvollständig bearbeitet; wesentliche Arbeitspakete fehlen Arbeit weitgehend vollständig bearbeitet; in einigen Arbeitspaketen fehlt Vollständigkeit Arbeitspakete vollständig und einwandfrei bearbeitet; zusätzliche wesentliche Arbeitspakete mit bearbeitet Einzel/ Gruppen bewertung G 17

17 Wie werden soziale Kompetenzen abgebildet? Kommunikation Kompromisse/ Konfliktlösung Arbeitsteilung Teilnehmende Beobachtung in der Gruppe? = Prüfungssituation? 18

18 Reflexion als Beschleuniger des Lernprozesses 19

19 Leitfragen Selbstreflexion - Beispiele Wie war die inhaltliche Aufgabenteilung und wie die Rollenverteilung bei der Steuerung des Teams (z.b. auf der sozialen Ebene, Moderation, Leitungsfunktion)? Wie beurteilen Sie Ihre eigene Rolle in der Gruppe? Wie ist es Ihnen gelungen eigene Ideen vor der Gruppe zu vertreten? Beschreiben Sie eine konkrete Situation. Welche Stärken und Schwächen sind Ihnen bei sich selbst in Bezug auf die Gruppenarbeit bewusst geworden? Wo sehen Sie noch Entwicklungsbedarf bei sich selbst? 21

20 Bewertung des Selbstreflexionsberichtes Reflexion 0,10 Reflexion des Gruppenprozesses und der eigenen Rolle (Selbst reflexionsbericht) nur oberflächlicher Rückblick; keine kritische Analyse; keine Bewertung des eigenen Vorgehens; kein Aufzeigen von Verbesserungsmaßnahmen; keine eigene Entwicklungsrichtung formuliert beschreibt differenziert; etwas Analyse; schlägt vereinzelte Verbesserungsmaßnahmen vor; einzelne Ideen zur eigenen Weiterentwicklung formuliert beschreibt hoch differenziert; Analyse der Gründe sowie der Konsequenzen für das Vorgehen, Bewertung des Vorgehens hinsichtlich zielführend und erfolgreich, Aufzeigen von mehreren Verbesserungsmaßnahmen; Formulierung mehrerer Ideen für die eigene Entwicklungsrichtung E 22

21 Beispiele für Verbesserungsideen in Selbstreflexionen Auf der Gruppenebene hätte ich für das nächste Projekt vorgeschlagen, sich im Vorfeld mehr Zeit für die Vorbereitungen zu nehmen. Wenn ich nochmal ein ADP starte, würde ich die Aufgabe so verteilen, dass in jeder Untergruppe ein Deutscher und ein Ausländer ist. Bei Ausarbeitung Probleme beim Zusammenführen: dies lässt sich verbessern, wenn sich die Gruppe vor Beginn der Ausarbeitung auf Konventionen einigt. 23

22 Beispiele für Beschreibungen der eigenen Entwicklungsrichtung Zu Beginn fiel mir das nicht ganz leicht, diese Verantwortung für Entscheidungen zu übernehmen, doch mit der Zeit gewöhnte ich mich daran, und ich konnte meine Entscheidungen vor der Gruppe vertreten. Meine größte Schwäche sehe ich immer wieder an meiner mangelnden Fähigkeit Kritik an Teammitgliedern zu äußern. Ich empfinde es als sehr schwierig hier den richtigen Ton anzuschlagen und sehe hier auch das größte Weiterentwicklungsbedürfnis. 24

23 Auf den Punkt gebracht An Assessment Tool to. Save Grading Time Convey Effective Feedback Promote Student Learning (Dannelle Stevens, Antonia Levi) 25