8.4 Daten-Analyse-Methoden Resultate Resümee und Implikationen für die Lehrevaluationspraxis 159

Transkript

1 Heiner Rindermann Lehrevaluation Einführung und Überblick zu Forschung und Praxis der Lehrveranstaltungsevaluation an Hochschulen mit einem Beitrag zur Evaluation computerbasierten Unterrichts

2 7 Inhaltsverzeichnis 1 Evaluation, Lehrevaluation und Lehrveranstaltungsevaluation Evaluation Was ist Evaluation? Eine Definition Anforderungen an Evaluationen und Evaluatoren Ein integratives Evaluationsmodell - allgemeine Methodik der Evaluation Lehrevaluation und Lehrveranstaltungsevaluation 24 2 Evaluation an Hochschulen (historischer Überblick) Hochschulevaluationen in Nordamerika Veranstaltungsrezensionen in Deutschland: 1968 folgende Hochschulevaluation: Antwort auf Krisensymptome Ende der 80er Jahre 33 3 Merkmale guter Lehre Theoretische Ansätze Der Ansatz von Westermann et alii Der Ansatz von Kramis Helmke (1996): Angebots-Nutzungs-Modell des Studienerfolgs Befragung von Lehrenden und Studierenden Resultate früherer Studien Resultate einer aktuellen deutschen Studie Beobachtung und Beschreibung realer Veranstaltungen Regressionsanalysen Auswertung von Lehrevaluationsfragebögen Zusammenfassung: Merkmale guter Lehre und Kriterien zu ihrer Beurteilung 54 4 Konstruktion von Fragebögen zur Beurteilung der Lehre Itemgenerierangsverfahren Fragebogen oder andere Verfahren? Die Fragebogenmethode Synthetisches Verfahren der Skalenkonstruktion 62 5 Das Multifaktorielle Modell der Lehrveranstaltungsqualität (Heidelberger Ansatz zur Lehrevaluationsforschung) Grundstruktur des Modells 65

3 5.2 Bedingungsfaktor Dozent (Handlungen, Kompetenzen und Einstellungen) Bedingungsfaktor Studierende (Kompetenzen, Einstellungen und Handlungen) Rahmenbedingungen Zielgröße Lehrerfolg Möglichkeiten der empirischen Überprüfung 78 Dimensionen studentischer Veranstaltungsbeurteilungen: Faktorenstruktur von Lehrevaluationsinstrumenten Faktorenanalyse als Methode in der Lehrevaluationsforschung Faktoren verschiedener Lehrinventare Faktorenstruktur des HILVE-I Daten und Methoden bei Faktorenanalysen des HILVE-I Ergebnisse aus HILVE-I-Studien Faktorisierung der Items ohne vorgegebene Faktorenzahl Faktorisierung der Items (individuelle Abweichungen vom Veranstaltungsmittel) Faktorisierung der Items mit vorgegebener Faktorenzahl Faktorisierung der Dimensionen Faktorisierung der Dozenten- und Fremdurteilerdaten Faktorisierung der Daten aus einer Studie an einem Institut für Sonderpädagogik Faktorisierung des HILVE-II Folgen der faktorenanalytischen Resultate für die Lehrevaluation 108 Meßgenauigkeit Urteilerübereinstimmung - Interraterreliabilität Methoden zur Bestimmung der Interraterreliabilität und der Urteilerübereinstimmung Bisherige Resultate zur studentischen Urteilerübereinstimmung Untersuchungen anhand des HIL VE Konsequenzen für die Lehrevaluationsdurchführung Skalenhomogenität Retestreliabilität Resümee für die Meßgenauigkeit studentischer Veranstaltungsbeurteilungen 144 Generalisierbarkeit von Lehrveranstaltungsevaluationen Bisheriger Stand der Forschung Generalisierbarkeit: Reliabilitäts-oder Validitätsmaß? Stichproben und Instrument 153

4 9 8.4 Daten-Analyse-Methoden Resultate Resümee und Implikationen für die Lehrevaluationspraxis Validität studentischer Veranstaltungsbeurteilungen Übereinstimmung mit Selbst-und Fremdbeurteilungen Zusammenhang mit Lernerfolg Einfluß von Verzerrungsvariablen (Bias- und Fairneßvariablen) Sind studentische Lehrveranstaltungsbeurteilungen nun valide? Konsequenzen für die Lehrevaluation Prognose des Lehrerfolges Was ist Lehrerfolg? Regressionsanalytische Bestimmung Pfadanalysen und Strukturgleichungsmodelle Lehrevaluations-Daten des HILVE-I Lehrevaluations-Daten des HILVE-II Resümee: Wie läßt sich am besten der Lehrerfolg aufklären? Verbesserbarkeit der Lehre durch den Einsatz von Lehrevaluation Sensibilisierungs- und Feedback-Hypothese Hochschuldidaktisches Diskursmodell (Dozenten-Studenten- Besprechung) Heidelberger Studien zur Sensibilisierungs- und Feedbackhypothese sowie zum hochschuldidaktischen Diskursmodell Beratungsansatz Reichenauer Studien zum Beratungsansatz Beratungs-/Trainings-/Gratifikationsansatz Schlußfolgerungen Lehrevaluationspraxis: Empfehlungen für den Einsatz von Lehrevaluation Rückmeldung für die Lehrenden Vorwissen und Voreinstellungen Lehrveranstaltungsqualität Lehrevaluation im Beratungs-und Weiterbildungsprozeß Information für Fachbereich, Fakultät oder Universität Berücksichtigung neben Kollegenurteilen Verwendung für die Veranstaltungswahl der Studierenden 285

5 Lehrevaluationen bei der Vergabe von Lehrpreisen sowie bei Berufungs- und Bleibeverhandlungen Lehrevaluationsabhängige Mitteldistribution Anforderungen an Praxis und Rahmenbedingungen von Lehrevaluationen Lehrevaluations-Instrumente und Verfahren Hochschuldidaktische Weiterbildungsangebote Hochschulpolitik Evaluation besonderer Instruktionsformen: Computerbasierter multimedialer Unterricht Spezielle Merkmale computerbasierten Lernens Ein Leitfaden zur Evaluation computerbasierten Unterrichts Lehrevaluation und Lehrevaluationsforschung als wissenschaftssoziologische Fragestellung Soziale Verortung und wissenschaftlicher Standpunkt Forschung an Hochschulen über Hochschulen Hierarchieposition und Bewertung studentischer Lehrevaluation - Thesen Methoden Resultate Methodisierungsgrad, Beachtung wissenschaftlicher Standards und Einfluß sozialer Hintergrundvariablen Fachwissenschaftliche Fragestellung versus soziologische Analyse der Positionen - Möglichkeiten der Lehrevaluations- und Hochschulforschung Schlußbemerkungen: Evaluation an Hochschulen, Funktionalität der Institution, Freiheit von Lehre und Forschung 337 Literatur 345 Anhang HILVE-I: Dimensionen und Items 385 HILVE-II: Dimensionen und Items 388 Informationen zu Titelbild und Autor 392