Serviceportal interne Evaluation. Hilfe bei der Erstellung und Bearbeitung eines Befragungsinstruments

Transkript

1 Serviceportal interne Evaluation Hilfe bei der Erstellung und Bearbeitung eines Befragungsinstruments

2 2 Startseite

3 1. Registrieren Schritt 1 Damit Sie ein Benutzerkonto erzeugen können, müssen Sie sich gegenüber der Schuldatenbank des SBS autorisieren. Dabei werden die Dienststellennummer und die in der Datenbank hinterlegte -Adresse mittels eines Webservices an die Datenbank übermittelt. Nach Abgleich der Daten antwortet der Webservices mit Autorisiert (oder nicht autorisiert ). Wenn Sie autorisiert sind, wird ein Nutzerkonto erstellt. Wenn Sie die Hinweise gelesen haben und mit den Bedingungen einverstanden sind, klicken Sie auf Ich habe die Bedingungen gelesen, verstanden, akzeptiere diese und möchte mich anmelden. 3

4 4 Schritt 1

5 1. Registrieren Schritt 2 Sie benötigen für diesen Schritt Ihre Dienststellenmailadresse (die gleiche, die in der Schuldatenbank hinterlegt ist) und Ihren Dienststellencode (Dienststellenschlüssel). Füllen Sie nun damit das Formular aus und klicken Sie auf Absenden. Ihre Daten werden mit denen in der Schuldatenbank abgeglichen. Sind diese korrekt, erhalten Sie eine Freischaltungs . Um Ihre Anmeldung abzuschließen, klicken Sie auf den enthaltenen Link. 5

6 6 Schritt 2

7 2. Anmelden/Login Sie können mit Ihren erhaltenen Zugangsdaten (vgl. Link in der Freischaltungs /Passwort) jederzeit das Portal kostenlos nutzen, indem Sie Login aufrufen und Ihre Daten (Schul- -Adresse und Passwort) eingeben. 7

8 3. Im Portal Sie haben sich registriert und erfolgreich eingeloggt. Nun steht Ihnen dieses Portal zur Nutzung bereit. Struktur und Inhalte orientieren sich an der Kriterienbeschreibung Schulische Qualität im Freistaat Sachsen. Zunächst sehen Sie drei Spalten: Die linke Spalte enthält die Navigation. In der mittleren Spalte erscheint immer der Inhalt und die rechte Spalte ist für Ihre Arbeit an der Auswahl und Erstellung sowie Bearbeitung eines Fragebogens vorbehalten. Alle Spalten lassen sich auf- und zuklappen, damit können Sie sich fokussieren, z. B. auf den Inhalt, der dann über eine größere Fläche auf Ihrem Bildschirm sichtbar wird. In der linken Spalte finden Sie u.a. die Rubrik Methoden und Instrumente aus verschiedenen Quellen. Klicken Sie darauf, erscheinen in der mittleren Spalte Instrumente, zu denen ein Link führt oder die im PDF-Format und online abrufbar sind. Unter dieser Rubrik ist eine Sammlung von 40 Instrumenten, mit denen Sie verschiedene Aspekte des Unterrichts evaluieren können. In der linken Spalte finden Sie auch die Rubrik Wissenschaftlich geprüfte Instrumente. Unter dieser Rubrik sind zu den meisten der beschriebenen Kriterien bzw. Indikatoren wissenschaftlich geprüfte Instrumente zur Befragung, Beobachtung und Bewertung zu finden. So können z. B. Befragungsinstrumente schnell und unbürokratisch durch einfache Online-Administration erstellt, bearbeitet und ausgewertet werden (vgl. Beispiel Qualitätsbereich Ergebnisse ). Die ausgewählten oder erstellten Befragungsinstrumente können auch als Word-Dokument heruntergeladen und für die an der Befragung teilnehmenden Personen zum Ausfüllen ausgedruckt werden. Unter dieser Rubrik sind auch Instrumente für die Unterrichtsbeobachtung und für die Dokumentenanalyse zu finden. Diese können ausgedruckt und eingesetzt werden. 8

9 3. Im Portal - Fortsetzung 9

10 4. Beispiel: Erstellung eines Befragungsinstrumentes - Aus der Rubrik Wissenschaftlich geprüfte Instrumente : Verwenden Sie eine für Ihre Fragestellung relevante Auswahl an Instrumenten aus der Rubrik Wissenschaftlich geprüfte Instrumente. Klicken Sie zunächst auf die zutreffende Schulart in der linken Spalte/Navigation. 10

11 Erstellung eines Befragungsinstrumentes - Fortsetzung Wählen Sie einen Qualitätsbereich und ein Merkmal (in Abhängigkeit von der Evaluationsfrage und den formulierten Zielen Ihrer schulinternen Evaluation) aus. Wählen Sie einen für Ihre Fragestellung relevanten Qualitätsbereich aus, indem Sie ihn anklicken. Es erscheint in der mittleren Spalte die Beschreibung des Bereiches. In der linken Spalte werden alle Qualitätsmerkmale angezeigt, die zu diesem Qualitätsbereich gehören. Wählen Sie ein Merkmal aus und klicken es an, finden Sie dieses in der mittleren Spalte beschrieben. In der linken Spalte werden alle zu diesem Merkmal gehörenden Qualitätskriterien angezeigt. 11

12 Beispiel aus dem Qualitätsbereich Ergebnisse Qualitätsbereich: Ergebnisse, Qualitätsmerkmal: Erfüllung des Erziehungs- und Bildungsauftrages 12

13 Auswählen eines Qualitätskriteriums Wählen Sie ein Kriterium aus und klicken es an, finden Sie dieses in der mittleren Spalte beschrieben und es werden alle darunterliegenden Indikatoren mit Beschreibung sowie die dazugehörigen Fragen und Skalen mit Lupe und Viereck mit Plus angezeigt. Außerdem finden Sie darunter immer die Quelle für das Befragungsinstrument und die Information, für wen dieses Instrument empfohlen wird. Das bedeutet, dass Sie eine Entscheidung treffen, welche Befragtengruppe oder Befragtengruppen an der internen Evaluation teilnehmen sollen. Sie sehen im Portal, dass es nicht für jedes Kriterium und für jeden Indikator für alle Befragtengruppen (Schülerinnen und Schüler, Lehrkräfte, Eltern,...) eine Skala (und Frage) gibt. Klicken Sie auf die Lupe, erscheint die gesamte Skala. 13

14 Beispiel: Qualitätskriterium Lernkompetenz mit den dazugehörigen Indikatoren 14

15 Festlegung der Indikatoren und Zusammenstellung der Skalen für den Fragebogen Mit einem Klick auf das zweite Zeichen ( Viereck mit Plus ) haben Sie die Entscheidung für einen ganz bestimmten Indikator mit der entsprechenden Frage (und Skala) für Ihr Erhebungsinstrument getroffen. Es erscheint dann ein Feld, in dem Ihnen der Schlüssel für die Umfrage (Fragebogenbezeichnung) und der Schlüssel zur Teilnahme an der Umfrage (Teilnahmeschlüssel) mitgeteilt wird. Über Codes anzeigen in der Querleiste unter der Welle können auch die Schlüssel zur Anzeige aufgerufen werden. 15

16 Zusammenstellung der Skalen für den Fragebogen 16

17 Hinzufügen von Skalen zum Fragebogen Mit weiteren Klicks auf das Zeichen Viereck mit Plus fügen Sie Ihrem Fragebogen weitere Fragen/Skalen zu und eruieren damit weitere Indikatoren zu dem Kriterium Lernkompetenz. (Sie können aber auch aus anderen Qualitätsbereichen wählen und diese zu Ihrem Instrument hinzufügen. Damit würden Sie sich nicht nur auf einen Qualitätsbereich, ein Merkmal und ein Kriterium fokussieren, sondern auf mehrere. Diese Entscheidung ist abhängig von der Evaluationsfrage, also von dem, was Sie über sich, über die Schule, von bestimmten Befragtengruppen wissen wollen. 17

18 Beispiel: Skalen zu den Indikatoren: Elaborationsstrategien, Organisationsstrategien 18

19 Freie Frage erstellen Mit einem weiteren Klick auf das Symbol + in der rechten Spalte Ihr Fragebogen rufen Sie ein Formular auf, mit dem Sie eine Freie Frage erstellen können. Dieses Formular erscheint in der mittleren Spalte. Zunächst überschreiben Sie Ihre Frage mit einem Titel (Indikatorenbezeichnung) oder schreiben, worum es inhaltlich gehen und was der Antwortgebende tun soll. Sie entscheiden sich dann für eine angebotene Antwortskala von 1 bis 5, wobei 5 immer die höchste Ausprägung darstellen muss. Dann kommen alle Items a) bis ), die in dieser Frage enthalten sein sollen. Alle Items sollten sich auf denselben inhaltlichen Aspekt (Indikator) beziehen. Es bleibt Ihnen überlassen, wie viel Items (maximal 10) formuliert werden. Achten Sie bitte auf den Hinweis in dem Formular, der sich auf den Datenschutz bezieht. Wenn die Items formuliert sind, klicken Sie auf Frage anlegen. Dann wird diese in Ihren Fragebogen (siehe rechte Spalte) übernommen. 19

20 Erzeugen von Personenschlüsseln Klicken Sie in der rechten Spalte auf die beiden Köpfe, werden automatisch Personenschlüssel erzeugt. Diese müssen Sie bei sich abspeichern und ausdrucken. 20

21 Fertiges Erhebungsinstrument/Fertiger Fragebogen für Schülerinnen und Schüler Wenn Sie alle Indikatoren und dazugehörigen Fragen/Skalen für Ihr Erhebungsinstrument durch Klick auf das Zeichen Viereck mit Plus ausgewählt haben, gehen Sie in die rechte Spalte Ihr Fragebogen. Es erscheinen Ihr zugewiesener erster Schlüssel (Bezeichnung Ihres Fragebogens) und alle von Ihnen ausgewählten Skalen für Ihren Fragebogen. Dies bedeutet, dass jetzt ein von Ihnen selbst erarbeitetes Instrument vorliegt. Brauchen Sie dieses als Druckfassung, klicken Sie auf Fragebogen für Office. In der mittleren Spalte erscheint ein Feld Öffnen von simple.rtf. Wenn darin Öffnen mit Microsoft Word (Standard) angeklickt sichtbar wird, drücken Sie auf ok. Nun öffnet sich Ihr Fragebogen mit einem Anschreiben, das Sie auf Ihre Situation und Befragtengruppe sowie Ihren Anlass für die interne Evaluation anpassen können. 21

22 22 Fragebogen für Office

23 Ausschnitt aus dem als Word-Dokument heruntergeladenen Fragebogen mit Anschreiben Sehr geehrte Lehrerin, sehr geehrter Lehrer/Sehr geehrte Eltern/Liebe Schülerin/Lieber Schüler, in diesem Jahr findet an unserer Schule eine interne Evaluation statt, die von dem Evaluationsteam XYZ durchgeführt wird. Ziel der internen Bewertung ist es, in möglichst objektiver und einheitlicher Art und Weise verlässliche Informationen zu erhalten. Interesse besteht darin, ausgewählte Aspekte des... von Ihnen/von Euch evaluieren zu lassen, um auf dieser Basis Stärken und Schwächen sowie Veränderungspotenziale aufzudecken. Diese Bewertung hat sowohl entwicklungsstützenden als auch qualitätssichernden Charakter. Das Evaluationsteam bittet Sie/bittet Euch darum, den vorliegenden Fragebogen, in dem es um Ihre Einschätzungen/Eure Einschätzungen zum... geht, auszufüllen. Für das Gelingen der Bewertung der genannten Aspekte durch interne Evaluation ist es von großer Bedeutung, dass sich möglichst alle Lehrerinnen und Lehrer/alle Eltern/alle Schülerinnen und Schüler an der Befragung beteiligen. Nur aus einem wirklich vollständigen Bild, welches sich aus den Einschätzungen aller Beteiligten ergibt, können sinnvolle Ansatzpunkte zur Verbesserung... abgeleitet werden. Daher bittet das Evaluationsteam darum, diesen Fragebogen vollständig auszufüllen. Selbstverständlich ist die Teilnahme an der Befragung freiwillig und anonym. Die Ergebnisse der Bewertung werden Ihnen/Euch in geeigneter Form (? ) offen gelegt. Hier können Sie Ihren eigenen Text eingeben und so zum Beispiel ein Anschreiben integrieren. 23

24 Ausschnitt aus dem als Word-Dokument heruntergeladenen Fragebogen 24

25 Abmelden Wenn Sie Ihren Fragebogen erstellt haben, melden Sie sich ab, indem Sie in der rechten oder mittleren Spalte auf Abmelden klicken (Zeichen mit dem weißen Kreuz im roten Kreis). Es erscheint ein Feld Abmelden?. Drücken Sie auf yes. 25

26 5. Ausfüllen/Bearbeiten eines Fragebogens online Stellen Sie sich vor, Sie stellen Ihren Schülerinnen und Schülern das Computerkabinett der Schule zur Verfügung, damit sie online das erstellte Instrument ausfüllen können. Den an diesem Tag fehlenden Schülerinnen und Schülern geben Sie die Möglichkeit, von zu Hause oder an einem anderen Tag im Computerkabinett den Fragebogen auszufüllen. Hinweise: Erinnern Sie sich, dass Sie einen zweiten Schlüssel zur Teilnahme an der Umfrage erhalten haben. Diesen und jeweils einen Personenschlüssel brauchen Sie jetzt für Ihre Schülerinnen und Schüler, damit Sie online an der Befragung teilnehmen können. Die generierten Personenschlüssel haben Sie bei sich irgendwo gespeichert. Jede Schülerin und jeder Schüler hat an seinem Platz einen Papierschnipsel mit dem Teilnahmeschlüssel und einem automatisch im Vorfeld generierten Personenschlüssel liegen. Falls Sie den Teilnahmeschlüssel nicht mehr finden, loggen Sie sich noch einmal in das Portal über Ihren Zugangscode ein, gehen einfach in die Querleiste unter der Welle auf Codes anzeigen und klicken darauf. Damit werden Ihre Schlüssel aufgerufen. Nachdem Sie sich abgemeldet haben, kommen Sie wieder auf die Startseite. Entscheiden Sie sich dafür, die Teilnahme an der Online-Befragung auch außerhalb der Schule zuzulassen, müssen Sie den Teilnehmenden auch mitteilen, wie sie auf das Serviceportal gelangen, nämlich (am schnellsten) indem über Firefox mit Google im Internet nach Serviceportal Interne Evaluation gesucht wird oder mit der URL: 26

27 Teilnahme an einer Umfrage Auf der Startseite finden Sie in der Navigationsleiste An Umfrage teilnehmen. Klicken Sie darauf und folgen der Anweisung. 27

28 Teilnahme an einer Umfrage - Fortsetzung Die Schülerinnen und Schüler geben in das dafür automatisch geöffnete Formular ihren Schlüssel zur Teilnahme an der Umfrage und ihren Personenschlüssel ein und starten die Umfrage. Es erscheint online der auszufüllende Fragebogen. 28

29 Beispiel: Online-Fragebogen Klicken Sie auf die zutreffenden Antworten. Beim Ausfüllen ist nur eine Antwort jeweils möglich. Wenn Sie sich beim Anklicken der Antwort vertan haben, klicken Sie einfach noch mal auf die Ihrer Meinung nach wirklich zutreffende. Es bleibt jeweils nur die zuletzt geklickte Antwort stehen. Auslassen kann man ( im zweiten Anlauf ) keine Antwort. 29

30 Beispiel: Online-Fragebogen Ausschnitt aus dem Fragebogen für Schülerinnen und Schüler, der von ihnen online im Computerkabinett ausgefüllt werden soll 30

31 Ergebnis des Vorgangs Abschicken 31

32 6. Online-Auswertung 1. Schritt: Login Nachdem der festgelegte Befragungszeitraum abgeschlossen ist, wollen Sie sicher wissen, welche Ergebnisse die Befragung gebracht hat. Dazu loggen Sie sich erneut mit Ihrem Zugangscode (Benutzername ist die Schul adresse und ihr Passwort, das Sie über die Freischaltungs nach dem Registrieren erhalten haben) ein, um angemeldet zu werden. 32

33 Online-Auswertung - Fortsetzung 2. Schritt: Auswerten automatisch online Klicken Sie in der Querleiste unter der Welle auf Auswerten automatisch Online. In der mittleren Spalte erscheint die Häufigkeitsauszählung. Diese zeigt das tendenzielle Antwortverhalten der Schülerinnen und Schüler bezogen auf die Items der erhobenen Indikatoren an. Ausgehend von der Häufigkeitsauszählung können Sie für jeden erhobenen Indikator einen Mittelwert zunächst für jeden einzelnen Befragten und danach für die Gesamtgruppe aller Schülerinnen und Schüler bilden. Der Mittelwert für den Indikator, nicht das einzelne Item [a) ; oder b) ] sollte für die Weiterarbeit mit den Ergebnissen im Sinne der Schulentwicklung von Bedeutung sein, also nicht die Häufigkeit, mit der die Befragten bei den einzelnen Items mit 1, oder 5 antworten. Hinweis: Achten Sie darauf, dass der richtige Schlüssel (administrativer Schlüssel/ Bezeichnung des Fragebogens ) erscheint. Wenn Sie beispielsweise gleichzeitig Lehrerinnen und Lehrer sowie Eltern nach bestimmten Dingen befragen, möchten Sie eine Auswertung, die auf die entsprechenden Befragten auch wirklich zutrifft. Sollte der richtige Schlüssel (erster erhaltener Schlüssel für die Umfrage/Bezeichnung des Fragebogens) nicht angezeigt werden, müssen Sie diesen erst eintragen. 33

34 Beispiel: Auswerten automatisch online für den Indikator Elaborationsstrategien Häufigkeitsauszählung/Tendenzen im Antwortverhalten 34

35 Online-Auswertung - Fortsetzung 3. Schritt: Auswerten manuell in Excel Klicken Sie in der Querleiste unter der Welle auf Auswerten manuell in Excel. In der mittleren Spalte öffnet sich das Feld Öffnen mit Microsoft Office Excel (Standard). Klicken Sie auf ok. 35

36 Online-Auswertung - manuell in Excel - Fortsetzung Hinweis: Hinweis Achten Sie darauf, dass der richtige Schlüssel (Bezeichnung des Fragebogens) erscheint. Wenn Sie beispielsweise gleichzeitig Lehrerinnen und Lehrer sowie Eltern nach bestimmten Dingen befragen, möchten Sie eine Auswertung, die auf die entsprechenden Befragten auch wirklich zutrifft. Sollte der richtige Schlüssel (erster erhaltener Schlüssel für die Umfrage/Bezeichnung des Fragebogens) nicht angezeigt werden, müssen Sie diesen erst eintragen. 36

37 Online-Auswertung -Fortsetzung Beispiel: Nach dem Öffnen des Feldes Öffnen mit Microsoft Office Excel (Standard) wird ein Microsoft Excel-Arbeitsblatt sichtbar. Darin können Sie sich die Fragen aus dem erstellten Fragebogen und die ermittelten Daten ansehen. 37

38 Online-Auswertung - Fortsetzung Beispiel: Angezeigte Fragen aus dem Fragebogen Klicken Sie auf Fragen. 38

39 Online-Auswertung - Fortsetzung Beispiel: Daten Nach dem Öffnen des Feldes Öffnen mit Microsoft Office Excel (Standard) klicken Sie auf Daten. Dann können Sie sich die Daten ansehen, sie entsprechend weiter nutzen oder verarbeiten und speichern. 39

40 7. Erstellung eines neuen Befragungsinstrumentes Sie können nun ein neues Befragungsinstrument zusammenstellen, z. B. für eine andere Befragtengruppe (vorausgesetzt, Sie finden in diesem Portal dafür entsprechende Fragen) oder mit anderen Qualitätsbereichen, - merkmalen, -kriterien bzw. Indikatoren. Klicken Sie in der Querleiste unter der Welle auf Neuer Fragebogen. Wählen Sie dann in der linken Spalte unter Ihrer Schulart einen neuen Bereich, ein weiteres Merkmal oder zu dem ersten Merkmal weitere Kriterien und Indikatoren sowie die dazugehörigen Fragen/Skalen. Unter jeder Skala finden Sie die Quelle dieser Skala und für welche Befragtengruppe diese einsetzbar ist. 40

41 Erstellung eines neuen Befragungsinstrumentes 41

42 Fragen/Skalen eliminieren Falls es nötig sein sollte, können Sie auch einzelne Fragen/Skalen, die Sie sich ausgewählt haben, löschen, indem Sie in der rechten Spalte, in der der Fragebogen angezeigt wird, auf das Zeichen Papierkorb neben der Lupe klicken. 42

43 Erstellung eines neuen Instrumentes Fortsetzung Aus der Rubrik Methoden und Instrumente aus verschiedenen Quellen Klicken Sie in der Querleiste unter der Welle auf Neuer Fragebogen. Gehen Sie dann in die Navigationsleiste und rufen Sie die Rubrik Methoden und Instrumente aus verschiedenen Quellen auf. Darunter klappen sich Hinweise zu Methoden und Instrumenten aus verschiedenen Quellen sowie der Fragebogen Führungsaspekte des Schulleiterhandelns auf. Wenn der Fragebogen Führungsaspekte des Schulleiterhandelns zum Einsatz kommen soll, kann dieser den Lehrerinnen und Lehrern auch online zur Verfügung gestellt werden. Die Erstellung einer solchen Version erfolgt genauso wie bereits beschrieben. 43

44 Erstellung eines neuen Instrumentes - Fortsetzung Beispiel: Fragebogen Führungsaspekte des Schulleiterhandelns 44

45 Erstellung eines neuen Instrumentes -Fortsetzung Beispiel: Fragebogen Führungsaspekte des Schulleiterhandelns 45

46 Erstellung eines neuen Instrumentes - Fortsetzung Beispiel: Fragebogen Führungsaspekte des Schulleiterhandelns 46