COIN - wall-ie Workflow for Assessment of Landscape and Landforms Infrastructure Effects Informationen für die Umsetzung des Online Fragebogens der Landschaftsbildbewertung Meeting am 20. November 2012 Version 1.1 Bernhard Kosar Fachhochschule Kärnten University of Applied Sciences Studienbereich Geoinformation & Umwelttechnologien Europastrasse 4, 9524 Villach T: +43(0)5 / 90500 F: +43(0)5 / 90500-2210 Bernhard Kosar Online Umfrage
Inhalt 1 Projektinhalt: Auszug aus dem 1. Besprechungsprotokoll (05.10.2012)... 1 2 Grundsätzliches zur Online Befragung... 1 3 Technische Implementierung... 3 4 Tipps für die richtigen Skalen... 10 5 Offene Fragen... 10 6 Referenzen... 11 Tabellenverzeichnis Tabelle 1: Vor- und Nachteile von Online Befragungen (Thielsch 2012)... 2 Tabelle 2: Fragebogentypen der Software LimeSurvey... 4 Bernhard Kosar Online Umfrage
Dokumentenverlauf Datum Version Kapitel Beschreibung 2012-11-19 1.0 Alle Erstellung des Dokumentes 2012-11-26 1.1 4 Tipps für die richtigen Skalen Bernhard Kosar Online Umfrage
Zusammenfassung Im Projekt wall-ie kooperieren drei Umweltplanungsbüros und ein Unternehmen im Bereich Satellitenbildklassifikation mit der FH Kärnten, um ein innovatives Verfahren zur Landschaftsbildbewertung bei Umweltprüfverfahren (bei Wasserkraftwerken, Straßenprojekten, Windkraftanlagen etc.) zu entwickeln und in Case-Studies zu testen. Das Projekt soll die Kooperation zwischen den beteiligten Unternehmen stärken und ihnen einen Know-How Transfer von der FH bringen. Das Bewertungsverfahren soll auf einem standardisierten Workflow basieren und neueste Technologien der Geoinformation und Visualisierung als benutzerfreundliche Tools für die Landschaftsbildbewertung bereitstellen. Um eine breite Akzeptanz in der Markteinführung zu erlangen, wird ein User-Forum mit Projektträgern (Energieversorger, ASFINAG, etc.) und Behörden eingerichtet, das sicherstellen soll, dass die Ergebnisse praxisorientiert sind. Mit dem Einsatz des innovativen Verfahrens wollen die beteiligten KMU ihre Marktposition ausbauen. Dieses Dokument befasst sich mit der Umsetzung des online Fragebogens der für die Landschaftsbildbewertung verwendet werden wird. Die technische Implementierung des Fragebogens erfolgt mit der open source Software (öffentlich zugänglich und frei kopiert, modifiziert und verändert weiterverbreitet werden darf) LimeSurvey, des Weiteren wurde eine Stichprobengröße von 500 Personen für die Umfrage festgelegt. 1 Projektinhalt: Auszug aus dem 1. Besprechungsprotokoll (05.10.2012) Eingaben zu Parametern der Landschaftsbildbewertung über Wiki: Definitionen und Beschreibungen zu den Parametern: Vielfalt Eigenart (od. Einzigartigkeit/Seltenheit) Naturnähe/Natürlichkeit Störfaktoren pos./neg. Sichtbeziehungen Angabe der Literaturzitate mit der jeweiligen Quelle; Kommentare mit einem Hinweis des Autors. Für die Onlinebefragung werden pro Parameter 3 typische Fotos aus unterschiedlichen Landschaftsräumen und eine vorher-nachher Bild-Kollage ausgewählt (pro Parameter also 5 Fotos). Die Fotos sollen für den Experten klar definierbar sein (für die Auswertung). Jeder überlegt sich, welche Aussagen man durch die Befragung mit den Fotos erreichen will. 2 Grundsätzliches zur Online Befragung Der Einsatz von Online Befragungen ist in den letzten Jahren stetig gewachsen, da immer mehr Personen per E-Mail erreichbar sind. Die Vorteile einer online Befragung sind sehr vielfältig, nicht zuletzt durch die stetig bessere Entwicklung der freeware/shareware Online-Befragungssoftware Produkte im Internet. Die methodischen Vor - und Nachteile von Online Befragungen sind in zusammengefasst. Bernhard Kosar Online Umfrage Seite 1
Tabelle 1: Vor- und Nachteile von Online Befragungen (Thielsch 2012) Vorteile Zeiteffizienz bei Erhebung, Auswertung und Präsentation der Daten Aufwand und Kosten für Druck, Austeilung und Kodierung von Fragebögen, Interviewer und Dateneingaben entfallen Automatisierbarkeit und somit teilweise hohe Objektivität: Keine Fehlerquellen durch Dateneingabe, keine Versuchsleiter-Effekte, keine Gruppeneffekte Heterogenere Stichprobenzusammensetzung als bei durchschnittlichen offline durchgeführten Studien Alokalität des Mediums: Manche offline schwer erreichbare Personenkreise sind online ansprechbar Hohe Datenqualität; Kontrollskripte verhindern missing data ; Konsistenzprüfungen der Daten anhand von Zeitprotokollen u. ä. möglich Zumeist hohe Akzeptanz aufgrund von Freiwilligkeit, Flexibilität und Anonymität Verfahrenstransparenz, Ethik: Online- Studien sind transparenter, da sie stärker öffentlich zugänglich sind als Offline- Studien Nachteile Die Programmierung der Online- Untersuchung braucht einen gewissen zeitlichen Vorlauf Gegebenenfalls Aufwand für Einarbeitung in entsprechende Befragungssoftware Die Durchführungsbedingungen der Datenerhebung können nicht kontrolliert werden, daher Probleme bei der Durchführungsobjektivität Keine Repräsentativität für die Gesamtbevölkerung erreichbar Nicht alle Zielgruppen sind online, nicht alle Computer bezüglich Soft- und Hardware auf ausreichend aktuellem Stand Mehrfachteilnahmen von Befragten sind technisch nur bedingt kontrollierbar, Rückfragen können nur asynchron und auf Initiative des Befragten hin beantwortet werden Akzeptanzprobleme wenn die Befragten Direktmarketing oder andere unerwünschte Datennutzungen vermuten Daten(banken) der Online-Studie müssen gegen unberechtigten Zugriff geschützt werden. Die folgende Checkliste (Thielsch 2012) soll die wichtigsten Aspekte die bei der Erstellung einer Online-Umfrage beachten werden müssen auflisten. Vor der Befragung: o Regeln der Item- und Fragebogenkonstruktion einhalten! o Sind alle Fragen und Instruktionen verständlich? o Sind wirklich alle Items notwendig? o Fehlen womöglich noch wichtige Items? Umsetzung der Befragung: o Sind alle wichtigen Informationen auf der Startseite? o Sind die Angaben zur Bearbeitungsdauer realistisch? o Funktionieren alle Filterführungen und Kontrollchecks in der Befragung? o Gibt es irgendwelche Usability-Probleme? Wird die Befragung in gängigen Browsern gut dargestellt? o Vortest der Online-Befragung mit Personen aus der Zielgruppe! Online-Datenerhebung: o Wie und wo sollen die Probanden rekrutiert werden? Bernhard Kosar Online Umfrage Seite 2
o Ist der Einladungstext knapp aber gut formuliert? Sind alle wichtigen Informationen genannt? o Sind auf der Startseite der Befragung alle wichtigen Informationen genannt? o Zu Beginn der Feldphase: Nennen die Befragten in den offenen Anmerkungen irgendwelche technischen oder inhaltlichen Probleme? Nach der Datenerhebung: o Analyse von Abbruch und Datenqualität: Gab es selektiven Abbruch? o Müssen Datensätze ausgeschlossen werden? o Bei einer Quotierung: Sind alle Gruppen voll oder muss gezielt nachgeschichtet werden? o Soll an die Befragten noch ein Ergebnisbericht o.ä. versendet werden? 3 Technische Implementierung Für die technische Umsetzung wurde die Open-Source & freie Software-Anwendung LimeSurvey in der neuesten Version 2.0 gewählt. Einige der Vorteile dieser Software sind: Unbegrenzte Anzahl von Umfragen zur selben Zeit Unbegrenzte Anzahl von Teilnehmern an einer Umfrage Mehr als 30 verschiedene Fragentypen Unterstützung von mehr als 50 verschiedenen Sprachen WYSIWYG HTML Editor zum einfachen Formatieren von Textbausteinen Möglichkeit Bedingungen für Fragen basierend auf früheren Antworten zu definieren Möglichkeit eine Druckversion der Umfrage zu erstellen Möglichkeit Bilder, Filme oder andere Multimediainhalte in einer Umfrage einzubinden Anonyme und nicht anonyme Umfragen Erweiterte Import- und Export-Funktion (Text, CSV, MS Excel, PDF, SPSS, R, quexml) Etc. Die System-Voraussetzungen für die Software sind: Minimum 80 MB freien Speicherplatz Min. MySQL 4.1.0 oder min. Postgres 8.1 PHP 5.1.2 oder aktueller mit folgenden aktivierten Modulen: Bernhard Kosar Online Umfrage Seite 3
Folgende Fragebogentypen werden in der Software LimeSurvey angeboten: Tabelle 2: Fragebogentypen der Software LimeSurvey Fragebogentyp Einfachauswahl 5 Punkte Auswahl Screenshot Liste (Klappbox) Liste (Optionsfelder) Liste mit Kommentar Textfragen Bernhard Kosar Online Umfrage Seite 4
Ausführlicher freier Text Kurzer frier Text Langer freier Text Mehrfache kurze Texte Maskenfragen Datei-Upload Bernhard Kosar Online Umfrage Seite 5
Datum/Uhrzeit Geschlecht Gleichung Ja/Nein Bernhard Kosar Online Umfrage Seite 6
Mehrfach numerische Eingabe Reihenfolge Sprachwechsel Textanzeige Zahleneingabe Matrixfragen Dual Matrix Bernhard Kosar Online Umfrage Seite 7
Matrix Matrix (10 Punkte Auswahl) Matrix (5 Punkte Auswahl) Matrix (Ja/Nein/Unsicher) Matrix (Texte) Bernhard Kosar Online Umfrage Seite 8
Matrix (Zahlen) Matrix (Zunahme/Gleich/Abnahme) Matrix nach Spalte Mehrfachauswahl Mehrfachauswahl Mehrfachauswahl (Kommentar) Bernhard Kosar Online Umfrage Seite 9
4 Tipps für die richtigen Skalen Bevorzugt: Skalen mit einer geraden Kategorienanzahl o Mittelpunkte werden als Fluchtpunkte missbraucht o Benutzt bei Unsicherheit der Befragten -> Weiß nicht Skalenbreite: 4, 6, 8, 10, 100? o mehr als zehn Optionen kontraproduktiv (sinnvolle Differenzierung nicht möglich) o zu wenige Kategorien auch nicht sinnvoll (Differenzierung wiederum nicht ausreicht) Auszug aus Internet Foren: Wir hatten zuvor eine Skala von 1-10, kamen dann aber zum Schluss, dass dies zu viele Antwortmöglichkeiten sind und es zu komplex für die Teilnehmer ist. Außerdem gab es ein Ungleichgewicht zwischen Schlecht (1-3), Durchschnittlich (4-7) und Gut (8-10), da der durchschnittliche Bereiche mit 4 Auswahlmöglichkeiten größer war als bei Gut und Schlecht. [SeibertMedia 2012] Vorschlag: Skala 1-6: Gut Durchschnitt Schlecht 1 2 3 4 5 6 5 Offene Fragen Zufallswiedergabe o Nicht möglich (nur innerhalb einer Fragebogengruppe/seite) Persönliche Angaben (Notwendigkeit von personenbezogenen Daten?) o Name, Adresse, Wohnort, Bildungsniveau, Herkunft, E-Mail etc. Datensicherheit/Datenschutz o Übertragung der Daten Optional: Verschlüsselungsprotokolls https (SSL) erfolgen o Datenschutz Hinweise zum Datenschutz http://www.landschaftsbild.org/datenschutz.html Bsp.: Hinweis zum Datenschutz Bernhard Kosar Online Umfrage Seite 10
6 Referenzen Hudec M., Neumann C., 2012. STICHPROBEN & UMFRAGEN [online]. Institut für Statistik der Universität Wien. Available from http://www.stat4u.at/download/1423/stichpr.pdf [Accessed 19 November 2012]. SeibertMedia., 2012. Online-Umfragen: Tipps für die richtigen Skalen [online]. Consulting, Online- Marketing, Design, Technologie, Unternehmenskommunikation, Wikis, Jirs. Available from http://blog.seibert-media.net/2011/02/14/online-umfragen-tipps-fuer-die-richtigen-skalen/ [Accessed 26 November 2012]. Thielsch M., Weltzin S., 2012. Online-Befragungen in der Praxis [online]. Universität Münster. Available from http://www.thielsch.org/download/thielsch_2009_onlinebefragungen.pdf [Accessed 19 November 2012]. LimeSurvey, 2012. Web application to develop, publish and collect responses to online & offline surveys [online]. Available from: http://www.limesurvey.org/ [Accessed 05 December 2012]. Bernhard Kosar Online Umfrage Seite 11