Übersetzung der Erhebungsinstrumente in PIAAC Deutschland

Transkript

1 Übersetzung der Erhebungsinstrumente in PIAAC Deutschland PIAAC-Forschungskonferenz Mannheim, Anouk Zabal Anouk Zabal PIAAC-Forschungskonferenz 2014

2 Überblick Internationale Übersetzungsanforderungen und -prozeduren in PIAAC Nationale Übersetzungsprozesse Herausforderungen in der Übersetzung von Kompetenzaufgaben

3 Verantwortlichkeiten Internationales PIAAC-Konsortium: verantwortlich für zentrale Prozesse der Qualitätssicherung und Qualitätskontrolle Nationale Projektmanagements: verantwortlich für die Übersetzung und Finalisierung der nationalen Erhebungsinstrumente

4 Internationale Verantwortlichkeiten Etablierung internationaler Standards für die Übersetzung der Erhebungsinstrumente Erstellung diverser umfangreicher translation guidelines sowie item-by-item guides Spezifizierung der Übersetzungsabläufe, Bereitstellung von Monitoringinstrumenten Trainings für Übersetzungsteams inkl. Bereitstellung eines Trainingsmoduls zur nationalen Weiterverwendung Bereitstellung entsprechender Übersetzungstools, Unterstützung des Übersetzungsprozesses Verifikation und final check Empirische Prüfung im Feldtest

5 Erhebungsinstrumente 1. Hintergrundfragebogen 2. Kompetenzmessung: computergestützte Instrumente papierbasierte Instrumente Übersetzung der Erhebungsinstrumente vor dem Feldtest in 2010 Übersetzungsziel: Äquivalenz der verschiedenen nationalen Instrumente Übersetzungsprozedur: doppelte Übersetzung und Reconciliation

6 PIAAC-DE: Die Übersetzer Anforderungen an Übersetzer: Übersetzungsspezialisten mit perfekter Beherrschung der Ausgangssprache/-kultur und Zielsprache/-kultur Deutsch als Muttersprache Erfahrung in der Übersetzung von Fragebögen bzw. kognitiven Instrumenten Kompetenzmessung: Übersetzer 1: Deutschland Übersetzer 2: Österreich

7 PIAAC-DE: Reconciliation imteamansatz Domänen- Experten Übersetzer 1 Reconciliator + NPM-Team Übersetzer 2 Fragebogen: Nationale Experten GESIS-Experten Fragebogenkonstr. GESIS-Expertin Kompetenzaufgaben: Übersetzung Nationale Domänen- Experten GESIS-Expertin Übersetzung

8 Nach der Reconciliation: Finalisierung der nationalen Übersetzung: Konsistenzprüfungen, Harmonisierung, Prüfung des Ablaufes und des Sprachflusses Prüfung der Einhaltung der aufgabenspezifischen Übersetzungsrichtlinien Dokumentation Nachfolgende Feedbackrunden: Verifikation Layout Scoring

9

10

11

12 XLIFF Translation Editor

13 IMP: Translation Portal

14 Internationale Scoring Definition T1: minimale korrekte Antwort T2+T3: miss area

15 PIAAC-DE Scoring Definition

16 Scoring-Definitionen in Übersetzungen Frage: Was versteckt sich im zweiten Satz? Übersetzungsvariante 1 Dieser erste Satz beinhaltet diverse Distraktoren, womit jegliches Markieren hier absolut falsch wäre. Im Kontrast dazu versteckt sich die korrekte Antwort entsprechend der internationalen Scoring-Richtlinien in diesem zweiten Satz. Bitte achten Sie darauf, dass die Scoring- Definition vorgibt, dass mindestens die beiden Wörter korrekte Antwort markiert werden. Übersetzungsvariante 2 Dieser erste Satz beinhaltet diverse Distraktoren, womit jegliches Markieren hier absolut falsch wäre. Im Kontrast dazu versteckt sich die Antwort, welche gemäß der internationalen Scoring-Richtlinien korrekt ist, in diesem zweiten Satz. Bitte achten Sie darauf, dass die Scoring- Definition vorgibt, dass mindestens die beiden Wörter korrekte Antwort markiert werden.

17 Einige Erkenntnisse Scoring-Definitionen sollten unbedingt in die erste Übersetzungsphase integriert sein Limitationen der Übersetzungstools Technologie kann vom Übersetzungsprozess ablenken weitere Entwicklungen erforderlich, insb. bei Previewfunktion Bessere Abstimmung der Abläufe der computergestützten und papierbasierten Aufgaben Mehr Zeit für Übersetzungsprozesse erforderlich!

18 Vielen Dank! Kontakt: Anouk Zabal GESIS Leibniz-Institut für Sozialwissenschaften PO D Mannheim