Linux I II III Res WN/TT NLTK BNC/XML XLE I XLE. Nicolas Bellm. 3. April 2008

Transkript

1 Linux I II III Res WN/TT NLTK BNC/XML I 3. April 2008

2 Inhalt Linux I II III Res WN/TT NLTK BNC/XML I 8 I Vorbereitung Grammatik I Grammatik II Parsen Dateien

3 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Vorbereitung Vorbereitung und Starten $ ssh -X ella Password: $ cd Vorkurs $ mkdir xle $ cd xle $ cp /home/public/skel.lfg deutsch.lfg $. /resources/processors/parser/xle/setup $ emacs & Öffnen einer Datei C-x C-f (zuerst Ctrl X und danach Ctrl F ) /xle/deutsch.lfg

4 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Aufbau der -Dateien jede LFG-Datei besteht aus mindestens drei Teilen: CONFIG: hier können verschiedene Einstellungen vorgenommen werden RULES: hier befinden sich die Phrasenstruktur-Regeln LEXICON: hier befindet sich das Lexikon in diesem Vorkurs sind hauptsächlich die Teile RULES und LEXICON für uns interessant.

5 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Phrasenstrukturregeln Unterhalb von TOY GERMAN RULES (1.0) S --> NP VP. NP --> (Det) N. VP --> V (NP). Hinweise Um die Textzeilen schön einzurücken, drückt M-q ( Alt Q ) Sollte irgendetwas im Emacs nicht so funktionieren, wie erwartet, drückt C-g ( Ctrl G ) um den momentanen Befehl abzubrechen

6 Lexikon Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Unterhalb von TOY GERMAN LEXICON (1.0) der Det *. den Det *. Student N *. Studenten N *. arbeitet V *. arbeiten V *. Ergänzt noch die Artikel die und das, die Nomina Studentin und Geschenk jeweils im Nominativ/Akkusativ im Singular/Plural, das Verb sehen in der 3. Person Singular und Plural.

7 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Parsen von Sätzen Starten von C-x C-s ( Ctrl X und danach Ctrl S ) speichern C-x 2 ( Ctrl X und danach 2 ) Bildschirm teilt sich C-c C-f ( Ctrl C und danach Ctrl F ) wird gestartet Parsen create-parser deutsch.lfg LFG-Datei wird geladen parse {der Student arbeitet} vier Fenster öffnen sich, im linken oberen ist die Baumansicht Nun parst weitere Sätze wie die Studentinnen arbeiten, die Studenten sehen die Studentinnen, aber auch das Student arbeiten und der Student arbeitet das Geschenk was fällt bei den beiden letzten Sätzen auf?

8 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Studentin die = Studentin = PRED Studentin

9 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Studentin PRED Studentin die = Studentin = PRED Studentin

10 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Studentin PRED Studentin die = Studentin = PRED Studentin

11 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Studentin PRED Studentin die = Studentin = PRED Studentin

12 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Studentin PRED Studentin pl die = Studentin = PRED Studentin

13 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Studentin PRED Studentin pl die = Studentin = PRED Studentin

14 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Student die = Student = PRED Student GEND m

15 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Student PRED Student die = Student = PRED Student GEND m

16 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Student PRED Student die = Student = PRED Student GEND m

17 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Student PRED Student die = Student = PRED Student GEND m

18 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Student PRED Student pl die = Student = PRED Student GEND m

19 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien die Student PRED Student pl GEND??? die = Student = PRED Student GEND m

20 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien F-Struktur (Regeln) Unterhalb von TOY GERMAN RULES (1.0) S --> NP: (ˆSUBJ) =! (!CASE) = nom; VP: ˆ =!. NP --> Det: ˆ =!; N: ˆ =!. VP --> V: ˆ =!; (???). Den Code für das Akkusativ-Objekt dürft ihr selbst ergänzen. Beachtet, daß am Ende kein Semikolon stehen darf, da die schließende Klammer schon das Ende des Ausdrucks kennzeichnet.

21 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien F-Struktur (Lexikon) Unterhalb von TOY GERMAN LEXICON (1.0) der Det * (ˆDET) = + (ˆCASE) = nom (ˆNUM) = sg (ˆGEND) = m. den Det * (ˆDET) = + (ˆCASE) = acc (ˆNUM) = sg (ˆGEND) = m. die Det * (ˆDET) = + { (ˆCASE) = nom (ˆNUM) = sg (ˆGEND) = f (ˆCASE) = acc (ˆNUM) = sg (ˆGEND) = f (ˆCASE) = nom (ˆNUM) = pl (ˆGEND) = m [...] } Student arbeitet N * (ˆPRED) = Student (ˆCASE) = nom (ˆNUM) = sg (ˆGEND) = m. V * (ˆPRED) = arbeiten<(ˆsubj)> (ˆSUBJ NUM) = sg.. Vervollständigt noch die restlichen Wörter!

22 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Aufgaben Fügt noch ein Dativobjekt hinzu! Ergänzt den unbestimmten Artikel im Singular (Plural)!

23 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Parsen von ganzen Dateien Konsole und -Shell $ cp /home/public/testfile1. $ mkdir output1 % parse-testfile testfile1 -outputprefix output1/ $ cd output1 $ ls $ less S1.pl Aufgabe Parst den ersten Satz (Der Student arbeitet) auf die herkömmliche Art und Weise und vergleicht die C-Struktur und F-Struktur mit dem Proglog-Output. Hinweis: In der Baumansicht könnt ihr euch mit dem p-knopf (partials) den ganzen Baum anzeigen lassen.

24 Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Deutsche Grammatik verwenden Emacs beenden C-x C-f ( Ctrl X und danach Ctrl F ) Konsole $ cp /home/public/testfile2. $ mkdir output2 $ xle-german -notk -e parse-testfile testfile2 -outputprefix output2/; exit $ cd output2 $ less S1.pl

25 Danke Linux I II III Res WN/TT NLTK BNC/XML I Vorbereitung Grammatik I Grammatik II Parsen Dateien Vielen Dank für eure Aufmerksamkeit!