<APPOINT> BiographIE - Informationsextraktion aus biographischen Kontexten. Hauptseminar im Wintersemester 2009/2010

Transkript

1 <APPOINT> BiographIE - Informationsextraktion aus biographischen Kontexten Hauptseminar im Wintersemester 2009/2010 Dozenten: Prof. Franz Günthner, Michaela Geierhos Vortrag am , Referentin: Susann Mulzer

2 Aufgabenstellung Thema: beruflicher Einstieg, Aufstieg, Wechsel Erstellen einer lokalen Grammatik für appoint Erweiterung des Lexikons der Organisationen Erweiterung des Lexikons der Berufsbezeichnungen BiographIE - appoint 2

3 Lösungsansatz als Übersicht mögliche JD lokale Grammatik Entwurfslexikon PERL Abgleich Korrektur Ergänzung der Lexika mögliche ORG lokale Grammatik Lokale Grammatik Hauptgraph Subgraphen für die einzelnen Argumente Korpusanalyse allgemeine Argumentstruktur Kotextanalyse über reguläre Ausdrücke BiographIE - appoint 3

4 Mögliche Bedeutungen: appoint to fix or set officially "appoint." Merriam-Webster Online Dictionary Merriam-Webster Online. 10. Dezember 2009 < to name officially to determine the disposition of (an estate) to someone by virtue of a power of appointment to provide with complete and usually appropriate or elegant furnishings or equipment to exercise a power of appointment BiographIE - appoint 4

5 Mögliche Bedeutungen: appoint to fix or set officially "appoint." Merriam-Webster Online Dictionary Merriam-Webster Online. 10. Dezember 2009 < to name officially to determine the disposition of (an estate) to someone by virtue of a power of appointment to provide with complete and usually appropriate or elegant furnishings or equipment to exercise a power of appointment BiographIE - appoint 5

6 Das Korpus Beispielsätze PP appoint him administrative director (5){S} <PERSON> <JD> PP appoint him as head of the rabbinical academy of pumbeditha (11){S} <PERSON> as <JD> of the <ORG> of <GEO> BiographIE - appoint 6

7 Das Korpus Beispielsätze PP appoint 10 business and only 6 state and local officials (11){S} business officials state officials local officials BiographIE - appoint 7

8 Das Korpus Beispielsätze PP appoint this (3){S} PP appoint a 1997 schemers t-shirt day (7){S} BiographIE - appoint 8

9 Verfügbare Lexika GEO JD in der Vorverarbeitung auf Kleinschreibung normalisiert BiographIE - appoint 9

10 Verfügbare Lexika ORG ORGBEZ in der Vorverarbeitung auf Kleinschreibung normalisiert BiographIE - appoint 10

11 Verfügbare Lexika ORGADJ SECTOR BiographIE - appoint 11

12 Lokale Grammatik Erstellen einer lokalen Grammatik für appoint UNITEX BiographIE - appoint 12

13 Argumentstruktur von <appoint> <PERSON> <JD> <DEPARTMENT> <COMPANY> <PERSON> <JD> <COMPANY> <DEPARTMENT> <PERSON> <JD> <COMPANY> <PERSON> <JD> <DEPARTMENT> <appoint> + <PERSON> <JD> <JD> <JD> <COMPANY> <COMPANY> <JD> <JD> <DEPARTMENT> <JD> <COMPANY> <DEPARTMENT> <JD> <DEPARTMENT> <COMPANY> BiographIE - appoint 13

14 Argumentstruktur von <appoint> <appoint> <PERSON> <JD> <DEPARTMENT> <COMPANY> BiographIE - appoint 14

15 Argumentstruktur von <appoint> weitere mögliche Argumente, Einschübe: <DATE> <NB> <PERIOD> <DURATION> <GEO> <appoint> <PERSON> <JD> <DEPARTMENT> <COMPANY> <ADDITIONAL INFO RE. PERSON> <REPLACEMENT INFO> <ORGADJ> <APPOINTER> BiographIE - appoint 15

16 Graphen Subgraphen PERSON Siehe auch: Geierhos Seite 71. Ein weiteres Beispiel für einen Graphen zur Erkennung von Personennamen BiographIE - appoint 16

17 Graphen Subgraphen JD BiographIE - appoint 17

18 Graphen Subgraphen ORG BiographIE - appoint 18

19 Graphen Subgraphen DEPTMT 2. Subgraph ohne Präpositionen für bestimmte Kotexte BiographIE - appoint 19

20 Graphen Subgraphen GEO DATE BiographIE - appoint 20

21 Graphen Hauptgraph BiographIE - appoint 21

22 Ergebnisse appoint<arg type = JD><JD>professor</JD></ARG><ARG type = DPTSEC> of <DPTSEC> music</dptsec></arg><arg type = ORG> at the<org> university of notre dame</org></arg> appoint another<arg type = JD><JD> governor</jd></arg> <ARG type = GEO> in<geo> egypt</geo></arg> appoint<arg type = PERSON> her</arg><arg type = JD> as another <JD> boss</jd></arg><arg type = DATE> that may</arg> appoint<arg type = JD> my<jd> flunkey</jd></arg> <ARG type = JD> as federal<jd> prime minister</jd></arg> appoint<arg type = PERSON> her</arg> to be<arg type = JD> the <JD> director</jd></arg> and witness to it, the herald and the interpreter appoint<arg type = PERSON> her</arg><arg type = JD> as the<jd> head</jd></arg><arg type = GEO> of the<geo> arkansas</geo></arg> <ARG type = DPTSEC><DPTSEC> department of health</dptsec></arg> BiographIE - appoint 22

23 Probleme appoint<arg type = PERSON> him</arg><arg type = JD> the vice<jd> chancellor</jd></arg><arg type = GEO> of the<geo> university</geo></arg> JD GEO BiographIE - appoint 23

24 Probleme appoint<arg type = JD> as<jd> chairmen</jd></arg> of his president's commission to strengthen social security retired sen. daniel patrick moynihan, d-n.y., and richard parsons, co-chief executive of aol time warner inc fehlende Einträge im Lexikon fehlende syntaktische Strukturen BiographIE - appoint 24

25 Lexikon Erweiterung des Lexikons der Organisationen Erweiterung des Lexikons der Berufsbezeichnungen BiographIE - appoint 25

26 Lexikon Erweiterung des Lexikons der Organisationen Erweiterung des Lexikons der Berufsbezeichnungen BiographIE - appoint 26

27 Lexikon der Organisationen Nützliche Kontexte für das Erkennen neuer Organisationen: Angabe der Rechtsform / Art des Gewerbes phraseneinleitende Präposition Großschreibung? named entity BiographIE - appoint 27

28 Lexikon der Organisationen Vorgehensweise Annotation möglicher Organisationen (lokale Grammatik) Entwurfslexikon (PERL) Abgleich mit bestehendem Lexikon Nachbearbeitung / Korrekturen BiographIE - appoint 28

29 Lexikon der Organisationen Vorgehensweise Annotation möglicher Organisationen (lokale Grammatik) Entwurfslexikon (PERL) Abgleich mit bestehendem Lexikon (PERL) Nachbearbeitung / Korrekturen BiographIE - appoint 29

30 Lexikon der Organisationen BiographIE - appoint 30

31 Lexikon der Organisationen AUSZUG BiographIE - appoint 31

32 Lexikon der Organisationen richtig erkannt...volvement in a racketeer payoff scandal at<pot_org> nomura securities co ltd</pot_org> (34){S} PP appoint vice......eing conducted by the new york law firm of <POT_ORG> paul, weiss, rifkind, wharton and garrison llp</pot_org> BiographIE - appoint 32

33 Lexikon der Organisationen Fehlerquelle:...ppoint various employees to do the work of <POT_ORG> running the corporation </POT_ORG> (12){S} PP appoint vario BiographIE - appoint 33

34 Lexikon der Organisationen Lösungsideen genauere syntaktische Analyse von Oranisationsbezeichnungen und Erweiterung der lokalen Grammatik [z. B. Klammerstrukturen: BCG (Boston Consulting Group) ;...] Suche über Personennamen und Wörter, die nicht im Lexikon stehen aufeinander aufbauende lokale Grammatiken, um genauer zu filtern, und Stopwörter, um ungewünschte Ergebnisse zu entfernen BiographIE - appoint 34

35 Lexikon der Organisationen Vorgehensweise Annotation möglicher Organisationen (lokale Grammatik) Entwurfslexikon (PERL) Abgleich mit bestehendem Lexikon Nachbearbeitung / Korrekturen BiographIE - appoint 35

36 Lexikon der Organisationen Entwurfslexikon annotierter Text PERL techprom inc.,.org texaco inc.,.org texas commerce bank,.org thai military bank plc,.org... fehlerhafte Einträge next association,.org new corporation,.org BiographIE - appoint 36

37 Lexikon der Organisationen Vorgehensweise Annotation möglicher Organisationen (lokale Grammatik) Entwurfslexikon (PERL) Abgleich mit bestehendem Lexikon Nachbearbeitung / Korrekturen BiographIE - appoint 37

38 Lexikon der Organisationen Vergleich: Entwurfslexikon und ORG.dic manuelle Bearbeitung der verbleibenden Einträge Ergebnis: Lexikoneinträge für 76 bisher noch nicht im Lexikon vorhandene Organisationen BiographIE - appoint 38

39 Lexikon der Berufsbezeichnungen Vorgehensweise Annotation möglicher Organisationen (lokale Grammatiken, Stopwortliste) Entwurfslexikon (PERL) Abgleich mit bestehendem Lexikon Nachbearbeitung / Korrekturen BiographIE - appoint 39

40 Lexikon der Berufsbezeichnungen Vorgehensweise Annotation möglicher Organisationen (lokale Grammatiken, Stopwortliste) Entwurfslexikon (PERL) Abgleich mit bestehendem Lexikon Nachbearbeitung / Korrekturen BiographIE - appoint 40

41 Lexikon der Berufsbezeichnungen Nützliche Kontexte für das Erkennen neuer Berufsbezeichnungen: linker Kontext: appoint (as) rechter Kontext: Präpositionen (of,...) Satzzeichen Relativpronomen BiographIE - appoint 41

42 Lexikon der Berufsbezeichnungen BiographIE - appoint 42

43 Lexikon der Berufsbezeichnungen PERL OUTPUT 1. Graph negativer OUTPUT 2. Graph BiographIE - appoint 43

44 Lexikon der Berufsbezeichnungen Entwurfslexikon negativer OUTPUT 2. Graph PERL enthält noch zu viele fehlerhafte Einträge BiographIE - appoint 44

45 Lexikon der Berufsbezeichnungen Vorgehensweise Annotation möglicher Organisationen (lokale Grammatiken, Stopwortliste) Entwurfslexikon (PERL) TO DO Abgleich mit bestehendem Lexikon (PERL) Nachbearbeitung / Korrekturen BiographIE - appoint 45

46 Literatur Geierhos, Michaela: Grammatik der Menschenbezeichner in biographischen Kontexten. Arbeiten zur Informations- und Sprachverarbeitung. Band 2. Centrum für Informations- und Sprachverarbeitung. LMU München, Mallchok, Friederike: Automatic Recognition of Organization Names in English Business News. Dissertation, LMU München, Paumier, Sébastian: UNITEX 2.0, User Manual. Université Paris-Est Marnela-Vallée < Merriam-Webster Online Dictionary Merriam-Webster Online BiographIE - appoint 46