Informationsextraktion aus Stellenanzeigen

Transkript

1 Informationsextraktion aus Stellenanzeigen Die Entwicklung maschineller Verfahren zur Extraktion von Kompetenzen Institut für Linguistik Sprachliche Informationsverarbeitung, Alena Geduldig, Dr. Jürgen Hermes

2 Informationsextraktion Grundlagen Aufgaben Ziele Auffinden relevanter Information in Texten Überführung der Information in strukturierte Repräsentation Nutzbare Organisation der Daten Ermöglichung der maschinellen Weiterverarbeitung

3 Informationsextraktion Teilbereiche Named Entity Recognition Markierung von Personen, Orten, Organisationen etc.

4 Informationsextraktion Teilbereiche Named Entity Recognition Temporal Expression Detection Markierung von absoluten (24. Dezember) und relativen (gestern) Zeitausdrücken

5 Informationsextraktion Teilbereiche Named Entity Recognition Temporal Expression Detection Relation Extraction Interpretation von Relationen zwischen Named Entities, z.b. X ist angestellt bei Y Y hat Firmensitz in Z

6 Informationsextraktion Teilbereiche Named Entity Recognition Temporal Expression Detection Relation Extraction Event Detection Interpretation von Ereignissen (z.b. X hat Firma Y zum Termin Z verlassen )

7 Informationsextraktion Stellenanzeigen Arbeitsmittel Welche Arbeitsmittel sollen im ausgeschriebenen Job eingesetzt werden?

8 Informationsextraktion Stellenanzeigen Arbeitsmittel Welche Arbeitsmittel sollen im ausgeschriebenen Job eingesetzt werden? Tätigkeiten Welche Tätigkeiten sollen im ausgeschriebenen Job ausgeführt werden?

9 Informationsextraktion Stellenanzeigen Welche Arbeitsmittel sollen im ausgeschriebenen Job eingesetzt werden? Tätigkeiten Welche Tätigkeiten sollen im ausgeschriebenen Job ausgeführt werden? Arbeitsmittel Kompetenzen Über welche Kompetenzen müssen / sollten Personen verfügen, die sich für den ausgeschriebenen Job bewerben?

10 Informationsextraktion: Templates Wert Attribut Branche Beruf Ort Aufgaben Anforderungen

11 Informationsextraktion: Templates Wert Attribut Branche Teamleiter (m/w) Beruf Ort Aufgaben Anforderungen

12 Informationsextraktion: Templates Wert Attribut Branche Teamleiter (m/w) Beruf Ort Aufgaben Anforderungen

13 Informationsextraktion: Templates Wert Sportfachhandel Teamleiter (m/w) Ostdeutschland Personaleinsatzplanung, Teamgeist, Sozialkompetenz, Attribut Branche Beruf Ort Aufgaben Anforderungen

14 Vorstufe: Klassifikation von Abschnitten Klassen 1. Unternehmen 2. Job 3. Bewerberprofil 4. Formalia/Sonstiges

15 Vorstufe: Klassifikation von Abschnitten Klassen Tools 1. Unternehmen 2. Job 3. Bewerberprofil Kompetenzen Tätigkeiten 4. Formalia/Sonstiges

16 Architektur eines IE-Systems

17 Architektur eines IE-Systems

18 Architektur eines IE-Systems

19 Architektur eines IE-Systems

20 Architektur eines IE-Systems Domänenspezifische Muster (Formulierungen) erkennen: Führerschein ist von Vorteil Spanischkenntnisse wären von Vorteil Verkaufserfahrung wäre von Vorteil Kenntnisse in Java Kenntnisse im Programmieren Kenntnisse in Photoshop Extraktionsregeln bilden: Extraktionsregeln anwenden:

21 Architektur eines IE-Systems Domänenspezifische Muster (Formulierungen) erkennen: Führerschein ist von Vorteil Spanischkenntnisse wären von Vorteil Verkaufserfahrung wäre von Vorteil Kenntnisse in Java Kenntnisse im Programmieren Kenntnisse in Photoshop Extraktionsregeln bilden: Extraktionsregeln anwenden:

22 Architektur eines IE-Systems Domänenspezifische Muster (Formulierungen) erkennen: Führerschein ist von Vorteil Spanischkenntnisse wären von Vorteil Verkaufserfahrung wäre von Vorteil Kenntnisse in Java Kenntnisse im Programmieren Kenntnisse in Photoshop Extraktionsregeln bilden: Extraktionsregeln anwenden

23 Domänenanalyse

24 Domänenanalyse

25 Domänenanalyse

26 Domänenanalyse

27 Domänenanalyse

28 Zwei Ansätze zur Umsetzung eines IE-Systems: 1. Knowledge Engineering Manuelle Formulierung von Extraktionsregeln Basierend auf beobachtbaren Mustern 2. Machine Learning Automatische Erkennung/Generierung von Extraktionsmustern Lernen aus Beispielen z.b. Bootstrapping

29 Knowledge Engineering: Workflow

30 Knowledge Engineering: Ergebnis Competences.db

31 Knowledge Engineering: Evaluation Testkorpus ~ 550 Sätze ~ 450 manuell annotierte Kompetenzen ~ 40 Extraktionsmuster Ergebnis hohe Präzision geringe Ausbeute

32 Bootstrapping: Idee Nutze was du hat, um zu finden was du suchst! Iteratives Verfahren: Initiales Startset von Kompetenzausdrücken (Seed) 1) Suche nach Vorkommen im Text 2) Musterbildung durch Abstraktion der Kontexte 3) Erweiterung des Startsets durch Anwendung der Kontexte

33 Bootstrapping: Workflow

34 Bootstrapping: Workflow führerschein technisches verständnis

35 Bootstrapping: Workflow Bitte nur Bewerber mit Führerschein führerschein technisches verständnis Technisches Verständnis sollte vorhanden sein

36 Bootstrapping: Workflow Bitte nur Bewerber mit Führerschein führerschein technisches verständnis Technisches Verständnis sollte vorhanden sein soll vorhanden sein Adj N - N nur bewerber mit N

37 Bootstrapping: Workflow Bitte nur Bewerber mit Führerschein führerschein technisches verständnis Technisches Verständnis sollte vorhanden sein Bitte nur Bewerber mit Ortskenntnissen Bitte nur Bewerber mit Fahrerlaubnis Handwerkliches Geschick sollte vorhanden sein soll vorhanden sein Adj N - N nur bewerber mit N

38 Vielen Dank für die Aufmerksamkeit!

39 Kompetenzen in Stellenanzeigen Voraussetzung: - Eigener Pkw, Führerschein und Kranschein erforderlich - zuverlässig, flexibel, motiviert - Erfahrung im Messebereich wünschenswert aber nicht zwingend erforderlich Ihr Profil: - Grundkenntnisse im Umgang mit ms-office - Verantwortungsbewusstsein und handwerkliches Geschick - Reisebereitschaft Eine abgeschlossene Berufsausbildung ist erforderlich. Berufserfahrung wäre von Vorteil. Sie sollten Kenntnisse in QuarkXpress, Photoshop und InDesign haben

40 Kompetenzen in Stellenanzeigen Voraussetzung: - Eigener Pkw, Führerschein und Kranschein erforderlich - zuverlässig, flexibel, motiviert - Erfahrung im Messebereich wünschenswert aber nicht zwingend erforderlich Ihr Profil: - Grundkenntnisse im Umgang mit ms-office - Verantwortungsbewusstsein und handwerkliches Geschick - Reisebereitschaft Eine abgeschlossene Berufsausbildung ist erforderlich. Berufserfahrung wäre von Vorteil. Sie sollten Kenntnisse in QuarkXpress, Photoshop und InDesign haben

41 Kompetenzen in Stellenanzeigen Voraussetzung: - Eigener Pkw, Führerschein und Kranschein erforderlich - zuverlässig, flexibel, motiviert - Erfahrung im Messebereich wünschenswert aber nicht zwingend erforderlich Ihr Profil: - Grundkenntnisse im Umgang mit ms-office - Verantwortungsbewusstsein und handwerkliches Geschick - Reisebereitschaft Eine abgeschlossene Berufsausbildung ist erforderlich. Berufserfahrung wäre von Vorteil. Sie sollten Kenntnisse in QuarkXpress, Photoshop und InDesign haben

42 Kompetenzen in Stellenanzeigen Sie haben mit Charme und Pfiff ihren Schreibtisch im Griff. Ihr Engagement kommt aus dem Herzen und Sie lassen sich auch von urlaubsreifen Mitmenschen nicht auf die Palme bringen. Stets gut gelaunt behalten Sie auch in stressigen Situationen einen kühlen Kopf Zudem besitzen Sie die Kompetenz, erklärungsbedürftige Sachverhalte zu analysieren und schriftlich gut strukturiert und verständlich aufzubereiten. Darüber hinaus sind Sie in der Lage auch in schwierigen Situationen den Überblick und die Ruhe zu bewahren