Semantik in Suchmaschinen Beispiele. Karin Haenelt

Transkript

1 Semantik in Suchmaschinen Beispiele Karin Haenelt

2 Inhalt Google Knowledge Graph Freebase schema.org 2

3 Google Knowledge Graph Zuordnung von Suchtermen zu Weltentitäten Darstellung von Zusammenhängen in einem Knowledge Graph Sammlung von Informationen über verschiedene Dinge Beispiel Personen: Zusammenstellung von Informationen wie Geburtsdatum oder Größe 3

4 Google Knowledge Graph The Knowledge Graph is a knowledge base used by Google to enhance its search engine's search results with semantic-search information gathered from a wide variety of sources. Knowledge Graph display was added to Google's search engine in 2012, starting in the United States, having been announced on May 16, [1] It provides structured and detailed information about the topic in addition to a list of links to other sites. The goal is that users would be able to use this information to resolve their query without having to navigate to other sites and assemble the information themselves. [2] 4

5 search/features/search/knowledge.html

6 Text aus: , ( : Reihenfolge der Bilder geändert, aber weiterhin alle Bilder Rosskastanien) 6

7 Google Knowledge Graph eine der ersten Funktionen von Knowledge Graph ist ein Feld neben den Suchergebnissen Google bereichert die Suche, indem die Informationen, die andere Nutzer nützlich fanden und die Informationen im Knowledge Graph kombiniert werden Die Suchanfragen der Nutzer lassen uns erkennen, welche Inhalte in die Datenbank aufgenommen werden sollen Je mehr die Informationen im Knowledge Graph wachsen, umso besser können wir Nutzeranfragen verstehen und die Informationen im Web einschätzen, um dann beide Aspekte sinnvoll miteinander zu verbinden

8 Google Knowledge Graph Datenquellen online-daten gesammelte strukturierte Schemata RDF, microformat-daten, Suchprotokolle annotierte Daten aus Googles semantischer Datenbasis Freebase DBPedia 8

9 Inhalt Google Knowledge Graph Freebase schema.org 9

10 Freebase Datenbasis mit 1,9 Mrd. RDF-Tripeln zu den meistgesuchten Personen Orten Dingen (world entities) 2010 von Google erworben Verbindung von Internet der Dinge Semantic Web

11 Freebase

12

13 Freebase API

14 Freebase API Suche Textuelle Bedingungen Sprachspezifische Normalisierung: z.b. für Englisch: Konvertierung in Kleinschreibung, Entfernung der Akzente Präfixsuche Stemming Phrasensuche Filter query: "bob dy" prefixed: true query: "potatos" stemmed: true query: "\"to be or not to be\"" filter: "(all name:gore alias:gore type:/people/person)" Sprachen, auch mehrere Sprachen gleichzeitig 14

15 Freebase API Suche Schema Bedingungen mit type und domain query: "babar" domain: "/film" lang: "fr" query "john" filter: "(all type:/people/person /people/person/nationality:"canada")" Metaschema-Bedingungen: Filterung nach semantischen Prädikaten (60 unterstützte Prädikate) filter: "(all discovered_by:curie)" 15

16 Freebase API Suche filter: "(all discovered_by:curie)" { "status": "200 OK", "result": [ { "mid": "/m/025scm7", "id": "/en/radium", "name": "Radium", "notable": { "name": "Chemical Element", "id": "/chemistry/chemical_element" }, "lang": "en", "score": }, { "mid": "/m/025s7y9", "id": "/en/polonium", "name": "Polonium", "notable": { "name": "Chemical Element", "id": "/chemistry/chemical_element" }, "lang": "en", "score": } ], "cost": 9, "hits": 2} 16

17 Freebase API Suche Scoring and Ranking Freebase entities have an inherent relevance score (ranking) computed during indexing function of its inbound and outbound link counts in Freebase and Wikipedia Some popular Freebase entities also have a popularity score computed by Google By default, both scores are combined together during queries

18 Freebase API Suche: Metaschema Metaschema Eigenschaften: können zwei Funktionen haben "super properties" (in einer Eigenschaften-Hierarchie) mehrere Eigenschaften umfassen z.z ( ) über 3500 Freebase-Eigenschaften auf 46 Metaschema-Muster abgebildet MQL Queries (Metaweb Query Language) 18

19 Freebase API weitere Services Topic API ist ein Web Service, der zu einem gegebenen Thema alle bekannten Fakten, Bilder und Kurztexten Freebase Suggest Widget ist ein JQuery widget zum Einbinden auf Webseiten, das bei Suchanfragen auf der Basis von Freebase Vervollständigungsvorschläge liefert 19

20 Freebase API Data Dumps

21 Freebase API Data Dumps: RDF N-Tripel-Darstellung, Beispiel: Leonardo da Vinci 1202 Tripel ( ) ns:m.04lg6 ns:architecture.architect.architectural_style ns:m.0bdgp; ns:base.argumentmaps.innovator.original_ideas ns:m.05my_3; ns:base.eating.practicer_of_diet.diet ns:m.07_jd; ns:base.kwebbase.kwtopic.assessment "Recognized as a genius, with immense energy ; ns:visual_art.visual_artist.art_forms ns:m.06msq; ns:visual_art.visual_artist.art_forms ns:m.02csf; ns:visual_art.visual_artist.artworks ns:m.0jbg2; ns:visual_art.visual_artist.artworks ns:m.03djdc;

22 Freebase-Entitäten Abbildung auf Wikipedia- Entitäten 22

23 Inhalt Google Knowledge Graph Freebase schema.org 23

24 Schema.org Markierungsvokabular, entwickelt von Suchmaschinen-Firmen wie beispielsweise Bing, Google, Yahoo! und Yandex standardisierte HTML-Tags zur Annotation von Webseiten 24

25 schema.org 25

26 schema.org Beispiel: restaurant 26

27 schema.org Beispiel: restaurant 27

28 schema.org Annotation: Beispiel: James Cameron 28

29 Literatur Isidoro, Andrew (February 28, 2013). "Google s Knowledge Graph: one step closer to the semantic web?". Econsultancy. Retrieved November 30, html