Linked Data, Microformats, RDFa, Microdata

Transkript

1 Linked Data, Microformats, RDFa, Microdata Markus Luczak-Rösch Freie Universität Berlin Institut für Informatik Netzbasierte Informationssysteme

2 Probleme? Data Silos 2

3 Web of Linked Data RDF RDF Links RDF RDF 3

4 Linked Data Prinzipien 1.URIs als Namen für alle Dinge 2. URIs damit man im Web auf diese Namen zugreifen kann 3.Wenn eine URI aufgerufen wird sollen sinnvolle Informationen entsprechend der Standards (RDF, SPARQL) geliefert werden 4.Links zu anderen URIs, damit Nutzer mehr Dinge finden können /Berlin Content Negotiation rlin lin yago-res:berlin S owl:sameas P dbpedia:berlin O 4

5 Linking Open Data Cloud 5

6 Linked Data erzeugen Domäne festlegen Identifier Vokabular RDF-Links 6

7 Domäne festlegen, Daten verstehen Personen Geo Ämter Omas Kuchen 7

8 Domäne festlegen, Daten verstehen Klaus Wowereit ist: regierender Bürgermeister von Berlin Berlin lat long Thing Mayor City 8

9 Identifier Klaus Wowereit Mayor URIs 9

10 Identifier Klaus Wowereit Mayor eigener Namensraum

11 Identifier Klaus Wowereit Mayor implementierungsunabhängig

12 Identifier Klaus Wowereit Mayor Slash oder Hash? #Klaus_Wowereit Klaus_Wowereit #Mayor 12

13 Identifier Klaus Wowereit Mayor Faktenwissen oder Konzeptwissen? Klaus_Wowereit Mayor 13

14 Identifier Klaus Wowereit Ressource HTML-Seite Daten 14

15 Identifier Klaus Wowereit Ressource HTML-Seite Daten

16 Vokabular Wiederverwenden Geo FOAF GoodRelations SIOC DOAP Person Entwickeln Thing Person OfficeHolder Person OfficeHolder 16

17 Vokabular Wiederverwenden nicht wiedererfinden! Mischen! Geo FOAF Dublin Core DBpedia Ontology Person 1/geo/wgs84_pos#lat y/leader y/city 17

18 RDF-Links

19 RDF-Links owl:sameas foaf:homepage foaf:topic foaf:based_near foaf:maker/foaf:made foaf:depiction rdfs:seealso 19

20 Linked Data Infrastruktur HTTP GET HTML RDF Linked Data Server Infrastructure Data Source 20

21 Linked Data Infrastruktur 21

22 Linked Data anbieten/serven statische RDF-Dateien relationale Datenbanken Linked Data Server API-Wrapper RDFa 22

23 RDB2Linked Data (Bsp.: D2R Server) Mappen eines relationalen Schemas auf RDF (-Klassen und -Beziehungen) deklarative Mapping-Sprache (D2RQ) SPARQL-Endpoint Linked Data Server 23

24 Linked Data Server (Bsp.: Pubby) 24

25 Linked Data Infrastruktur 25

26 Linked Data konsumieren URIs finden Zusätzliche Daten finden SPARQL-Endpoints finden 26

27 URIs finden Gibt es (bereits) einen Identifier für das, was mich interessiert? Lookup-Services für Datensets lookup.dbpedia.org Web of Data Search Engines

28 zusätzliche Daten finden Wo finde ich weitere Daten für die URI, die ich zur Hand habe? Links verfolgen rdfs:seealso owl:sameas Co-Referenz-Dienst verwenden Web of Data Search Engines 28

29 SPARQL-Endpoints finden (depr.) 29

30 SPARQL-Anfragen über Linked Data SPARQL: Anfragesprache für RDF-Daten Grundsatz: Pattern-Matching beschreibe Graphpattern frage RDF-Graph mit diesem Pattern an Subgraphen, die Pattern matchen kommen in die Ergebnismenge?s 30

31 SPARQL-Anfragen über Linked Data dbp:klaus_wowereit dbp:axel_springer?s dbp:klaus_wowereit dbp:berlin dbp:reinhard_mey Berlino dbp:reinhard_mey 31

32 SPARQL-Anfragen über Linked Data Anfrage via RESTful Service mit Parameter query GET /sparql?query=prefix+rdf HTTP/1.1 Host: dbpedia.org Antwort liefert ein SPARQL-Result-Format (XML oder JSON)

33 SPARQL-Anfragen über Linked Data dbp:klaus_wowereit dbp:berlin dbp:reinhard_mey 33

34 SPARQL-Anfragen über Linked Data verteilte Datenhaltung erzeugt Herausforderungen für Anfragen Anfrageansätze follow-up Anfragen anwendungsspezifisch, proprietät zentrale Datensammlung anfragen eher trivial föderierte Anfrage interessanter Idee: Mediator anfragen, der Subanfragen an relevante Quellen verteilt und Ergebnis integriert Link-Traversierung zur Anfragezeit sehr interessant Idee: verfolge Links in gefundenen Ergebnissen, um dynamisch den Datenbestand zu vergrößern und beziehe diese zusätzlichen Daten dann in die Anfrageauswertung mit ein 34

35 Linked Data Anwendungen 35

36 Linked Data Anwendungen 36

37 Linked Data Integration 37

38 Linked Data Integration 38

39 Linked Data Integration 39

40 Linked Data Integration rc:wastravellingin rc:city_of_munchen??? owl:sameas??? Instanzmapping 40

41 Linked Data Integration Person owl:sameas Person owl:sameas owl:equivalentclass owl:equivalentproperty Schemamapping 41

42 Microdata, RDFa, Microformats 42

43 Microformats strukturierte Daten auf einfachste Weise in HTML einbetten zwei einfache Einheiten Entities Properties drei wichtige HTML-Attribute class rel rev vordefinierte Standardvokabulare (Erweiterung durch poshformats; microformats poshformats, POSH = Plain Old Semantic HTML) 43

44 Beispiel Robert Tolksdorf und Markus Luczak-Rösch haben die Arbeitsgruppen-Web-Site erstellt. <div> </div> <a href= Robert Tolksdorf </a> und <a href=" Markus Luczak-Rösch </a> haben die Arbeitsgruppen-Web-Site erstellt. 44

45 Microformats <div> </div> <a href=" rel="author"> Robert Tolksdorf </a> und <a href=" rel="author"> Markus Luczak-Rösch </a> haben die Arbeitsgruppen-Web-Site erstellt. 45

46 Microformats Autor Autor MLR URI 46

47 Microformats <div> </div> <a href=" > Markus Luczak-Rösch </a> arbeitet für die <a href=" > FU Berlin </a>. 47

48 Microformats <div><span class="vcard"> <a class="fn url" href=" > Markus Luczak-Rösch </a></span> arbeitet für die <span class="vcard"> <a class="fn org url" href=" > FU Berlin </a> </span>. </div> 48

49 Microformats <div class="vcard"> <span class="fn" > Markus Luczak-Rösch </span> arbeitet für die <span class="org" > FU Berlin </span>. </div> 49

50 Microformats <div class="vcard"> <a class="fn url" href=" > Markus Luczak-Rösch </a> arbeitet für die <span class="org vcard" > <a class= "url fn org" href= " > FU Berlin</a> </span>. </div> 50

51 RDFa RDF Daten in HTML einbetten vollständiges RDF Datenmodell Mischung von Schemata möglich wichtige HTML-Attribute about property rel rev 51

52 RDFa <div about="" rel="dcterms:author"> <a href= Robert Tolksdorf </a> und <a href=" Markus Luczak-Rösch </a> haben die Arbeitsgruppen-Web-Site erstellt. </div> 52

53 RDFa <> dcterms:author < >, < >. Autor Autor MLR URI 53

54 Microdata einfache Art, um strukturierte Daten ( maschinenlesbare Labels ) in HTML einzubetten Standard ab HTML 5 itemprop itemref content itemscope itemtype verschachtelte Name-Wert-Paare Gruppe von Name-Wert-Paaren Item atomares Name-Wert-Paar Property Zugriff via Microdata DOM API 54

55 Microdata <div> </div> <a href= Robert Tolksdorf </a> und <a href=" Markus Luczak-Rösch </a> haben die Arbeitsgruppen-Web-Site erstellt. 55

56 Microdata <div><span itemscope> <a itemprop="url" href=" <span itemprop="name"> Robert Tolksdorf </span> </a> </span> und <span itemscope> <a itemprop="url" href=" <span itemprop="name"> Markus Luczak-Rösch </span> </a> </span> haben die Arbeitsgruppen-Web-Site erstellt. </div> 56

57 Microdata <div><span itemscope itemtype=" <span itemprop="name"> Robert Tolksdorf </span> </span> und <span itemscope itemtype=" <span itemprop="name"> Markus Luczak-Rösch</span> </span> haben die Arbeitsgruppen-Web-Site erstellt. </div> 57

58 Microdata <div><span itemscope itemtype=" itemid= " <a itemprop="name" href=" Robert Tolksdorf </a> </span> und </div> 58

59 Microdata <div><span itemscope itemtype=" itemid= " <span itemprop="name"> Robert Tolksdorf </span> <meta itemprop="knows" content="markus Luczak-Rösch" /> </span> und </div> 59

60 Microdata <div><span itemscope itemtype=" itemid= " <span itemprop="name"> itemref="meta-knows" Robert Tolksdorf </span> <meta id="meta-knows" itemprop="knows" content="markus Luczak-Rösch" /> </span> und </div> 60

61 Schema.org Microdata Vokabular für die (meisten) prominenten Anwendungsfälle im Web erstellt und betrieben von Google, Yahoo und Microsoft 61

62 Microdata, RDFa, Microformats 62

63 Microdata, RDFa, Microformats 63

64 Microdata, RDFa, Microformats 64

65 WebDataCommons.org Extraktion strukturierter Daten aus dem Common Crawl Korpus frei verfügbarer Web (of Data) Crawl 65

66 the web is not the ball of highly-connected spaghetti we believed it to be; rather, the connectivity is strongly limited by a high-level global structure. Graph structure in the Web. Andrei Broder, Ravi Kumar, Farzin Maghoul, Prabhakar Raghavan, Sridhar Rajagopalan, Raymie Stata, Andrew Tomkins, and Janet Wiener. Comput. Netw. (June 2000).

67 A well-known topology of the Web Graph structure in the Web. Andrei Broder, Ravi Kumar, Farzin Maghoul, Prabhakar Raghavan, Sridhar Rajagopalan, Raymie Stata, Andrew Tomkins, and Janet Wiener. Comput. Netw. (June 2000).

68 <a href= > Edge x Node A Node B

69 The Web is scale free Graph structure in the Web. Andrei Broder, Ravi Kumar, Farzin Maghoul, Prabhakar Raghavan, Sridhar Rajagopalan, Raymie Stata, Andrew Tomkins, and Janet Wiener. Comput. Netw. (June 2000).

70 Topology of the Web of Data II Data sets Topology of the Web of Data Prof. Dr. Christian Bizer, presentation at 2nd Workshop on Linked Web Data Management (LWDM2012) and 3rd Workshop on Business intelligence and the WEB (BEWEB2012). March 30th, 2012, Berlin, Germany

71 :WebSiteWithEmbeddedData a void:dataset; foaf:homepage < void:urispace " void:exampleresource <

72 fu-berlin.de DATA SET = PAY LEVEL DOMAIN?

73 Retrieve LOD data set URIs Retrieve embedded structured data as RDF HYBRID APPROACH: Generate data set base URI from <S> and <O> of triples LOD DATASET OR SUBDOMAIN Distinct data sets as nodes and (distinct) links as edges

74 # of LOD data sets 328 # of distinct links incl. Links served by a third party # of distinct links served by source or target data set WDC 2012 Crawl # of nodes #nodes with degree (99, 99%) # of edges

75

76 # of LOD data sets 328 # of distinct links incl. Links served by a third party # of distinct links served by source or target data set WDC 2012 Crawl RDFa Subset # of nodes # of nodes with degree (99, 86%) # of edges

77

78 # of data sets # of links THE WEB OF DATA, A SCALE FREE NETWORK?

79 # data sets The Web of Data, a scale free network? RDFa subset # of links

80 # of data sets The entire embedded Web of Data seems to be scale free # of links

81 # of data sets The RDFa subset of the Web of Data is rather not scale free RDFa subset # of links

82 A TOPOLOGY OF THE WEB OF RDF DATA

83 A high-level global structure?

84 A high-level global structure?

85 There is only one Web

86 Zusammenfassung Web of Data = Linked Data + Microformats + RDFa + Microdata Einfachheit (Microformats, Microdata) vs. Flexibilität (Linked Data, RDFa) 86

87 Merken! Linked Data Prinzipien URIs Content Negotiation SPARQL-Basics vergleich der Datenmodelle (Graph vs. Baum) 87

88 Nächste Woche Tutorium: Ihre Fragen Vorlesungstermin: Projektauftrakt 88