Oracle XML Datenbank. Carsten Czarski Business Unit Database Oracle Deutschland GmbH

Transkript

1 Oracle XML Datenbank Carsten Czarski Business Unit Database Oracle Deutschland GmbH

2 Agenda XML in der Datenbank Speicherformen für XML-Dokumente, Datenbankansätze, Oracle XML Technologie, Architektur der Oracle XML-Datenbank, Installation + Konfiguration XML-Speicherstrukturen Festlegung der Speicherungsform, XML Schema, Registrierung, objektrelationale Strukturen Umgang mit XML-Dokumenten Speichern und Abrufen von XML-Dokumenten; Verbindung mit SQL; Protokollzugriff XML in der Praxis Szenarien und Implementierung Implementierung der Szenarien mit der XML-Datenbank, Zusammenspiel mit Oracle- Technologie

3 Warum XML in der Datenbank...?

4 ... und nicht einfach im Dateisystem?

5 Warum XML in der Datenbank und nicht im Dateisystem? relationale Daten bereits vorhanden Kombination mit XML Dokumenten Ausgabe als XML-Dokument Erweiterung des XML-Datenmodells Zusätzliche Datenbankvalidierung Transaktionskonzept Datennahe Sicherheitskonzepte Datennahe Logik...

6 XML Standards XML W3C DOM W3C XPath W3C XML Schema W3C XSL and XSLT W3C WebDAV - IETF SQL/XML ANSI/ISO

7 Wie speichert man XML-Dokumente in Datenbanken...?

8 Herausforderungen Abruf als XML relationale Datenbestände Beispiele: - heterogene Systeme - XML Schnittstellen - Versorgung des Workflow - Abruf per HTTP oder FTP

9 Herausforderungen Abruf mit SQL Beispiele: - XML als Austauschformat im e-business - Sammlung und Aggregation im DWH - DWH-Versorgung aus heterogenen Systemen XML-Dokumente Überführung in DWH oder andere Anwendung

10 Herausforderungen Beispiele: - XML Dokumente nativ speichern (jur. Gründe) - Validitätsprüfung gegen Stammdaten in einer relationalen Datenbank - Validierung im laufenden Workflow Integritätsbedingungen relationale Datenbestände XML Datenbestände

11 Herausforderungen Referentielle Integrität in XML XML-Datenmodell referentielle Integrität ID IDREF IDREFS Dokumentbezogen

12 Herausforderungen Referentielle Integrität in XML XML-Datenmodell referentielle Integrität ID IDREF IDREFS Dokumentbezogen Das Dokument kann ohne weiteres nicht verlassen werden

13 1. Lösungsansatz relationale Speicherung Zwei-Tabellen-Modell ID TYPE VALUE 1 ELE Order 2 ELE Kunde 3 ELE Name 4 TEX Mustermann 5 ATT id 6 TEXT 4711 ID PARENT_ID 1 NULL

14 1. Lösungsansatz Semantik aus Tabellen nicht nachvollziehbar Schwierige Integration z.b. Stammdatentabellen Tuning schwierig Indizierung schwierig Volltextsuche schwierig Komplexe JOIN-Operationen

15 2. Lösungsansatz relationale Speicherung Fachliches Datenmodell KUNDEN ID NAME DEPOT 1 Muster Meier Schmitt 4713 ID WERTPAPIER 1 VW AG 2 Oracle Corp. 3 Sun Microsys.

16 2. Lösungsansatz Semantik nachvollziehbar einfache Integration mit anderen Tabellen Tuning für bestimmte Abfragen möglich Volltextsuche schwierig Komplexe Logik (Dokumentzerlegung) Informationsverluste gute Eignung, wenn XML als reines Transportformat dient und die relationale Tabellenform im Vordergrund steht.

17 3. Lösungsansatz Reine XML-Datenbank "native" XML-Speicherung für XML Strukturen optimiert gute XML Schnittstellen gute XML-Indizierung Integration mit relationalen Daten schwierig Locking-Verhalten Referentielle Integrität

18 Native XML-Speicherung XML:DB Initiative Definition Unterstützt das XML-Datenmodell Elemente, Attribute, PCDATA, Kommentare,... Garantiert 1:1-Wiederherstellung des XML- Dokumentes Unterstützt standardkonforme Abfragesprachen Ist unabhängig von physikalischer Speicherung!

19 Praxisanforderungen Lösungsansatz: I II III native XML-Speicherung Nein Nein Ja XML-Standardkonformität Nein Nein Ja offene Schnittstellen Nein Nein Ja Integrität relational - XML Nein Ja Nein relationale XML-Darstellung Nein Ja Nein XML-Darstellung von rel. Tabellen Ja Ja Nein

20 Oracle XML DB: zwei Welten... RDBMS XML Server SQL XML

21 ... wachsen zusammen! Oracle Ansichten SQL Indizes XML Integrität

22 XML-Technologie mit Oracle Ansichten Indizes Integrität Messaging mit Oracle AQ

23 Oracle XML Technologie Oracle XML DB (seit Oracle Release 2) Oracle XDK (seit Oracle8i ) XML Parser [DOM, SAX] XSQL Servlet Dynamische XML-Dokumente auf SQL-Basis XSQL-Pages deklaratorisch XML Class Generator

24 Geschichte 8i Release 1 Release 2

25 Geschichte XML Werkzeuge relational / CLOB XSQL Servlet XML SQL Utility Release 1 Release 2

26 Geschichte XML Datentyp SQL-Zugriffe einfache Indizes XML Werkzeuge relational / CLOB XSQL Servlet XML SQL Utility XML Werkzeuge relational / CLOB XSQL Servlet XML SQL Utility Release 2

27 Geschichte XML Datentyp SQL-Zugriffe einfache Indizes XML Schema XML Standards HTTP, WebDAV FTP XML Datentyp SQL-Zugriffe einfache Indizes XML Werkzeuge relational / CLOB XSQL Servlet XML SQL Utility XML Werkzeuge relational / CLOB XSQL Servlet XML SQL Utility XML Werkzeuge relational / CLOB XSQL Servlet XML SQL Utility

28 Oracle XML DB: Architektur HTTP User XDB: XML DB Repository FTP XML Schema User VW: XML Dokumente SQL*NET Oracle Shared Server

29 WebDAV

30 FTP

31 Installation der XML DB Softwareinstallation Keine Besonderheiten, automatisch bei der DB- Konfiguration, zusätzliches Schema XDB, FTP und HTTP-Portkonfiguration Datenbankerstellung

32 Installation der XML DB

33 Installation der XML DB Voraussetzungen: R2 Standard oder Enterprise Edition Oracle Java VM Shared Server um Protokolle zu nutzen Manuelle Installation in eine bestehende Datenbank $ORACLE_HOME/rdbms/admin/catqm.sql [XDB-Passwort] [XDB-TS] [TEMP-TS] $ORACLE_HOME/rdbms/admin/catxdbj.sql Deaktivieren der XML DB $ORACLE_HOME/rdbms/admin/catnoqm.sql Datenbank neu starten

34 TCP/IP Port für FTP und HTTP

35 TCP/IP Port für FTP und HTTP Manuelle Änderung der Ports über Skripts $ORACLE_HOME/rdbms/admin/catxdbdbca.sql [ftp-port] [http-port] Protokollserver abschalten Initialisierungsparameter dispatchers = (protocol=tcp)(service=<sid>xdb)

36 XML DB Repository xdb$resource Table Name ACL Property 1 Property N Property N Resource_view FTP HTTP B Tree Index Text Index Hierarchical Index XML Tabellen im User Schema

37 Das Repository RESOURCE_VIEW PATH_VIEW SQL> desc path_view Name Null? Type PATH VARCHAR2(1024) RES SYS.XMLTYPE LINK SYS.XMLTYPE SQL> desc resource_view Name Null? Type RES SYS.XMLTYPE ANY_PATH VARCHAR2(4000)

38 Folder anlegen PL/SQL declare result boolean; begin result := dbms_xdb.createfolder('/public/vw'); end; COMMIT; per FTP oder im WebDAV-Client

39 Unterschiedliche Speicherarten Nativ als Dokument Clob Nativ Objektrelational Relational Die Speicherart richtet sich nach den Anforderungen der Anwendung: Konkurrierender Zugriff Vokabularänderung Ladeperformance Abfrage-Performance Redundanzen XML Schema Support

40 Unterschiedliche Speicherarten Nativ als Dokument Clob Nativ Objektrelational Relational Die Speicherart richtet sich nach den Anforderungen der Anwendung: Konkurrierender Zugriff Vokabularänderung Ladeperformance Abfrage-Performance Redundanzen XML Schema Support

41 Dokumentorientiertes XML Dokument im Vordergrund Dokument-Transformationen Dokument als kleinste Einheit Lesen und Schreiben als Ganzes Dokumentteile nur selten Skalare Daten nur selten Häufig Volltextsuche XML als medienneutrales Speicherformat

42 Datenorientiertes XML Daten im Vordergrund Dokumentkontext nicht unbedingt wichtig Häufig strukturierte Suche größer-als und kleiner-als Abfragen XML als Austauschformat Standardisierung der Werkzeuge Integration in die IT-Landschaft

43 Mischformen Beide Konzepte in einem Dokument Beispiele: Zeitungsartikel mit strukturierten Zusatzinformationen Autor, Zeitung, Erscheinungsdatum... Kreditanträge Strukturierte Kunden- und Kreditdaten Unstrukturierte Begründungen

44 Technologie-Stack XML-Dokumentspeicherung OS-Blöcke System Calls

45 Technologie-Stack XML-Dokumentspeicherung relationale Tabellen (Oracle 1.0) SQL OS-Blöcke System Calls

46 Technologie-Stack XML-Dokumentspeicherung Objektrelationale Datenbank (Oracle 8.0) relationale Tabellen SQL Objektrelationale Syntax (SQL99) SQL OS-Blöcke System Calls

47 Technologie-Stack XML-Dokumentspeicherung XML DB (Oracle 9.2) XML-Navigation XPath Objektrelationale Datenbank SQL Objektrelationale Syntax (SQL99) relationale Tabellen SQL OS-Blöcke System Calls

48 Technologie-Stack rein dokumentorientiertes XML XML DB XML-Navigation XPath CLOB-Datentyp relationale Tabellen SQL OS-Blöcke System Calls

49 Beispiel: Börsennachrichten

50 Beispiel: Börsennachrichten Beschreibung als XML Schema

51 Beispiel: Börsennachrichten Überlegungen... Strukturierte Informationen (WKN, Reuters-Code, Quelle, Kontakte, Datum) Zugriff auf Elemente im Vordergrund Kombination mit bspw. Kursdatenbank Strukturierte Speicherung Unstrukturierte Informationen Zugriff auf den vollständigen Text im Vordergrund Volltextsuche Unstrukturierte Speicherung

52 Beispiel Börsennachricht Registrierung des XML Schemas 1. Ansatz: W3C XML Schema wird unverändert in Oracle registriert Oracle Enterprise Manager

53 Beispiel Börsennachricht Registrierung des XML Schemas Schema-URL zur Identifizierung des XML Schemas in der Datenbank URL sinnvoll jeder String möglich

54 Beispiel Börsennachricht Ergebnisse: Feingranulares Mapping Abbildung nach Objektmodell darüberhinaus BODY -Element SQL-Datentypen Systemgenerierte SQL-Namen Case-Sensitiv Sequence-Element für Eindeutigkeit über Namespaces hinweg Neue Namen bei neuer Schema-Registrierung Tabellen für XML-Dokumente bereits angelegt

55 "annotated" XML Schema XML Schema mit "Zusatzinformationen" Herstellerspezifische Tags und Attribute zur Steuerung der Persistenz Namespace-Konzept bei der Schema-Prüfung ignoriert der Parser gemäß W3C "alle Namespaces, die er nicht kennt" Datenbankunabhängige Parser beachten nur das allgemeine XML Schema Bei Registrieren in der Datenbank beachtet diese nur das allgemeine XML Schema und die eigenen "Annotations"

56 annotated XML Schema Ein XML Schema kann Annotations für verschiedene Datenbanken enthalten, da die jeweiligen Datenbanken fremde Annotations gemäß W3C ignorieren sollen

57 Beispiel Börsennachricht Schema Annotations <xs:complextype name="aktie_t"> <xs:attribute name="wkn" use="required" type="xs:string"> <xs:attribute name="name" use="required" type="xs:string"> <xs:attribute name="reuters" use="required" type="xs:string"> <xs:attribute name="branche" use="required" type="xs:string"> </xs:complextype> Das XML Schema beschreibt die Struktur des XML-Dokumentes, nicht deren physikalische Speicherung in einer Datenbank. Die Oracle XML DB macht daher Standard-Annahmen bei der Nachbildung des XML-Datenmodells mit Objekttypen.

58 Beispiel Börsennachricht Schema Annotations <xs:complextype name="aktie_t" xdb:sqltype="nr_aktie_t"> <xs:attribute name="wkn" use="required" xdb:sqlname="akt_wkn"> <xs:attribute name="name" use="required" xdb:sqlname="akt_name"> <xs:attribute name="reuters" use="required" xdb:sqlname="akt_reuterscode"> <xs:attribute name="branche" use="required" xdb:sqlname="akt_branche"> </xs:complextype> SQLType: SQLName: Abbildung von XML-Datentypen auf Oracle-Datentypen Benennung von Elementen in Oracle Der XML-Komplexe Typ aktie_t wird in der Datenbank als Objekttyp NR_AKTIE_T nachgebildet.

59 Beispiel Börsennachricht Schema Annotations <xs:element name="body" xdb:sqlname="nr_body"> <xs:complextype mixed="true" xdb:sqltype="clob"> <xs:choice minoccurs="0" maxoccurs="unbounded"> </xs:complextype> </xs:element> SQLType: SQLName: Abbildung von XML-Datentypen auf Oracle-Datentypen Benennung von Elementen in Oracle Der komplexe Typ für den Nachrichten-Body wird nicht als Objekttyp, sondern als CLOB abgebildet.

60 Beispiel Börsennachricht Schema Annotations <xs:element name="kontakt" type="kontakt_t" minoccurs="0" maxoccurs="unbounded" xdb:sqlname="nr_kontakt" xdb:defaulttable="nr_kontakt_tab" xdb:sqlinline="false" /> SQLInline: defaulttable: Speicherung in einer separaten Tabelle (true = nein; false = ja) Name der Objekt-Tabelle Die Kontakte werden in einer separaten Tabelle NR_KONTAKT_TAB gespeichert

61 Beispiel: Börsennachrichten Beschreibung als XML Schema Speicherung als Ganzes

62 Beispiel Börsennachricht Registrierung des XML Schemas 2. Ansatz: Oracle-Annotations SQLType SQLName...

63 Beispiel Börsennachricht Ergebnisse: Anforderung genaues Mapping Abbildung nach Objektmodell BODY Element als Fließtext (CLOB) abgebildet SQL-Datentypen Eigene SQL-Namen Hier: case-insensitiv Ohne Sequence-Element Bei jeder Schema Registrierung gleich Tabellen für Nachrichten und Kontakte angelegt

64 Beispiel Börsennachrichten Neue Tabellen anlegen XMLTYPE als Datentyp CREATE TABLE nachrichten_tab ( nr_id number(10), nr_nachricht xmltype ); Ohne Angabe eines bereits registrieren XML Schemas fehlen die Angaben zur Objektrelationalen Speicherung, daher wird dokumentbasiert als CLOB gespeichert.

65 Beispiel Börsennachrichten Neue Tabellen anlegen XMLTYPE als Datentyp CREATE TABLE nachrichten_tab ( nr_id number(10), nr_nachricht xmltype ) xmltype column nr_nachricht store as object relational xmlschema "<schema-url>" element "<root element>"

66 XML Schema referenzieren <nachricht xmlns=" xmlns:xsi=" typ="unternehmensmeldung" xsi:schemalocation=" C:\nachrichten.xsd" > W3C-Standardkonforme Verknüpfung von XML Dokument und XML Schema. Das Dokument wird häufig als "Instanz" des XML Schemas bezeichnet. Gut zu erkennen ist die Lage des Schemadokumentes im Dateisystem.

67 XML Schema referenzieren <nachricht xmlns=" xmlns:xsi=" typ="unternehmensmeldung" xsi:schemalocation=" > Unter dieser URL wurde das XML Schema in Oracle mit dem Enterprise Manager registriert.

68 Beispiel Börsennachrichten Status... XML Schema Oracle Annotations vorhanden Schema in der Datenbank registriert Speicherungsmodell objektrelational Objekttypen vorhanden Tabelle vorhanden

69 Laden objektrelationale Speicherung XML Schema muss in XML-Dokument referenziert sein FTP und WebDAV SQL und SQL*Loader

70 Beispiel Börsennachrichten Laden mit FTP oder WebDAV Referenz auf XML Schema? Nein Ohne Schema-Referenz ist keine Tabellenzuordnung und somit keine objektrelationale Speicherung möglich. Oracle kann nicht wissen, ob dieses XML Dokument gültig ist oder nicht und speichert es daher als Datei ins XML DB Repository. dokumentbasiert im XML DB Repository

71 Beispiel Börsennachrichten Laden mit FTP oder WebDAV Ja Referenz auf XML Schema? XML Schema registriert? Nein Wenn das XML Schema nicht registriert wurde, kann Oracle ebenfalls nicht prüfen, ob das XML Dokument gültig ist oder nicht. Es wird daher ebenfalls als Datei ins XML DB Repository abgelegt. dokumentbasiert im XML DB Repository

72 Beispiel Börsennachrichten Laden mit FTP oder WebDAV Ja Referenz auf XML Schema? Ja XML Schema registriert? Ja Verstoß gegen Constraints? Wenn die Inhalte des XML-Dokuments gegen hinterlegte Integritätsbedinungen verstoßen, wird es abgelehnt. Es ist für die Datenbank ungültig. Dokument wird abgewiesen

73 Beispiel Börsennachrichten Laden mit FTP oder WebDAV Ja Referenz auf XML Schema? Ja XML Schema registriert? Verstoß gegen Constraints? Nein objektrelational in XMLTYPE-Tabelle

74 Beispiel Börsennachrichten: Constraints und Datenmodell In XML ist das Dokument die zentrale Einheit Integritätsbedingungen ohne weiteres nur innerhalb des Dokumentes möglich Referenz zu anderen Dokumenten oder Daten muss programmiert werden aktie: wkn nachricht: aktie datum quelle kontakte titel body * name branche reuters kontakte: ziel art adresse

75 Beispiel Börsennachrichten: Constraints und Datenmodell Überschreiten der Dokumentgrenze Integritätsbedingungen möglich zu... relationalen Tabellen anderen XML-Dokumenten Flat files (external tables) nachricht: aktie datum quelle kontakte titel body * 1 1 * aktie: wkn name branche reuters kontakte: ziel art adresse

76 Beispiel Börsennachrichten SQL INSERT INSERT INTO NR_NACHRICHT_TAB VALUES ( XMLTYPE ( '<?xml version="1.0"?><nachricht xmlns... ) );

77 Schemavalidierung "leichte Schemaprüfung" beim Einfügen Strukturprüfung Performancegründe vollständige Schemavalidierung aktivierbar Trigger XMLTYPE.schemaValidate()

78 Beispiel Börsennachrichten Zugriff mit HTTP Zugriff mit URL Protokoll Hostname und TCP/IP Port

79 Beispiel Börsennachrichten Zugriff mit HTTP Zugriff mit URL Protokoll Hostname und TCP/IP Port Datenbank-Kürzel

80 Beispiel Börsennachrichten Zugriff mit HTTP Zugriff mit URL Protokoll Hostname und TCP/IP Port Datenbank-Kürzel Datenbankschema

81 Beispiel Börsennachrichten Zugriff mit HTTP Zugriff mit URL Protokoll Hostname und TCP/IP Port Datenbank-Kürzel Datenbankschema Tabelle NR_NACHRICHT_TAB

82 Beispiel Börsennachrichten Zugriff mit HTTP Zugriff mit URL Protokoll Hostname und TCP/IP Port Datenbank-Kürzel Datenbankschema Tabelle Optional: XPath Einschränkung NR_NACHRICHT_TAB/ ROW/nachricht/kontakt[ziel="Finanzen.net"]

83 Zugriff mit SQL Zugriff auf XML-Elemente XPath SQL-Funktionen EXTRACT EXTRACTVALUE EXISTSNODE

84 Zugriff mit SQL Gib mir von allen Nachrichten das Datum, die Aktiengesellschaft und den Titel select extractvalue (value(e), '/nachricht/datum') as datum,extractvalue (value(e), as ag,extractvalue (value(e), '/nachricht/titel') as titel from nr_nachricht_tab e

85 Zugriff mit SQL Gib mir von allen Oracle-Nachrichten das Datum und den Titel select extractvalue (value(e), '/nachricht/datum') as datum,extractvalue (value(e), as ag,extractvalue (value(e), '/nachricht/titel') as titel from nr_nachricht_tab e where existsnode ( value(e), '/nachricht/aktie[@wkn="871460"]' ) = 1

86 Ohne Query Rewrite SELECT extractvalue... FROM nr_nachricht_tab e XML-Dokument DOM-Baum wkn

87 Mit Query Rewrite SELECT extractvalue... FROM nr_nachricht_tab e Objektrelational gespeichertes XML-Dokument Query Rewrite SELECT e.xmldata.... FROM nr_nachricht_tab e nachricht: aktie datum quelle kontakte titel body * aktie: wkn name branche reuters kontakte: ziel art adresse

88 Query Rewrite Optimizer Funktionalität nicht möglich bei... XPath Funktionen XPath Variablen Wildcards UNION Operator

89 Technologie-Stack XML-Dokumentspeicherung XML DB (Oracle 9.2) Q U E XML-Navigation XPath R Y Objektrelationale Datenbank relationale Tabellen SQL Objektrelationale W Syntax (SQL99) SQL R E R I T E OS-Blöcke System Calls

90 Piecewise Update XML Dokumentknoten gezielt ändern kein Ersetzen des Gesamtdokumentes nur auf SQL-Ebene FTP und WebDAV sind dateiorientiert SQL-Funktion updatexml() Durch Query Rewrite direkte Änderung der Objektrelationalen Tabellenspalten

91 Piecewise Update Ändere den Firmennamen bei den Nachrichten mit der WKN auf "Oracle Corporation" update nr_nachricht_tab e set value(e) = updatexml ( value(e),,'/nachricht/aktie/@name','oracle Corporation' ) where existsnode ( value(e),'/nachricht/aktie[@wkn="871460"]' ) = 1

92 Piecewise Update Ändere die Kontaktart " " nach "Mail" update nr_kontakte_tab e set value(e) = updatexml ( value(e),'/konkakt/@art','mail' ) where existsnode ( value(e),,'/kontakt[@art=" "]' ) = 1

93 Einsatzgebiete für die Praxis Layoutneutrale Dokumentspeicherung Datenaustausch und Integration DWH-Integration mit relationalen Sichten auf XML-Dokumente Datenaustausch mit XML-Sichten auf relationale Datenbestände XML-Messaging

94 Layoutneutrale Dokumentspeicherung Dokumente als XMLTYPE unstrukturiert u.u. strukturierte Teile Börsennachrichten Volltextsuche Stylesheet-Transformationen

95 Volltextsuche mit Oracle TEXT Volltextindex auf jedes XML-Dokument möglich Oracle TEXT Index Wildcard Suche (links und rechts) Phrasensuche Unscharfe Suche (Fuzzy) Wortstamm Stopwort-Listen Thesaurus-Unterstützung

96 Volltextsuche mit Oracle TEXT Index anlegen ctx_ddl.create_section_group ( group_name => 'nachrichten_sec_group',group_type => 'PATH_SECTION_GROUP' ); create index idx_nachrichten_volltext on nr_nachricht_tab e (value(e)) indextype is CTXSYS.CONTEXT parameters ('section group nachrichten_sec_group')

97 Volltextsuche mit Oracle TEXT Volltextrecherche... select score(1), value(e) from nr_nachricht_tab e where CONTAINS ( value(e),' (Software and Kooperation) INPATH (/nachricht/body) ',1 )>0

98 Stylesheet Transformationen Datenbankintern Stylesheet muss in der Datenbank vorliegen SQL-Funktion XMLTransform() Aggregat über mehrere Dokumente XMLAgg()

99 Stylesheet-Transformationen 1:1-Transformation... n:1 Transformation... select xmltransform ( value(e),xdburitype ( '/public/idevelop/nachricht_html.xsl' ).getxml() ) from nr_nachricht_tab e

100 Stylesheet-Transformationen View-Definition TABLE VIEW HTTP-Zugriff 1:1 Transformation HTTP-Zugriff n:1 Transformation

101 Einsatzgebiete für die Praxis Layoutneutrale Dokumentspeicherung Datenaustausch und Integration DWH-Integration mit relationalen Sichten auf XML-Dokumente Datenaustausch mit XML-Sichten auf relationale Datenbestände XML-Messaging

102 DWH-Integration Was hat das mit XML zu tun? Data Warehouse relationale Tabellen Star Schema Auswertungswerkzeuge XML hierarchisch W3C-Abfragesprachen XML-Parsing-Vorgänge sehr aufwendig Integration mit relationalen Views

103 Beispiel Börsennachrichten Kontaktinformationen relationale Tabelle schneller Zugriff Herausforderung: eine Nachricht hat viele Kontakte WKN GESELLSCHAFT KONTAKTART ADRESSE

104 Beispiel Börsennachrichten Kontakt-View create or replace view nr_kontakte as select extractvalue (value(e), as wkn,extractvalue (value(e), as gesellschaft,extractvalue (value(k), as kontaktart,extractvalue (value(k), '/kontakt/ziel') as kontaktziel,extractvalue (value(k), '/kontakt/adresse') as adresse from nr_nachricht_tab e,table(xmlsequence(extract(value(e),'/nachricht/kontakt'))) k

105 Beispiel Börsennachrichten Weiterverarbeitung View-Definition Oracle SQL PL/SQL

106 Beispiel Börsennachrichten Kontakt-View Doppelte Kontakte eliminieren insert into nr_kontakte_rel_tab ( wkn, gesellschaft, kontaktart, kontaktziel, adresse ) ( select distinct wkn, gesellschaft, kontaktart, kontaktziel, adresse from nr_kontakte )

107 Einsatzgebiete für die Praxis Layoutneutrale Dokumentspeicherung Datenaustausch und Integration DWH-Integration mit relationalen Sichten auf XML-Dokumente Datenaustausch mit XML-Sichten auf relationale Datenbestände XML-Messaging

108 Beispiel Aktienkurse relationales Tabellenschema aktien_tab: wkn name 1 * kurse_tab: wkn datum kurs

109 Beispiel Aktienkurse XML Views Erstellen der View create or replace view aktienkurse_xml as select XMLElement( "Aktienkurse", XMLElement("Aktie", XMLAttributes( wkn as "WKN", ak.name as "Gesellschaft")), XMLElement("Kurse", XMLAgg( XMLElement( "Kurs",XMLAttributes( k.datum as "vom"), k.kurs)))) as kurse_dokument from aktien_tab ak join kurse_tab k using (wkn) where k.datum > sysdate-60 group by wkn, ak.name

110 XML Views Nutzbar wie XMLType Tabellen Stylesheet-Transformationen Zugriff durch HTTP einfacher Austausch relational vorliegender Daten

111 XML-Datenaustausch mit Views Kommunikation mit Internet-Protokollen HTTP, FTP INSTEAD-OF Trigger

112 Einsatzgebiete für die Praxis Layoutneutrale Dokumentspeicherung Datenaustausch und Integration DWH-Integration mit relationalen Sichten auf XML-Dokumente Datenaustausch mit XML-Sichten auf relationale Datenbestände XML-Messaging

113 Oracle Advanced Queuing Datenbankinternes Messaging Asynchron Point-to-Point / Publish-Subscribe Nutzung der Oracle Datenbank Backup / Recovery, Datenintegrität, Skalierbarkeit, Nachrichten-Persistenz Transaktionskonzept SQL-Zugriff

114 Oracle Advanced Queuing Messaging auf einem Rechnerknoten Point-to-Point Oracle Anwendung Enqueue Dequeue Anwendung Anwendung Advanced Queueing

115 Oracle Advanced Queuing Messaging auf einem Rechnerknoten publish-subscribe Anwendung publish Oracle subscribe Anwendung Anwendung publish Advanced Queueing subscribe Anwendung

116 Oracle Advanced Queuing Messaging über Rechnergrenzen Oracle Propagate Dequeue Anwendung Anwendung Enqueue Oracle Advanced Queues Anwendung Enqueue Advanced Queues Oracle Propagate Advanced Queues Dequeue Anwendung

117 Oracle AQ Fähigkeiten Nachrichten Nachrichten können nach dem Dequeue behalten werden Nachrichten-Historie Nachrichten-Transformation Kombination mit Oracle DWH-Fähigkeiten Business-Intelligence API-Unterstützung SQL, PL/SQL (DBMS_AQ) Java (JMS, Oracle AQ API, JDBC)

118 Oracle AQ PL/SQL Pakete DBMS_AQADM Administrative Aufgaben Einrichten von Queues Einrichten von Queue Tabellen Rechteverwaltung DBMS_AQ Umgang mit Queues Einstellen von Nachrichten (ENQUEUE) Auslesen von Nachrichten (DEQUEUE)

119 Oracle AQ Nachrichten-Transformation Oracle Anwendung Enqueue Oracle Propagate Advanced Queues Dequeue Anwendung Transform Anwendung Enqueue Advanced Queues Oracle Propagate Advanced Queues Transform Anwendung Dequeue

120 Oracle AQ - Transformationen PL/SQL oder Java-Funktion Aktiv... direkt nach dem ENQUEUE direkt vor dem DEQUEUE direkt vor oder nach dem PROPAGATE

121 Oracle AQ und XML DB Definition des Queue-Payload als XMLType Nachrichten-Transformation mit XSLT ENQUEUE / DEQUEUE mit AQ Servlet Oracle XML DB und RDBMS Trigger Zugriff auf Dokumentteile Integration mit Views Relationale Views auf Queue Tabelle XML-Views auf relationale Tabellen mit anschließendem ENQUEUE des virtuellen Dokumentes

122 Oracle AQ und XML DB Datenbank II [Order] Oracle Anwendung FTP HTTP Datenbank I Datenbank III [DWH]

123 Oracle AQ und XML DB Datenbank II [Order] Oracle Anwendung Log FTP HTTP Enqueue Datenbank I Datenbank III [DWH]

124 Oracle AQ und XML DB Datenbank II [Order] Propagate Oracle Anwendung Log FTP HTTP Enqueue Dequeue Datenbank I Propagate Datenbank III [DWH]

125 Oracle AQ und XML DB Datenbank II [Order] Propagate Dequeue Oracle Anwendung Log FTP HTTP Enqueue Dequeue Dequeue Datenbank I Propagate Datenbank III [DWH]

126 Weitere Informationen Oracle Technology Network Dokumentation Oracle XML database Developers Guide /appdev.920/a96620/toc.htm Oracle Application Developer's Guide - Advanced Queuing /appdev.920/a96587/toc.htm