<Insert Picture Here> Sind Ihre Daten noch von gestern? Moderne Datenintegration für s Data Warehouse

Transkript

1 <Insert Picture Here> Sind Ihre Daten noch von gestern? Moderne Datenintegration für s Data Warehouse Karsten Stöhr Data Integration Solutions EMEA

2 Agenda Wer braucht Echtzeitdaten für BI? Architekturen für Real-Time BI Oracle Real-Time Data Integration Zusammenfassung <Insert Picture Here> 2

3 Evolution der Business Intelligence Ein Paradigmenwechsel Strategische BI Operationale BI Fokus Organisatorische Langzeitziele Tagesgeschäft managen und optimieren Primäre Anwender Manager, Analytiker Bereichsleiter, Sachbearbeiter, Operationale Systeme Zeitrahmen Monate bis Jahre Tagesverlauf Nutzungsmodell Daten Abfragen/Ergebnisse Historische Meßdaten Ereignis gesteuert Nahezu Echtzeit- & historische Daten Source: Intelligence Solutions Inc. 3

4 Warum Echtzeitdaten für BI? Echtzeit = Relevante und behandelbare Information Operationales Treffen von Entscheidungen basierend auf aktuellen Einblicken Besserer Kundenservice und Kosteneinsparungen durch operationale Effizienz Höhere Profitabilität, Kundenbindung und Wettbewerbsvorteil 4

5 In Aktion: Operationale BI mit Echtzeitdaten Betrugsprävention Kundenbindung Lokationsbasierte Angebote Online Sonderaktionsoptimierung Kontaktoptimierung Lieferkettenoptimierung Source: Intelligence Solutions Inc. Webinar: Operational BI Its Everywhere. 5

6 Echtzeit vs. Zur rechten Zeit Erfassung in Echtzeit, Verarbeitung zur rechten Zeit IT soll dem Geschäft keine Fesseln anlegen: Investieren Sie in zukunftsfähige Lösungen Technische Vorzüge: Steigerung der Kostenersparnis, Zuverlässigkeit und Performanz 6

7 Agenda Wer braucht Echtzeitdaten für BI? Architekturen für Real-Time BI Oracle Real-Time Data Integration Zusammenfassung <Insert Picture Here> 7

8 Architekturen für operationale BI Einzelne Quelle, Operational Reporting Beschränkt auf eine Anwendung Einfache Ergänzung zum OLTP-System OLTP Reporting instance Reporting von mehreren Quellen BI Applikation läuft auf ODS mit operationalen Daten Mehrere Quellen mit operationalen und historischen Daten BI Applikation kombiniert Analysen historischer Daten mit transaktionalen Daten von ODS und DWH OLTP ODS ODS OLTP EDW 8

9 Herkömmliche Methoden für Datenimport in ODS/DWH - Und ihre Grenzen Batch Skripte Keine Echtzeit Erfordern Zeitfenster Kostenintensive Pflege Begrenzt wieder aufsetzbar (nach Abbruch) SQL Abfragen & DB Trigger Nahezu Echtzeit erreichbar Hohe zusätzliche Last Intrusiv Kostenintensive Nutzung und Pflege Sehr begrenzt wieder aufsetzbar 9

10 Agenda Wer braucht Echtzeitdaten für BI? Architekturen für Real-Time BI Oracle Real-Time Data Integration Zusammenfassung <Insert Picture Here> 10

11 Oracle s umfassende Lösung für Datenintegration Unterstützung für analytische und operationale Systeme Oracle Applications Custom Applications MDM Applications Business Intelligence Activity Monitoring SOA Platforms Comprehensive Data Integration Solution SOA Abstraction Layer Process Manager Service Bus Data Services Data Federation Oracle Data Integrator Oracle GoldenGate Oracle Data Quality ELT/ETL Data Transformation Bulk Data Movement Data Lineage Real-time Data Log-based CDC Bi-directional Replication Data Verification Data Profiling Data Parsing Data Cleansing Match and Merge Storage Data Warehouse/ Data Mart OLTP System OLAP Cube Flat Files Web 2.0 Web and Event Services, SOA 11

12 Merkmale der Oracle GoldenGate Technologie Oracle GoldenGate bietet mit geringer Belastung Capture, Routing, Transformation und Delivery von Datenbank-Transakionen in heterogenen Umgebungen in Echtzeit Alleinstellungsmerkmale Performanz non-intrusiv, niedrige Belastung, Latenzzeit von Sekundenbruchteilen Erweiterbarkeit & Flexibilität Offene, modulare Architektur - Heterogene Quellen & Ziele Zuverlässig Erhält transaktionale Integrität Robust gegen Störungen und Fehler 12 12

13 Oracle GoldenGate Architektur Capture: Auslesen der bestätigten Transaktionen (optional gefiltert) wie sie im Transaktionslog erscheinen. Trail files:speichern der Daten für Weiterleitung. Capture Source Trail LAN / WAN / Internet Quell- Datenbank Ziel- Datenbank 13

14 Oracle GoldenGate Architektur Capture: Auslesen der bestätigten Transaktionen (optional gefiltert) wie sie im Transaktionslog erscheinen. Trail files:speichern der Daten für Weiterleitung. Route: Datendistribution zu mehreren Zielen. Delivery: Anwenden mit Transaktionsintegrität, Transformationen wie benötigt. Capture Source Trail LAN / WAN / Internet Target Trail Deliver Quell- Datenbank Ziel- Datenbank 14

15 Oracle GoldenGate Architektur Capture: Auslesen der bestätigten Transaktionen (optional gefiltert) wie sie im Transaktionslog erscheinen. Trail files:speichern der Daten für Weiterleitung. Route: Datendistribution zu mehreren Zielen. Delivery: Anwenden mit Transaktionsintegrität, Transformationen wie benötigt. Capture Source Trail LAN / WAN / Internet Target Trail Deliver Quell- Datenbank Deliver Target Trail Bidirektional Source Trail Capture Ziel- Datenbank 15

16 Oracle GoldenGate Topologien Unidirektional Query Offloading Bi-Direktional Live Standby oder Active-Active für HA Peer-to-Peer Load Balancing, Multi-Master Broadcast Data Distribution Integration/Konsolidierung Data Warehouse Datendistribution via Messaging BP M 16

17 Echtzeit-Datenintegration für operationales DWH Schnellste Echtzeit-Datenintegration, schnellste Massendatentransformation Oracle GoldenGate Echtzeit-Replizierung der Transaktionen tx6 tx5 tx4 tx3 tx2 tx1 BI Application OBI EE ODI EE & DQ Produktion OLTP Datenbanken LAN / WAN / Internet Capture Source Trail Target Trail Delivery DWH Daten mit geringster Latenz für die Endnutzer Geringste Belastung und reduzierte Batch-Zeitfenster auf dem Ziel Thin middle-tier für hoch performante Transformationen in der DB Vollständige Fortsetzbarkeit nach Unterbechungen durch persistente Queues 17

18 ODI EE & GoldenGate: Komplett & Integriert Non-invasives Capture + E-LT Processing Application Real Time BI (OLTP Schema) Analytic BI (Facts & Dims) Consistency Window E-LT (Mini-Batch + Transforms) Low-impact change data capture 18

19 Agenda Wer braucht Echtzeitdaten für BI? Architekturen für Real-Time BI Oracle Real-Time Data Integration Zusammenfassung <Insert Picture Here> 19

20 Der nächtliche Batchlauf hat ausgedient! Technische Vorzüge von Echtzeit-BI/DWH mit Oracle Reduzierte Belastung und TCO Einmal mitlesen, an mehrere Ziele liefern für verschiedene Zwecke Nicht invasives, log basiertes Capture Übermittelt nur bestätigte Daten, reduziert den Bandbreitenbedarf Thin middle-tier für Transformationen mit ELT Höhere Datenverfügbarkeit und -qualität Eliminiert Abhängigkeit von Batchlauf-Zeitfenstern Bessere Wiederaufsetzbarkeit nach Abbrüchen Integrierte Datenqualitätsprüfungen Skalierbarkeit und Flexibilität Lose gekoppelte, modulare Architektur Massive Datenvolumina mit sehr geringer Latenz Unterstützung von heterogenen Quellen und Zielen, und von unterschiedlichen Latenzanforderungen 20

21 Vorteile von Echtzeit-BI/DWH mit Oracle Kostensenkung Risikoreduzierung Höhere Kundenzufriedenheit 21

22 Quote Attribution Title, Company Starten Sie durch! Besuchen Sie die Oracle Fusion Middleware 11g Webseite unter oracle.com/goto/fmw11g/index.html Oracle Data Integrator oracle.com/goto/odi Oracle GoldenGate oracle.com/goto/goldengate Oracle BI/EPM oracle.com/solutions/business_intelligenc e/index.html Informationsquellen Oracle GoldenGate Resource Kit: oracle.com/goto/goldengate Blog: Technische Informationen: oracle.com/technology/products/oracledata-integrator/goldengate/index.html Data Integration Events 22

23 23

24 24