GESTERN OWB, HEUTE ODI

Größe: px

Ab Seite anzeigen:

Download "GESTERN OWB, HEUTE ODI"

Sigrid Bayer
vor 6 Jahren
Abrufe

1 GESTERN OWB, HEUTE ODI Ein Erfahrungsbericht eines OWB - Entwicklers Christian Piasecki!

2 ÜBER MICH Christian Piasecki Consultant Beratung, Training, Entwicklung Oracle Technologie Oracle BI Suite Oracle BI Publisher Oracle Warehouse Builder Oracle Apex Oracle Data Integrator Blog Technical Sonstiges

3 ENTERPRISE PRAGMATIC IT Consulting Training Development Oracle Business Intelligence Oracle WebCenter Oracle ADF ADF Mobile Oracle WebLogic Oracle Fusion Middleware

4 AGENDA Aufgabe! Erste Schritte Umsetzung des Workflows Unterschiede Fazit

5 ES WIRD ZEIT LOSZULEGEN

6 AUFGABE Projektmitarbeiter erfassen ihre Tätigkeiten mit verschiedenen Systemen z.b. Mobile-Endgeräten Datenlieferung erfolgen immer Monatsweise mindestens einmal am Anfang des Folgemonats Aufwände sollen zentral in einer Datenbank konsolidiert werden Es wird nicht ein System zur Erfassung vorgeschrieben, sondern Datenanlieferungen werden integriert

7 ARCHITEKTUR Zeiterfassung der Projektmitarbeiter Datenbereitstellung durch Projektmitarbeiter automatische Datenverarbeitung mit dem ODI Konsolidierte Daten in der Oracle DB Einwurf Share

8 AGENDA Aufgaben Erste Schritte Umsetzung des Workflows Unterschiede Fazit

9 NICHT IN DIE LUFT GEHEN

10 AUFGABE: EINLESEN EINER TEXTDATEI Strukturen schaffen: Quelle und Ziel Zugriff auf die Datei Prozess zur Verarbeitung der Datei erstellen Prozess ausführen

11 OWB - EINLESEN EINER DATEI IN EINE TABELLE Anlegen eines Moduls mit Speicherort, das auf ein Datenbank-Verzeichnis zeigt Anlegen eines Moduls mit Speicherort, das als Target-Schema in der Datenbank dient Anlegen eines File-Objekts für die Text-Datei Erstellen eines Mappings mit dem File-Objekt als Quelle und einer Tabelle als Ziel-Objekt optional erstellen und verwenden einer externen Tabelle als Quelle

12 OWB - EINLESEN EINER DATEI IN EINE TABELLE Mapping deployen Mapping ausführen

13 ODI - QUELLE DEFINIEREN In der Topologie einen physikalischen Speicherort für den Ordner mit den Quelldateien anlegen

14 ODI - LOGISCHES SCHEMA Ein logisches Schema erstellen und über den Kontext das physikalische Schema mit dem logischen Schema verknüpfen

15 ODI - MODEL ERZEUGEN Im Designer ein Modell erstellen, welches auf den logischen Speicherort verweist

16 ODI - DATENSPEICHER UND FORMAT DEFINIEREN Einen Dateispeicher erstellen und den Dateinamen angeben, auf den dieses Objekt verweisen soll!!! Datei-Attribute, wie Format und Zeichensatz angeben

17 ODI - REVERSE ENGINEERING DER DATENSTRUKTUR Mit Hilfe des Reverse Engineering Dateiaufbau einlesen, so dass das Objekt im Mapping verwendet werden kann

18 ODI - BEWERTUNG DER QUELLEN INTEGRATION gleicher Aufwand beim erstmaligen Erstellen von Speicherorten in beiden Tools Mit Hilfe des Kontext können im ODI gleichen logischen Elemente auf unterschiedliche physikalische Elemente zeigen -> Im OWB gibt es eine ähnliche Möglichkeit mit den Dateispeicherorten an den einzelnen Modulen (Multi- Konfiguration, Control-Center) Beide Tools unterstützen einen beim Einlesen der Datei- Metadaten

19 ODI - ZIEL-SCHEMA DEFINIEREN Erstellen eines physikalischen und logischen Schemas zur Abbildung der Datenspeicherung

der Metadaten der Zieltabelle aus der Datenbank

20 ODI - IMPORT DER ZIELDATENSTRUKTUR Model erstellen, welches auf das logische Zielschema zeigt Importieren der Metadaten der Zieltabelle aus der Datenbank (Selektives Reverse Engineering)!! ggf. Tabelle vorher in der DB anlegen

21 ODI - MAPPING Neues Projekt erstellen In dem Projekt ein Mapping erstellen und Quell- und Zielobjekt per Drag&Drop ins Mapping ziehen

22 ODI - MAPPING Zuweisen von Quell- zu Zielspalten! Auswählen des passenden Integrationstyps (in diesem Fall Control Append ) -> Datensätze werden nur hinzugefügt

23 ODI - LKM Zuordnen des LKM (Loading Knowledge Modul): LKM SQL to SQL LKM: Wie werden die Daten aus der Quelle extrahiert

24 ODI - IKM Zuordnen des IKM (Integration Knowledge Modul): IKM Oracle Insert IKM: Wie werden die Daten in das Ziel geladen

25 ODI - MAPPING Ausführen des Mappings und Verarbeitung überprüfen

26 ODI - BEWERTUNG Mapping Designer in beiden Tools sehr ähnlich Wann wird welches Integration/Loading Knowledge Modul genommen und warum? Anlegen von Zieltabellen im ODI nicht sehr komfortabel Lassen sich nur aus dem Mapping mit Create Table erstellen (gibt beim 2ten Durchlauf eine Warnmeldung, falls nichts aus) Partionierung, Indexe in unterschiedlichen Tablespaces -> Objekte lieber selber direkt in der DB anlegen -> OWB auf Oracle Datenbank zugeschnitten, ODI kommt aus der Middleware und ist heterogener aufgestellt

27 ZUSAMMENFASSUNG / GEGENÜBERSTELLUNG! OWB ODI!!!! Speicherorte einrichten x x Quelldatei einbinden x x Mapping erstellen x x Mapping deployen x x Mapping ausführen x x Erstellung eines Szenarios Code einfrieren -> Umsetzung in beiden Tools sehr ähnlich

28 AGENDA Das Projekt Erste Schritte Umsetzung des Workflows Unterschiede Fazit/Ausblick

29 SCHAUBILD / ARCHITEKTUR Zeiterfassung der Projektmitarbeiter Datenbereitstellung durch Projektmitarbeiter automatische Datenverarbeitung mit dem ODI Konsolidierte Daten in der Oracle DB Einwurf Share

30 ODI - WORKFLOW Dateien werden in einem zentralen Ordner als txt-/csv-datei (gleicher Aufbau) abgelegt Ein Prozess überwacht diesen Ordner und verarbeitet die abgelegten Dateien automatisch Löschen von Daten die für die Ressource und Monat schon da sind Daten laden Datei verschieben

31 ODI - WORKFLOW (PACKAGE) Daten löschen Daten laden Auf Datei warten Datei verschieben

32 AGENDA Das Projekt Erste Schritte Umsetzung des Workflows Unterschiede Fazit

33 DB-FUNKTIONEN/PROZEDUREN keine Möglichkeit diese zu importieren und direkt einzubinden 2 Möglichkeiten:! 1. In einer Expression aufrufen 2. ODI-Prozedur als Wrapper erstellen! -> Nachteil: Kein Import der Objekte und Unterstützung in der IDE

34 PRE-/POST-MAPPING Im ODI gibt es kein Pre-/Post-Mapping Operatoren Im ODI muss diese Funktion mit anderen Mitteln umgesetzt werden Die einfachste Möglichkeit ist, die Prozeduren in einer Package vorher aufzurufen! -> Testen der Verarbeitung muss über eine Package durchgeführt werden

35 WORKFLOW - PACKAGES / LOAD PLANS Im OWB wird die Ausführung mehrerer Mappings durch Workflows gesteuert (seriell, parallel) Im ODI gibt es Packages und Load Plans Unterscheiden sich z.b. in der Transaktionssteuerung und bieten nicht die gleichen Funktion (z.b. Load Plans bei paralleler Ausführung verwenden, Packages bei Schleifen) -> Einarbeitung nötig (es gibt auch keine Migration von Workflows)

36 MEHRERE TABELLEN BEFÜLLEN Es ist wie im OWB möglich mehrere Tabellen in einem zu befüllen Ein Splitt-Operator steht zudem zur Verfügung Allerdings gibt es keine Target-Load-Order um die Tabellen in einer bestimmten Reihenfolge zu befüllen -> Aufspaltung in mehrere Mappings nötig

37 ODI - SZENARIEN ODI-Objekte werden als Szenarien bereitgestellt Szenarien können von unterschiedlichen Objekten erstellt werden (Mappings, Prozeduren, Packages) Der Code des Objekts wird eingefroren und bereitgestellt (Entwicklung -> Produktion) Bei Änderungen in den Objekten, muss ein neues Szenario erstellt und wiederum bereitgestellt werden

38 AGENDA Das Projekt Erste Schritte Umsetzung des Workflows Unterschiede Fazit

39 BEWERTUNG DER PRODUKTIVITÄT Durch Flowbased Mappings und Packages ist die Konzeption mit dem OWB vergleichbar Produktivität leidet im Moment, da DB-Objekte (Packages, Prozeduren, Funktionen) extra gewrappt werden müssen Testen über Packages und nicht Mappings erfolgen muss Nützliche Komponenten in den ODI-Packages (filewait, Variablen deklarieren, erhöhen)

40 NICHT DEN KOPF IN DEN SAND STECKEN

41 FAZIT ODI ist kein Hexenwerk, allerdings muss man sich wie mit jeder neuen Technologie intensiv damit auseinander setzen In heterogenen Projekten hat der ODI seine Vorteile In reinen Oracle-Umgebungen ist der OWB besser geeignet! Selber loslegen und eigene Erfahrungen sammeln

42 VIELEN DANK FÜR IHRE AUFMERKSAMKEIT HABEN SIE NOCH FRAGEN?

Ähnliche Dokumente

Die Erkenntnis von gestern muss heute mit einem neuen. 19.06.2009 TEAM - Ihr Partner für IT 2

Die Erkenntnis von gestern muss heute mit einem neuen. 19.06.2009 TEAM - Ihr Partner für IT 2 Beratung Software Lösungen Integration von Reporting Tools in Oracle ADF 11g Applikation Der Inhalt dieses Vortrages beruht auf den Erfahrungen und Erkenntnissen zu einem bestimmten Zeitpunkt und unter