Advanced PL/SQL und Anwendungsentwicklung mit Open Source Werkzeugen

Transkript

1 Advanced PL/SQL und Anwendungsentwicklung mit Open Source Werkzeugen Jochen Hinderberger Dialog Semiconductor GmbH Frank J. Rödel Dialog Semiconductor GmbH

2 Agenda Einleitung: Dialog Semiconductor Große Datenvielfalt Einsatz von Open Source Werkzeugen Perl Eclipse Datenaufbereitung: PL/SQL Bsp.: log Package 2 Pipelined Table Functions Ref Cursor Html Reports via mails 2

3 Dialog Semiconductor Weltweit führender Entwickler und Lieferant von kundenspeziefischen Chips (ASICs) On-Chip Systemlösungen für Audio, Powermanagement, Motorsteuerung, LCD und OLED Treiber, Mixed Signal Technologie in einem Chip Weltweite Niederlassungen mit ca Mitarbeitern fabless Schwerpunkte auf Design und Test Kunden aus den Bereichen: Mobilfunk, Unterhaltung, Industrie 3

4 Heterogene Datenlandschaft Große Menge Daten an jedem Produktionsschritt Auswertung wichtig für die abschließende Beurteilung eines jeden Chips Daten werden an einer zentralen Stelle in einer Oracle Datenbank gesammelt Problem: Nur wenige genormte Datenquellen Verschiedene, angepasste Ladescripte notwendig 4 Ziele: Schnelle Anpassung an neue Formate Einfaches Lesen und Interpretieren von ASCII Dateien 4

5 Scriptsprache Perl Typenfreie Scriptsprache Sehr einfache Programmierung Ideal für Stringverarbeitung Große Anzahl frei verfügbarer Module: Einlesen von Daten Datenmanipulation Statistik und Analyse CGI - Webformulare 5 Unterstützung für nahezu alle Platformen: Entwicklung unter Windows Produktiver Einsatz unter Solaris Große Community mit Lösungen für nahezu alle Probleme vorhanden 5

6 Perl DBI Leistungsstarkes Datenbankinterface Objektorientierter Ansatz Einfache Programmierschnittstelle Umfangreiche Unterstützung von Oracle Funktionalitäten durch DBD:Oracle Erweiterung Select, insert, update Bulk inserts Prepare / Execute Konstrukt 6 Pipelined table functions Verschiedene fetch Möglichkeiten 6

7 Wiederverwendbarkeit von Code Auslagern von allgemeinen Funktionen in eigene Module Ein Modul stellt Funktionen oder Objektklassen bereit Eigene API für die jeweilige Tabellenstruktur Einfaches Aufteilen Arbeiten im Team Übersichtlicher und leicht zu wartender Quellcode OO-Programmieren mit Perl möglich: Klassen, Instanziierung von Objekten, Schnelles 7 und einfaches Erstellen neuer Ladescripte Eclipse IDE + EPIC Perl + SVN + sqlplus + Perl Script Perl Script Perl Module API Oracle 10g Perl Script (Perl DBI) 7

8 Eclipse Open Source Entwicklungsumgebung für fast alle Progammierund Scriptsprachen Umfangreiche, freie Eclipse Plugins für Perl Komplette Entwicklungsumgebung Debugger Highlighting Syntaxchecks Autovervollständigung Online Hilfe 8 Eclipse kann beliebig erweitert und als EINE Arbeitsumgebung verwendet werden Java und C Plugins Subversion Plugin (freie Versionsverwaltung) usw. 8

9 Eclipse + SQL Plugins für SQL Unterstützung PL/SQL Entwicklung mit Schema- Objektbrowser, Bsp: Einbinden von native sqlplus 9 9

10 Eclipse + SVN Subversion als freie Versionsverwaltung Erweiterung von CVS Quasi-Standard 10 Alle Perl-, shell-, cgi- und SQL- Scripte können an einer Stelle verwaltet werden Teamarbeit 10

11 Datenaufbereitung Datenaufbereitung innerhalb der Datenbank mittels PL/SQL Deutlicher Performancevorteil gegenüber einer externen Vorverdichtung Ausnutzung des Datenbank Cache Einsparung von unnötigem I/O Geringere Auslastung der Reportingserver oder Clients PL/SQL performanter als JAVA in der Oracle Datenbank bei großen Datenmengen 11 Vorverdichtung von Daten in Aggregationstabellen ermöglicht unterschiedliche Vorhaltezeiten verschiedener Aggregationsstufen 11

12 Strukturiertes PL/SQL Wiederverwendbarkeit von Code Verwendung von Prozeduren, Funktionen, Trigger, Erstellen von Packages Advanced PL/SQL möglich: Objektorientiertes Programmieren Typen mit Member-Attributen, Konstruktoren, 12 Methoden, Multithreading in PL/SQL A: t B: x C: t: x: t D: x --main function A B C D 12

13 Log Package Eigenes PL/SQL Log Package (nach Java Vorbild) Eingebunden in alle Prozeduren, Trigger, Überwachung aller automatischen Abläufe Automatische, konfigurierbare je nach Relevanz Definierte Vorhaltezeiten verschiedener Meldungen, je nach Log-Level Auswertung der log Tabelle mittels verschiedener Filter: Quellenfilter 13 Log-Level Filter Filterung nach Inhalt Sehr nützliches Werkzeug für die Entwicklung und das Debugging neuer Prozeduren 13

14 Log Package 14 14

15 Pipelined Table F. / Ref. Cursor Schlüsselelemente für schnelles, effektives und flexibles online Webreporting Beliebige Userinformationen als Inputparameter für Funktionen Selektion und Verdichtung der Daten innerhalb der Funktionen Ergebnis als virtuelle Tabelle Weitere Vorteile: 15 Hohe Flexibilität Beliebige Quellen Berücksichtigng von Umgebungsbedingungen oder Abläufe Keine Einschränkungen bei Berechnungen 15

16 Pipelined Table Functions Die Ausgabestruktur von PTFs wird in types und table-types definiert Diese virtuellen Tabellen werden innerhalb der PTFs beliebig, zeilenweise befüllt Das Resultat der PTFs wird Zeile für Zeile ausgegeben 16 16

17 Ref Cursor Ähnliche Funktionalität aber flexible Ausgabestruktur Spaltenanzahl und Namen werden während der Ausführung definiert und befüllt Das spaltenweise Befüllen der Ausgabe ist nur eingeschränkt und komplizierter als bei PTFs möglich 17 17

18 PTFs vs. Ref Cursor Wann ist welche Lösung sinnvoll? PTFs sind für online Webreporting besser geeignet: Feste, definierte Ausgabestruktur Weniger Fehlerpotential für nachgelagerte Anwendungen Höhere Flexibilität innerhalb der Funktionen Deutlich einfachere Programmierung 18 Ref Cursor sind geeignet für einfache, variable selects : Keine Typdefinitionen nötig Schnelle Erstellung Rückgabeformat ist über Inputparameter steuerbar 18

19 PTFs / Anwendungsbeispiele Userauswahl im Webreporting: User trifft eine beliebige Auswahl Information wird in einer temporären Auswahltabelle gespeichert Information wird in nachgelagerten PTFs berücksichtigt Eine Funktion für alle User: User mit unterschiedlichen Zugangsberechtigungen 19 User / Rechte Tabelle (UA) Art und Umfang der Rückgabedaten innerhalb der PTFs variabel 19

20 HTML Reports via Mail Seit Oracle 8 verfügbar Minimale Konfigurationseinstellungen erforderlich Information kann ohne zusätzliche Applikation zur Verfügung gestellt werden Tabellarische Darstellung kann auch über Blackberry problemlos genutzt werden Durch HTML-code frei gestaltbar 20 20

21 Mail-Package Konfiguration Welche Parameter sind noch zu setzen? Mail-Package: smtp_host VARCHAR2(256) := 'smtp-server.some-company.com'; smtp_port PLS_INTEGER := 25; smtp_domain VARCHAR2(256) := 'some-company.com'; PL/SQL Prozedur: 21 21

22 Tabellendarstellung Dieser Code wird wie folgt interpretiert: 22 22

23 Gestaltungsmöglichkeiten Es können beliebige Links verwendet werden: <a href=" Newsticker</a> Computer-Nachrichten<br> Alle gängigen HTML Gestaltungselemente sind verfügbar Beispiel aus selfhtml: 23 23

24 Vielen Dank für Ihre Aufmerksamkeit Jochen Hinderberger 24 Dialog Semiconductor Frank J. Rödel Dialog Semiconductor 24

25 Fragen / Antworten 25 25

26 Links: 26 Links / Literatur Perl, Einführung und Hilfe: Perl Module: Eclipse Plugins: EPIC Perl: SVN: PL/SQL Editor: Oracle mail demo: SELFHTML: Literatur: Expert Oracle PL/SQL ISBN: DOAG News 4/2007 S.39ff 26