Übung: Data Warehousing und Data Mining

Transkript

1 Übung: Data Warehousing und Data Mining Sebastian Wandelt 23. Oktober 2014

2 Überblick Organisatorisches Verbinden mit Oracle 1. Aufgabenblatt Gruppenfindung

3 Die Übung Über das Semester verteilt gibt es sechs Übungsaufgaben Lösungen sind in Gruppen anzufertigen und zu einem festen Termin abzugeben Ihr habt jeweils 2-3 Wochen für ein Aufgabenblatt zeit

4 Ablauf des Semesters 7 Pflichttermine (neue Aufgabe/Lösung) 43. KW: KW: KW: KW: KW: KW: KW: (Siegerehrung, Repetitorium) Alle anderen Termine sind fakultativ

5 Ablauf eines Pflichttermins Vorstellung der Lösungen durch ausgewählte Gruppen (eine Präsentation à 5-10 Minuten) Im Laufe des Semesters sollte jeder Student mindestens einmal vortragen! Wer: vorher überlegen! Bekanntgabe des neuen Aufgabenblattes

6 Die Aufgaben / Wettbewerb Insgesamt gibt es 6 Aufgaben zu lösen 5 der Aufgaben sind als Wettbewerb konzipiert (Aufgaben 2, 3, 4, 5 und 6) Es gibt Punkte für die beste/schnellste/effizienteste Lösung Die beste Gruppe bekommt am Ende ein kleines Präsent

7 Aufgabenplanung 1. Erste Schritte mit Oracle (Ausgabe: heute) 2. Skalierbare Schnittmengenberechnung 3. Management von 4D-Trajektorien 4. Multidimensionale Indexstrukturen 5. Indizierung mit Oracle 6. Clusteringverfahren

8 Gruppenbildung Eine Gruppe hat drei Personen Festlegung am Ende dieser Übungsstunde Jede Gruppe bekommt einen Account für eine Oracle-Instanz

9 Kriterien für die Prüfung Alle Aufgaben durch die Gruppe bearbeitet => Anmeldung zur Prüfung

10 Art der Prüfung Vermutlich Klausur Vorläufige Aufteilung (tbc) 50% Hintergrundwissen (Vorlesung) 50% abgewandelte Übungsaufgaben

11 Terminfindung Nachmittagstermin schon um 15:00 Uhr, anstatt 15:15 Uhr? Zweiter Übungstermin? Vielleicht: Donnerstag, vor der Vorlesung, 9:30 bis 11:00 Uhr

12 Verbindung zu Oracle Server: delphi.informatik.hu-berlin.de Einloggen mit Informatik-Account Nur aus dem HU-Netz erreichbar ORACLE_SID: wbi ORACLE_HOME: /local/oracle_install/product/12.1.0/dbhome_1

13 Datenbankzugriff Alternativen Alles in Java machen JDBC Treiber von Oracle herunterladen Java programmieren Java-basierte GUI verwenden (z.b. Aquafold) JDBC Treiber von Oracle herunterladen Anwendung installieren Tool benutzen, die den Oracle Client verwenden (z.b. SQL*PLUS, Toad, TORA, ) Oracle Client herunterladen (Oracle Technology Network) Ca. 650 MB Installieren Dann Tool installieren

14 Auf der Shell setenv ORACLE_HOME /local/oracle_install/product/12.1.0/dbhome_1 setenv ORACLE_SID wbi cd $ORACLE_HOME cd bin./sqlplus -> Benutzername/Passwort eingeben -> Interaktion mit ORACLE, z.b. per SQL

15 Zum Entwicklen / Testen Lokale Installation von Oracle 10g / 11g Express Edition

16 Falls delphi unerreichbar ist Bitte einfach eine Mail an schicken, dann wird der Rechner neu gestartet

17 JDBC - kompakt

18 JDBC - Idee

19 JDBC - Konzepte DB-spezifischer JDBC-Treiber: DriverManager Verbindung zur DB: Interface Connection Anfragen formulieren: Statement Ergebnisse auswerten: ResultSet Metadaten über die DB

20 JDBC Statements Sind gewöhnliche SQL-Statements, die JDBC an die DB weiterleitet erzeugt wird ein Statement über das Interface Connection Statement stmt=con.createstatement();

21 JDBC Statements Beispiele stmt.execute( "CREATE TABLE coworkers(c_idint, namevarchar(25))" ); stmt.execute( "INSERT INTO coworkers VALUES (1, 'Herbert') ); stmt.close(); //nicht vergessen!

22 JDBC Anfragen Ausführung von Statement.executeQuery(); Erzeugt einobjekt mit Interface ResultSet ResultSetresult=stmt.executeQuery( "SELECT c_id, name FROM coworkersorder BY c_id) ); ResultSet speichert einen internen aktuellen Pointer auf die Ergebnisliste Buffergöße! Ergebnisse werden tupelweise durchlaufen über result.next(); Bereits das erste Tupel bedarf des vorherigen Aufrufs von result.next(); Aufruf liefert true, wenn weitere Tupel vorhanden; sonst false

23 JDBC ResultSet Über die Methoden ResultSet.getXXX("<attrib>") also getstring(), getint(), stmt.executequery("selectc_id,name.. while(result.next()) { intc_id= result.getint("c_id"); String name= result.getstring("name"); } Man muss also den Datentypen der Spalte kennen Zugriff möglich über Metadaten (über ResultSet erhältlich)

24 JDBC PreparedStatements Normale SELECT Statements werden in der DB jedes Mal neu geparst, optimiert und kompliert Bei mehrfacher Ausführung eines Statements mit nur geänderten Parametern ist das ineffektiv Besser: Anstelle von Statement PreparedStatement pstmt=con.preparestatement( {LOOP} // preparetuples: pstmt.setint(1, anint); "INSERT INTO coworkers (c_id, name) VALUES (?,?) ); string as 2nd attribute: pstmt.setstring(2, astring); // executepreparedstatement pstmt.execute(); {POOL} pstmt.close();

25 JDBC Exceptions JDBC Methoden können SQLExceptionwerfen Abfangen! Beispiele "Geschlossene Anweisung Wo? Statement.execute() Was? Es wird auf ein Instanz von Statement zugegriffen, die zuvor mit Statement.close() geschlossen wurde "ORA-00001: Verstoß gegen Eindeutigkeit" Wo? Statement.execute("INSERT.."); Was? Einfügen bereits vorhandener Werte in eine Spalte (unique)

26 JDBC - Quellen Google e/enterprise-edition/jdbc html

27 PL/SQL - kompakt Oracle-eigene Programmiersprache mit enger Integration in SQL Sämtliche prozeduralen Konzepte sind verfügbar: Funktionen/ Prozeduren, Abfragen/bedingte Ausführung, Schleifen, etc. Wird verwendet für SQL Funktionen, Trigger, Stored-Procedures, etc. Code wird in der Datenbank, u.u. während der Ausführung einer SQL- Anfrage ausgeführt Keine Benutzerschnittstellen Keine Ausgabe auf Bildschirm etc. Logging ist gar nicht so einfach (Transaktionen) Alternative: Java in der Datenbank Oder SQLJ

28 PL/SQL - Programme DECLARE.. /* Variablen-&Typdeklarationen */ BEGIN.. /* Programmcode, Funktionen.. */ EXCEPTION.. /* Exception-Handling*/ END;

29 PL/SQL - Beispiel DECLARE cnt number; BEGIN SELECT count(*) INTO cnt FROM USER_TABLES; cnt:= cnt*10; INSERT INTO mytabelle VALUES (cnt, constant ); END;

30 PL/SQL - Variablen Alle von Oracle unterstützen Typen + NUMBER, BOOLEAN Ermittlung zur Compilezeit möglich DECLARE name VARCHAR(20); gruppe NUMBER;

31 PL/SQL - Sonstiges Kontrollflüsse Bedingungen, Schleifen, Ausnahmen,. Kompilieren von Programmen CREATE OR REPLACE PROCEDURE myproc IS EXEC myproc;

32 PL/SQL EXPLAIN PLAN EXPLAIN PLAN (FOR) SELECT * FROM user_tables; Parst und optimiert die Query, ohne sie auszuführen Speichert die Abfolge sämtlicher gewählter Operationen in einer Tabelle ab Referenzierte Tabellen Verwendete Zugriffsmethoden Join-Methode Geschätzte Kosten Pläne können durch externe Tools angezeigt werden Siehe:

33 Fragen, Anregungen?