Dr. Sebas an Leuoth Dr. Pius Hauenstein (Kanton Aargau)

Transkript

1 Dr. Sebas an Leuoth Dr. Pius Hauenstein (Kanton Aargau) Full -Reuenthal Koblenz Leibstadt Schwaderloch Rietheim Klingnau Bad Zurzach Leuggern Wallbach Böttstein Mettauertal Möhlin Laufenburg Sisseln Rheinfelden Mumpf Zeiningen Stein Kaiseraugst Münchwilen Obermumpf Olsberg Kaisten Villigen Siglistorf Lengnau Elfingen Frick Untersiggenthal Rüfenach Hornussen Gipf-Oberfrick Bözen Wegenstetten Bözberg Herznach Baden Habsburg Hausen Wölflinswil Densbüren -Bad Thalheim Küttigen Erlinsbach Oberflachs Veltheim Buchs Suhr Unterentfelden Oberentfelden Tägerig Muhen Bellikon Fischbach -Göslikon Egliswil Dintikon Safenwil Holziken Hirschthal Dürrenäsch Unterkulm Eggenwil Berikon Bremgarten Wohlen Zufikon Waltenschwil Seengen Rudolfstetten -Friedlisberg Widen Villmergen Hallwil Bergdietikon Künten Niederwil Dottikon Ammerswil Teufenthal Spreitenbach Remetschwil Stetten lingen Hendschiken Kölliken Aarburg rohrdorf Nieder- Hägg- Lenzburg Seon Killwangen Ober- Mägenwil Othmarsingen Staufen Schafisheim Gränichen Fislisbach Wohlen- Mellingen schwil Brunegg Niederlenz Hunzenschwil B Birrhard Birr Würenlos Neuenhof Lupfig Möriken -Wildegg Rupperswil Aarau torf Mülligen Scherz Holderbank Auenstein Biberstein Wettingen Birmens- Schinznach-Dorf Oberhof Ennetbaden Gebenstorf Windisch Villnachern Zeihen Ehrendingen Turgi Brugg Wittnau Freienwil Obersiggenthal Riniken Effingen Ueken Schneisingen Remigen Mönthal Schupfart Hellikon Fisibach Endingen lingen Oeschgen Zuzgen Magden Gansingen Böbikon Unterendingen Würen- Rümikon Wislikofen Baldingen Döttingen Mandach Eiken Kaiserstuhl Mellikon Rekingen Tegerfelden Büttikon Sarmenstorf Hermetschwil Oberwil-Lieli Unterlunkhofen Bünzen Besen- Rottenschwil büren Uezwil Ober- Arni Islisberg Erfahrungsbericht in Zusammenarbeit mit Dr. Pius Hauenstein Oftringen Schöftland Uerkheim Zofingen Vordemwald Strengelbach Schlossrued Bottenwil Staffelbach Wiliberg Brittnau Murgenthal Attelwil Kirchleerau Moosleerau Birrwil Zetzwil Fahrwangen Jonen Bettwil Aristau Boswil Leimbach Schmiedrued Kallern Meisterschwanden Leutwil Oberkulm Rothrist Boniswil Gontenschwil Muri Beinwil Buttwil Merenschwand Reinach Geltwil Reitnau Menziken Burg Mühlau Beinwil Auw Sins Abtwil Oberrüti Dietwil the spirit of speed

2 2010 Spin- off der TU Chemnitz 2012 Erste Produktverkäufe 2013 Tochter der mic IT AG the spirit of speed 2

3 Wir denken in anderen Dimensionen! dimensio informa cs liefert Geschwindigkeit, wo Komplexität Zeit kostet Wir machen Ihre Datenbank bis zu fach schneller! the spirit of speed 3

4 GIS- Anwendungen sind graphische Anwendungen mit beständigem Zugriff auf große Datenmengen in Datenbanken Bei den im Zentrum stehenden visuellen Anwendungen erfolgt bei jedem Kartenau au (Pan, Zoom) für jeden GIS- Layer in der DB eine räumliche Filterung. Ungenügende Performance bei GIS- Anwendungen führen zu Fehlmanipula onen, Fehlern, zusätzlicher Last, unzufriedenen Benutzern und unkontrollierbaren Ausweichmanövern. Kanton Aargau setzt die GIS- Produkte der Firma ESRI ein: ArcSDE, ArcGISServer, ArcGIS Desktop. Die GeoDatenbank ArcSDE betreibt Kanton Aargau mit Oracle. the spirit of speed 4

5 Zugriffsgeschwindigkeit auf Geodaten wesentlich erhöhen die momentanen Engpässe besei gen eine Reserve für zusätzliche Nutzer au auen Keine Änderung der: So wareumgebung Applika ons- und Datenflussarchitektur Datenhaltung the spirit of speed 5

6 Evaluation KIWI-Lösungen (Server)» Rel. geringe Leistungssteigerungen» Zusätzliche SW-Lizenzen Klassisches DB-Tuning» Einschränkungen durch Applikationsarchitektur» Diverse Maßnahmen umgesetzt» Nur noch rel. geringe Leistungssteigerungen» Bei Rasterdaten und speziellen Anwendungen noch gewisses Potential vorhanden Lösungen beim Client» KIWI behebt nur indiv. Engpass» Map-Tuning beinhaltet noch etwas Potential Lösungsansatz dimensio» Erfolgversprechend» Hohes Leistungssteigerungspotential 6

7 Graphisch- interak ver Anwender: Pan, Zoom Ein- /Ausschalten von Geo- Layern Räumliche Selek on Individuelle Symbolisierung und Rendering im (Desktop)Client O explora ve Arbeitsweise è Jede Ak on/veränderung auf dem Bildschirm führt zu n räumlichen Queries in der/den DB the spirit of speed 7

8 Client Desktop GIS Web Client GIS Viewer Client Desktop GIS Web Client GIS Viewer Client Desktop GIS Web- Map- Server Terminal Server Desktop GIS App- Server 1 App- Server 1 App- Server 1 DB3A DB2A DB1A DB3B DB2B DB1B 8

9 10.8 Kilometer Die gedruckten Daten haben nur informativen Charakter. Es können keine rechtlichen Ansprüche irgendwelcher Art geltend gemacht werden. Daten des Kantons Aargau, Quelle der Landeskarten: Bundesamt für Landestopografie ( ) 1: 360'000 erstellt the spirit of speed 9

10 Das GIS einer kant. Verwaltung ist ein großer Gemischtwarenladen: Wenige Anwender mit dem selben Anwendungsprofil Veröffentlichter Bereich: ~7600 GIS- Layer (~ Tabellen) Edi erbereich: ~4000 GIS- Layer (~9000 Tabellen) Anzahl Rows: 1 1.5*10 6 / 3.5*10 6 (2.6*10 9 ) Täglich werden bis zu 80 Tabellen mit zusammen bis 5*10 6 Rows ersetzt Konzentra on der Last auf 08:00 17:00 Spitzenbelastung: Clients auf den Datenbanken the spirit of speed 10

11 11

12 12

13 13

14 14

15 SELECT 1 SHAPE, OBJECTID, FROM AGIS.VA_LSPARZ WHERE SDE.ST_EnvIntersects(VA_LSPARZ.SHAPE,: 1,:2,:3,:4) = 1 bind position: 1 == bind position: 2 == SELECT distinct sp_id bind position: 3 == FROM AGIS.S10693_IDX$ bind position: 4 == WHERE (gx >= :1 AGIS.VA_LSPARZ: AND gx <= Normale :2 AND Tabelle gy >= :3 AND gy <= :4) AND minx <= :e1 AND miny <= :e2 AND maxx >= :e3 AND maxy >= :e4 the spirit of speed 15

16 SQL T101 EOLINIE Sek. Elapsed Time Di :00 Di :00 Di :00 Di :00 Mi :00 Mi :00 Mi :00 Mi :00 Do :00 Do :00 Do :00 Do :00 Fr :00 Fr :00 Fr :00 Fr :00 Sa :00 Sek. Elapsed Time SQL P112 EOLINIE Sa :00 Sa :00 Sa :00 Sa :00 So :00 So :00 So :00 So :00 Mo :00 Mo :00 Mo :00 Mo :00 Di :00 Di :00 Di :00 Di :00 Mi :00 Mi :00 Mi :00 Mi :00 Do :00 Do :00 Do :00 Do :00 Fr :00 Fr :00 Fr :00 Fr :00 Sa :00 16

17 the spirit of speed 17

18 Klassische Intervallbildung nach technischen Gegebenheiten (z.b. Pla enstruktur) mathema schen Formeln (z.b. Modulo) vordefinierte Metrik (z.b. Manha an- Metrik) è Strategien wie vor 40 Jahren: Suchen & Korrelieren dimensio Völlig neuer Denkansatz: Nicht der Mensch bes mmt den Index, sondern die Daten selbst. è Lernen & Wissen the spirit of speed 18

19 SQL- Anfrage the spirit of speed 19

20 Räumliche Filterung sql*net App- Server ESRI Client Desktop GIS Op mierung durch dimensio: WHERE SDE.ST_EnvIntersects(...) WHERE PRIMÄRSCHLÜSSEN in (...) 20

21 OBJECTID XMin YMin XMax YMin Layer VA_EOLINIE VA_EOLINIE VA_LSGP the spirit of speed 21

22 Ziel: Für den Benutzer reale Zeiten messen Herausforderungen: Repräsenta ve Messanlage Repräsenta ve, sta s sch signifikante Werte Keine Beeinträch gung des Betriebs Langfris ge Messungen in einer sich dauernd verändernden Anlage Keine Verfälschungen the spirit of speed 22

23 DesktopClient mit Request / Transfer / Display Typische Worksta on, welche sonst nichts macht Gebräuchliche Daten Messautomat mit Zufallsgenerator für: Zei ntervall (1 600 Sek.) Zentrumskoordinaten (innerhalb Kt. AG) Maßstab (1:100 1:20 000) Aufzeichnung pro GIS- Layer Datenmenge ( ~ Rows) Request/Transfer- Zeit Rendering- Zeit 7 * 24 Stunden, +/- seit August 2012 the spirit of speed 23

24 90% Quar l Median 3,91 1,73 2,37 0,28 0,28 0,17 the spirit of speed 24

25 90% Quar l Median 3,91 1,73 0,16 0,05 2,37 0,28 0,13 0,05 0,28 0,17 0,05 0,03 the spirit of speed 25

26 Zentrale Konfigura on AGIS Team kann beliebig viele Instanzen anlegen (z.z. 3) Tabellen lassen sich den Instanzen zuweisen (in Summe 40) --Zentrale Konfig config_files = {..., 'inst_p_1.lua, 'inst_p_2.lua, 'inst_p_3.lua, } --inst_p_1 table_templates = { {'AGIS.AFB_B', }, --1 {'AGIS.ALG_G', }, --2 {'AGIS.ALG_B', }, --3 {'AGIS.ALG_O', }, } the spirit of speed 26

27 dimensio in Treiber- Cache statement_list = { 'SELECT table_name, time_last_modified FROM SDE.sde_tables_modified ', 'SELECT rastercolumn_id FROM SDE.RASTER_COLUMNS', 'SELECT layer_id FROM SDE.layers', 'SELECT COUNT(*) FROM SDE.LAYERS', 'SELECT MAX(layer_id) FROM SDE.LAYERS', 'SELECT MAX(registration_id) FROM SDE.TABLE_REGISTRY', 'SELECT UNIQUE keyword FROM SDE.dbtune', 'SELECT table_id, sde_id FROM sde.sde_logfile_pool',..., } the spirit of speed 27

28 Zeit Neue Möglichkeiten minimal invasiv OHNE So ware Änderung OHNE DB- Änderung Akzeptanz Anwender Kosten senken Produk vität HW (KIWI) Konsolidierung the spirit of speed 28

29 Dimensio Scrivo Securido Cardigo Analy co Op mo Ultraschnelle Datenaus- wertung Ultraschnelles Schreiben in Datenbanken Sichere Kopplung interner und externer Netze Das Basiswerkzeug Die Performance- lupe Der Performance- Booster the spirit of speed 29

30 dimensio informatics GmbH Brückenstr Chemnitz Telefon: Telefax: info@dimensio-informatics.com 30