8. Monitoring. Datenbankadministration

Transkript

1 8. Monitoring Datenbankadministration

2 Motivation WARUM MONITORING? Analyse von Leistungskennwerten einzelner Applikationen oder Anfragen - Ursache schlechter Systemleistung identifizieren Bestimmung künftiger Hardwareanforderungen - Nutzung von Tabellen und Indizes überwachen Auswirkungen von Optimierungsaktivitäten einschätzen - (Kosten-/Nutzenbewertung) MITTEL DES MONITORING Snapshot Monitore (snapshot monitors) Ereignismonitore (event monitors) Diagnosemonitor (health monitor) 2

3 Überblick Snapshot monitors Event monitors Health monitor - Echtzeitmonitoring - Erfasst den Zustand zum Zeitpunkt der Aktivierung - Wird durch Klienten (z.b. Nutzer, Scripte) angestoßen - Ereignisgetriebenes Echtzeitmonitoring - Erfasst Zustand der Datenbank wann immer ein bestimmter Typ von Ereignis auftritt - Ausnahme-/Fehlergetriebenes Monitoring - Kennzeichnet abnormale und potentiell problematische Zustande im System 3

4 Momentaufnahmen (Snapshot monitors)

5 Monitore auf Instanzebene MONITORE ÜBERWACHEN DAS SYSTEM liefern Daten für Momentaufnahmen ein Monitor erfasst viele verschieden Variablen erzeugen Kosten (bei Snapshot-Monitor eher gering, bei Event-Monitor groß!) MONITORKONFIGURATION AUF INSTANZEBENE Aktivierung der verschiedenen Monitore über Parameter in der Instanzkonfiguration Konfiguration gilt für alle Datenbanken einer Instanz DFT_MON_STMT (Statements) DFT_MON_TABLE (Tabellen) DFT_MON_LOCK (Sperren) DFT_MON_BUFPOOL (Puffer) DFT_MON_SORT (Sortierung) DFT_MON_UOW (Transaktionen) DFT_MON_TIMESTAMP (Zeitstempel) BEISPIEL Aktivierung - UPDATE DBM CFG USING DFT_MON_STMT [ON OFF] Abfrage - GET DBM CFG 5

6 Beispiel $ db2 GET DBM CFG Default database monitor switches Buffer pool (DFT_MON_BUFPOOL) = OFF Lock (DFT_MON_LOCK) = OFF Sort (DFT_MON_SORT) = OFF Statement (DFT_MON_STMT) = OFF Table (DFT_MON_TABLE) = OFF Timestamp (DFT_MON_TIMESTAMP) = ON Unit of work (DFT_MON_UOW) = OFF Monitor health of instance and databases (HEALTH_MON) = ON 6

7 Monitore auf Applikationsebene MONITORE AUF APPLIKATIONSEBENE gelten nur für aktuelle Datenbankverbindung Aktivierung - UPDATE MONITOR SWITCHES USING <switch> [ON OFF] - <switch> ::= ( STATEMENT TABLE LOCK BUFFERPOOL SORT UOW TIMESTAMP) Abfrage - Monitore in aktueller Verbindung GET MONITOR SWITCHES - Global aktive Monitore auch durch Abhängigkeiten oder andere Sessions aktivierte GET DBM MONITOR SWITCHES 7

8 Momentaufnahmen MOMENTAUFNAHME/SNAPSHOT MONITOR (SNAPSHOT) Abbild des aktuellen Datenbankstatus (Echtzeitüberwachung) verwendet - zum Überprüfen des Datenbankstatus - zum Ermitteln von potenziellen Problembereichen globale Momentaufnahmen Syntax (Auszug) GET SNAPSHOT FOR [ DATABASE MANAGER ALL [ DATABASES APPLICATIONS BUFFERPOOLS ] APPLICATION APPLID <appl-id> ] Referenz: - ml Was steht wo? (grober Überblick) - ml 8

9 Beispiel (Auszug!) $ db2 GET SNAPSHOT FOR DATABASE MANAGER Database Manager Snapshot Instance name = db2insxx Database manager status = Active Product name = DB2 v Start Database Manager timestamp = Last reset timestamp = Snapshot timestamp = Remote connections to db manager = 4 Remote connections executing in db manager = 0 Local connections = 1 Local connections executing in db manager = 0 Active local databases = 1 9

10 Momentaufnahmen (2) MOMENTAUFNAHME/SNAPSHOT MONITOR (SNAPSHOT) datenbankspezifische Momentaufnahmen GET SNAPSHOT FOR [ ALL alle unteren zusammen DATABASE generelle Statistiken der Datenbank TABLES Statistiken über referenzierte Tabellen TABLESPACES Statistiken über Tabellenbereiche LOCKS Statistiken über Sperren von Anwendungen BUFFERPOOLS Statistiken über Pufferpools APPLICATIONS Informationen über verbunden Anwendungen DYNAMIC SQL] Inhalt des SQL-Anfragen-Caches ON <db-name> REFERENZ FÜR MONITOR ELEMENTE! besonders der Teil Database and application activity monitor elements 10

11 Beispiel (Auszug!) $ db2 GET SNAPSHOT FOR DATABASE ON TPCH Database Snapshot Database name Automatic storage path High water mark for connections = 5 Application connects = 1 Buffer pool data logical reads = 6522 Select SQL statements executed = 3 Package cache lookups = 8 Package cache inserts = 1 Memory usage for database: Node number = 0 = TPCH = /home/db2insxx Memory Pool Type Current size (bytes) = High water mark (bytes) = = Package Cache Heap 11

12 Beispiel (Auszug!) $ db2 GET SNAPSHOT FOR TABLES ON TPCH Table Snapshot Database name = TPCH Database path = /home/db2ins49/db2ins49/node0000/sql00001/ Number of accessed tables = 3 Table List Table Schema = SYSIBM Table Name = SYSTABLES Table Schema = DB2INS49 Table Name = LINEITEM Table Type = User Data Object Pages = 2084 Index Object Pages = 462 Rows Read = Rows Written = 0 12

13 Beispiel (Auszug!) $ db2 GET SNAPSHOT FOR TABLESPACES ON TPCH Tablespace Snapshot Database name = TPCH Number of accessed tablespaces = 7 Tablespace name = SYSCATSPACE Tablespace ID = 0 Tablespace Type = Database managed space Tablespace Page size (bytes) = 4096 Tablespace Extent size (pages) = 4 Tablespace Prefetch size (pages) = 4 Total number of pages = Number of used pages = Number of pending free pages = 0 High water mark (pages) =

14 Beispiel (Auszug!) $ db2 GET SNAPSHOT FOR APPLICATIONS ON TPCH Application Snapshot Application handle = 61 Application status = UOW Waiting Application name = db2bp Authorization level granted = User authority: DBADM authority CREATETAB authority CONNECT authority LOAD authority Group authority: SYSADM authority 14

15 Beispiel (Auszug!) $ db2 GET SNAPSHOT FOR DYNAMIC SQL ON TPCH Dynamic SQL Snapshot Result Database name = TPCH Number of executions = 3 Number of compilations = 1 Rows read = Rows written = 0 Buffer pool data logical reads = 6522 Buffer pool data physical reads = 17 Total execution time (sec.microsec) = Total user cpu time (sec.microsec) = Total system cpu time (sec.microsec) = Statement text = select sum(l_extendedprice) from lineitem 15

16 Monitor Elemente COUNTER Anzahl Auftreten eines Ereignisses, kumulativ, zurücksetzen meist möglich z.b.: Anzahl der Ausführungen eines Statements GAUGE aktuelle Wert einer Größe z.b.: aktuell belegter Speicher für Pufferpool WATERMARK Höchster oder niedrigster Wert der von einer Größe angenommen wurde z.b.: höchster Stand des belegten Speichers für Pufferpool TIMESTAMP Datum und Uhrzeit des Auftretens eines Ereignisses z.b.: Zeitpunkt des Starts des DBM TIME Anzahl der Sekunden und Mikrosekunden, die eine Aktivität in Anspruch genommen hat z.b.: Ausführungszeit eines Statements 16

17 Rücksetzen von Monitoren RÜCKSETZEN AUFGEZEICHNETER WERTE RESET MONITOR [ALL FOR DATABASE <db-name>] DB2 => GET SNAPSHOT FOR DYNAMIC SQL ON TPCH Number of executions = 3 Statement text = SELECT COUNT(*) FROM LINEITEM, ORDERS, CUSTOMER WHERE L_ORDERKEY = O_ORDERKEY AND O_CUSTKEY = C_CUSTKEY AND C_CUSTKEY = 5 DB2 => RESET MONITOR ALL DB2 => GET SNAPSHOT FOR DYNAMIC SQL ON TPCH Number of executions = 0 Statement text = SELECT COUNT(*) FROM LINEITEM, ORDERS, CUSTOMER WHERE L_ORDERKEY = O_ORDERKEY AND O_CUSTKEY = C_CUSTKEY AND C_CUSTKEY = 5 17

18 SQL Snapshot-Funktionen SNAPSHOT-TABELLENFUNKTIONEN Tabelle aus Snapshot erzeugen Namen (veraltet!) - SNAPSHOT_DATABASE - SNAPSHOT_TABLE - SNAPSHOT_LOCK - SNAPSHOT_DYN_SQL - Parameter - Datenbankname - Partitionsnummer BEISPIEL SELECT * FROM TABLE(SNAPSHOT_TABLE('TPCH', -1)) AS T SNAPSHOT_TIMESTAMP ROWS_WRITTEN TABLE_NAME REGION 18

19 SQL Snapshot-Funktionen SNAPSHOT-TABELLENFUNKTIONEN Tabelle aus Snapshot erzeugen Namen (aktuell!) - SNAP_GET_DB_V95 - SNAP_GET_TAB_V91 - SNAP_GET_LOCK - SNAP_GET_DYN_SQL_V95 - Parameter - Datenbankname - Partitionsnummer BEISPIEL SELECT * FROM TABLE(SNAP_GET_TAB_V91('TPCH', -1)) AS T SNAPSHOT_TIMESTAMP ROWS_WRITTEN TABLE_NAME REGION 19

20 Ereignismonitore (Event monitors)

21 Ereignismonitore EREIGNISMONITOR (EVENT MONITOR) fortlaufende Überwachung über feste Zeitdauer Datenbankobjekt liefert detaillierte Informationen über - Datenbanken, Tabellen, Deadlocks, Tabellenbereiche, Pufferpools, Verbindungen, Abfragen, Transaktionen, hoher Aufwand! ANWENDUNGSBEISPIEL: DEADLOCK MONITORING Mit Snapshots schlecht möglich, da Deadlocks von System selbst behoben werden (deadlock detector) Deadlock Event tritt nur sporadisch auf und schreibt nicht so viele Informationen aus 21

22 Ereignismonitore Beispiel CREATE EVENT MONITOR EVENTS FOR STATEMENTS WRITE TO FILE '/home/db2inst50/events/' # db2evmon db TPCH evm EVENTS 38) Statement Event... Appl Handle: 38 Appl Id: *LOCAL.db2inst Appl Seq number: 0072 Text : SELECT COUNT(*) FROM LINEITEM, ORDERS, Start Time : Stop Time : Exec Time : seconds User CPU : seconds System CPU : seconds Fetch Count : 32 22

23 Erstellung von Ereignismonitoren ERSTELLUNG VON EREIGNISMONITOREN CREATE EVENT MONITOR <evm-name> FOR [DATABASE TABLES DEADLOCKS TABLESPACES BUFFERPOOLS CONNECTIONS STATEMENTS TRANSACTIONS] WRITE TO [TABLE [<table-options>] FILE <path> [<file-options>]] [MANUALSTART AUTOSTART] bei [CONNECTIONS STATEMENTS TRANSACTIONS] - filtern mittels WHERE <event-condition> ENTFERNEN VON EREIGNISMONITOREN DROP EVENT MONITOR <name> 23

24 Erstellung von Ereignismonitoren (2) ABLAGE IN TABELLEN Angabe der Tabelle und der gewünschten Spalten (u.a). <table-options> ::= <evm-group> ([TABLE <tab-name>], [INCLUDES (<col-list>)]) [, ] logische Ereignisgruppe <evm-group> - logische Dateneinheit eines Monitors - definieren Relationen - z.b. STATEMENT CONNHEADER, STMT, SUBSECTION, CONTROL DATABASE DB, CONTROL, DBMEMUSE - Referenz: graphisches Frontend: db2eva BEISPIEL CREATE EVENT MONITOR EVENTS FOR DATABASE WRITE TO TABLE DB(TABLE DB_MYEVT) erzeugt Relation mit 118 Spalten 24

25 Erstellung von Ereignismonitoren (3) ABLAGE IN DATEIEN oft für erweiterte Auswertung verwendet schreibt in mehrere Dateien [<file-options>]] - [MAXFILES <number>]: Anzahl der Eventlogdateien - [MAXFILESIZE <pages>]: Max. Größer einer Logdatei in Seiten - [BUFFERSIZE <pages>]: Größe des Schreibpufferes des Monitors in Seiten - [BLOCKED]: warten wenn Puffer voll - [NONBLOCKED]: Verwerfen von Daten - [APPEND REPLACE]: Daten in existierenden Logs behalten oder verwerfen Abfragen mit - db2evmon db <db-name> -evm <evm-name> BEISPIEL CREATE EVENT MONITOR EVENTS FOR STATEMENTS WRITE TO FILE '/home/db2inst50/events/' MAXFILES 10 MAXFILESIZE 100 erzeugt evt, evt, 25

26 Arbeiten mit Ereignismonitoren AKTIVIEREN starten und stoppen der Aufzeichnung SET EVENT MONITOR <name> STATE [1 0] Statusabfrage - Katalogtabelle SYSCAT.EVENTMONITORS - SQL Funktion EVENT_MON_STATE SELECT EVENT_MON_STATE('EVENTS') FROM SYSIBM.SYSDUMMY1 AUSSCHREIBEN gepufferte Daten ausschreiben FLUSH EVENT MONITOR <name> 26

27 Diagnosemonitor (Health monitor)

28 Diagnosemonitor DIAGNOSEMONITOR (HEALTH MONITOR) fortlaufende Überwachung des Datenbank Manager, von aktiven Datenbanken, Tabellenbereichen und Containern. berechnet Indikatoren auf Grundlage von erfassten Werten der Datenbank System Monitore, des Betriebssystems und der (aktiven) Datenbank(en) - Indikatorname - Wert - Auswertungszeitpunkt (timestamp) - Alarmzustand - Berchnungsformel - Zusätzliche Informationen Globale Diagnoseaufnahme (global health snapshot) - l 28

29 Diagnosemonitor(2) Momentaufnamen (CLP) GET HEALTH SNAPSHOT FOR [ DBM ALL DATABASES [ ALL DB TABLESPACES ] ON <database alias> ] [SHOW DETAIL] [WITH FULL COLLECTION] Health Snapshot Tabellenfunktionen analog zu den Snapshot Tabellenfunktionen Beispiel SELECT * FROM TABLE( HEALTH_DB_INFO( cast (NULL as VARCHAR(1)), -1)) as HEALTH_DB_INFO 29

30 Zusammenfassung MOMENTAUFNAHMEN aktueller Zustand geringer Aufwand EREIGNISMONITORE Detailinformationen hoher Aufwand DIAGNOSEMONITORE System- u. Datenbankzustandsindikatoren geringer Aufwand WEITERFÜHRENDE LITERATUR Siehe Tutorials 30