Monitoring-Workshop 2014 in Berlin. Oracle-Monitoring im Praxis-Betrieb. Michael Wuttke

Transkript

1 Monitoring-Workshop 2014 in Berlin Oracle-Monitoring im Praxis-Betrieb Michael Wuttke Kontakt: User miwu im Monitoring-Portal (

2 1. Verbindung zur DB 2. Metriken zum Monitoring von Oracle- Datenbanken 3. Plugins 4. RAC-Umgebungen 5. Physical Standby Datenbanken 6. Fragen???

3 Möglichkeiten: Lokale DB-Verbindung auf DB-Server - Zugriff auf diese Verbindung per NRPE, check_by_ssh, DB-Verbindung geht vom Monitoring-Server aus - Oracle-Client auf Monitoring-Server nötig

4 per tnsnames.ora (Local Naming) Verbindungsinformationen in Config-Datei Verbindung per aus tnsnames.ora> EzConnect (oder Oracle Easy Connect Naming) keine tnsnames.ora nötig NAMES.DIRECTORY_PATH= (TNSNAMES, EZCONNECT) Verbindung per OS-Authentifizierung ops$user in DB nötig, OS-User in dba-gruppe Verbindung per sqlplus / [@<Verbindungsinfos>]

5 Wie verbindet sich der Monitoring-Host mit der DB? 1. Nutzung der Installation auf DB-Server 2. Oracle Instant Client 3. Oracle Full Client

6 Wenn kein Oracle-Client auf dem Monitoring- Host installiert werden soll/darf Oracle-Server-Installation enthält immer auch den Client nrpe, check_by_ssh oder NSClient nötig Oracle-Agenten-Erweiterung von check_mk benötigt auch keinen Ora-Client auf Monitoring-Host erhöhter Aufwand wegen z.t. diverser Plugin- Dependencies ggf. keine vollständige Prüfung Oracle Net

7 installierbares Paket für nahezu alle gängigen Plattformen erhältlich unter otn.oracle.com funktional stark reduzierter Oracle-Client nur ca. 30 MB für die gängigen Plugins reichen die Pakete: - instantclient-basiclite-<plattform> - instantclient-sqlplus-<plattorm> ORACLE_HOME, LD_LIBRARY_PATH, PATH und ggf. TNS_ADMIN muss gesetzt werden

8 Installation eines kompletten Oracle-Clients ca. 650 MB dgmgrl tnsping Oracle Secure External Password Store

9 Ermöglicht passwortlosen DB-Connect Vorgehensweise: 1. Wallet anlegen mkstore -wrl /home/oracle/wallet -create Enter password: welcome25! Enter password again: welcome25! 2. DB-Connection im Wallet hinterlegen mkstore -wrl /home/oracle/wallet -createcredential <TNS_NAME> <User> <Passwort> 3. sqlnet.ora bearbeiten WALLET_LOCATION = (SOURCE = (METHOD = FILE) (METHOD_DATA = (DIRECTORY = /home/oracle/wallet))) SQLNET.WALLET_OVERRIDE = TRUE

10 Verbindung herstellen mit sqlplus aus Schritt2> aus Nagios-Plugins:./check_oracle --cache <TNS-NAME> "" "" /check_oracle_health --mode=connection-time <TNS-NAME>

11 Full-Client nur nötig, wenn Applikationsarchitektur nachgebildet werden soll Eigene Checks auf Kommandos des Full-Clients aufbauen (tnsping, dgmgrl) Secure External Password Store verwendet werden soll

12 Was sollte zwingend überwacht werden? Memory/Swap CPU-Load Login eines Nicht-Sysdba-Users (Service-Dependency) Füllgrad der mandatory Archivelog-Destinations Füllgrad des Diag-Verzeichnisses Status/Füllgrad/Erweiterbarkeit der Tablespace Status und Füllgrad der Datafile-Verzeichnisse/ASM-DGs Corrupted Blocks Invalid Objects Backups (+ ist das Backup auch wirklich in der Library) alert.log

13 Was ist in vielen Fällen noch sinnvoll? Archivelog-Mode Flashback on Force Logging (Data Guard) Frequenz der Logswitches Überwachung von Job-Runs Überwachung von Data-Pump-Job-Ergebnissen Anzahl genutzter Sessions/Prozesse

14 Was kann bei Problemanalysen hilfreich sein? Anzahl angemeldeter User Redo-Traffic Diverse Performance-Metriken (Treffer DB-Cache, Shared Pool, Library-Cache, PGA (sorts), Sperren, ) Tablespace- und Objektfragmentierung DB-Größe Menge an Archivelogs Anmeldungen bestimmter Applikationsuser Laufzeit oder Ergebnis applikationsspezifischer SQL-Statements

15 Standard Nagios Plugin Nur auf Datenbank-Host vollständig nutzbar, nur einige Funktionen remote nutzbar (login, db_cache, tablespaces) nur wenig Performace-Daten Verbindung per tnsnames.ora oder Oracle Easy Connect Naming Nur für einfachstes Monitoring geeignet

16 Nur in Verbindung mit check_mk nutzbar Mit umfassenden Performancedaten Installation eines Erweiterungspakets Anpassung sqlplus.sh Script (für DB- Enviroments) auf jedem DB-Server ops$<os-user> Benutzer in DB notwendig

17 Ausschließliche Überwachung von Logswitch-Frequenz Anzahl Sessions Füllgrad Tablespaces dbms_jobs Jobs Backups Version

18 Quasi-Standardplugin zur Überwachung von Oracle-Datenbanken erhältlich unter aktuellere Versionen unter lth Nutzbar mit Instant und Full-Client und allen Verbindungsarten (auch lokal auf DB-Server), DBD:Oracle muß kompiliert sein DB-User nötig (kann auch ops$ sein) Auf Hilfetext achten (Doku nicht unbedingt aktuell)

19 bietet derzeit 56 Metriken, u.a.: connection-time und tnsping rman-backup-problems invalid-objects corrupted-blocks tablespace-(free usage) switch-interval asm-diskgroup-(free usage) dataguard-lag und mrp-status (Managed Recovery Process) sql und sql-runtime diverse Performance-Parameter

20 Debug-Modus: File /tmp/check_oracle_health.trace anlegen wird sehr groß oder Option -v Konfiguration von Schwellwerten auch außerhalb der Nagios-Config möglich: --extra-opts dort Parameter = Wert In Tabelle der zu überwachenden Datenbank, Tabelle check_oracle_health_thresholds, Spalten: MODE, NAME_PARAM, WARNING, CRITICAL - NAME_PARAM nur bei Modus sql und sqlruntime

21 bei den Modi invalid-objects und corrupted-blocks gibt es noch Funktion --report=html

22 Beispiel: Prüfung, ob Flashback in DB aktiviert ist Aufruf: # check_oracle_health --mode=sql --username=miwu --password=geheim --connect=miwudb --name= Statement

23 #./check_oracle_health --mode sql --username=miwu --password=geheim --connect=miwudb --name= select flashback_on from v$database UNKNOWN - got no valid response for select falshback_on from v - ORA-04044: Prozedur, Funktion, Package oder Typ hier nicht zulassig (DBD ERROR: error possibly near <*> indicator at char 25 in 'select falshback_on from <*>v'

24 Lösung URL Encoden # echo select flashback_on from v$database./check_oracle_health --mode encode Ergebnis: select%20flashback%5fon%20from%20v%24database

25 #./check_oracle_health --mode sql --username=miwu --password=geheim --connect=miwudb --name= select%20flashback\ %5Fon%20from%20v%24database UNKNOWN - got no valid response for select flashback_on from v$database

26 Ursache des Problems: SQL> select flashback_on from v$database; FLASHBACK_ON YES Das Ergebnis YES ist nicht nummerisch, kann also so nicht ausgewertet werden.

27 Lösung:./check_oracle_health --mode sql --username=miwu --password=geheim --connect=miwudb --name= select%20flashback\ %5Fon%20from%20v%24database --name2= YES --regexp Ergebnis: # OK - output YES matches pattern YES

28 Was ist ein RAC? 2 Instanzen auf unterschiedlichen Hosts greifen gleichzeitig auf 1 Datenbank zu Datenbank liegt im Shared Storage

29 Unterscheiden zwischen instanzbezogene Metriken, z.b. db_cache, shared_pool, Listener, Logswitches, alert.log, connect Empfehlung: instanzbezogene Checks dem Host zuordnen datenbankbezogene Metriken (z.b. Tablespaces, ASM-Diskgroups, Invalid Objects, Corrupted Blocks Empfehlung: Pro Datenbank einen Dummy-Host anlegen und diesem die Checks zuordnen DB-Verbindung für diese Checks über Scan-Listener oder tnsnames.ora mit address_list und Eintrag failover=on

30 Nicht vergessen Verbindungscheck (mindestens tnsping) für alle Zugriffswege (SCAN-Listener, Listener, VIPs) Überwachung Clusterware crsctl stat res t ggf. Clusterware-Logs

31 Primary force_logging überwachen (!!!) Standby (DB-User mit sysdba-rechten nötig) ist das Redo-Apply aktiviert (Prozess MRP) Transport-Lag Apply-Lag Falls Broker genutzt wird Überwachung dgmgrl Status der Konfiguration

32 check_oracle_health bietet Überwachung für MRP-Prozess und Transport- und Apply-Lag (hier jedoch nicht für Real-Time-Apply) falls Real-Time-Apply genutzt wird: z.b. Transport-Lag: select extract(second FROM TO_DSINTERVAL(value)) + extract(minute FROM TO_DSINTERVAL(value))*60 + extract(hour FROM TO_DSINTERVAL(value))* extract(day FROM TO_DSINTERVAL(value))*86400 SummeSekunden from v$dataguard_stats where name = 'transport lag ;

33 Fragen?