Segen oder Fluch? Oracle Trace- und Logdateien!

Transkript

1 Beratung Software Lösungen Segen oder Fluch? Oracle Trace- und Logdateien! Ralf Appelbaum Senior Consultant Oracle Certified Professional

2 Zahlen und Fakten Unternehmensgruppe Materna: Mitarbeiter 160 Mio. Euro Umsatz in 2011 Geschäftsführung: Michael Baranowski - Heike Käferle Mitarbeiterzahl: 60

3

4 Geschäftsfelder Lösungen ProStore Intralogistik und Warehousemanagement ProTrace Informationssystem zur Rückverfolgbarkeit OracleBusiness Lizenzierung Consulting Entwicklung Migration Schulung Support

5 OracleBusiness: Passgenaue Oracle - Dienstleistungen Lizenzierung Consulting Schulungen Individualentwicklung Migration von Oracle-Systemen Oracle Administration Services ADF Dienstleistungsangebot

6 Agenda Segen: Wozu dienen Trace- und Logdateien? Fluch: Welche Probleme gibt es mit Trace- und Logdateien? Logdateien: Welche gibt es, wo liegen sie? Lösungsansätze / Housekeeping: Automatisiertes Aufräumen von Trace- und Logdateien! Fazit TEAM - Ihr Partner für IT 6

7 Segen Wozu dienen Trace- und Logdateien? Helfen bei Laufender Überwachung der Systeme Suche nach Ursache von Problemen Tuning von Applikationen / Abläufen Beispielsweise Beobachten von Redolog Switches, Archiving Informationen zu ORA-600, ORA-7445 u.a. Trace aller SQL-Statements einer Session TEAM - Ihr Partner für IT 7

8 Fluch Welche Probleme gibt es mit Trace- und Logdateien? füllen langsam und unmerklich den Plattenplatz mögliche Folgen: Datenbank steht plötzlich wegen no space left on device Apache hängt, weil die Logdatei zu groß geworden ist TEAM - Ihr Partner für IT 8

9 Agenda Segen: Wozu dienen Trace- und Logdateien? Fluch: Welche Probleme gibt es mit Trace- und Logdateien? Logdateien: Welche gibt es, wo liegen sie? Lösungsansätze / Housekeeping: Automatisiertes Aufräumen von Trace- und Logdateien! Fazit TEAM - Ihr Partner für IT 9

10 Welche Trace- und Logdateien gibt es? Trace- und Logdateien zu folgenden Komponenten: Konfigurationsassistenten Datenbank (DB)- / ASM- Instanz Listener / SCAN-Listener Clusterware / Grid Infrastructure Oracle Enterprise Manager (OEM) (Database Control / Agent / Grid/Cloud Control) Applicationserver (ias / WLS) Audit-Trail der Datenbank TEAM - Ihr Partner für IT 10

11 Speicherorte von Trace- und Logdateien bis Oracle 10g jede Komponente hat eigene Logdateistruktur ab Oracle 11g gemeinsame Struktur Automatic Diagnostic Repository (ADR) für mehrere Komponenten eine Reihe Komponenten nutzen ADR noch nicht TEAM - Ihr Partner für IT 11

12 Logdateien von Konfigurationsassistenten Logdateien des Oracle Universal Installers $ORACLE_BASE/../oraInventory/logs Logdateien des Database Configuration Assistant: $ORACLE_HOME/assistants/dbca/logs Logdateien von Tools sind nicht zu beachten diese loggen nur, wenn sie interaktiv verwendet werden TEAM - Ihr Partner für IT 12

13 DB Logdateien bis 10g bei Datenbank-/ASM- Instanz typischer Weise: $ORACLE_BASE/admin/<DB-Name>/ adump bdump cdump udump Dateien des Audittrails Alert-Datei, Tracedateien der Hintergrundprozesse (Core-)Dumpdateien Tracedateien der Benutzer- bzw. Serverprozesse Unterverzeichnisse bei DB Instanzen über Instanzparameter festgelegt background_dump_dest core_dump_dest user_dump_dest TEAM - Ihr Partner für IT 13

14 Logdateien ab 11g Automatic Diagnostic Repository (ADR) dateibasierter hierarchischer Datenpool typischer Weise: ADR-Base = ORACLE_BASE vereint Trace- und Logdateien von Datenbank- / ASM- Instanz Listener / SCAN-Listener SQL*Plus Client TEAM - Ihr Partner für IT 14

15 Automatic Diagnostic Repository (ADR) sammelt Diagnoseinformationen wie Trace- und Logdateien (Core-)Dumpdateien Alert-Log einheitliche Verzeichnisstruktur über verschiedene Produkte mehrere Instanzen bzw. Installationen ist in weitere Unterverzeichnisse strukturiert TEAM - Ihr Partner für IT 15

16 Struktur der Unterverzeichnisse im ADR diag/<product_type>/<product_id>/<instance_id> Bei DB/Instanz Logfiles z.b.: diag/rdbms/<db-name>/<instanzname> alert cdump XML-formatierte Alert-Datei (Core-)Dumpdateien incident Je Störfall/Problem der DB ein Unterverzeichnis mit Trace- und (Core-)Dumpdateien zu diesem Vorfall trace andere Tracedateien der Hintergrund- und Server-Prozesse, SQL Trace Dateien und Text-formatierte Version der Alert-Datei Weitere Unterverzeichnisse des ADR, diese speichern Incident Pakete, Health Monitor Reports u.a. Informationen TEAM - Ihr Partner für IT 16

17 automatisches Aufräumen im ADR für DB über Hintergrundprozess löscht alte Tracedateien kürzt die XML Version der Alert-Datei (funktioniert erst ab Version korrekt) steuerbar über PURGE-Policies im ADR (Standardwerte): SHORTP_POLICY LONGP_POLICY Hinweis: 720 (entspricht 30 Tagen) 8760 (entspricht 365 Tagen) Über das adrci sollten zumindest die Zeiträume reduziert werden (z.b.: 14 Tage und 90 Tage): adrci> set control ( SHORTP_POLICY=336, LONGP_POLICY=2160) TEAM - Ihr Partner für IT 17

18 Alert-Datei Enthält chronologisch aufgelistet alle Meldungen und Fehlerausgaben der Hintergrundprozessen des DBS, z.b. bei: Erstellen der Datenbank Starten und Stoppen der Instanz Beginn und Ende einer Redo Log Archivierung Log Switches Deadlocks und Timeouts Instanz und Datenbank Recovery Interne Fehler (ORA-600) und korrupte Blöcke Dient der laufenden Überwachung des DB-Systems der Fehleranalyse durch den DBA der Performanceanalyse durch den DBA TEAM - Ihr Partner für IT 18

19 Alert-Datei Wichtig! Muss überwacht werden, ob ORA Fehler eingetragen werden Sollte regelmäßig gekürzt werden Instanz SGA Serverprozess Hintergrundprozesse Benutzerprozess alert_<sid>.log TEAM - Ihr Partner für IT 19

20 Hintergrund Tracedateien Enthalten globalen Prozessinformationen Speicherauszügen bei Fehlern der Hintergrundprozesse Dienen der Fehleranalyse durch den Oracle Support In Fehlermeldungen der Alert-Datei wird auf Tracedateien verwiesen Instanz SGA SMON PMON DWBn LGWR CKPT ARCn Andere <sid>_smon_<pid>.trc <sid>_arc0_<pid>.trc TEAM - Ihr Partner für IT 20

21 User Tracedateien Enthalten globalen Prozessinformationen Trace-Ausgaben der Benutzerprozesse (SQL_TRACE) Speicherauszügen bei Fehlern der Benutzerprozesse Dienen der Fehleranalyse durch den Anwendungsentwickler der Performanceanalyse durch den DBA Serverprozess Instanz SGA Hintergrundprozesse Benutzerprozess <sid>_ora_<pid>.trc TEAM - Ihr Partner für IT 21

22 Ausnahme im Pfad zu DB Logdateien Achtung: bei Problemen mit den Logverzeichnissen sind DB-Logdateien auch zu finden unter $ORACLE_HOME/rdbms/log $ORACLE_HOME/rdbms/trace TEAM - Ihr Partner für IT 22

23 Aufräumen von DB Trace- und Logdateien bis 10g kein Automatismus zum Löschen alter Tracedateien Kürzen / Rollieren der Alert-Datei ab 11g im ADR ein DB Hintergrundprozess löscht alte Tracedateien kürzt die XML Version der Alert-Datei kein Automatismus zum Kürzen / Rollieren der Textversion der Alert-Datei TEAM - Ihr Partner für IT 23

24 Logdateien von Listener bis 10g $ORACLE_HOME/network/log/listener.log ab 11g Automatic Diagnostic Repository (ADR) <ADR-Base>/diag/tnslsnr/<hostname>/listener/ XML Version: /alert/log.xml Textversion: /trace/listener.log kein Automatismus zum Kürzen / Rollieren auch nicht im ADR, weder für XML noch Textversion Einfachste Lösung: lsnrctl set log_status off TEAM - Ihr Partner für IT 24

25 Logdateien von OEM Database Control $ORACLE_HOME/<hostname>_<db-name>/sysman/log Trace- und Logdateien werden automatisch rolliert bei 4 MB Größe wird rolliert die letzten 4 Versionen werden vorgehalten konfigurierbar im Verzeichnis $ORACLE_HOME/<hostname>/sysman/config/ über emd.properties für: emagent.trc, emagent.log über emomslogging.properties für: emoms.trc, emoms.log TEAM - Ihr Partner für IT 25

26 Logdateien von OEM Agent $AGENT_HOME/<hostname>/sysman/log Trace- und Logdateien werden automatisch rolliert bei 4 MB Größe wird rolliert die letzten 4 Versionen werden vorgehalten konfigurierbar über $AGENT_HOME/<hostname>/sysman/config/emd.properties TEAM - Ihr Partner für IT 26

27 Logdateien von Grid Control Management Server <EM_INSTANCE_BASE>/em/<OMS_NAME>/sysman/log/ z.bsp.: Verzeichnis der Middleware /u01/app/oracle/middleware Logverzeichnis des OMS dann /u01/app/oracle/gc_inst/em/emgc_oms1/sysman/log/ Trace- und Logdateien werden automatisch rolliert konfigurierbar über emctl emctl set property -name <property> -value <property value> -module logging beispielhafte Properties: log4j.appender.emlogappender.file log4j.appender.emlogappender.maxfilesize log4j.appender.emlogappender.maxbackupindex TEAM - Ihr Partner für IT 27

28 Logdateien von Grid Infrastruktur $GRID_HOME/log/<hostname>/ / Logdateien werden automatisch rolliert bei 11 MB Größe wird rolliert die 10 letzen Versionen werden vorgehalten Einstellung nicht änderbar Oracle empfiehlt: 6,5GB Platz für die Grid Infrastruktur inclusive Logfiles Alert-Datei alert<hostname>.log wird nicht gekürzt/rolliert TEAM - Ihr Partner für IT 28

29 Logdateien von Applicationserver (ias) Web Cache: Konfiguration von Logrotation über Application Server Control HTTP-Server: Standardmäßig Logrotation nach ½ Tag bei Web Cache und HTTP-Server: alte Logdateien werden nicht automatisch gelöscht OC4J-Containers: Konfiguration von Logrotation über Verzeichnis $OH/j2ee/<OC4J-Container-Name>/config application.xml server.xml default-web-site.xml TEAM - Ihr Partner für IT 29

30 Logdateipfade zum WebLogic Server (WLS) vier separate Komponenten: Komponente Oracle HTTP Server (OHS) OPMN Oracle WebLogic Logdatei Speicherort <EM_INSTANCE_BASE>/<webtier_instance_name>/diagnostics/logs/O HS/<ohs_name> z. Bsp.: /u01/app/oracle/gc_inst/webtierih1/diagnostics/logs/ohs/ohs1 <EM_INSTANCE_BASE>/<webtier_instance_name>/diagnostics/logs/O PMN/<opmn_name> z. Bsp.: /u01/app/oracle/gc_inst/webtierih1/diagnostics/logs/opmn/opmn1 <EM_INSTANCE_BASE>/user_projects/domains/<domain_name>/serv ers/<server_name>/logs/<server_name>.out z. Bsp.: /u01/app/oracle/gc_inst/user_projects/domains/gcdomain/servers/em GC_OMS1/logs/EMGC_OMS1.out TEAM - Ihr Partner für IT 30

31 Aufräumen von WLS Trace- und Logdateien Logdateien sind in Größe begrenzt bzw. werden rolliert Ausnahme mod_wl_ohs.log hier muss laut MOS Note die Rotation manuell eingeschaltet werden alte Logdateien werden nicht automatisch gelöscht Genauere Oracle Dokumentation für das Logging im EM: TEAM - Ihr Partner für IT 31

32 Agenda Segen: Wozu dienen Trace- und Logdateien? Fluch: Welche Probleme gibt es mit Trace- und Logdateien? Logdateien: Welche gibt es, wo liegen sie? Lösungsansätze / Housekeeping: Automatisiertes Aufräumen von Trace- und Logdateien! Fazit TEAM - Ihr Partner für IT 32

33 Logrotation mit Unix/Linux Mitteln Unix/Linux eigener Betriebssystemservice Konfiguriert über Dateien in /etc/logrotate.d z. Bsp. für Textversion der Alert-Datei einer ASM Instanz: /]# cat /etc/logrotate.d/ora_asm_housekeeping # asm log rotate /u01/app/oracle/diag/asm/+asm/+asm1/trace/alert_+asm1.log { weekly compress rotate 4 notifempty missingok copytruncate nocreate } copytruncate für Listener-Logdatei erforderlich, bei DB-/ASM-Instanz empfohlen TEAM - Ihr Partner für IT 33

34 Löschen alter Logdateien unter Unix/Linux cron-job einrichten z. Bsp. für Tracedateien unter DB 10g: 0 2 * * sun /usr/bin/find $ORACLE_BASE/admin/$ORACLE_SID/bdump $ORACLE_BASE/admin/$ORACLE_SID/cdump $ORACLE_BASE/admin/$ORACLE_SID/udump $ORACLE_HOME/rdbms/trace -maxdepth 1 -name '*.trc' -mtime +30 -delete löscht Dateien älter als 30 Tage $ORACLE_BASE, $ORACLE_HOME bzw. $ORACLE_SID sind durch absolute Pfade zu ersetzen, da die Umgebungsvariablen im crontab typischerweise nicht funktionieren TEAM - Ihr Partner für IT 34

35 Löschen/Purgen im ADR unter Unix/Linux Purge Skript über die crontab einrichten: ~]# cat /home/oracle/scripts/adr_purge.sh #!/bin/bash # Purging... $ORACLE_HOME/bin/adrci exec="show homes" grep -v : while read LINE do echo "INF: purging home $LINE echo " purging ALERT $ORACLE_HOME/bin/adrci exec="set homepath $LINE; purge -type ALERT echo " purging INCIDENT $ORACLE_HOME/bin/adrci exec="set homepath $LINE; purge type INCIDENT echo " purging TRACE $ORACLE_HOME/bin/adrci exec="set homepath $LINE; purge -type TRACE echo " purging CDUMP $ORACLE_HOME/bin/adrci exec="set homepath $LINE; purge -type CDUMP echo " purging HM $ORACLE_HOME/bin/adrci exec="set homepath $LINE; purge -type HM echo "" done Löscht Dateien entsprechend der PURGE-Policies TEAM - Ihr Partner für IT 35

36 Audit-Trail in der Datenbank entweder Auditing ausschalten: Instanzparameter AUDIT_TRAIL=NONE oder Housekeeping der Audit Trail Tabelle über Job in der DB Konfigurieren mittels: DBMS_AUDIT_MGMT.CREATE_PURGE_JOB siehe Oracle Database Security Guide unter Scheduling an Automatic Purge Job for the Audit Trail TEAM - Ihr Partner für IT 36

37 SYS-Audit-Trail im Dateisystem unter Unix/Linux ab 11g: Auditing bei Anmelden als SYSDBA kann nicht ausgestellt werden erfolgt immer ins Dateisystem mögliche Zielverzeichnisse: $ORACLE_HOME/rdbms/audit $ORACLE_BASE/admin/$ORACLE_SID/adump Verzeichnis laut Instanzparameter AUDIT_FILE_DEST (üblich $ORACLE_BASE/admin/$ORACLE_SID/adump) zum Löschen cron-job einrichten 0 2 * * sun /usr/bin/find /u01/app/oracle/admin/+asm1/adump -maxdepth 1 -name '*.aud' -mtime +30 -delete siehe MOS: Manage Audit File Directory Growth with cron [ID ] TEAM - Ihr Partner für IT 37

38 Logdatei Housekeeping unter Windows logrotate existiert nicht direkt im Betriebssystem find zum Suchen und Löschen von Logdateien fehlt alternativen erforderlich GNU Utilities alternatives logrotate Executable TEAM Lösung: eigene Batchskripte SYS-Audit-Trail erfolgt nicht im Dateisystem, sondern in das Windows Anwendungsprotokoll TEAM - Ihr Partner für IT 38

39 Löschen/Purgen im ADR unter Windows Batchskript über Windows Scheduler einrichten: for /f "skip=1" %%i in ('adrci "exec=show homes"') do call :DoHomePurge %%i goto :EOF REM # Purge in einem Home ueber alle Datentypen ausfuehren REM # (Unterroutine wegen set-befehl erforderlich) :DoHomePurge set LINE=%1 echo INF: purging home %LINE% set LINE=%LINE:\=\\% echo purging ALERT adrci exec="set homepath %LINE%;purge -age %PURGE_AGE% -type ALERT" echo purging INCIDENT adrci exec="set homepath %LINE%;purge -age %PURGE_AGE% -type INCIDENT" echo purging TRACE adrci exec="set homepath %LINE%;purge -age %PURGE_AGE% -type TRACE" echo purging CDUMP adrci exec="set homepath %LINE%;purge -age %PURGE_AGE% -type CDUMP" echo purging HM adrci exec="set homepath %LINE%;purge -age %PURGE_AGE% -type HM" echo. goto :EOF TEAM - Ihr Partner für IT 39

40 Agenda Segen: Wozu dienen Trace- und Logdateien? Fluch: Welche Probleme gibt es mit Trace- und Logdateien? Logdateien: Welche gibt es, wo liegen sie? Lösungsansätze / Housekeeping: Automatisiertes Aufräumen von Trace- und Logdateien! Fazit TEAM - Ihr Partner für IT 40

41 Fazit Enterprise Manager Team hat guten Job gemacht: Houskeeping ist gut eingerichtet gut individuell anpassbar ADR ist guter Ansatz eine Reihe Trace- und Logdateien benötigen zusätzliches Houskeeping unter Linux gut mit Boardmitteln zu realisieren unter Windows alternative Programme und/oder eigene Skripte nötig TEAM - Ihr Partner für IT 41

42 Haben Sie noch Fragen Beratung Software Lösungen

43 TEAM-Stand Besuchen Sie uns am Stand 204 in der 2. Etage (gelb)!

44 Beratung Software Lösungen Vielen Dank für Ihre Aufmerksamkeit! TEAM GmbH Hermann-Löns-Str Paderborn Fon Fax Mail Web