Ich will doch nur ein Backup

Transkript

1 Ich will doch nur ein Backup Vortrag auf der DOAG Markus Behrendt

2 Ich will doch nur ein Backup Vortrag auf der DOAG Markus Behrendt

3 Bayer Business Services im Bayer-Konzern Bayer AG Arbeitsgebiete Servicegebiete Bayer Business Services Bayer HealthCare Bayer CropSciene Bayer Material- Science Bayer Technology Services Currenta page 3 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

4 Umsatz und Mitarbeiter nach Region Nordamerika Deutschland Mio. Newbury Berlin Leverkusen Mio. Toronto Milan Osaka Mexico City Pittsburgh Barcelona Shanghai Mumbai Hong Kong Singapur São Paulo Lateinamerika Mio. Europa/ Naher Osten/ Afrika Mio. Asien/ Pazifik Mio. In 2011, unkonsolidierte Umsätze, Mitarbeiter auf Vollzeitkräfte umgerechnet Page 4 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

5 Agenda Motivation Theorie Praxis Page 5 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

6 Motivation Oracle Dokumentation Backup and Recovery User's Guide Backup and Recovery Reference 604 Seiten 480 Seiten Oracle SQLServer MySQL create table insert audit monitoring backup Page 6 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

7 Theorie 1. Rman verbindet sich mit Datenbank Page 7 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

8 Theorie 2. Datenbankdateien werden als Filestreams in die Medialibrary kopiert Page 8 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

9 Theorie 3. Metainformationen werden in einer Catalogdatenbank gespeichert Page 9 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

10 Theorie 4. Die Binaryfiles werden mit der Filesystemsicherung gesichert Page 10 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

11 Backup Filestream Backupsets Backuppieces Datafiles Archivelogfiles Backupsets Backuppieces Channels Filesperset Backuppiece size Page 11 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

12 Controlfile und Recovery Catalog Controlfile enthält neben den Informationen über Zustand der Tablespaces und Datenfiles, die Metainformationen zum Backup. Metainformation der Sicherungen werden im Controlfile gespeichert controlfile_keep_time Controlfile Catalog Page 12 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

13 Einfluss Faktoren Backupvolumen Wartung Sicherheitsanforderungen Restoreanforderungen Aufbewahrungsmedien Page 13 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

14 Aufbewahrungsmedien Anforderungen an das Backupmedium Medienbruch Brandabschnitte Redundanz Konfiguration Herstellerabhängig im Controlfile oder Runblock konfigurieren CONFIGURE CHANNEL 1 DEVICE TYPE 'SBT_TAPE' PARMS 'ENV=(TDPO_OPTFILE=tdpo.opt)' PARMS 'ENV=(NB_ORA_POLICY=ORACLE,NB_ORA_SCHED= OracleBackup,NB_ORA_CLIENT=client,NB_ORA_SERV=BKUPSRV)' PARMS 'ENV=(NSR_SERVER=BKUPSRV, NSR_DATA_VOLUME_POOL=OraclePool)' Page 14 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

15 Backupvolumen Größe der Datenbank Sicherung von belegten Blöcken Inkrementelle Backups Inkrementelle Backups inc0 inc1 inc2 inc1 inc2 inc1 inc2 inc0 Aufbewahrungsdauer Konfiguration eines sinnvollen Recovery Windows Recovery Window 14 Tage Inc0 Archive Inc1 Inc2 Page 15 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

16 Backupvolumen Archivelogfile Größe der Redolog Dateien Keine Archivelogs seit dem letzten Backup => init.ora Parameter archive_lag_target=3600 Füllstand der Recovery Area db_recovery_file_dest_size erschöpft V$RECOVERY_AREA_USAGE Sizing der Recovery Area Destination Platz für mindestens 1-3 Tage ohne Backup. Regelmäßiges Monitoring Abgleich gegen Platz auf dem Filesystem Vorsicht bei Flashback Vorsicht bei Tablespacewachstum Page 16 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

17 Backupvolumen Controlfiles Änderungen an der Datenbankstruktur werden in den Controlfiles gespeichert CONFIGURE CONTROLFILE AUTOBACKUP ON; CONFIGURE CONTROLFILE AUTOBACKUP FORMAT FOR DEVICE TYPE DISK TO '%F'; Verwendung von Snapshotcontrolfiles während der Sicherungen bei RAC DB in ASM anlegen CONFIGURE SNAPSHOT CONTROLFILE NAME TO '+ASM/CNTRL/snapcf_<SID>.f'; Filesystemsicherung Sicherung der Oracle Binaries mit der Filesystemsicherung Sicherung von TNS-Dateien sqlnet.ora, tnsnames.ora, ldap.ora, listener.ora Sicherung des Oracle Inventories mit der Filesystemsicherung Exclude der Datenbankfiles von der Filesystemsicherung Sicherung von Audit-, Log- und Trace-Dateien Sicherung der Listener.log über ein Log-Rotate Page 17 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

18 Backupvolumen Block Change Tracking Beschleunigung des inkrementellen Backups alter database enable block change tracking using file 'BLOCK_CHANGE_TRACKING_01.DBF'; alter system set db_block_checking = true scope=both; Vorsicht nach Switchover bei Dataguard-System Nologging Operationen Sind dem Administrator häufig nicht bekannt alter database force logging; Richtiges Timing des inkrementellen Backups und der nologging Operation Page 18 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

19 Backupvolumen Konfiguration Kleine Datenfiles 5 Datenfile pro Backupset Große Datenbankfiles 1 Datenfiles pro Backupset run { backup incremental level 0 filesperset 1 (database);} Redundanzen / Multiplexing Archivelogs CONFIGURE ARCHIVELOG BACKUP COPIES FOR DEVICE TYPE DISK TO 1; Datenfiles CONFIGURE DATAFILE BACKUP COPIES FOR DEVICE TYPE DISK TO 1; Medialibrary Level 2 SBT Library Page 19 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

20 Backupvolumen Komprimierung Backupclient RMAN normal Kompress run { backup as compressed backupset incremental level 0 (database);} Advanced Compression CONFIGURE COMPRESSION ALGORITHM 'LOW'; CONFIGURE COMPRESSION ALGORITHM 'MEDIUM'; CONFIGURE COMPRESSION ALGORITHM 'HIGH'; Entscheidungsgrundlage Kompressionsverhältnis Datenabhängig CPU Kompressionsverfahren Kosten Lizenzkosten Backupkosten =>Verwendung von Basic Compression In Einzelfällen Medium Compression Page 20 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

21 Wartung Scheduling Backupserver Optimale Nutzung des Backupservers Backupbedarf der Datenbank unbekannt ggf. Erhöhung der Archivelogbackupfrequenz Grid Control Leichtes Handling von Backups auf RAC Systeme Erfolg des Backups hängt an Verfügbarkeit des Grid Controls Schwierige Synchronisierung zwischen mehreren Datenbanken auf einem Server oder Channels Server Cron-Job oder Windows Scheduler sind gut Parametrisierbar innerhalb eines Servers Komplexe Softwareverteilung Verfügbarkeit der Medialibrary Startzeit zwischen 2 und 3 Uhr wegen Zeitumstellung Sommerzeit/Winterzeit vermeiden Page 21 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

22 Wartung Parallelisierung Sicherung von Archivelogfiles unabhängig von inkrementellen Sicherungen mindestens stündlich. Die inkrementellen Sicherung dürfen nur begrenzt parallelisiert werden. Page 22 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

23 Wartung Datenbank Upgrade RMAN Repository muss mindestens gleichen Patchlevel haben, wie die Datenbank. upgrade catalog; => Pro Server ein Recovery Catalog Vermeidung von Locks Managebarkeit Page 23 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

24 Wartung Recovery Catalog Synchronisierung des Recovery Catalogs Controlfile Recovery Catalog Tivoli TSM Backuplibrary Media Library / Disk Synchronisierungsquelle Synchronisierungssenke Recovery Catalog Media Library / Disk Recovery Catalog Controlfile Befehl resync catalog; crosscheck backup; delete expired backup; tdposync catalog backuppiece Page 24 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

25 Wartung RMAN Repository Status Repository Status Physikalischer Status in der Medialibrary Verhalten beim delete Kommando AVAILABLE Nicht vorhanden Repository Status wird nicht geändert. Liste mit nicht übereinstimmenden Objekten wird erstellt. EXPIRED Vorhanden Repository Status wird nicht geändert. Liste mit nicht übereinstimmenden Objekten wird erstellt. UNAVAILABLE Vorhanden oder nicht vorhanden Löscht Repository Eintrag und Objekt, wenn es noch existiert. Page 25 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

26 Wartung Löschen von Backups Löschen von Backups kann vom RMAN initiiert werden: delete obsolete; delete force obsolete; Löschen von Backups kann von der Media Library initiiert werden: crosscheck backup; delete expired backup; Page 26 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

27 Wartung Löschen von Backups Ausserbetriebnahmen von Datenbanken RMAN> drop database including backups; Sicherer: 1. Datenbankfiles werden gelöscht 2. Nach einer Sicherheitsfrist werden die Backups der Datenbank gelöscht. -> Entfernen der Datenbankmetainformation aus dem Catalog sql> select db_key,dbid from rc_database; sql> exec dbms_rcvcat.unregisterdatabase(<db_key>,<db_id>); -> Löschen der Backuppieces, die nicht mehr im Recovery Catalog vorhanden sind. Page 27 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

28 Sicherheitsanforderungen Datenbanksicherungen werden mit DBA-Privilegien durchgeführt rman target / Recovery Manager: Release Production on Wed Nov 11 11:11: Copyright (c) 1982, 2007, Oracle. All rights reserved. connected to target database: MYDB (DBID= ) RMAN> sql 'create user behrendt identified by passwort'; using target database control file instead of recovery catalog sql statement: create user behrendt identified by passwort RMAN> sql 'grant dba to behrendt'; sql statement: grant dba to behrendt RMAN> => Sicherung der Backupskripte gegen Manipulation. Page 28 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

29 Sicherheitsanforderungen Standard Auditing Einschalten über den init.ora Parameter: audit_sys_operations In dem Verzeichnis audit_file_dest wird pro Anmeldung als sys eine Trace erzeugt. Jedes Backupset stellt eine neue sys Verbindung zur Datenbank her => Die Anzahl der Datenfiles in der audit_file_dest wird sehr schnell unauswertbar. Mindestens wöchendliche Kontrolle und Löschung der Files. Page 29 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

30 Sicherheitsanforderungen Regelmäßige Validierung des Backups run { set until time "sysdate-10"; restore database validate; restore spfile validate; restore controlfile validate;} Erfolgskontrolle über die Logfiles Page 30 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

31 Sicherheitsanforderungen Konfiguration der Media Library Installation der Media Management Library auf dem Datenbank Server Kompatibilitätsmatrix beachten 32bit/64bit Backuppiece sind nur auf dem Server sichtbar, von dem sie gesichert wurden. RAC und Dataguard Systeme können die Backuppieces von ihrem Partner System sehen. Page 31 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

32 Sicherheitsanforderungen Backupfehler Gründe für fehlerhaften Backups Restart der Media Library Platzprobleme der Media Library Datenbank in noarchivelog Modus gesetzt Speicherfehler wegen zu geringem Shared Memory Verwendung von zu vielen Channels zur Media Library Fehlerhafte Skripte Fehlerhafte Konfiguration der Media Library Fehlgeschlagene Backups nachstarten Fehlerursache prüfen Auswirkungen abwägen Resourcen prüfen Backupschedule anpassen Page 32 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

33 Recovery Catalog Enthält Metainformation über die Datenbanksicherungen Bei einem Restore mit Recovery Catalog braucht nicht manuell die passende Controlfilesicherung gesucht werden. -> autobackup controlfile Backups erst ohne Catalog durchführen, erst danach resynchronisieren. Anzahl Connections an den Recovery Catalog Stabilität der Connection zum Catalog <-> Erfolg der Sicherung Backups löschen nur mit Catalog, da im Controlfile eventuell nicht alle zu löschenden Backuppieces vorhanden sind. -> control_file_record_keep_time Page 33 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

34 Recovery Catalog Management des Recovery Catalogs Versionsabhängigkeit Datenbankversion Catalogversion Catalogdatenbankversion Create Cataloguser in sqlplus create user &1 identified by &2 quota unlimited on DATA; grant connect, resource, recovery_catalog_owner to &1; Create Cataloguser im RMAN und Datenbank registrieren create catalog; register database; Page 34 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

35 Recovery Catalog Auswertung der Backups über den Recovery Catalog Über den Enterprise Manager sind Fehler nur schwer zu erkennen und zu beurteilten. Backupfehlerzustände, die manuellen Eingriff erfordern: Länger als 12 Stunden keine Archivelogsicherung. Länger als 7 Tage keine Inkrementelle Sicherung Level 0. Verstoß gegen die Aufbewahrungsrichtlinie. Auswertung über Webseite mit hinterlegten SQL-Statements. Analyse über alle Catalog Schema User Datenbanken aus dem Recovery Catalog kürzlich entfernt. Datenbanken in den Recovery Catalog kürzlich aufgenommen. Page 35 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

36 Logfiles Logfiles enthalten sehr viele Informationen (häufig 1000 bis Zeilen) Es ist schwierig, wichtige von unwichtigen Informationen zu trennen. Starting backup at :02:12 using channel ORA_SBT_TAPE_1 using channel ORA_SBT_TAPE_2 channel ORA_SBT_TAPE_1: starting incremental level 0 datafile backup set channel ORA_SBT_TAPE_1: specifying datafile(s) in backup set input datafile file number=00006 name=/mnt1/db1/db1_data_01.dbf input datafile file number=00004 name=/mnt1/db1/db1_tools_01.dbf input datafile file number=00003 name=/mnt1/db1/db1_undotbs1_01.dbf channel ORA_SBT_TAPE_1: starting piece 1 at :02:13 channel ORA_SBT_TAPE_2: starting incremental level 0 datafile backup set channel ORA_SBT_TAPE_2: specifying datafile(s) in backup set input datafile file number=00001 name=/mnt1/db1/db1_system_01.dbf input datafile file number=00002 name=/mnt1/db1/db1_sysaux_01.dbf input datafile file number=00005 name=/mnt1/db1/db1_users_01.dbf channel ORA_SBT_TAPE_2: starting piece 1 at :02:13 channel ORA_SBT_TAPE_1: finished piece 1 at :02:28 piece handle=db1_ _50461_1_ tag=inc0_db1_ _ comment=api Version channel ORA_SBT_TAPE_1: starting piece 2 at :02:28 channel ORA_SBT_TAPE_2: finished piece 1 at :02:28 piece handle=db1_ _50462_1_ tag=inc0_db1_ _ comment=api Version channel ORA_SBT_TAPE_2: starting piece 2 at :02:28 channel ORA_SBT_TAPE_1: finished piece 2 at :02:43 piece handle=db1_ _50461_2_ tag=inc0_db1_ _ comment=api Version Page 36 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

37 Logfiles Benennung der Logfiles beim Aufruf vom RMAN Pro Datenbank einen Folder im Filesystem obk_inc0_sid_yyyymmdd.log obk_inc1_sid_yyyymmdd.log obk_arch_sid_yyyymmdd.log Benennung Backpieces in der Konfiguration der Datenbank im RMAN CONFIGURE CHANNEL 1 DEVICE TYPE 'SBT_TAPE' PARMS 'ENV=(TDPO_OPTFILE=tdpo.opt)' FORMAT '%d_%t_%s_%p_%t ; DB1_ _50462_1_ DB1_ _50473_1_ Benennung Tags im run-block des Backupskriptes TAG inc0_sid_yyyymmdd_hhmmss Page 37 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

38 Restoreanforderung Erfahrung und Training Restore und Recovery nach Plattenverlust Point in Time Restore Tablespace Point in Time Restore Restore auf anderen Server Restore auf dediziertes Backup (Validierungssystem) Restore auf ältere Inkarnationen Restore großer Datenbanken, Erhöhung der Parallelisierung Backups und Löschaufträge während des Restores stoppen Restores ohne RMAN (verwenden von VM Snapshots) bringen den RMAN Catalog durcheinander. Page 38 BayerBBS DOAG Ich will doch nur ein Backup Markus Behrendt

39 Thank you! Markus Behrendt