Grid Infrastructure und ASM

Transkript

1 Grid Infrastructure und ASM Einsatz und Administration nicht nur für RAC Timo Giese

2 Agenda 1. Über uns 2. Warum GI und ASM ohne RAC? 3. Aufbauvarianten 4. GI und ASM Installation 5. GI Administration 6. ASM Administration 7. GI und ASM Prozesse 8. Logfiles 9. Erfahrungen 10. Unterschiede zum RAC / Rac One Node 11. Nützliche Tools 12. Fazit 2

3 Breit gefächerte Zielmärkte Mehr als Kunden und Eigentümer in vier Zielmärkten sind die Basis für unsere erfolgreiche Geschäftsstrategie. Volksbanken und Raiffeisenbanken 932 Marktkunden Kunden Genossenschaftliche Spezialbanken 45 Verbundpartner 74 Stand:

4 Bündelung der Kunden in vier Zielmärkte Wir bedienen Kunden in vier Zielmärkten im Fokus sind unsere Eigentümer Volksbanken und Raiffeisenbanken Genossenschaftliche FinanzGruppe Volksbanken Raiffeisenbanken Verbundpartner Genossenschaftliche Spezialbanken Marktkunden Gründungsauftrag Integrationsförderer Eine IT in der GFG* Fokussierte Markterweiterung * Genossenschaftliche FinanzGruppe Volksbanken Raiffeisenbanken 4

5 Unsere Unternehmensgruppe Die Unternehmen in der Gruppe bieten vielfältige IT-Dienstleistungen. Systeme und Dienstleistungen für Personalabteilungen IT-Fach- und Prozessberatung für Privat- und Spezialbanken, Konzeption bankindividueller Lösungen Softwarelösungen für Risikomanagement und Controlling Vor-Ort-Services für technische Infrastruktur Beratung, Projektmanagement, Softwareentwicklung, Qualitätssicherung Warenwirtschaft für verbundorientierte Handels- und Dienstleistungsunternehmen Outsourcing-Lösungen für Backoffice, Inbound und Outbound, sowie 24h-Service für Bankkunden 5

6 Unsere Standorte Fünf Standorte in Deutschland bieten Sicherheit und Kundennähe. Karlsruhe und Münster Vorstand, Verwaltung, Produktmanagement, Entwicklung, Produktion, Vertrieb, Kundenservice und Druck München Produktmanagement, Entwicklung, Vertrieb und Kundenservice Berlin Vertrieb und Druck Frankfurt Satzungssitz und Vertrieb Münster Frankfurt Karlsruhe Berlin München 6

8 Warum GI und ASM ohne RAC? einheitlicher Administrationslayer Umstieg / Ergänzung um RAC-Datenbanken einfacher ASM basierte Datenbanken haben eine optimierte IO-Performance Vorteile von RAW-Devices ohne komplizierte Verwaltung seit 12c sind Raw-Devices desupported GridInfrastructure zur Ressourcensteuerung vereinfacht die Basisadministration Integration weiterer Oracle Technologien in GI möglich, z.b. Golden Gate GI kann Third Party Applikationen mit eigenen Skripten steuern (Start/Stop/Monitor), z.b. Apache Webserver 8

10 Aufbauvarianten Grid Infrastructure Single Server Bare Metal (physikalisch) Oracle VM Server for Sparc (LDOM) virtuell (VM) Oracle VM (OVM) VMware ESX Microsoft Hyper-V VM Solaris Zonen (Flying Zone) jede andere von Oracle unterstützte VM-Plattform Kombinationen der vorangegangenen mit zusätzlicher Clusterware für Failover Szenarien WICHTIG: Oracle Lizensierung der jeweiligen Variante prüfen/beachten!!! 10

11 SP FAN CPU MEM TOP PS REAR SATA DVD HDD 5 HDD 4 HDD 3 HDD 2 HDD 1 HDD 0 FILLER FILLER FILLER FILLER FILLER FILLER SPARC T5-2 SP FAN CPU MEM TOP PS REAR SATA DVD HDD 5 HDD 4 HDD 3 HDD 2 HDD 1 HDD 0 FILLER FILLER FILLER FILLER FILLER FILLER SPARC T5-2 Aufbauvarianten Architekturschaubild VM DB1 DB2 DBn Listener +DATA +RECO ASM Disk1 Disk2 Disk3 Disk4 Grid Infrastructure Standalone Clusterware Storage 11

12 Aufbauvarianten ASM Storage Layer External Redundancy Spiegelung durch OS, Storagebox, NAS Alle Raid Level abbildbar Verfügbare Kapazität: Größe nach Spiegelung der Devices Normal Redundancy ASM spiegelt, Alle Datenblöcke werden auf 2 Devices gespeichert, d.h. ein Ausfall von einem Devices wird abgefangen Verfügbare Kapazität: Anzahl der Devices / 2 High Redundancy ASM spiegelt, alle Datenblöcke werden auf 3 Devices gespeichert, d.h. ein Ausfall von 2 Devices wird abgefangen Verfügbare Kapazität: Anzahl Devices / 3 12

13 Aufbauvarianten Devicenamen und Zugriffsrechte UDEV standardmäßig in Linux vorhanden ASMLib Oracle Utility zum Labeln von Devices + Berechtigungen setzen ASM Filter Driver (ab Version ) wie ASMLib blockiert nicht Oracle Schreibzugriffe auf ASM-Devices in 12.2 direkt bei Installation GI auswählbar 13

15 GI und ASM Installation bis : runinstaller Installation Software und Konfiguration ab : gridsetup.sh Konfiguration der Software ( Installation: Entpacken Install-Zip) 15

17 GI Administration Starten / Stoppen / Deaktivieren der GI GI wird per Default automatisch beim Neustart eines Servers gestartet/gestoppt Integration in die Betriebssystem Start-/Stop Steuerung (systemd, runlevel,etc.) manuelles Starten und Stoppen (als GI-User): crsctl start has crsctl stop has Autostart enablen/disablen (als GI-User), z.b. bei OS-Patching: crsctl disable has crsctl enable has 17

18 GI Administration Datenbanken hinzufügen DBCA (automatisch bei Erstellung einer neuen Datenbank) Commandline / gescripted srvctl add database -db <db_unique_name> -oraclehome=<oh> Usage: srvctl add database -db <db_unique_name> -oraclehome <oracle_home> [-domain <domain_name>] [-spfile <spfile>] [-pwfile <password_file_path>] [- role {PRIMARY PHYSICAL_STANDBY LOGICAL_STANDBY SNAPSHOT_STANDBY FAR_SYNC}] [-startoption <start_options>] [-stopoption <stop_options>] [-dbname <db_name>] [-instance <inst_name>] [-policy {AUTOMATIC MANUAL NORESTART}] [-diskgroup "<diskgroup_list>"] -db <db_unique_name> Unique name for the database -oraclehome <path> Oracle home path -domain <domain> Domain for database. Must be set if database has DB_DOMAIN set. -spfile <spfile> Server parameter file path -pwfile <password_file_path> Password file path -role <role> Role of the database (PRIMARY, PHYSICAL_STANDBY, LOGICAL_STANDBY, SNAPSHOT_STANDBY, FAR_SYNC) -startoption <start_options> Startup options for the database. Examples of startup options are OPEN, MOUNT, or "READ ONLY". -stopoption <stop_options> Stop options for the database. Examples of shutdown options are NORMAL, TRANSACTIONAL, IMMEDIATE, or ABORT. -dbname <db_name> Database name (DB_NAME), if different from the unique name given by the -db option -instance <inst_name> Instance name -policy <dbpolicy> Management policy for the database (AUTOMATIC, MANUAL, or NORESTART) -diskgroup "<diskgroup_list>" Comma separated list of disk group names -verbose Verbose output -help Print usage 18

19 GI Administration Services hinzufügen Jede Datenbank kann mehrere Services erhalten (!= Default Service Name) srvctl add service -db <db_unique_name> -service <SN> [ -pdb <PDB Name>] Usage: srvctl add service -db <db_unique_name> -service <service_name> [-role [PRIMARY][,PHYSICAL_STANDBY][,LOGICAL_STANDBY][,SNAPSHOT_STANDBY]] [- policy {AUTOMATIC MANUAL}][-notification {TRUE FALSE}] [-clbgoal {SHORT LONG}] [-rlbgoal {NONE SERVICE_TIME THROUGHPUT}][-failovertype {NONE SESSION SELECT TRANSACTION}] [-failovermethod {NONE BASIC}][-failoverretry <failover_retries>] [-failoverdelay <failover_delay>] [-edition <edition>] [-pdb <pluggable_database>] [-global <TRUE FALSE>] [-maxlag <max_lag_time>] [-sql_translation_profile <sql_translation_profile>] [-commit_outcome {TRUE FALSE}] [- retention <retention>] [replay_init_time <replay_initiation_time>] [-session_state {STATIC DYNAMIC}] [-force] -db <db_unique_name> -service <service> -role <role> -pdb <pluggable_database> -force -verbose Unique name for the database Service name Role of the service (primary, physical_standby, logical_standby, snapshot_standby) Pluggable database name Force the add operation even though a listener is not configured for a network Verbose output 19

20 GI Administration Starten / Stoppen von Ressourcen Datenbank srvctl start/stop database -db <db_unique_name> Service srvctl start/stop service -db <db_unique_name> -service <service_name> Listener srvctl start/stop listener Third Party Komponenten crsctl start/stop <resname> 20

21 GI Administration Stati darstellen srvctl srvctl Status nur auf Einzelobjektebene möglich srvctl status database -db <db_unique_name> srvctl status service -db <db_unique_name> -service <service_name> weitere wichtige Stati Listener srvctl status listener 21

22 GI Administration Stati darstellen srvctl srvctl weitere wichtige Stati ASM srvctl status asm Diskgroup srvctl status diskgroup -diskgroup <DG> 22

23 GI Administration Stati darstellen crsctl Status aller Ressourcen crsctl stat res -t 23

24 GI Administration Konfiguration von Ressourcen anzeigen I mit srvctl srvctl config database -db <db_unique_name> 24

25 GI Administration Konfiguration von Ressourcen anzeigen II mit crsctl crsctl stat res <resname> -p resname = Ressourcenname aus Statusanzeige crsctl stat res -t resnamen beginnen mit ora. 25

26 GI Administration Ressourceneinstellungen ändern mit srvctl srvctl modify database -db <db_unique_name> [ -option <VALUE> ] srvctl modify service -db <db_unique_name> -service <SN> [ -option <VALUE> ] srvctl modify listener srvctl modify asm 26

28 ASM Administration Administrationsutilities sqlplus alle Administrationstasks ausführbar Anmeldung mit / as sysasm asmcmd (CLI) Stati von Diskgruppen und Devices anzeigen Kopieren von Dateien ASM<->Filesystem Datei-Explorer, Datenbankfiles sind sichtbar asmca (CLI + grafische GUI) ASM Konfiguration Erstellen von Diskgruppen Devices Diskgruppen hinzufügen 28

29 ASM Administration Diskgruppen- und Devicestati Diskgruppe - Übersicht asmcmd lsdg -g <DG> Diskgruppenzusammensetzung asmcmd lsdsk -k -G <DG> Verfügbare Devices anzeigen asmcmd lsdsk -k --candidate 29

30 ASM Administration Diskgruppe erweitern asmca grafisch CLI asmca -silent -adddisk -diskgroupname <DG> -disk <DiskName> Diskname bei Einsatz von ASMLib: Diskname bei Einsatz von AFD: ORCL:<LABEL> AFD:<LABEL> 30

31 ASM Administration Devices aus Diskgruppe entfernen alter diskgroup <DG> drop disk <DISK>; Drop passiert asynchron Fortschritt kann mit asmcmd oder sqlplus beobachtet werden 31

32 ASM Administration I/O Performance asmcmd mit Option iostat einschränkbar auf einzelne Diskgruppen Lese- und Schreibzeit (-t) Anzahl I/O s (--io) 32

34 GI und ASM Prozesse Grid Infrastructure 34

35 GI und ASM Prozesse ASM Prozesse - Instanz 35

36 GI und ASM Prozesse ASM Prozesse - Datenbank 36

38 Logfiles Wo sind die Logfiles bei Problemen? befinden sich im Automatic Diagnostic Repository (ADR) ORACLE_BASE/diag Grid Infrastructure diag/crs/ zentrales Logfile: diag/crs/<hostname>/crs/trace/alert.log (Text-Alertlog) ASM diag/asm/ zentrales Logfile: diag/asm/asm/+asm/+asm/trace/alert_+asm.log (Text-Alertlog) alle Einzelkomponentenlogfiles sind ebenfalls im trace-verzeichnis 38

40 Erfahrungen Parameter: audit_sys_operations= true (ab 12.1) suboptimal, da ALLE sys-commands gelogged werden $GI_HOME/rdmbs/audit kein automatisches Logrotate exponentielles Wachstum Löschen bei zu später Erkenntnis nur mit find $GI_HOME/rdbms/audit exec rm {} \; möglich ( rm bringt Fehlermeldung) 40

41 Erfahrungen Parameter: processes Parameter processes der ASM Instanz ist standardmäßig auf 120 gesetzt. evtl. Probleme bei konsolidierten Single Instance Umgebungen mit vielen Datenbanken treten erst beim Neustart des GI-Stacks auf und sind im laufenden Betrieb schwer zu erkennen Manuelle Tätigkeiten, wenn das Limit überschritten wird 41

42 Erfahrungen Listener Home ist bei GI-ASM Installationen!= Datenbank-Home mehrere sqlnet.ora und tnsnames.ora Files vorhanden es greift die Konfiguration aus dem Home, welche Komponente angesprochen wird Parameter für die ASM-Instanz stehen in GI_HOME/network/admin Parameter für die Datenbank stehen im ORACLE_HOME/network/admin 42

44 Unterschiede zum RAC / Rac One Node mehr als eine ASM Instanz ( pro Knoten jeweils eine ASM-Instanz Instanzname +ASM(1-N) ) ein Clusterinterconnect wird für die Grid Infrastructure benötigt Devices müssen als Shared Disk zwischen den Knoten zur Verfügung stehen Zusätzlich gibt es einen SCAN-Listener RAC Loadbalancing der Connections zwischen den Knoten RAC One Node unterstützt Online Failover bei geplanter Wartung 44

45 Unterschiede zum RAC / Rac One Node Basiskonzepte der Grid Infrastructure Standalone sind weiterhin gültig Administrations-Utilities sind die Gleichen Administartions-Utilities ergänzt um weitere Optionen RAC/RAC One Node haben zusätzliche Utilities für die Clusterkonfiguration und Clusterverwaltung 45

47 Nützliche Utilities asmdu.sh (by Fred Denis)./asmdu.sh Databases on dbserver : +ASM, ORCL DiskGroup Total_MB Free_MB % Free ASM cat asmdu.sh... # # Colored thresholds (Red, Yellow, Green) # CRITICAL=90 WARNING=75... DATA FRA

48 Nützliche Utilities asm_metrics.pl (by Bertrand Drouvot)

49 Nützliche Utilities CloudControl 49

51 Fazit Grid Instrastructure und ASM sind kein Mysterium mehr gute Performance einfache Administration geeignet zur Konsolidierung von Datenbanken Einbindung Third Party Applikationen in GI möglich 51

52 Fragen?

53 Vielen Dank!