Copyright 2013, Oracle and/or its affiliates. All rights reserved.

Transkript

1 1

2 Simple Reliable Affordable Oracle Database Appliance Reality Check Sebastian Solbach ORACLE Deutschland B.V. Co. KG 2

3 Agenda Oracle Database Appliance (ODA) Hardware Datenbank Setup ODA VM auf der ODA Diverses 3

4 Oracle Database Appliance Neue X4-2 Server seit Oracle Datenbank 11g Enterprise Edition Real Application Clusters RAC One Node Single Instance Integriertes und Optimiertes System Bare Metal oder VM 2 dual-socket Oracle Linux servers 1 oder 2 Storage JBODs (je 18TB) Schnelle Installation & Einfache Konfiguration Erlaubt Hard-Partitioning (Teil-Lizenzierung) 4

5 Oracle Database Appliance X4-2 Basis Konfiguration 2x 1RU x86 Server + 1 JBOD Je Server: 2 x 12 CPU Cores 256 GB Memory 600 GB gepiegelte Boot Platten Redundantes 10GB Interconnect Externes 10GBase-T Netzwerk Je JBOD 24 Platten 800 GB SSD 18 TB HDD 5

6 Hardware Vergleich Komponente ODAv1 X3-2 X4-2 Memory 192 GB 512 GB 512GB CPU Kerne HDD 12 TB Raw 18 TB Raw 18 TB Raw SSD 292 GB 800 GB 800 GB Expansion Storage Shelf None 18TB Raw 18TB Raw SSD: 800 GB SSD: 800 GB IOPS (HDDs) 4K 7K 7K IO Bandwidth (HDDs) 3 GB/s 5GB/s 5GB/s Preis Gleich wie X3-2! 6

7 Neu mit der ODA X4-2 Auswahl 10GB Optisch oder Kupfer für Public Netzwerk Standard Verkabelung: Twinax für Interconnect Alternative Verkabelung: Kupfer (CAT6) für Interconnect 7

8 Initialer Startup konfiguriert 10GB Netzwerk 8

10 Wahl zwischen 3 Verfügbarkeitsstufen Single Instance Gute Verfügbarkeit Oracle Database 11g Enterprise Edition Kein Failover, automatischer Neustart Aktiv Passiv Bessere Verfügbarkeit Oracle Database 11g Enterprise Edition Oracle Real Application Clusters One Node Beiderseitiges Failover möglich Aktiv Aktiv Beste Verfügbarkeit Oracle Database 11g Enterprise Edition Oracle Real Application Clusters Beiderseitiges Failover und Lastverteilung Auf der ODA können sowohl Single Instanz Datenbanken, wie auch RAC One Node, bzw. RAC Clusterdatenbanken laufen 10

11 ODA v2.9 unterstützte Datenbanken Oracle Database Enterprise Edition (SI, RAC, RACOne) Mehrere Datenbanken & Homes (Default: 1 Home pro DB) Alle Datenbank Optionen: ADG, Partitioning, Advanced Compression, Advanced Security, Spatial,... Keine Storage Optimierung (HCC oder Storage Indizes) Grid Infrastruktur ist bei Neuinstallation (Immer vorhanden) 11

12 Datenbank Größen X4-2 XXS Neu mit 2.9 XXS XS S M L XL XXL XXXL CPU_COUNT SGA (GB) PGA (GB) Processes Redo Log (GB) IOPS (1 Shelf) MB/s (1 Shelf) # DBs

13 Aufteilung Plattenplatz X4-2 Ohne Storage Expansion ASM Normal Redundancy High Redundancy Backup Lokal Extern Lokal Extern Total (TB) 8,2 8,2 5,5 5,5 +DATA 3,6 (~45%) 7,2 (~88%) 2,4 4,8 +RECO 4,6 (~55%) 1,0 (~12%) 3,0 0,7 +REDO (GB) ACFS Shared Repos Belegt Plattenplatz in RECO Belegt Plattenplatz in RECO oder DATA 13

14 ODA Deployment Optionen Bare Metal Ideal zur reinen DB Konsolidierung Sonst kaum andere Software auf den DB Knoten Teillizenzierung DB über MOS Lizenzschlüssel 8, 16, 24, 32, 40, 48 pro ODA (4,8,12,16,20,24 pro Knoten) Kerne auf beide Knoten immer gleich aktiviert Nach erster Deaktivierung von Kernen nur Erhöhung möglich Andere Oracle Software akzeptiert dies nicht als Hard-Partitioning! Andere Ressourcen (Memory, Disk) werden nicht beeinflusst Bei Auslieferung alle Kerne aktiviert 14

15 ODA Deployment Optionen Virtualisiert Eine Appliance für Applikationen und Datenbank Isolation zwischen Applikation und Datenbank Teillizenzierung auf Basis von OVM Hard Partitioning Datenbanken laufen in einem privilegierten Gast (ODA_BASE) 4, 8, 12,..., 44,48 pro ODA (2,4,6...,22,24 pro Knoten) Kerne auf beide Knoten immer gleich aktiviert / gepinnt Unterschiedliche Anzahl der Kerne auf beiden Knoten NICHT möglich Jederzeit Anpassung der CPUs und Memory der ODA_BASE Andere Oracle Applikationen akzeptieren dies als Hard Partitioning 15

17 Setup ODA Bare Metal / Virtualisiert 1. Vorbereitung 2. Hardware Verkabelung & Setup 3. ReImaging Optional: ODA Bare Metal ISO Erforderlich: ODA VM ISO Image 4. Validierung 5. Firstboot Netzwerkkonfiguration End-User Bundle 6. Software ODA_BASE 7. Empfohlen: Patching 8. Installation über Appliance Configurator 17

18 1. Vorbereitung My Oracle Support Notes: : Supported Versions => DB Software & Patches Herunterladen ODA Setup Poster: Appliance Manager (Offline Konfiguration) vorher ausführen Download und Installation von OTN (Windows, Linux, OSX) Konfigurator im zukünftigen ODA Netz ausführen zum Check der Netzwerkkonfiguration Konfigurationsfile abspeichern 18

19 Details für die Konfiguration Bare Metal / VM (Vorsicht: 2 Zusätzliche Hostnamen für Hypervisor), Angabe Hardware System Name (frei wählbar) Region, Zeitzone, Datenbank Deploymen, Backup, ASM Redundancy Domäne, DNS Server (Nein: Dann Custom Konfiguration auswählen), NTP Server Client Access Public Network Hostnamen, IP Adressen und Netzmaske Virtuelle IP Namen, IP Adressen (Default -vip), Scan Namen (Default: -scan) + 2 IP Adressen, Netmask, Gateway und verwendetes Interface ILOM Netzwerk Informationen (Optional, oder überspringen, falls vorher schon geschehen) 2. Netz (Optional) Datenbank? Name, Größe, Sprache, Character Set, DB Console ASR Proxy und MOS Username/Passwort (Optional) Cloud Filesystem (ACFS) 19

20 2. Verkabelung & 4. Validierung Wichtig: Vor dem ersten Einschalten sicherstellen, dass alle Kabel lt. Setup Poster richtig angeschlossen sind Knoten erkennen Anhand Verkabelung Ihre Knotennummer Das Ganze mit oakcli validieren: # oakcli validate c storagetopology 20

21 Exkurs: OAKCLI Command line interface der ODA Immer als ROOT ausführen Aufrufe werden protokolliert: /opt/oracle/oak/log/<hostname>/client/oakcli.log oakcli Usage: oakcli <command> <object> [<options>] commands: show locate apply deploy update validate manage unpack copy configure objects : disk diskgroup expander controller storage core_config_key version firstnet For complete usage, use: oakcli h For detailed help on each command and object and its options use: oakcli <command> -h oakcli <command> <object> -h ODA Getting Started Guide, Appenix D 21

22 3. Reimaging der Knoten Default bei Auslieferung: Bare Metal Image ODA VM: Reimaging mit: Patch ODA 2.9 VM ISO Image (DOM0) MOS : Step by Step Installing VM Image on ODA Erfahrungen bei Leihsystemen: Auch bei Bare Metal ein Reimage empfehlenswert Patch ODA 2.9 Bare Metal ISO Image MOS ODA Bare Metal Restore 22

23 5. Initiale Netzwerkkonfiguration Netzwerk Konfiguration # cd /opt/oracle/oak/bin #./oakcli configure firstnet Select the interface to configure network on [bond0]:bond0 Configure DHCP on bond0?(yes/no):no INFO: Static configuration selected Enter the IP address to configure: Enter the netmask address to configure: Enter the gateway address to configure: Kopieren der Software/Base Images mit pscp, winscp nur auf Knoten 0 notwendig. 23

24 6. Software Baremetal: Patch ODA 2.9 End User Bundle (GI+RDBMS) Enpacken der Software # cd /opt/oracle/oak/bin #./oakcli unpack -package /tmp/p _28000_linux-x86-64.zip Virtualisiert: Patch ODA 2.9 VM Template (ODA_BASE) Erstellen der ODA_BASE VM # cd /opt/oracle/oak/bin #./oakcli deploy oda_base 24

25 Optionaler Schritt: Teillizenzierung Bare Metal Keine Aktion bei Verwendung aller CPUs Zum Anpassen des CPU Core Counts: MyOracleSupport Angabe der Serverkonfiguration Erhalt eines Lizenzschlüssels Lizenzeschlüssel mit oakcli anwenden (System startet durch) # /opt/oracle/oak/bin/oakcli apply core_configuration_key /tmp/myfile.txt Virtualisiert: Angabe der CPU und Memory bei Deployment der ODA_BASE CPUs & Memory sind exklusiv für ODA_Base 25

26 7. Empfohlen: Patching Es gibt genau einen Patch für Bare Metal und VM! ODA Patch Patch Kopieren auf beide Bare Metal Knoten bzw. in beide ODA Base Aufruf des INFRA Patch Teils vor Deployment stellt neue Firmware, BIOS, ILOM und OS (letzteres, falls nicht schon über Image Restore). Auf beiden Knoten bzw. ODA_BASES # cd /opt/oracle/oak/bin/ #./oakcli unpack package /tmp/p _28000_linux-x86-64.zip Nur auf Knoten 0 #./oakcli update -patch verify #./oakcli update -patch infra 26

27 Beispiel: Patch # /opt/oracle/oak/bin/oakcli update -patch verify INFO: :18:50: Reading metadata. It takes a while... Component Name Installed Version Proposed Patch Version Controller_INT Controller_EXT Expander SSD_SHARED HDD_LOCAL A31A Up-to-date HDD_SHARED A31A Up-to-date ILOM r d r83372 BIOS IPMI Up-to-date HMP OAK OEL 5.9 Up-to-date OVM Up-to-date GI_HOME ( , ) DB_HOME ( , ( , ) ) 27

28 8. End User Installation BareMetal: Login auf Knoten 0 (als root) VM: Login über VNCConsole von Dom0 (Alternativ: xm console und oakcli configure firstnet) Start X Window System startx system-config-keyboard Installation # cd /opt/oracle/oak/bin #./oakcli deploy [-conf file] Welcome Page <NEXT> Überprüfen der Konfiguration Auf der Summary Page <INSTALL> 28

29 Weitere Datenbanken: DBCA/oakcli # oakcli create h Usage: oakcli create {database dbhome db_config_params } [<options>] Where: database - creates the database dbhome - creates the database home db_config_params - creates the database config parameter file. # oakcli create dbhome -version # oakcli create database -db newdb -version params newconf # oakcli create database -db newdb oh OraDb11203_home2tiger ODA Getting Started Guide, Kapitel 7 Auf einer ODA v2.9 wird für ältere DB Releases folgende Packages benötigt: Patch X Clone Patch Patch X Clone Patch 31

31 Oracle Database Appliance Virtual Platform Roadmap Jan Initial release of Virtual Platform Template Management CPU Pools May Support for OVA files Remote VM import Aug Upgrade to Oracle VM Nov Shared Repository VLAN Support 33

32 VM Auf ODA Wie funktionierts? Node 1 DOM 0 VM Storage Repository Oracle Database Appliance App Domain App Domain App Domain ODA BASE Appliance Manager Grid Infrastructure Database Node 2 DOM 0 VM Storage Repository App Domain App Domain App Domain ODA BASE Appliance Manager Grid Infrastructure Database Datenbank(en) laufen in der ODA BASE mit Nativer Disk Performance App Domains für die Applikationen Appliance Manager bietet VM Templates und Domain Management Keine Integration OVM Manager 34

33 DOM 0 Hypervisor für Oracle VM Node 1 DOM 0 VM Storage Repository Oracle Database Appliance Domain U Domain U Domain U ODA Base Appliance Manager Grid Infrastructure Database Node 2 DOM 0 VM Storage Repository Domain U Domain U Domain U ODA Base Appliance Manager Grid Infrastructure Database Default domain nach Installation des oakvm image Bootstrap des Deployment Prozesses Initiale Netzwerkkonfiguration Initiale Zuweisung der Kerne für ODA BASE OVM

34 ODA Base Dasselbe Look & Feel und Performance wie auf Bare Metal Node 1 DOM 0 VM Storage Repository Oracle Database Appliance Domain U Domain U Domain U ODA Base Appliance Manager Grid Infrastructure Database Node 2 DOM 0 VM Storage Repository Domain U Domain U Domain U ODA Base Appliance Manager Grid Infrastructure Database ODA Base priviliegierte VM Domain Datenbanken werden in ODA Base angelegt SI, RAC, RAC One Node Zugewiesene CPU und Memory Exclusiv für ODA Base Exclusiver Plattenzugriff 36

35 Lokale & Shared Repositories (ab v2.8) Node-0 Node-1 DomU1 DomU2 DomU3 DomU4 Shared file system ODA BASE Shared Repository ODA BASE ASM Grid Infra Databases VM Management Dom0 VM Repository (Local Disk) Shared disk Data ASM Grid Infra Databases VM Management Dom0 VM Repository (Local Disk) 37

36 Architektur Details ODA_BASE: Exklusiver Plattenzugriff via PCI passthrough der LSI HBAs. ACFS Filesystem für Shared Disk Repository ACFS via. NFS über den Interconnect an Dom0 auf dem Knoten exportiert Gemounted unter /OVS/Repositories/<acfs_name> Beide Knoten haben Zugriff auf das Shared Repository (HA!) Aber: Kein gleichzeitiger Zugriff auf dieselben VM Files. 38

37 Oracle Database Appliance VM Auto Restart & VM Failover HA Node-0 Node-1 DomU1 DomU2 DomU3 DomU4 DomU2 ODA BASE ASM Grid Infrastructure Databases VM Management Dom0 Shared file system Shared Repository Shared disk Data ODA BASE ASM Grid Infrastructure Databases VM Management Dom0 39

38 Wie kommt eine VM auf die ODA? Man braucht: 1 Template Herunterladen eines Templates von Edelivery (z.b Standard Linux Template) Migration einer VM von OVM oder Virtual Box MOS Converting Vbox into OVM Image Erstellen eigenes Templates über Template Builder oder Assembly Builder Import des Templates im Repository (*.tgz oder *.ova) oder HTTP #./oakcli import vmtemplate <vmtemplatename> { -assembly <assembly file> -files <image files> } -repo <repo_name> [-node <0 1>] Konfiguration des Templates #./oakcli configure vmtemplate... #./oakcli modify vmtemplate... 40

39 Erzeugen der VM Klonen aus dem Template #./oakcli clone vm SoliVM vmtemplate oel5 repo odarepo1 Konfiguration der VM #./oakcli configure vm... 41

40 Wichtige Attribute für VMs -vcpu - (1-32) num. of cpu's assigned to the VM VMTemplate -cpuprio - ( ) large value has high priority -memory - (1-248)G or ( )M. Memory given to VM VMTemplate -disk - List of disks{slot,disktype,content} sed by VM VMTemplate -network - List of networks and MAC address used by VM VMTemplate -prefnode - Preffered node on which VM has to be started [0/1] -cpupool - assign cpupool to vm -autostart - [always restore never] -failover - [true false] -bootoption - BootOption used to bootstrap(for VM only) [PXE DISK CDROM] -os - OS used by VM VMTemplate [ WIN_2003 WIN_2008 WIN_7 WIN_VISTA OTHER_WIN OL_4 OL_5 OL_6 RHL_4 RHL_5 RHL_6 LINUX_RECOVERY OTHER_LINUX SOLARIS_10 SOLARIS_11 OTHER_SOLARIS NONE ] -domain - XEN VM VMTemplate domain types [XEN_HVM XEN_HVM_PV_DRIVERS XEN_PVM UNKNOWN ] 42

41 ODAVP: How To Create a Fully-Virtualized Guests (HVM) from an OS ISO image (Doc ID ) Migrating systems to ODA Virtualized Platform (ODA VP) (Doc ID ) How to move a VM from local to a shared repository (Doc ID ) 43

42 ODA VM verbessert in 2.9 Schnellerer VM Stack (paralleles Anlegen von VMs) Besseres Logging Import von Templates via. HTTP "oakcli modify vm -s" sendet eine Message zur VM 44

43 CPU Pool Pinned and Unpinned 24 Kerne pro Knoten 48 vcpus pro Knoten Verwenden der CPU Pool für Hard Partitionierung, Isolation und Failover 45

45 ODA (ab 2.8) VLAN Unterstützung Netzwerk Anforderungen Management Zugriff Systemadministratoren und DBAs Backup Netzwerk RMAN Backup Public Netzwerk - Applikationsnetzwerk 47

46 ODA (ab v2.8) Neues Hardware Monitoring Server health details, power state, ambient temperature, locator indicator, power consumption, open problems count/detail Processor Memory - health details, correctable ECC errors Cooling Units - health details, %, RPM Network - health details, LinkStatus, Die temp. Power Supply health details, InputPower,OutputPower,InletTemp, ExhaustTemp 49

47 Hardware Monitoring #./oakcli show server Power State : On Open Problems : 0 Model : ODA X3-2 Type : Rack Mount Part Number : Serial Number : 1323FM0006 Primary OS : Not Available ILOM Address : ILOM MAC Address : 00:10:E0:39:EC:70 Description : Oracle Database Appliance X FM0006 Locator Light : Off Actual Power Consumption : 224 watts Ambient Temperature : degree C Open Problems Report : System is healthy 50

48 MOS Notes ODA - 2.X Supported Versions & Known Issues (Doc ID ) Oracle Database Appliance ( ODA )End User Deployment (Doc ID ) Oracle Database Appliance Bare Metal Restore Procedure. (Doc ID ) Step by Step Instructions on Installing Virtualized Image on ODA (Doc ID ) How To Install And Configure EM 12c For Oracle Database Appliance (ID ) ODA (Oracle Database Appliance): Test Plan Outline (ID ) 51

49 ODA External Documents & Links Landing Page: Oracle Technology Network: Documentation Library: ODA Setup Poster ODA Appliance Manager ODA Whitepapers 52

50 Q & A 53

51 54