WELCOME. Nutzen der Cloud für eine optimale Performance. Patrick Schwanke Quest Software GmbH. Martin Schmitter Trivadis GmbH. 10.

Transkript

1 WELCOME Nutzen der Cloud für eine optimale Performance Patrick Schwanke Quest Software GmbH Martin Schmitter Trivadis GmbH BASEL BERN LAUSANNE ZÜRICH DÜSSELDORF FRANKFURT A.M. FREIBURG I.BR. HAMBURG MÜNCHEN STUTTGART WIEN 1

2 AGENDA 1. Übersicht Cloud Computing Warum Cloud? Wann macht eine Public Cloud Sinn? Monatskosten IaaS/PaaS 2. Übersicht EC2 3. Übersicht RDS 4. Cloud Watch 5. Performance Engpässe Erkennen 6. Metriken selber erzeugen und mit einbinden 7. Ein Blick in die Zukunft 2

3 Warum Cloud? IT-Abteilung Schatten-IT verhindern Konkurrenzfähig bleiben Sehr viel, wenn wir uns auf die Cloud einlassen! Warum sollten wir uns mit der Cloud beschäftigen? Was kann die Cloud für uns tun? Kostendruck Time-to-Market Top-oder-Flop-Risiko Mal eben schnell Kunden / Anwender IT-Leistungen, schnell, kostengünstig und flexibel, ohne IT-Abteilung 3

4 Wann macht eine Public Cloud Sinn? Gleichmäßige Last Kein Kostenvorteil gegenüber eigenem Betrieb, ggf. Private Cloud Lastspitzen, dazwischen Null-Last Kostenbetrachtung lohnt sich Auch für Datenbanken in der Cloud Lastspitzen, dazwischen geringere Last Kostenbetrachtung lohnt sich Für herkömmliche Datenbanken schwierig umzusetzen RDS Oracle Read Replica, NoSQL 4

5 Monatskosten IaaS Position Berechnung Monatskosten Instanz mit 2 CPUs, 7.5GB, Linux 64bit Nutzung: 100h pro Monat $0,38 / h $38 I/O Instanz Internet: 50GB pro Monat $0,12 / GB $6 Persistentes Storage 100GB $0,11 / GB-Monat $11 5 I/O-Requests (pers. Storage) pro Sekunde $0,11 / 1 Mio. Requests $0,20 bzw Statische IP-Adresse Ungenutzt: 620h pro Monat $0,01 / ungenutzte Stunde $6,20 200GB S3-Storage (für Backups) $0,14 / GB-Monat $28 Monitoring, 1-min statt 5-min Frequenz $3,50 / Instanz und Monat $3,50 SUMME bei Nutzung 100h pro Monat $92,90 SUMME bei Nutzung 720h pro Monat $323,53 Oracle SE1 Lizenz $ $1276 Wartung 5

6 Monatskosten PaaS Position Berechnung Monatskosten Instanz mit 2 CPUs, 7.5GB, Oracle SE1, inkl. 1- min Monitoring Nutzung: 100h pro Monat $0,68 / h $68 I/O Instanz Internet: 50GB pro Monat $0,12 / GB $6 Datenbank-Storage 100GB $0,11 / GB-Monat $11 5 I/O-Requests (DB-Storage) pro Sekunde $0,11 / 1 Mio. Requests $0,20 200GB Backup-Speicher $0,15 / GB-Monat jenseits DB-Größe $15 SUMME bei Nutzung 100h pro Monat $100,20 SUMME bei Nutzung 720h pro Monat $523,03 6

7 AGENDA 1. Übersicht Cloud Computing 2. Übersicht EC2 Übersicht Setup 3. Übersicht RDS 4. Cloud Watch 5. Performance Engpässe Erkennen 6. Metriken selber erzeugen und mit einbinden 7. Ein Blick in die Zukunft 7

8 Elastic Compute Cloud (1) Fertige Images Manuelles Backup (z.b. Oracle Secure Backup auf S3) Manuelles Patching Skalieren auf Knopfdruck Firewall Einfaches Monitoring Integration in VPC 8

9 Elastic Compute Cloud (2) Sechs Instanz Klassen Micro Instanzen Standard Instanzen High-Memory Instanzen High-CPU Instanzen Cluster Compute Instanzen Cluster GPU Instanzen Zwei Lizenz Modelle OS Lizenzen Inklusive Bring-Your-Own-License Instanz Diskspace 160GB 1690GB 9

10 Elastic Compute Cloud (3) Übersicht Instanz Klassen Micro Standard High Memory High CPU Cluster Compute Memory 0.6 GB 1,7 15 GB GB 1,7 7 GB 23 GB CPU 1-2 ECU 1-8 ECU ECU 5-20 ECU 33.5 ECU API NAME t1.micro m1.small-large m2.xlarg-4xlarg c1.medium-xlarge cc1.4xlarge I/O Capacity Low Moderate - High Moderate - High High Very High ECU= GHz 2007 Opteron or 2007 Xeon Prozessor 10

11 Elastic Compute Cloud (4) Übersicht GPU Klasse Cluster GPU Quadruple Extra Large Memory CPU GPU I/O Capacity 22 GB 33.5 ECU 2 x NVIDIA Tesla Fermi M GBit/s ECU= GHz 2007 Opteron or 2007 Xeon Prozessor 11

12 Oracle-Datenbank als Amazon IaaS (EC2) 12 Nutzen der Clloud für eine optimale Performance

13 AGENDA 1. Übersicht Cloud Computing 2. Übersicht EC2 3. Übersicht RDS Übersicht Setup 4. Cloud Watch 5. Performance Engpässe Erkennen 6. Metriken selber erzeugen und mit einbinden 7. Ein Blick in die Zukunft 13 Nutzen der Clloud für eine optimale Performance

14 Relational Database Service (1) Oracle & MySQL Automatische Backups Automatisches Patching Skalieren auf Knopfdruck DB Snapshots Firewall Einfaches Monitoring 14

15 Relational Database Service (2) Fünf Instanz Klassen Small DB Instance Large DB Instance High-Memory Extra Large Instance High-Memory Double Extra Large DB Instance High-Memory Quadruple Extra Large DB Instance Zwei Lizenz Modelle License Included (SE One) Bring-Your-Own-License (SE One, SE, EE) -> BYOL Diskspace Minimum 10GB Maximum 1024 GB General $0.11 per GB/Month 15

16 Relational Database Service (3) Übersicht der fünf Instanz Klassen Small Large High-Memory Extra Large High-Memory Double Extra Large High-Memory Quadruple Extra Large Memory 1,7 GB 7,5 GB 17,1 GB 34 GB 68 GB CPU 1 ECU 4 ECU 6.5 ECU 13 ECU 26 ECU Platform Linux 64-bit Linux 64-bit Linux 64-bit Linux 64-bit Linux 64-bit I/O Capacity Moderate High High High High ECU= GHz 2007 Opteron or 2007 Xeon Prozessor 16

17 Relational Database Service (4) Preise License Included Small Large High-Memory Extra Large High-Memory Double Extra Large High-Memory Quadruple Extra Large Per Hour $0.17 $0.68 $0.94 $1.88 $3.76 Per Year *** $ ($ ) $ ($ ) $ ($ ) $ ($ ) $ ($ ) Preise - Bring-Your-Own-License Small Large High-Memory Extra Large High-Memory Double Extra Large High-Memory Quadruple Extra Large Per Hour $0.12 $0.48 $0.74 $1.48 $2.96 Per Year*** $ ($ ) $ ($ ) $ ($ ) $ ($ ) $ ($ ) 17

18 Oracle-Datenbank als Amazon PaaS (RDS) 18 Nutzen der Clloud für eine optimale Performance

19 : : : : : : : : : : : :00 Disk Performance DBMS_RESOURCE_MANAGER.CALIBRATE_IO MAX_IOPS MAX_MBPS 19

20 AGENDA 1. Übersicht Cloud Computing 2. Übersicht EC2 3. Übersicht RDS 4. Cloud Watch Übersicht Aufbau Kosten 5. Performance Engpässe Erkennen 6. Metriken selber erzeugen und mit einbinden 7. Ein Blick in die Zukunft 20

21 Übersicht EC2 Basic Monitoring - sieben vorausgewählte Metriken alle fünf Minuten gebührenfrei Detailed Monitoring - sieben vorausgewählte Metriken jede Minute gegen Gebühr RDS - 13 vorausgewählte Metriken jede Minute gebührenfrei Weitere Metriken für z.b.: EBS Datenträger Elastic Load Balancer SQS Warteschlangen SNS (Simple Notification Service) 21

22 Aufbau Metrik Name [--metric-name m] Namespace [--namespace -n] Wert [--value -v] Zeitstempel [--timestamp -t] Statistik Werte [--statisticvalues -s] Einheit [--value -v] 22

23 Kosten Detailed Monitoring für EC2-Instances (in Intervallen von einer Minute) $3,50 pro Instance pro Monat ($0,50 x 7 Metriken pro Instance) Benutzerdefinierte Metriken $0,50 pro Metrik pro Monat Warnungen $0,10 pro Warnung pro Monat API-Anfragen $0,01 pro Get-, List- oder Put-Anfragen 23

24 AGENDA 1. Übersicht Cloud Computing 2. Übersicht EC2 3. Übersicht RDS 4. Cloud Watch 5. Performance Engpässe Erkennen 6. Metriken selber erzeugen und mit einbinden 7. Ein Blick in die Zukunft 24

25 Tool-Kompatibiliät SQLPlus Toad Spotlight Shareplex OEM Foglight EC2 (IaaS) Ja Ja Ja Ja Ja Ja RDS (PaaS) Ja, (außer SYS- Connect) Ja (außer SYS- Connect) Nein (SYS-Connect benötigt) Nein (keine serverseitige Installation möglich) Nein (wird nicht angeboten) Nein (SYS-Connect benötigt) 25

26 Oracle auf EC2 Performance 26

27 Oracle auf RDS Performance Alarmierung via Amazon SNS (Simple Notification Service) 27

28 Oracle auf RDS Performance CloudWatch Kommandozeile $ mon-list-metrics --namespace "AWS/RDS CPUUtilization AWS/RDS {DBInstanceIdentifier=myrds1} DatabaseConnections AWS/RDS {DBInstanceIdentifier=myrds1} FreeableMemory AWS/RDS {DBInstanceIdentifier=myrds1} $ mon-get-stats CPUUtilization --namespace "AWS/RDS" --statistics "Average,Minimum,Maximum" --dimensions "DBInstanceIdentifier=myrds1" --start-time T11:00:00 --end-time T11:20:00 -period :00: Percent :05: Percent :10: Percent :15: Percent 28

29 Oracle auf RDS Performance Auslesen der Daten via Kommandozeile, eigenes Monitoring, z.b. Quest Foglight 29

30 RDS skalieren vertikal Aktuelle Instanzgröße 30

31 RDS skalieren vertikal Neue Instanzgröße später sofort (Reboot, ca. 3 min) 31

32 RDS skalieren - vertikal Alternativ per Kommandozeile: $ rds-modify-db-instance myrds1 --db-instance-class db.m2.xlarge --apply-immediately Und wieder kleiner machen: $ rds-modify-db-instance myrds1 --db-instance-class db.m1.large --apply-immediately 32

33 RDS skalieren vertikal Instance Class Memory CPU-Leistung (in ECUs) # CPU- Kerne I/O- Kapazität db.m1.small 1.7GB 1 1 mittel db.m1.large 7.5GB 4 2 hoch db.m2.xlarge 15GB 8 4 hoch db.m2.2xlarge 34GB 13 4 hoch db.m2.4xlarge 68GB 26 8 hoch 1 ECU: GHz 2007 Opteron or 2007 Xeon CPU Storage-Skalierung: 10GB bis 1024GB, ohne Auszeit 33

34 AGENDA 1. Übersicht Cloud Computing 2. Übersicht EC2 3. Übersicht RDS 4. Cloud Watch 5. Performance Engpässe Erkennen 6. Metriken selber erzeugen und mit einbinden 7. Ein Blick in die Zukunft 34

35 Aufbau Metrik wird beim ersten Upload erzeugt Alternativ wird die Metrik aktualisiert $ mon-put-data --metric-name HelloWorld --namespace "MyService" --value 5 --timestamp T12:00:00.000Z 35

36 AGENDA 1. Übersicht Cloud Computing 2. Übersicht EC2 3. Übersicht RDS 4. Cloud Watch 5. Performance Engpässe Erkennen 6. Metriken selber erzeugen und mit einbinden 7. Ein Blick in die Zukunft Read Replica eine Option? 36

37 RDS skalieren horizontal (1) Asynchrone Read Replicas Lastverteilung für lesende Zugriffe Aktuell noch nicht verfügbar Wird vermutlich mittels Active Data Guard implementiert werden 37

38 RDS skalieren horizontal (2) 38

39 THANK YOU. Patrick Schwanke Quest Software GmbH Im Mediapark 4e Köln Tel Fax Martin Schmitter Trivadis GmbH Werdener Str Düsseldorf Tel Fax Martin.Schmitter@trivadis.com BASEL BERN LAUSANNE ZÜRICH DÜSSELDORF FRANKFURT A.M. FREIBURG I.BR. HAMBURG MÜNCHEN STUTTGART WIEN 39