Making Innodb a HA SE: Galera

Transkript

1 Making Innodb a HA SE: Galera Erkan Yanar linsenraum.de 26. April 2012 Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

2 Whats up? Hochverfügbarkeit Gestern: MySQL Cluster Es geht noch immer um HA! und Skalierbarkeit (M-S, M-M). Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

3 MySQL Cluster: NDB Known HASE MySQL Cluster Shared Nothing Netzwerk Storage In Memory HA der Daten only red. Workload Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

4 Shared Storage MySQL Cluster: NDB SAN Network-RAID0 Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

5 HA mit Replikation Replikation HA auf Basis von Replikation Replikation Datenredundanz Slave read only HA Daten redundant? Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

9 HA mit Replikation Sicherheit semisync vs. Performance async Failover Daten Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

10 HA mit Replikation Probleme Klassisches Read-Scaleout Wer wird Master? Deltas? Upgrades Master Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

13 Galera Was wäre wenn es eine Lösung gäbe mit: Synchrone Replikation Schnellere Replikation Shared Nothing Einfache Migration/Fallback Jeder Knoten beschreibbar/gleichwertig Online Upgrades/Restarts Neue Nodes automatisch eingebunden OpenSource Einfach(er) zu Administrieren und und und und und und und und und Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

14 Galera Galera InnoDB Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

15 Galera Maintenance Neue Nodes Rolling Restart Rolling Upgrades Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

16 Galera vs. Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

17 Galera HA Service HA machen Einfaches HA JDBC, VIP etc. Möglichkeiten? Oracle RAC? Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

20 Limitierungen Limitierungen LOCK TABLES Events User Query Cache InnoDB only LOAD DATA Lange Trans. Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

21 Design wsrep/galera Standard MySQL: 1 Thread Replication Galera: Parrallel Applying Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

22 Design wsrep/galera Standard MySQL: 1 Thread Replication Galera: Parrallel Applying Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

23 Design Certification/Check Multi-Master Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

27 Write Distribution Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

28 Technik Galera einrichten Wie? Wo? Galera ist von codership Galera ist nicht in MySQL enthalten Benötigt werden: Ein gepatchter MySQLd Ein wsrep Provider Galera Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

29 Using Galera [mysqld] binlog_format = ROW innodb_autoinc_lock_mode = 2 innodb_flush_log_at_trx_commit = 0 query_cache_size = 0 query_cache_type = 0 #Accessing Galera wsrep_provider wsrep_provider_options wsrep_cluster_name wsrep_cluster_address wsrep_sst_method wsrep_sst_auth = /usr/lib/plugin/libgalera_smm.so = "gcache.size=1g" ="my_cluster" ="gcomm://" = mysqldump = user:password Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

30 Running Galera Cluster Starting Galera wsrep cluster address= gcomm:// gcomm:// SST Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

31 Running Galera Cluster Starting Galera wsrep cluster address= gcomm:// gcomm:// SST Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

32 Running Galera Cluster SST Zeit auf beiden Server syncen und logs von beiden Servern zeigen [Note] WSREP: Node 1 (oxymoron) requested state transfer from *any*. Selected 0 (onyx)(synced) as donor. [Note] WSREP: Shifting SYNCED -> DONOR/DESYNCED (TO: ) [Note] WSREP: 1 (oxymoron): State transfer from 0 (onyx) complete. [Note] WSREP: Member 1 (oxymoron) synced with group. [Note] WSREP: 0 (onyx): State transfer to 1 (oxymoron) complete. [Note] WSREP: Shifting DONOR/DESYNCED -> JOINED (TO: ) [Note] WSREP: Member 0 (onyx) synced with group. [Note] WSREP: Shifting JOINED -> SYNCED (TO: ) [Note] WSREP: Synchronized with group, ready for connections Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

33 Running Galera Cluster SST SST SST: Snapshot State Transfer Vollständiger Datenbestand Donor blockierend Daher 3 nodes Joiner SST: Methoden: wsrep sst method mysqldump rsync xtrabackup Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

34 Running Galera Cluster IST IST IST: Incremental State Transfer WriteSets (WS) im Gcache Delta aus dem Gcache wsrep provider options = gcache.size=1g Ermöglicht Ohne SST: Restarts Upgrades Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

35 Monitoring mysql> SHOW GLOBAL STATUS LIKE wsrep% ; Variable_name Value wsrep_local_state_uuid 826c bb-11e fc6bb wsrep_last_committed wsrep_local_state 4 wsrep_local_state_comment Synced (6) wsrep_cert_index_size 0 wsrep_cluster_conf_id 6 wsrep_cluster_size 4 wsrep_cluster_state_uuid 826c bb-11e fc6bb93759 wsrep_cluster_status Primary wsrep_connected ON wsrep_local_index 0 wsrep_provider_name Galera wsrep_provider_vendor Codership Oy <info@codership.com> wsrep_provider_version beta(r123) wsrep_ready ON Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

36 NDB vs. Galera Vergleich NDB- und Galera-Cluster NDB Galera QCache suboptimal nicht unterstützt Commit pessimistic optmistic TRX ISOLATION READ COMMITTED InnoDB LOCK Tables local local Eventscheduler take care also PITR (binlog) gap event! easy Redundanz NoOfReplicas Number of Nodes Limit Trans MaxNoOfConcurrentOperations wsrep max ws [rows size] Shared Nothing Ja Ja Migrations-Fallback depends np Rolling Rest.Upgrade Ja Ja FK Nein Ja Write Scaling Ja kaum Read Scaling Ja Ja Joins nicht gut standard Response Time nicht gut standard Memory Scalling ja one node limit Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

37 Wir haben es nicht geschafft Wir haben es nicht geschaft: Integrating standard Replication 3-node Cluster (Split Brain/HA) garbd (Split Brain) Monitoring works fine! Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

38 Wir haben es nicht geschafft Ende Vendors Entwickler! MariaDB Galera Cluster Support Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

39 Wir haben es nicht geschafft Ende Summarise: Galera Synchrone Replikation Schnellere Replikaton Master-Master Replikaton Einfache Migration Jeder Knoten beschreibbar/gleichwertig online Upgrades/Restarts Neue Nodes automatisch eingebunden OpenSource Kein Maintenancewindow/Downtime Einfach(er) zu administrieren Einfaches HA Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28

40 Ende Gelände Wir haben es nicht geschafft Ende Erkan Yanar linsenraum.de/erkules Yanar Erkan Yanar (linsenraum.de) Making Innodb a HA SE: Galera 26. April / 28