Köln/Bonner Projekt "Hochverfügbarkeitslösungen in der Lehr- und Prüfungsverwaltung Teil 2: LAN, Firewall, WAN

Transkript

1 Köln/Bonner Projekt "Hochverfügbarkeitslösungen in der Lehr- und Prüfungsverwaltung Teil 2: LAN, Firewall, WAN Dipl.-Phys. RRZK Folie: 1

2 Agenda Grundüberlegungen Rückblick auf Teil 1 Realisierung Teil2 Folie: 2

3 Projekt KLIPS-Mirror Kölner Lehr-, Informations- und Prüfungsservice KLIPS-IT-Infrastruktur Lokales Verwaltungsnetz Virtualisierte Architektur DMZ Verwaltungsnetz 2 x Apache https Server POS/LSF System 4 x Tomcat Servlet Engine 12 x POS-GX Server Win2003 Client () Port 443 offen URL Rewriter Port 8009 offen Tomcat zunächst nicht redundant LSF Datenbank Ähnlich zu Realisierung an der Universität Bonn FW 2 x Apache FW SOSPOS Datenbank Folie: 3

4 Projekt KLIPS-Mirror Kölner Lehr-, Informations- und Prüfungsservice Gemeinsamer Großgeräteantrag 143c GG +Universität Bonn Ziele: Höhere Verfügbarkeit zunächst an der durch Spiegelung auf 2 Standort (Hauptgebäude, RRZK) Desaster-Sicherung durch asynchrone Replikation zwischen Köln und Bonn Kompentenzzentrum Hochverfügbarkeitslösungen in der Lehr- und Prüfungsverwaltung Ablauf/Realisierung Teil 1: Konzeption durch RRZK Aufbau/Inbetriebnahme in Zusammenarbeit Abt32+RRZK Dauerhafter Betrieb durch Abt32 Folie: 4

5 Sy st em St o ra ge DS4700 4G B /s 2 G B/s Sy st e m St o ra g e DS GB /s 2G B/s Projekt KLIPS-Mirror Kölner Lehr-, Informations- und Prüfungsservice 7 Ebenen Standort LAN-Infrastruktur Firewall Intranet SAN-Infrastruktur Standort Firewall Lovernet PHIL-GW WISO-GW RZKR-GW LFI-CORE MPLS Ethernet Point-to-Point VLANS: 1 management-netz 2 vmotion 10GbE LWL 10GbE LWL 4 san HIOB 1 HIOB 2 77 Prod-Netz 79 Prod-Netz 99 DRAC-Netz 754 Prod-Netz 4x 10GbE LWL IP: /25 IP: /25 C65k-verw-1 KM-hvtzent-switch GW: GW: KM-lfi-switch DS xGbE IP: /25 2xGbE 2xGbE IP 2xGbE GW: IP: /25 IP IP IP: /25 IP DS IP: /25 GW: SAN DS4700 DS4300-rzkj-4 KM-san1-switch KM-san2-switch C95k-rzkj-1 C95k-rzkj-2 VSAN 500 Ngw-lfi-1 Ngw-lfi-2 IP: /25 IP: /25 SAN-Virtualisierung VMware-Cluster Storage-Virtualisierung VMware-Cluster Hauptgebäude 4x vm5 DELL PE2950 SyncMirror (HVTZENT) Nseries Gateway Ngw-hvtzent-1 IP: /25 4x Ngw-hvtzent-2 IP: /25 vm7 Backbone VSAN 501 SyncMirror TieBreaker SyncMirror MetroCluster HA-Cluster1 HA-Cluster2 vm6 LFI Nseries Gateway DELL PER900 DELL PE2950 DELL PER900 4x SyncMirror vm8 Klips-Mirror Konfiguration V CK Legende LAN-Verbindungen SAN-Verbindungen LAN-Verbindungen (geplant) IP und VLAN Definitionen VMware-Clusterfunktion Storage-Clusterfunktion 4x Teil 1: Redundanzen in den unteren 3 Ebenen Folie: 5

6 Sy st em St o ra ge DS4700 4G B /s 2 G B/s Sy st e m St o ra g e DS GB /s 2G B/s Single-Points-of-Failure Intranet-Kopplung (Cisco 3750) Firewall (HIOB) Standorte Köln, Bonn Standort Firewall Lovernet Hauptgebäude Backbone PHIL-GW WISO-GW RZKR-GW LFI-CORE MPLS Ethernet Point-to-Point VLANS: 1 management-netz 2 vmotion 10GbE LWL 10GbE LWL 4 san HIOB 1 HIOB 2 77 Prod-Netz 79 Prod-Netz 99 DRAC-Netz 754 Prod-Netz 4x 10GbE LWL IP: /25 IP: /25 C65k-verw-1 KM-hvtzent-switch GW: GW: KM-lfi-switch DS xGbE IP: /25 2xGbE 2xGbE IP 2xGbE GW: IP: /25 IP IP IP: /25 IP DS IP: /25 GW: SAN DS4700 DS4300-rzkj-4 KM-san1-switch KM-san2-switch C95k-rzkj-1 C95k-rzkj-2 VSAN 500 Ngw-lfi-1 Ngw-lfi-2 IP: /25 IP: /25 SAN-Virtualisierung SyncMirror (HVTZENT) Nseries Gateway Ngw-hvtzent-1 IP: /25 Ngw-hvtzent-2 IP: /25 VSAN 501 TieBreaker SyncMirror SyncMirror MetroCluster LFI Nseries Gateway SyncMirror Klips-Mirror Konfiguration V CK Legende LAN-Verbindungen SAN-Verbindungen LAN-Verbindungen (geplant) IP und VLAN Definitionen VMware-Clusterfunktion Storage-Clusterfunktion 4x vm5 4x vm7 HA-Cluster1 HA-Cluster2 vm6 4x vm8 4x VMware-Cluster DELL PE2950 DELL PER900 DELL PE2950 DELL PER900 Folie: 6

7 Teil 2 des Projekts Redundanz in den oberen 4 Ebenen: Lovernet, Firewall,, Standort durch Redundante Firewall Ausbau LAN-Infrastruktur Aufbau Spiegelcluster in Bonn Folie: 7

8 Projekt KLIPS-Mirror Kölner Lehr-, Informations- und Prüfungsservice Teil 2 Zeitlicher Ablauf März 2009: Mittelbeantragung (Netzwerkredundanz+Desaster-Recovery Köln-Bonn) Ab März 2009: Stufenweise Verlagerung von KLIPS- Diensten in neue IT-Infrastruktur August 2009: Mittelbewilligung Teil 2 September 2009: Konkretisierung Beschaffungsvorhaben Oktober 2009: Bestellung November/Dezember 2009: Lieferung / Konfiguration Januar 2010: Abnahme Cisco-Komponenten Köln Februar 2010: Abnahme Komponenten Bonn und Software für Kopplung Köln-Bonn März 2010: Inbetriebnahme Cisco-Komponeten Köln Folie: 8

9 Redundanz LAN-Infrastruktur Planung durch Netzabteilung RRZK und Abt32/Verwaltung 2x Cisco 6509-E mit je 2 VS-S G Supervisories Eingesetzte Protokolle: IP, HSRP, non-stop-forwarding (NSF), statefulfailover (SSO) Folie: 9

10 Redundanz Application/ Firewall Cisco Application Control Engine (ACE) im failover-cluster: loadbalancing, SSL-Terminierung Cisco Firewall-Servicemodul (FWSM) im active-standby-failover Modus Folie: 10

11 21 00 P ow e r E dge KLIPS-Netzinfrastruktur (alt) VIP: / 28 VIP: / 28 wiso-gw HIOB Vlan 32 IP: / xx Vlan 4 IP: / 28 GigE 4/ Loadbalancer VIP ip route / 28 GigE4/ ip route / 25 GigE4/ vm6 GigE 7/14 c65-rsm 4xGigE 4xGigE IP: / 28 Port Channel 5 GigE 9/ xGigE Trunk dot1q 1, 2, 4, 77, 79, 99, 754 Vlan 1 IP: / 25 Klips web Server Port Channel 5 GigE 1/0/1 4 Km-hvtzent-switch GigE 1/0/5 GigE 1/0/6 GigE 1/0/8 GigE 1/0/7 Vlan 100 IP IP: / 25 IP: / 25 TenGigE1/0/1 TenGigE1/0/1 Trunk dot1q 1, 2, 4, 77, 79, 99, 100, 754 Trunk dot1q 2, 4, 75, 77-79, 173, 751, 752, 754 Km-lfi-switch 4xGigE 4xGigE Port Channel 6 GigE 1/0/10 13 Port Channel 8 GigE 1/0/6 9 Trunk dot1q 2, 4, 75, 77-79, 173, 751, 752, 754 vm8 KM-san1-switch KM-san2-switch vm5 vm7 KLIPS Testszenario LN Folie: 11

12 KLIPS-Netzinfrastruktur (neu) Vlan 77 IP / VIP 254 Vlan 79 IP / VIP 254 Vlan 754 IP / VIP 254 Vlan 3200 IP Vlan3210 IP / VIP 34 Port Channel 100 ACE TenGigE 5/4 TenGigE 6/4 TenGigE 5/4 TenGigE 6/4 Trunk dot1q MS 1,77,79,754,3200,3210,3215,3225 Vlan 77 IP / VIP 254 Vlan 79 IP / VIP 254 ACE Vlan 754 IP / VIP 254 Vlan 3200 IP MS ip route ip route c65k-verw-lfi-1 TenGigE 3/1 c65k-verw-hvtzent-1 TenGigE 3/1 ip route ip route Trunk dot1q 3200,3210,3215,3225 Trunk dot1q 3200, 3210, 3215,3225 TenGigE 5/4 TenGigE 5/4 FWSM Port Channel 100 FWSM TenGigE 8/3 TenGigE 9/3 TenGigE 7/4 TenGigE 8/4 MS lficore-gw Trunk dot1q 199, 3205,3210, ,... physikcore-gw MS KLIPS Testszenario LN Folie: 12

13 Logische Konfiguration Lovernet Physik LFI HVTZENT Folie: 13

14 Spiegelung Köln-Bonn: Was ist uns DR wert? Folie: 14

15 Aufbau Spiegelcluster in Bonn Aufbau gleichartiger Struktur für Layer 1 bis 3 (VMware, Storage-Virtualisierung, SAN) im HRZ Uni Bonn Softwarelösung zum asynchronen Spiegeln der Datenbestände von Köln nach Bonn Physikalische Grundlage: CREDO- Netzverbund Aachen-Bonn-Köln (GigE) Folie: 15

16 Eingesetzte Technologien Software: Double-Take Availability Service: DNS-Service von DYNDNS.ORG Server-Virtualisierung: VMware vsphere 4 Storage-Virtualisierung: NetApp SAN: Brocade-Switches Hardware: IBM-Bladecenter Folie: 16

17 Double-Take Funktionalität 1 Lokales Verwaltungsnetz Lokales Verwaltungsnetz POS/LSF System POS/LSF System DMZ Verwaltungsnetz DMZ Verwaltungsnetz 2 x Apache https Server 4 x Tomcat Servlet Engine 12 x POS-GX Server Win x Apache https Server 4 x Tomcat Servlet Engine 12 x POS-GX Server Win2003 Client () FW Port 443 offen 2 x Apache URL Rewriter FW Port 8009 offen Tomcat Client () FW Port 443 offen 2 x Apache URL Rewriter FW Port 8009 offen Tomcat LSF Datenbank SOSPOS Datenbank LSF Datenbank SOSPOS Datenbank Folie: 17

18 Double-Take Funktionalität 2 Standort Köln Lokales Verwaltungsnetz POS/LSF System Standort Bonn Lokales Verwaltungsnetz POS/LSF System DMZ Verwaltungsnetz DMZ Verwaltungsnetz 2 x Apache https Server 4 x Tomcat Servlet Engine 12 x POS-GX Server Win x Apache https Server 4 x Tomcat Servlet Engine 12 x POS-GX Server Win2003 Client () FW Port 443 offen 2 x Apache URL Rewriter FW Port 8009 offen Tomcat Fallback Client () FW Port 443 offen 2 x Apache URL Rewriter FW Port 8009 offen Tomcat LSF Datenbank SOSPOS Datenbank LSF Datenbank SOSPOS Datenbank DR-Steuerung automatisch oder manuell Folie: 18

19 Dank geht an Manfred Liebchen, RRZK Uni Köln Richard Rossbach, Abt32/UzK Michael Corsten, HRZ Uni Bonn Daniel Krämer, HRZ Uni Bonn Folie: 19

20 ? Fragen? Folie: 20