Corporate IT Monitoring

Transkript

1 Corporate IT Monitoring Bei der ING-DiBa AG Dr. Sven Wohlfarth Teamleiter ING-DiBa Command Center Nürnberg

2 ING-DiBa im Überblick Frankfurt Nürnberg Hannover 7,4 Mio. Kunden 109 Mrd. Euro Bilanzsumme Mitarbeiterinnen und Mitarbeiter 170 Mrd. Euro Geschäftsvolumen Standorte Frankfurt, Nürnberg, Hannover Corporate IT Monitoring bei der ING-DiBa AG

3 Command Center im Überblick Überwachung aller geschäftskritischen Applikationen und Systeme Fokus der Überwachung Banking Services Bank Processing Service Center IT Services Eskalation von Major Incidents an unsere Kunden und die IT Koordination und Unterstützung bei der Problemlösung Corporate IT Monitoring bei der ING-DiBa AG

4 Agenda Ziele und Architektur Evaluation der Alternativen Pilotierung und Durchführung Live-Sample Zusammenfassung und Diskussion Corporate IT Monitoring bei der ING-DiBa AG

5 Ausgangspunkt und Ziele des Projekts Ausgangspunkt Gewachsene, passive Systemarchitektur Black-Box Überwachung von Applikationen Marginale Funktions- oder Performance- Checks Geringe Flexibilität Hoher Aufwand und hohe Kosten für Betrieb und Weiterentwicklung Unterschiedliche Überwachungssysteme in der IT Ziele und Anforderungen Flexibles und gut erweiterbares Monitoring- System (z.b. bei neuen Komponenten, Customized Views, etc.) Monitoring von Anwendungen und Prozesse (inkl. Performance-Messwerten) Integration und Vereinheitlichung der Monitoring Systeme Gute Wartbarkeit und geringe Abhängigkeiten Verhältnismäßigkeit der benötigten Ressourcen und Aufwand (Invest, Aufbau, Betrieb, Lizenzen, Wartung) Ausfallsicherheit Corporate IT Monitoring bei der ING-DiBa AG

6 Ist-Architektur: Passives Prozess- und Applikations-Monitoring Umbrella Monitoring im Command Center Monitoring durch Fachteams Monitoring durch Fachteams Monitoring durch Fachteams Infrastruktur Bank-Applikationen Bank-Prozesse Unterschiedliche Tools, Know-How und Inventory bei Fachteams Corporate IT Monitoring bei der ING-DiBa AG

7 Soll-Architektur: Aktives Prozess- und Applikations-Monitoring Aktive Monitoring-Plattform im Command Center Fachliche Konfiguration durch Fachteams Fachliche Konfiguration durch Fachteams Fachliche Konfiguration durch Fachteams Infrastruktur Bank-Applikationen Bank-Prozesse Corporate IT Monitoring bei der ING-DiBa AG

8 Agenda Ziele und Architektur Evaluation der Alternativen Pilotierung und Durchführung Live-Sample Zusammenfassung und Diskussion Corporate IT Monitoring bei der ING-DiBa AG

9 Evaluation der Alternativen Alternative 1: Passiver Betrieb mit Nagios/Icinga Austausch von Active Friend Alternative 2: Aktiver Betrieb mit Nagios/Icinga Aufbau einer aktiven Überwachung, schrittweiser Übergang Alternative 3: HP Business Service Management Aufbau einer aktiven Überwachung, Fokus Prozess Monitoring Kriterien: Flexibilität, Anwendungsmonitoring, Integrationsaufwand, Wartung und Lizenzkosten Corporate IT Monitoring bei der ING-DiBa AG

10 Projekt-Zeitplan 12/09 03/10 06/10 09/10 12/10 03/11 06/11 09/11 12/11 03/12 06/12 09/12 Meilensteine Suche nach Alternativen Suche nach Alternativen abgeschlossen Alternativensuche Pilotierung abgeschlossen 50% der Überwachungen migriert Projektabschluss Pilotierung Pilotierung Migration Teil 1 Teil 1 Migration Teil 2 Teil Corporate IT Monitoring bei der ING-DiBa AG

11 Agenda Ziele und Architektur Evaluation der Alternativen Pilotierung und Durchführung Live-Sample Zusammenfassung und Diskussion Corporate IT Monitoring bei der ING-DiBa AG

12 Konzeption Pilotierung und Livestellung Pilotierung Fokus: Lauffähigkeit des aktiven Monitoring-Konzepts und der Service-Prozesse unter realen Bedingungen testen Pilotierung auf der späteren Produktionshardware Livestellung Komplette Neuinstallation mit Erfahrungen aus Pilotierung Migration nach Teams (26/4) Vorgehen: Kickoff, Feinplanung je Team, Endekriterien Maximal 3 Migrationsbranches parallel Beginn der Migration mit Pilotteilnehmern Corporate IT Monitoring bei der ING-DiBa AG

13 Architektur des Icinga-Systems Cluster für Integrations- u. Produktions-Umgebung Betriebssystem Linux Red Hat Cluster-Lösung Pacemaker Datenhaltung lokal und gespiegelt (DRBD) Command Center ist Application-Owner Persistenz Zunächst: Anbindung an Multi-Instanz-DB (Oracle) Wechsel in 09/12 auf MySQL lokal und gespiegelt Aufbau Cluster Corporate IT Monitoring bei der ING-DiBa AG

14 Konfiguration der Applikation Icinga und Icinga-Web Installation Icinga Core ( ), Icinga-Web ( ) Add-ons: EventDB, PNP4Nagios, LConf Starker Fokus auf Benutzerfreundlichkeit Aggregation und automatische Filterung von Events Vereinfachung von Workflow Ausblendung von Funktionen, vorbelegte Felder Top-Level View Drill-Down mit Event-Filterung Statusorientierte Anzeige (Farben, Effekte, Ausblendung) Integration der EventDB, VA, Copy2Clip (Icinga Web/ EDB) Editor: Baumstruktur, Einbindung an Host, Services und Gruppen Corporate IT Monitoring bei der ING-DiBa AG

15 Icinga-Web und Top-Level-View Corporate IT Monitoring bei der ING-DiBa AG

16 Fachliche Zentralisierung des Monitoring Prozesses Vorgaben an Monitoring Prozess durch CC Verknüpfung Überwachung mit Verfahren Ausfallsicherheit bei Einsatz 3rd Party Monitoring Organisatorische Anforderungen des CC Nutzung verschiedener Umgebungen Entwicklung (je Team) Test (je Team) Integration (CC) Produktion (CC) Fachliche Verantwortung bleibt bei den jeweiligen Fachteams Corporate IT Monitoring bei der ING-DiBa AG

17 Projekt-Zeitplan 12/09 03/10 06/10 09/10 12/10 03/11 06/11 09/11 12/11 03/12 06/12 09/12 Meilensteine Suche nach Alternativen Suche nach Alternativen abgeschlossen Alternativensuche Pilotierung abgeschlossen 50% der Überwachungen migriert Projektabschluss Pilotierung Pilotierung Migration Teil 1 Teil 1 Migration Teil 2 Teil Corporate IT Monitoring bei der ING-DiBa AG

18 Agenda Ziele und Architektur Evaluation der Alternativen Pilotierung und Durchführung Live-Sample Zusammenfassung und Diskussion Corporate IT Monitoring bei der ING-DiBa AG

19 Screenshots Corporate IT Monitoring bei der ING-DiBa AG

20 Screenshots Corporate IT Monitoring bei der ING-DiBa AG

21 Screenshots Corporate IT Monitoring bei der ING-DiBa AG

22 Screenshots Corporate IT Monitoring bei der ING-DiBa AG

23 Agenda Ziele und Architektur Evaluation der Alternativen Pilotierung und Durchführung Live-Sample Zusammenfassung und Diskussion Corporate IT Monitoring bei der ING-DiBa AG

24 Ergebnis der Migration Icinga Server (Hosts) Messpunkte (Services) Ca. 350 User Events pro Tag Ausgangspunkt 2010 Ca Server (passiv) Messpunkte 100 User Events pro Tag Corporate IT Monitoring bei der ING-DiBa AG

25 Fazit der Migration auf das Monitoring-System Icinga Modernes, flexibles Monitoring-System implementiert Monitoring- und Service-Prozesse neu gestaltet Kosten- & Zeitplan eingehalten Bei Fragen stehe ich Euch gern zur Verfügung: Dr. Sven Wohlfarth Corporate IT Monitoring bei der ING-DiBa AG