Workshop: Nagios/Icinga Business ProzessMonitoring mit BPView

Transkript

1 Workshop: Nagios/Icinga Business ProzessMonitoring mit BPView DI (FH) René Koch 1/59

2 Agenda Was ist BPView? Monitoring Daten sammeln Dashboards und Business Prozesse definieren Roadmap Fragen und Antworten 2/59

3 Was ist BPView? 3/59

4 Was ist BPView? Webbasiertes Monitoring Add-On Ausgelegt für Großbildfernseher Sammlung von Monitoring Daten Korrelation und Darstellung von Business Prozessen 4/59

5 Entstehung BPView Aufbau Monitoring-System bei s IT Solutions AT (OSMC 2013: Icinga Web für große Installationen zu langsam Notwendigkeit Checks nach Produkten zu gruppieren und kategorisieren Business Process Addon Top Level Views (ING DiBA OSMC 2012: 5/59

6 Entstehung BPView Business Process Addon: Funktionalität (Korrelation) ok, User Interface nicht geeignet für die Anforderungen Top Level View : übersichtliche UI, weniger Korrelations-Möglichkeiten wie BP-Addon, stark mit Icinga Web verknüpft Entwicklung von BPView 6/59

7 Entstehung BPView Web Interface ähnlich Top Level Views Funktionalität Business Process Addon (Korrelation) 3 Ebenen: Environments, Produktgruppen, Produkte/Business Prozesse Dashboards (Team-/Kundensichten) Detailansicht der Host- und Servicechecks Übernahme der Daten aus Icinga 7/59

8 Was ist BPView? 8/59

9 Was ist BPView? 9/59

10 Komponenten BPView Web Interface bpviewd memcached Cache-Dateien Konfigurationsdateien 10/59

11 Komponenten BPView bpviewd tcp/7777 Benutzer BPView Web UI tcp/11211 Business Prozesse Host/Servicechecks Konfigurationen KonfigurationsDateien Cache-Dateien memcached 11/59

12 Installation BPView RHEL 6 oder CentOS 6 x86_64 minimal SELinux permissive/disabled (noch) iptables deaktiviert oder Port 80/443 von außen offen Repositories: RHEL 6 Optional (bei CentOS nicht benötigt) Extra Packages for Enterprise Linux 12/59

13 Installation BPView wget wnload/bpview-0.11/bpview x86_64.rp m yum localinstall bpview x86_64.rpm service httpd start service bpviewd start service memcached start 13/59

14 Web Interface Darstellung in allen gängigen Browsern JavaScript wird zwingend benötigt Apache-Webserver mit CGI Nur Darstellung Logik macht bpviewd Authentifizierung via z.b. mod_authz_ldap Geschrieben in Perl (Template Toolkit), HTML, CSS, JavaScript (jquery) 14/59

15 Workshop: Zugänge 15/59

16 Zugänge ssh -p Benutzer: bpview Passwort: GLT2015! 16/59

17 Demo: Installation & Webinterface 17/59

18 Monitoring Daten sammeln 18/59

19 Monitoring Daten sammeln Host- und Service-Checks werden von Monitoring-Backends periodisch synchronisiert Interval definiert in bpviewd.yml: bpviewd: sleep: 300 Backend-Daten definiert in datasource.yml: default: source: mk-livestatus 19/59

20 Monitoring Daten sammeln Speicherung in Cache-Files (Ramdisk): mk-livestatus: cache_time: 30 cache_file: /dev/shm/bpview_mklivestatus_cache 20/59

21 Unterstütze Backends Icinga/Nagios/kompatible Forks: IDOutils mit MySQL-DB IDOutils mit PostgreSQL-DB NDOutils mit MySQL-DB mk-livestatus Weitere geplant (z.b. Zabbix) 21/59

22 Workshop: Daten sammeln 22/59

23 Workshop: Daten sammeln Verbindung zu lokaler MySQL-Datenbank (IDOutils) 120 Sekunden cachen 20 Sekunden Timeout Andere Provider entfernen Alle 20 Sekunden Daten abholen 23/59

24 Dashboards und Business Prozesse definieren 24/59

25 Dashboards YAML-Konfigurationsdatei (*.yml) Aufbau: Dashboard Name Section (Aufteilung in Dashboard-Gruppen) Environment (z.b. Produktion/Entwicklung/Testing) Topics (Produktgruppen) Product (Business Prozess) 25/59

26 Dashboard mit Environments "Siedl Networks Alternative": section: "Siedl Networks GmbH" "External": "mailsystem": views: "webservices": "Produktion": "monitoring": display: order: 1 "Demo": inrow: 2 display: sort: alphabetical order: 2 topics: inrow: 1 "Internal": sort: alphabetical "terminalserver": topics: "active_directory": "Services": "network": "demo.siedl.net": "backup": "monitoring": 26/59

27 Dashboard mit Environments 27/59

28 Dashboard - Darstellung Darstellung definiert über display Konfigurationsblock: views: "Produktion": display: order: 1 inrow: 5 sort: alphabetical 28/59

29 Dashboard - alphabetisch sort: alphabetical 29/59

30 Dashboard - productnumbers sort: productnumbers 30/59

31 Dashboard - Anzahl Topics inrow: 2 31/59

32 Workshop: Dashboards erstellen 32/59

33 Workshop: Dashboards Dashboard: Workshop 01 Abteilung: Grazer Linuxtage Environment: Produktion Topic: Workshop Products: BPView ovirt 33/59

34 Workshop: Dashboards Environment: Entwicklung Topic: Virtualisierung und Cloud Products: OpenStack Management Topic: Identity Management Products: Active Directory 34/59

35 Business Prozesse definieren 35/59

36 Business Prozesse definieren Business Prozesse werden in /etc/bpview/bpconfig/*.yml definiert Dateiname: <environment>-<topic>-<product>.yml Muss gleich lauten wie im Dashboard definiert Umlaute, Sonderzeichen durch _ ersetzen Korrelation macht bpviewd 36/59

37 Business Prozess Korrelation Service und/oder Hostchecks werden über die folgende Logik korreliert AND OR MIN OR und MIN aktuell noch nicht 100% unterstützt (z.b. kein Host-Down Status) 37/59

38 Business Prozess Korrelation Business Prozess Stati (0.11): Status Farbe Code Not monitored Grau 99 Major (Host down) Schwarz 98 Critical Rot 2 Warning Gelb 1 Unknown Orange 3 OK Grün 0 38/59

39 Business Prozess Korrelation YAML-Konfigurationsdatei (*.yml) Aufbau: Dateiname (interner Business Prozess Name) Name Type (AND OR MIN) Hosts Services 39/59

40 Business Prozess Korrelation demo-services-demo_siedl_net: BP: "Postfix Mailqueue": NAME: "demo.siedl.net" TYPE: and "DISK /": MIND: 0 "MySQL Server": HOSTS: "UCS SSL Zertifikat": "demosrv": "Apache Server": "Load Usage": "PING": "DISK /var": "IMAP Dienst": "POP3 Dienst": "HTTPS Webaccess": "Swap Usage": "Zarafa Dienste": "SSH Deamon": "Zarafa Outlook": "Memory Usage": 40/59

41 Business Prozess Korrelation 41/59

42 Workshop: Business Prozess Korrelation 42/59

43 Workshop: Business Prozesse AND-Korrelation: produktion-workshop-bpview produktion-workshop-ovirt entwicklung-identity_management-active_directory OR-Korrelation: entwicklung-virtualisierung_und_cloud-openstack MIN-Korrelation: entwicklung-virtualisierung_und_cloud-management 43/59

44 Details und Filter 44/59

45 Dashboard - Details Klick auf Product (Business Prozess) zeigt Details an Anzeige aller Service- und Hostchecks ( HOSTCHECK wenn definiert) Übernahme aus Cache-File oder live Filter gelten auch für Details 45/59

46 Dashboard - Details 46/59

47 Dashboard - Filter Filter nach Stati Filter nach Hostnamen Via Menü oder Query String: &filter=state+ok &filter=name+fileserver 47/59

48 Dashboard - Status Filter Vordefinierte Filter + custom Filter 48/59

49 Dashboard - Hostname Filter 49/59

50 Workshop: Details und Filter 50/59

51 Roadmap 51/59

52 Roadmap BPView 0.12: stone%3a%22bpview+0.12%22 Scheduled Downtimes (#40, #70) Acknowledgments (#72, #70) Host Down Events für mk-livestatus (#71, #67) Alter der Monitoringdaten anzeigen (#31) Verbessertes Error-handling (#18) Reload Bug gefixt, Reload verbessert (#60, #46, #47) 52/59

53 Roadmap BPView 0.13: View% Unterstützung für Fedora 21 (#63) Unterstützung für RHEL 7 (#59) Unterstützung für Debian 8 (#7) Hostsuche in allen Dashboards (#39) 53/59

54 Roadmap Dokumentation (publican) BOOK PUBLISHING TOOL Mehrere Monitoring Backends (Provider) nutzbar Webseite (bpview.org) Code Cleanup Maillingliste 54/59

55 Roadmap Modulares System für Data Provider Weitere Data Provider (z.b. Zabbix) RHEL 7 Support Debian/Ubuntu Support SUSE Support SELinux Support 55/59

56 BPView Unterstützung 56/59

57 BPView Unterstützung Testen Feedback Mitwirken Backend Code / zusätzliche Provider (Perl) Frontend (HTML/CSS/JavaScript/Design) Dokumentation/Webseite 57/59

58 Weitere Informationen Webseite (in Arbeit): Github: Maillingliste (in Arbeit) 58/59

59 Danke für die Aufmerksamkeit! Fragen? 59/59