Monitoring der IT-Infrastruktur mit Nagios und ergänzenden Tools

Größe: px

Ab Seite anzeigen:

Download "Monitoring der IT-Infrastruktur mit Nagios und ergänzenden Tools"

Anna Flater
vor 8 Jahren
Abrufe

1 Monitoring der IT-Infrastruktur mit Nagios und ergänzenden Tools André Beck IBH IT-Service GmbH Gostritzer Str. 67a Dresden

2 Überblick Inhalt Aufbau von Nagios Beispiele des Web-UI Konfiguration Ergänzende Software SmokePing: RTT Graphing Torrus: The Data Series Processing Framework Empfohlene Ergänzungen 2

3 Einordnung NetSaint Nagios Host & Service Monitor Hosts Netzwerkgeräte (Switches, Router) Server Infrastrukturgeräte (UPS, Rack Monitoring, Environmental) Services Reachability (ICMP Echo) SMTP, HTTP(S), POP3, DNS... Generic SNMP Ressourcen (Load, Disk Usage...) FOSS (GPLv2) Linux und andere Unixoide 3

Environmental) Services Reachability (ICMP Echo) SMTP, HTTP(S), POP3, DNS.

4 Aufbau Struktur Plugin Design Zahlreiche gelieferte Plugins Problemlos lokal erweiterbar Beliebige Kommandos und Scripte integrierbar Nagios Core ruft Plugins Active Checks (Plugin fragt Host/Service direkt) Passive Checks (anderer Mechanismus fragt Host/Service) Checks füttern State Machine Host: UP/DOWN/UNREACHABLE Service: OK/WARNING/CRITICAL/UNKNOWN State Changes erzeugen Notifications Prinzipiell beliebiges Kommando-Backend und Pager/SMS explizit vorgesehen 4

Mechanismus fragt Host/Service) Checks füttern State Machine Host: UP/DOWN/UNREACHABLE Service:

5 User Interface Frontend Core, State Machine und Plugins sind Standalone Läuft als Daemon Start beim Systemstart Prinzipiell ohne Frontend lauffähig Web Frontend Sammlung von CGIs Benötigen WWW-Server (bevorzugt Apache2) Interaktiver Blick in Nagios Zustand Tactical Overview Host & Service Status Detail, Host & Service Group Summaries Map, Host & Service Problems... Operator Control Acknowledge, Notifications, Scheduled Downtime... 5

(bevorzugt Apache2) Interaktiver Blick in Nagios Zustand Tactical Overview Host & Service Status Detail,

6 Web-UI Screenshots Tactical Overview 6

7 Web-UI Screenshots Status Summary 7

8 Web-UI Screenshots Status Map 8

9 Web-UI Screenshots Status Detail für einen Host 9

10 Web-UI Screenshots Notifications 10

11 Konfiguration 1 Nagios Objekte Host Repräsentiert ein Gerät (Server, Netzwerkgerät...) Satz von Parametern für das individuelle Gerät Name & Alias, IP-Adresse Parents (übergeordnete Hosts in der Abhängigkeitsstruktur) Check Parameter (Attempts, Command, Enable) Notification Parameter (Interval, Options, Period) Flap Thresholds, Performance Data, Prediction, Retention... Host Group Beliebige Zuordnungen (auch wiederholt) Bindet eine Menge von Hosts an ein oder mehrere Contact Groups 11

Abhängigkeitsstruktur) Check Parameter (Attempts, Command, Enable) Notification Parameter (Interval, Options, Period) Flap

12 Konfiguration 2 Nagios Objekte Service Repräsentiert einen Dienst auf einem Gerät Satz von Parametern für den Dienst bzw. die Ressource Host oder Host Group (Name) Beliebige Bezeichnung (z.b. HTTP) Check Parameter (Attempts, Command, Enable) Notification Parameter (Interval, Options, Period, Default Contact Groups) Flap Thresholds, Performance Data, Prediction, Retention... Mindestens ein Service je Host Typisch PING (check_ping etc) 12

w. die Ressource Host oder Host Group (Name) Beliebi

13 Konfiguration 3 Nagios Objekte Contact Individueller Empfänger einer Notification Satz von Parametern für den Contact Name und Alias Adresse Pager/SMS-Adresse Host Notification Parameter (Options, Period, Command) Service Notification Parameter (Options, Period, Command) Contact Group Sammlung mehrerer Contacts unter Gruppennamen Referenziert z.b. von Host Group und Service (Group) 13

Parameter (Options, Period, Command) Service Notification Parameter (Options, Period, Command)

14 Konfiguration 4 Nagios Objekte Escalations Erlauben temporäre Erweiterung der Contacts Host bzw. Host + Service Contact Groups (nicht additiv!) First Notification (z.b. 3) Last Notification (z.b. 3) Notification Interval (während der Escalation) Etwas umständlich zu handhaben Nicht vergessen, auch die gewöhnlichen Contact Groups aufzuführen: Service: admins Service Escalation: admins+managers (bei Notification 3) 14

15 Konfiguration 5 Textfile Style Configuration Klassische Konfiguration Unter /etc/nagios3 (Debian) nagios.cfg (zentrale Konfigurationsdatei) cgi.cfg (wird vom Web-UI benutzt) conf.d/* (individuelle Konfigurationsdateien)... Verify Configuration nagios3 -v /etc/nagios3/nagios.cfg 15

16 Konfiguration 6 Templates # Generic host definition template define host { name generic-host ; The name of this host template notifications_enabled 1 ; Host notifications are enabled event_handler_enabled 1 ; Host event handler is enabled flap_detection_enabled 1 ; Flap detection is enabled process_perf_data 1 ; Process performance data retain_status_information 1 ; Retain status information across program restarts retain_nonstatus_information 1 ; Retain non-status information across program restarts register 0 ; DONT REGISTER THIS DEFINITION - ITS JUST A TEMPLATE! } [...] # Template for IBH core routers define host { use generic-host name ibh-core-router check_command check-host-alive max_check_attempts 10 notification_interval 60 notification_period 24x7 notification_options d,u,r register 0 } [...] define host { use ibh-core-router host_name nexus alias NEXUS address parents sw-ibh-xg1 } 16

$..] # Template for IBH core routers define host { use generic-host name ibh-core-router check_command check-host-alive max_check_attempts 10 notification_interval 60 notification_period 24x7$

17 Konfiguration 7 SNMP Hot Routers local-commands.cfg: [...] define command { command_name snmp_c72xx_temp command_line /usr/lib/nagios/plugins/check_snmp -H $HOSTADDRESS$ -C $ARG1$ -o $arg2$ -w $ARG3$ -c $ARG4$ -l $ARG5$ -u " C" } [...] services.cfg: [...] # Either the I/O or standalone NPE inlet define service { use ibh-generic-service name c72xx-temp1-service service_description TempSensor1 check_command snmp_c72xx_temp!community!1!15:32!10:36!sensor1 register 0 } [...] define service { use c72xx-temp1-service service_description IO-Inlet } [...] host_name nexus 17

$..] # Either the I/O or standalone NPE inlet define service { use ibh-generic-service name c72xx-temp1-service service_description TempSensor1$

18 Konfiguration 8 SNMP Link (Aggregate) Monitoring local-commands.cfg: [...] # 'check_ifoperstatus_ifindex' command definition define command{ command_name check_ifoperstatus_ifindex command_line /usr/lib/nagios/plugins/check_ifoperstatus -H $HOSTADDRESS$ -C community -k $ARG1$ } services.cfg: [...] # ifoperstatus define service { use ibh-generic-service name ifoperstatus-service service_description ifoperstatus register 0 } [...] define service { use ifoperstatus-service host_name sw-db-xg1 service_description Te0/1-10GBase-LR to sw-ibh-xg2 check_command check_ifoperstatus_ifindex!10201 } define service { use ifoperstatus-service host_name sw-db-xg1 service_description Te0/2-10GBase-LR to sw-cc-xg1 check_command check_ifoperstatus_ifindex!10202 } 18

$community -k $ARG1$ } services.cfg: [...] # ifoperstatus define service { use ibh-generic-service name ifoperstatus-service service_description ifoperstatus register 0 } [.$

19 Stärken und Schwächen Aspekte von Monitoring-Paketen Monitoring vs. Graphing Elaboriertes Monitoring mit angeflanschtem Graphing Elaboriertes Graphing mit angeflanschtem Monitoring Flexibilität vs. Turn-Key Solution Vorbereitete Agents mit hoher Systemintegration Kenntnis von SNMP MIBs (MIB-2, Enterprise) Zugriff auf weitere Management-APIs User Scripting Skalierbarkeit Ressourcen, Maintainability Mehr als nur ein Tool einsetzen 19

20 RTT Graphing 1 Latenzmessung in Nagios Primär ein Erreichbarkeits-Test Nicht häufig/regelmäßig genug für SLA-Aussagen Keine überzeugende Visualisierung der Latenzen SmokePing Messung von RTT und Paketverlust Unterstützt diverse Backends (fping, Cisco SLA,...) Datenhaltung in speziell angepasstem RRD-Format 5min Messintervall, ein Ping aller 15s 20 Latenzwerte pro Intervall aussagekräftige Visualisierung Monitoring-Zusatz (Mails bei Auftreten gewisser Muster) 20

21 RTT Graphing 2 SmokePing Visualisierung Grafiken enthalten Median der RTT (Kurve) Jitter der RTT ( Rauchfahnen um die Kurve) Paketverluste (Einfärbung und Lücken der Kurve) 21

22 Data Series Processing 1 Torrus: The Data Series Processing Framework Fokus auf Graphing Erfassung: Collector Daemon Primäres Backend RRD Monitoring: Monitor Daemon Monitoring-getriggerte Befüllung von Tokensets Start von Skripten auf Basis aktueller und historischer Messwerte RPN-Arithmetik Holt-Winters Prediction Violation Tracking verwandt mit MRTG, Cricket und Cacti Cricket done right Konfiguration in XML-Dateien skaliert für große Netze (> SNMP OIDs pro 5min Intervall) Mehrere Trees, Distributed Setup möglich, RRD I/O! Konfiguration nicht trivial 22

23 Data Series Processing 2 Torrus: The Data Series Processing Framework Präsentation: Web-Interface Perl-Modul in Apache2 (Prefork-MPM) Einfache RRD-Graphen für diverse Seriendaten Kombinierte Graphen (In/Out a la MRTG) Graph Stacking manuell machbar Holt-Winters Visualisierung 23

24 Data Series Processing 3 Torrus: The Data Series Processing Framework SNMP DevDiscover Erzeugt automatisch Graphen für auf den Geräten unterstützte MIBs Überstützte MIBs (Auswahl): Generic SNMP MIBs UPS-MIB (USV) ENTITY-MIB (Temperatur) HOST-RESOURCES-MIB (CPU, RAM, Festplatten) IF-MIB (Netzwerk) Hersteller MIBs (Cisco, HP, MS Windows) typische Verwendung im LAN: Byte-, Paket-, Fehler-Zähler (Netzwerk) Speicherbelegung (RAM, Platten) Spannung, Leistung, Auslastung (USV) Temperatur, Luftfeuchte (Netzwerk, Server, USV, RMS etc) 24

25 Data Series Processing 4 Torrus: Longterm View Last day graph Last week graph Last month graph Last year graph Memory Leak! 25

26 Weitere Tools Empfohlene Ergänzungen NeDi: Network Discovery CDP/LLDP Topology Discovery und mehr An welchem Switch-Port wird die IP- oder MAC-Adresse gesehen? RANCID: Really Awesome New Cisco config Differ ermittelt Konfigurationsänderungen Konfigurationsstände werden in einem VCS abgelegt Konfigurations-Historie Benachrichtigung verwantwortlicher Personen per Mail Unterstützt Cisco, HP, Netscaler u.a. Plattformen 26

27 Vielen Dank! Fragen Sie! Wir antworten.

Ähnliche Dokumente

Überwachung der IT-Infrastruktur mit Nagios ein Erfahrungsbericht

Überwachung der IT-Infrastruktur mit Nagios ein Erfahrungsbericht André Beck IBH IT-Service GmbH Gostritzer Str. 61-63 01217 Dresden http://www.ibh.de/ support@ibh.de www.ibh.de IBH Ingenieurbüro Prof.