Wolfgang Barth. Nagios. System- und Netzwerk-Monitoring. 2., aktualisierte und erweiterte Auflage

Transkript

1 Wolfgang Barth Nagios System- und Netzwerk-Monitoring 2., aktualisierte und erweiterte Auflage

2 Inhaltsverzeichnis Vorwort zur zweiten Auflage 19 Einleitung 23 I Vom Quellcode zum lauffähigen System 33 1 Installation Vorbereitende Schritte Benötigte User ermitteln und anlegen Source-Code übersetzen Nagios automatisch starten Plugins installieren und testen Installation Plugin-Test Konfiguration des Webinterfaces Apache einrichten SELinux User-Authentifizierung 47 2 Konfiguration Die Hauptkonfigurationsdatei nagios. cfg Objekte - eine Übersicht Zu überwachende Rechner mit host festlegen Rechner gruppieren mit hostgroup Zu überwachende Dienste festlegen mit service Dienste mit servicegroup zusammenfassen 68

3 2.7 Adressaten für Fehlermeldungen festlegen: contact Die Nachrichtenempfänger: contactgroup Wenn Nagios etwas tun soll: Das command-objekt Zeitfenster definieren mit timeperiod Templates Konfigurationshilfen für Tippfaule Services für mehrere Rechner definieren Eine Hostgruppe für alle Rechner Weitere Konfigurationshilfen CGI-Konfiguration in cgi.cfg Die Ressourcen-Datei resource. cfg 78 3 Inbetriebnahme Überprüfen der Konfiguration Startschuss für die Überwachung Manueller Start Konfigurationsänderungen wirksam werden lassen Übersicht über das Webinterface 83 II En Detail 87 4 Grundlagen Die Netzwerktopologie berücksichtigen On-Demand-Host-Checks vs. regelmäßige Erreichbarkeitsprüfung Zustände von Hosts und Services 94 5 Service-Checks und ihre Ausführung Netzwerkdienste direkt prüfen Plugins via SSH auf dem entfernten Rechner ausführen Der Nagios Remote Plugin Executor Überwachung via SNMP Der Nagios Service Check Acceptor 102

4 6 Plugins für Netzwerkdienste Standardoptionen Erreichbarkeitstest mit Ping check_icmpals Service-Check check.icmpals Host-Check Mailserver überwachen SMTP überwachen mit check_smtp POP und IMAP Überwachung von FTP- und Webservern FTP-Services Webserverkontrolle via HTTP Webproxies überwachen Domain-Name-Server unter Kontrolle DNS-Check mit nslookup Nameserver-Überwachung mit dig Secure-Shell-Server abfragen Generische Netzwerkplugins TCP-Ports überprüfen UDP-Ports überwachen Datenbanken überwachen PostgreSQL MySQL LDAP-Verzeichnisdienste überwachen Kontrolle eines DHCP-Servers USV-Überwachung mit den Network UPS Tools Gesundheitscheck eines NTP-Servers mit check_ntp_peer Lokale Ressourcen überprüfen Freie Festplattenkapazität Auslastung des Swap-Bereichs Systemlast prüfen Prozesse überwachen Logfiles unter Kontrolle Das Standard-Plugin check_log 170

5 Inhaltsverzeichnis Die moderne Variante: check_logs.pl Das Schweizer Taschenmesser: check_logf iles Anzahl der eingeloggten User im Blick behalten Systemzeit unter Kontrolle Systemzeit via NTP überprüfen Systemzeit mit dem Time-Protokoll kontrollieren Regelmäßiger Einblick in den Zustand der Mail-Queue Das Änderungsdatum einer Datei im Auge behalten USVs mit apcupsd überwachen Nagios kontrolliert sich selbst Manueller Aufruf des Plugins per Skript Hardware-Checks mit LM-Sensoren Plugins für Sonderaufgaben Das Dummy-Plugin für Tests Plugin-Ergebnisse negieren Hyperlinks einfügen mit urlize Host- oder Service-Cluster als Gesamtheit prüfen Checks mit check_multi zusammenfassen Mehrzelliger Plugin-Output Installationsvoraussetzungen Installation und Test Konfigurationsdatei Kommandozeilenparameter Performancedaten und PNP Einfaches Business-Prozess-Monitoring Plugins via SSH ausführen Das check_by_ssh-plugin SSH-Konfiguration SSH-Schlüsselpaar auf dem Nagios-Server generieren Den User nagios auf dem Zielhost einrichten SSH-Verbindung und check_by_ssh testen Nagios-Konfiguration 215 fs"

6 Inhaltsverzeichnis 10 Der Nagios Remote Plugin Executor (NRPE) Installation Distributionsspezifische Pakete Installation aus dem Quellcode Start via Inet-Daemon xinetd-konfiguration inetd-konfiguration Wacht der Inet-Daemon am NRPE-Port? NRPE-Konfiguration auf dem zu überwachenden Rechner Parameterübergabe an die lokalen Plugins NRPE-Funktionstest Nagios-Konfiguration NRPE ohne Parameter-Übergabe NRPE mit Parameter-Übergabe Optimierung der Konfiguration Indirekte Checks Überwachungsrelevante Informationen sammeln mit SNMP Einführung in SNMP Die Management Information Base SNMP-Versionen NET-SNMP Werkzeuge zur SNMP-Abfrage Der NET-SNMP-Daemon Nagios-eigene SNMP-Plugins Das generische SNMP-Plugin check_snmp Mehrere Interfaces gleichzeitig überprüfen Betriebszustand einzelner Interfaces testen Weitere SNMP-basierte Plugins Festplattenplatz und Prozesse überwachen Auslastung von Netzwerkinterfaces beobachten Die manubulon. com-plugins für spezielle Anwendungszwecke 264 9

7 : : - 12 Das Nagios-Benachrichtigungssystem Wer soll wann wie informiert werden? Wann entsteht eine Nachricht? Die Nachrichtenfilter Benachrichtigungen systemweit ein- und abschalten Rechner- und dienstbezogene Nachrichten ermöglichen und unterdrücken Personenbezogene Filtermöglichkeiten Fallbeispiele Externe Benachrichtigungsprogramme Benachrichtigung per Nachricht per SMS Eskalationsmanagement Abhängigkeiten zwischen Hosts und Services berücksichtigen Der Standardfall: Service Dependencies Nur für Ausnahmefälle: Host Dependencies Passive Tests über das External Command File Die Schnittstelle für externe Kommandos Passive Service-Checks Passive Host-Checks Auf veraltete Informationen passiver Checks reagieren Der Nagios Service Check Acceptor (NSCA) Installation Konfiguration des Nagios-Servers Die Konfigurationsdatei nsca. cfg Konfiguration des Inet-Daemons Konfiguration auf Clientseite Testergebnisse an den Server schicken Anwendungsbeispiel I: Syslog und Nagios integrieren syslog-ng für den Einsatz mit Nagios vorbereiten Nagios-Konfiguration: Volatile Services Fehlerzustände manuell aufheben Anwendungsbeispiel II: Verarbeitung von SNMP-Traps 320

8 . Inhaltsverzeichnis Traps empfangen mit snmptrapd Traps an NSCA übergeben Die passende Service-Definition Verteiltes Monitoring Den OCSP/OCHP-Mechanismus einschalten OCSP/OHCP-Kommandos definieren Einsatzszenarien Redundanz bei Konfigurationsdateien vermeiden Templates definieren 330 III Webinterface und Visualisierungsmöglichkeiten Die klassische Weboberfläche Probleme erkennen und behandeln Kommentare zu problembehafteten Rechnern Verantwortung für Probleme übernehmen Die einzelnen CGI-Programme im Überblick Statusanzeige in Variationen: Status, cgi Mehrinformationen und Steuerzentrale: extinf o. cgi Schnittstelle für externe Kommandos: cmd.cgi Das Wichtigste auf einen Blick: tac. cgi Topologische Netzwerkkarte mit statusmap.cgi Navigation in 3D: statuswrl. cgi Statusabfrage via Handy: statuswml. cgi Gestörte Teilnetze analysieren: outages.cgi Objektdefinition abfragen mit conf ig. cgi Verfügbarkeitsstatistik: avail.cgi Wie oft tritt welches Ereignis ein? - histogram. cgi Logeinträge nach Zuständen filtern: history.cgi Nachrichten verfolgen mit notifications. cgi Anzeige aller Logfileeinträge: showlog.cgi Auswertung nach Wunsch: summary.cgi Zustände über die Zeit verfolgen: trends. cgi

9 Inhaltsverzeichnis 16.3 Wartungszeiten planen Wartungszeiträume für Hosts Wartungsfenster für Services Zusatzinformationen über Rechner und Dienste Erweiterte Host-Informationen Erweiterte Service-Informationen Das Neustart-Problem bei Konfigurationsänderungen über die Weboberfläche Modernes Outfit mit dem Nuvola-Style Flexible Weboberfläche mit den NDOUtils Der Event-Broker Die Datenbankschnittstelle Die Installation Den Quellcode übersetzen Vorbereiten der MySQL-Datenbank Upgrade des Datenbank-Designs Konfiguration Anpassen der Event-Broker-Konfiguration Konfiguration des Datenbankzugriffs Den ndo2db-daemon starten Das Event-Broker-Modul in Nagios laden NagVis Installation Den Quellcode einspielen Initiale Konfiguration Benutzer-Authentifikation NagVis-Maps erstellen Konfiguration in Textform bearbeiten Die Nagios-Weboberfläche um NagVis-Maps erweitern Grafische Darstellung von Performancedaten Plugin-Performancedaten mit Nagios verarbeiten Der Template-Mechanismus

10 1P Externe Kommandos zur Verarbeitung einsetzen Graphen fürs Web mit Nagiosgraph Basis-Installation Konfiguration Performancedaten mit Perf2rrd zur Auswertung vorbereiten Installation Nagios-Konfiguration Perf2rrd in der Praxis Der Grafik-Spezialist drraw Installation Konfiguration Praktische Anwendung Weitgehend automatisiert: NagiosGrapher Installation Konfiguration Reibungsloses Plotten mit PNP Installation Die Standardkonfiguration Die PNP-Weboberfläche Massenverarbeitung von Performancedaten Wie soll die Grafik aussehen? Weitere Tools und die Grenzen grafischer Auswertung 466 IV Spezielle Einsatzzwecke Windows-Server überwachen Agentenlose Checks via WMI Installation und Konfiguration der Zusatzdienste NSClient NC_Net NSClient OpMon Agent Probleme mit Port 1248 beheben Das check_nt-plugin 482

11 Inhaltsverzeichnis Generell unterstützte Kommandos Die erweiterten Funktionen von NCJMet Installation des Plugins check_ncnet Windows-Performance-Counter NRPE für Windows NRPE_NT, der Klassiker Plugins für NRPE unter Windows NRPE mit NSClient Interne NSClient++-Funktionen Raumtemperatur und Luftfeuchtigkeit überwachen Sensoren und Software Die messpc-software für Linux Das Abfrageprotokoll Das Nagios-Plugin check_pcmeasure2.pl Überwachung von SAP-Systemen Überprüfung ohne Login: sapinf o Installation Erster Test Das Plugin check_sap.sh Aktueller und in Perl geschrieben: check_sap.pl Überwachung mit dem Monitoring-System SAP CCMS Der Alert-Monitor im Überblick Nagios die nötigen SAP-Nutzungsrechte verschaffen Monitore und Templates Die CCMS-Plugins Performance-Optimierung Ereignisse verarbeiten mit der EventDB Funktionsweise der EventDB Installation Installationsvoraussetzungen Vorbereiten der MySQL-Datenbank Events an die Datenbank schicken mit syslog-ng

12 .:V:::v;:.. _ 23.3 Das Webinterface nutzen Vorauswahl des Filters mit URL-Parametern Das Nagios-Plugin für die EventDB Maintenance Windows-Events an Syslog senden Unverständliches lesbar machen mit SNMPTT Die Konfigurationsdatei snmptt. ini MIBs konvertieren 562 V Entwicklung Plugins selbst schreiben Programmierrichtlinien für Plugins Rückgabewerte Informationen für den Admin auf der Standardausgabe Online-Hilfe an Bord? Reservierte Optionen Schwellwertangaben Abbruch nach Zeit Performancedaten Copyright Das Perl-Modul Nagios: : Plugin Installation Datei- und Verzeichnisgrößen ermitteln Die Kommandozeile mit Getopt:: Long zerlegen Die Perl-Online-Dokumentation Das Modul Pod: :Usage Schwellwerte ermitteln Timeouts implementieren Performancedaten ausgeben Konfigurationsdateien für Plugins Oracle-Überwachung mit dem Instant-Client Den Oracle-Instant-Client installieren 590

13 _ Verbindung zur Oracle-Datenbank herstellen Ein Wrapper-Plugin für sqlplus Die Funktionsweise des Wrappers Das Perl-Plugin im Detail 593 Anhang 597 A Die Nagios-Konfigurationsparameter im Überblick 599 A.l Die Hauptkonfigurationsdatei nagios. cfg 600 A.2 CGI-Konfiguration in cgi. cfg 622 A.2.1 Authentifikationsparameter 622 A.2.2 Sonstige Parameter 624 B Schnell wechselnde Zustände: Flapping 627 B.l Flap Detection bei Services 628 B.l.l Nagios-Konfiguration 629 B. 1.2 Der Historienspeicher und der zeitliche Verlauf der Zustandsänderungen 630 B.l.3 Darstellung in der Weboberfläche 631 B.2 Flap Detection bei Hosts 633 C Eventhandler 635 C.l Ausführungszeitpunkte für Eventhandler 636 C.2 Eventhandler in der Service-Definition festlegen 637 C.3 Das Handler-Skript 638 C.4 Beachtenswertes beim Umgang mit Eventhandlern 639 D Makros 641 D.l Standardmakros 643 D.l.l Host-Makros 643 D.1.2 Service-Makros 644 D.1.3 Gruppen-Makros 644 D.1.4 Kontakt-Makros 645 D.1.5 Benachrichtigungsmakros 646 D.I.6 Makros für Zeit- und Datumsangaben 646 D.1.7 Statistikmakros 647

14 ' ', ' : :,., ;..... :... - :.. : " " :.. '. " ' , : "... : I,. :.. > : '. : '.,. - Inhaltsverzeichnis D.1.8 Standardmakros über das Environment verwenden D.2 On-Demand-Makros 648 D.3 Makros für selbstdefinierte Variablen 649 D.4 Makro-Inhalte: nicht alles ist erlaubt 651 E Single-Sign-On für die Nagios-Weboberfläche 653 E.l HTTP-Authentifikation für Single-Sign-On 654 E.2 Kerberos-Authentifikation mit mod_auth_kerb 656 E.2.1 Installation 657 E.2.2 Service-Ticket für Apache erstellen 657 E.2.3 Kerberos-Konfiguration 658 E.2.4 Apache-Konfiguration 659 E.2.5 Definition eines Nagios-Kontakts 660 E.3 Single-Sign-On mit mod_auth_ntlm_winbind 661 E.3.1 Installation 661 E.3.2 Samba vorbereiten 662 E.3.3 Apache-Konfiguration 664 E.3.4 Definition eines Nagios-Kontakts 666 E.4 Mozilla Firefox als Webclient 666 E.4.1 Firefox und NTLM 667 E.5 Microsoft Internet Explorer als Webclient 667 F Tipps zur Performance-Optimierung 669 F.l Nagios-interne Statistiken 670 F.l.l Das Kommandozeilentool nagiostats 670 F. 1.2 Nagios-Performance im grafischen Verlauf 674 F. 1.3 Ein Plugin zur Überwachung der Latenz 676 F.2 Maßnahmen zur Performance-Verbesserung 678 F.2.1 Service-Checks: so oft wie nötig, so wenig wie möglich. 678 F.2.2 Performancedaten intelligent verarbeiten 679 F.2.3 Plugins in interpretierten Sprachen vermeiden 680 F.2.4 Host-Checks optimieren 681 F.2.5 Die Sache mit dem Reaper 682 F.2.6 Passive Checks bevorzugen

15 Inhaltsverzeichnis F.2.7 Optimierung großer Nagios-Umgebungen 683 F.2.8 NDOUtils-Datenbank optimieren 684 G Der Embedded Perl-Interpreter 685 G.l Anforderungen an ein epn-taugliches Plugin 686 G.2 epn verwenden 688 G.2.1 epn einkompilieren 688 G.2.2 Interpreter-spezifische Parameter in der nagios. cf g. 689 G.2.3 epn auf Plugin-Basis deaktivieren 689 G.3 Das Testwerkzeug new_epn_mini 690 H Was ist neu in Nagios 3.0? 693 H.l Änderungen bei den Objekt-Definitionen 694 H.l.l Das host-objekt 694 H.1.2 Das service-objekt 696 H.1.3 Gruppen-Objekte 697 H.1.4 Das contact-objekt 697 H.1.5 Zeitdefinitionen 698 H.1.6 Abhängigkeitsbeschreibungen 699 H.1.7 Eskalationsobjekte 699 H.1.8 Vererbung 700 H.2 Variablen und Makros 701 H.3 Wartungsfenster, Kommentare und Acknowledgments 703 H.4 Schnell wechselnde Zustände 703 H.5 Externe Kommandos 703 H.6 Embedded Perl 704 H.7 Neue Logik für Host-Checks 705 H.8 Neustart 706 H.9 Performance-Optimierung 708 H. 10 Erweiterte Plugin-Ausgabe 708 H.11CGI 708 H. 12 Verschiedenes 709 H.13 Upgrade von Nagios 2.x auf u..