Munin. Graphisches Netzwerk- und System-Monitoring

Transkript

1 Pohl Renner: Munin

2

3 Gabriele Pohl Michael Renner Munin Graphisches Netzwerk- und System-Monitoring

4 Alle in diesem Buch enthaltenen Programme, Darstellungen und Informationen wurden nach bestem Wissen erstellt. Dennoch sind Fehler nicht ganz auszuschließen. Aus diesem Grunde sind die in dem vorliegenden Buch enthaltenen Informationen mit keiner Verpflichtung oder Garantie irgendeiner Art verbunden. Autor(en), Herausgeber, Übersetzer und Verlag übernehmen infolgedessen keine Verantwortung und werden keine daraus folgende Haftung übernehmen, die auf irgendeine Art aus der Benutzung dieser Informationen oder Teilen davon entsteht, auch nicht für die Verletzung von Patentrechten, die daraus resultieren können. Ebenso wenig übernehmen Autor(en) und Verlag die Gewähr dafür, dass die beschriebenen Verfahren usw. frei von Schutzrechten Dritter sind. Die in diesem Werk wiedergegebenen Gebrauchsnamen, Handelsnamen, Warenbezeichnungen usw. werden ohne Gewährleistung der freien Verwendbarkeit benutzt und können auch ohne besondere Kennzeichnung eingetragene Marken oder Warenzeichen sein und als solche den gesetzlichen Bestimmungen unterliegen. Dieses Werk ist urheberrechtlich geschützt. Alle Rechte, auch die der Übersetzung, des Nachdrucks und der Vervielfältigung des Buches oder Teilen daraus vorbehalten. Kein Teil des Werkes darf ohne schriftliche Genehmigung des Verlags in irgendeiner Form (Druck, Fotokopie, Mikrofilm oder einem anderen Verfahren), auch nicht für Zwecke der Unterrichtsgestaltung, reproduziert oder unter Verwendung elektronischer Systeme verarbeitet, vervielfältigt oder verbreitet werden. Bibliografische Information Der Deutschen Nationalbibliothek Die Deutsche Nationalbibliothek verzeichnet diese Publikation in der Deutschen Nationalbibliografie; detaillierte bibliografische Daten sind im Internet über abrufbar Open Source Press, München Gesamtlektorat: Patricia Jung Satz: Open Source Press GmbH (LaTeX) Umschlaggestaltung: Fritz Design GmbH, Erlangen Gesamtherstellung: Kösel, Krugzell ISBN

5 Vorwort der Munin Entwickler Ein Buch, das von einem Projekt handelt, auf das man selbst viel Zeit verwendet hat, öffnet man mit einer gewissen Spannung. In diesem Fall machte sich Erleichterung breit: Glücklicherweise sind die Autoren mit viel Zeit und Sorgfalt zu Werke gegangen. Linpros Systemadministrationsabteilung nahm irgendwann im Jahre 2001 ihre Arbeit auf, und ungefähr zum gleichen Zeitpunkt erblickte auch das Projekt, das heute Munin ist, das Licht der Welt. Damals handelte es sich um eine Handvoll Shell- und Perlskripte, die mit Hilfe von MRTG (RRDs Vorläufer, mehr dazu in diesem Buch) -Queues, den Füllstand der Festplatten und andere kritische Parameter der Systeme grafisch darstellten, für die man als Admin Verantwortung trägt. Damals hieß die SkriptsammlungÐ ¹ÐÖÖ, wobei LRRD für Linpro Round Robin Database steht. Seitdem haben die wichtigsten Munin-Hacker bei Linpro gearbeitet (wir beide, Jimmy und Nicolai, sind die letzten aus diesem Kreis), anders als bei anderen, von Firmen getragenen Open-Source-Projekten kamen wesentliche Beiträge zu Munin aber auch aus der Community. Ende 2001 entstand das Werkzeug, das heuteñùò Ò¹ÒÓ heißt, um Daten von entfernten Nodes über das Netz zu holen. Man hielt Ausschau nach einem unbenutzten Netzwerksport, und die Entscheidung fiel auf Gleichzeitig führten wir die Plugin-Architektur ein, die Munin immer noch benutzt. Viele Plugins funktionieren seitdem unverändert. Als wir vor Kurzem einen neuen Dokumentationsstandard für Plugins einführten, war das Anlass für ein wenig Pluginarchäologie, um die ursprünglichen Autoren einiger dieser Plugins zu finden. Sie erkannten ihren Code immer noch wieder! Die Plugin-Architektur erwies sich als äußerst geglückt es ist eine sehr dankbare Aufgabe, zwei Minuten (oder mehr) für das Schreiben eines Shelloder Perlskripts (oder Python- oder Ruby-Skripts... ) aufzuwenden und sofort hübsche und nützliche Graphen auf dem Schirm zu haben. Es hat sich gezeigt, dass das Plug&Play-Prinzip gut funktioniert und dabei hilft, viele Plugins ohne Konfiguration oder Benutzerinteraktion in Betrieb zu nehmen. Wir werden es weiterentwickeln und mehr Zeit dafür aufwenden, dass die automatische Konfiguration der Plugins in Zukunft noch besser wird. 5

6 Vorwort Spät im Frühjahr 2002 schrieb Audun Ytterdal die Master/Server-Skripte um:ðöö ¹ÙÔ Ø undðöö ¹ Ö Ô entstanden (jetztñùò Ò¹ÙÔ Ø und ÑÙÒ Ò¹ Ö Ô ). Zu diesem Zeitpunkt war der gesamte LRRD-Kern in Perl geschrieben. Im Frühsommer folgteðöö ¹ ØÑÐ, im HerbstÐÖÖ ¹Ò Ó : Die Linpro-Admins hatten Nagios zu Benachrichtigungszwecken und besserer operativer Überwachung in Betrieb genommen. Im Herbst 2002 warf Kollege Knut Haugen einen Blick auf die von LRRD erzeugten Webseiten, und sie bekamen eine Schönheitsoperation verpasst. Ende 2002 waren die Köpfe des LRRD-Projekts mit ihrem Baby ziemlich zufrieden und meinten, dass es auch für andere von Nutzen sein könnte und legten es auf Sourceforge entschied Debian als erste Linux-Distribution, LRRD mitzuliefern. Im Januar 2004 sahen die Entwickler, dass große Teile der Arbeit am Projekt nicht länger in Linpro-Regie gemacht wurden und dass das erste L im Namen damit völlig falsch war. Das war ganz in unserem Sinne, wünschten wir uns doch (und wünschen wir uns noch immer) weitere Beiträge aus der Nutzer-Community. Eine Abstimmung auf derðöö ¹Ù Ö -Mailingliste ergab, dass das Kind von nun an den Namen Munin tragen sollte. Bianca Pfingsten entwarf das zugehörige Logo mit dem schwarzen Rabenkopf und der grünen Pulslinie, gesponsort vom Mediahaus Biering Grafischer Betrieb GmbH. Vielen Dank! Seitdem befinden wir uns schon wieder mitten in größeren Umwälzungen: Im Februar zog das Projekt von Sourceforge, das nur CVS bietet, auf ein Trac-Wiki/Ticket-System und in ein SVN-Repository um. Sourceforge hat aber auch eine andere wichtige Funktion: Archiv für freie Software zu sein. Daher verteilen wir paketierte Munin-Versionen weiterhin via Sourceforge, so dass sie dort archiviert werden. Im Herbst 2005 kam jemand darauf, dass der Munin-Port 4949 gar nicht bei der IANA registriert war. Glücklicherweise zeigte es sich, dass der Port noch frei war und dem Projekt formell zugeteilt wurde. Seit damals kamen neue Versionen mit neuen Plugins und Fehlerkorrekturen heraus, Revolutionen haben aber keine stattgefunden. Wie auch das Buch zeigen wird, haben wir aber große Pläne für Munins Zukunft, insbesondere in den Bereichen Skalierung, Datensammlung und kommt Zeit, kommt Rat Präsentation. Wir hoffen, dass Ihnen dieses Buch und Munin nützlich sind und es Spaß macht, damit zu arbeiten. Das jedenfalls finden wir. Oslo im April 2008 Jimmy Olsen und Nicolai Langfeldt Linpro 6

7 Einleitung 15 1 Architektur Die Arbeitsweise des Masters Die Arbeitsweise der Nodes Einsammeln der Daten Verlorene Messpunkte Auswirkungen der Architektur auf die Messwerte Die Munin-Übersicht Gliederung in Gruppen und Hosts Die Indexseite zur Gruppe Vergleichende Darstellungen Die Hostübersicht Die Detailseite zum Plugin Das Layout anpassen Round-Robin-Datenbanken Datenverdichtung Archivierungsregeln für RRD-Dateien Ablage und Benennung der RRD-Dateien Das Dateiformat Die RRD-Tools ÖÖ ØÙÒ ÖÖ Das KommandozeilenprogrammÖÖ ØÓÓÐ RRDs bearbeiten

8 3 Linux-/Unix-Systeme als Munin-Nodes Voraussetzungen für die Installation Installation des Nodes Anpassen und Installieren des Quellcodes Erstellen eines selbstextrahierenden Installationsskripts Zugriffsberechtigung für den Master einrichten Konfiguration desñùò Ò¹ÒÓ -Daemons Abweichenden Port festlegen An spezielle IP-Adresse binden Speziellen Hostnamen zuordnen Timeout für offene Verbindungen Umfang des Loggings einstellen Syslog oder Munin-spezifische Logdatei? Der Munin-Node auf Apple-Computern Einbindung und Konfiguration der Plugins Wildcard-Plugins SNMP-Plugins Automatische Einbindung Voraussetzungen schaffen Plugin-Familien Verlinkungskommandos erfragen Konfiguration der Laufzeitumgebung Ansprache über Mustervergleich Standardparameter Rangordnung bei mehrdeutigen Zuweisungen Hostnamen auf Plugin-Ebene ändern Plugin-spezifische Parameter Einheitliche Plugin-Dokumentation mitñùò Ò Ó Der Munin-Master Hardwareanforderungen Installation Konfiguration des Webservers

9 5.2.2 Automatischer Start der Munin-Master-Skripte Konfiguration Ablageverzeichnisse festlegen Die zu überwachenden Hosts festlegen Überschreiben der Plugin-Konfiguration Benachrichtigung im Fehlerfall Virtuelle Hosts und Plugins Individuelle Farbpaletten für die Graphen Munin-Graphen als CGI Passwortgeschützte Graphen Mitgelieferte Plugins Plugin-Kategorien Apache-Plugins Der Graph Apache accesses Der Graph Apache processes Der Graph Apache volume Konfiguration des zu überwachenden Webservers Squid-Plugins Der Graph Squid cache status Der Graph Squid client requests Der Graph Squid traffic status Mailserver-Überwachung Der Graph Exim Mailqueue Der Graph Exim mail throughput Der Graph Sendmail queued mails Der Graph Sendmail traffic Der Graph Sendmail volumes Der Graph Qmail queue Der Graph Postfix Mailqueue Der Graph Postfix message throughput Der Graph Postfix bytes throughput Monitoring von Courier-Prozessen Der Graph Courier MTA mailqueue

10 Der Graph Courier MTA mail throughput Der Graph Courier MTA mailvolume throughput Überwachung von Speichermedien Die -Plugins Input-Output-Operationen überwachen Überwachen des SMART-Status Systemparameter Der Graph CPU usage Der Graph Available entropy Der Graph Interrupts & context switches Der Graph Individual interrupts Der Graph Load average Der Graph Memory usage Der Graph File Table usage Der Graph Inode table usage Der Graph Swap in/out Netzwerküberwachung Den Netzwerkdurchsatz mit dem Wildcard-Plugin überwachen Netzwerkfehler mit ÖÖ überwachen Der Netstat-Graph Das Wildcard-PluginÔ Ò NFS-Zugriffe überwachen Der NFS Server -Graph Der NFS Client -Graph Prozesse im Blick Prozessinstanzen zählen Der Graph Fork rate Der Graph Number of Processes Der Graph VMstat Sensoren auslesen Sonstiges Der Graph CUPS pages printed Die Uptime

11 IRC-Server überwachen NTP Der Graph Colour testing plugin Überwachung per SNMP Standardisierte Datenstrukturen SNMP-Abfragen mit Munin Sicherheitsabwägungen Die Tool-Sammlung Net-SNMP Mitgelieferte SNMP-Plugins Service-Links ermitteln SNMP-Community individuell setzen Speziellen SNMP-Port nutzen SNMP-Host in der Plugin-Konfiguration vorgeben Windows-Rechner überwachen PerÑÙÒ Ò¹ÒÓ º Ü Per SNMP Eigene Plugins schreiben Abschätzen des Aufwands Aufbau eines Plugins Shellskripte Nützliche Helferlein Ein erstes Plugin Mehrere Kurven in einem Graphen Wildcard-Plugins Installationsunterstützung und Magic Markers Installationsdetails auslesen Statusinformationen über den Plugin-Lauf hinaus bewahren Umgebungsvariablen berücksichtigen Saubere Feldnamen Betriebssystemunabhängigkeit SNMP-Plugins

12 9.4.1 Aufbau eines SNMP-Plugins Temperaturmessung Ein Perl-Plugin zur Überwachung von Novell Groupwise Webaccess Automatische Konfiguration Jenseits von SNMP Testen und Live-Schalten selbstgeschriebener Plugins Aktualisierte und neue Plugins stiften MuninExchange Plugins finden Die Plugin-Detailansicht User-Account anlegen Neue Plugins einstellen Plugins aktualisieren Neue Kategorien und Plattformen vorschlagen Troubleshooting Was sagen die Logdateien? Werkzeug-spezifische Logdateien Meldungen im Syslog Logmeldungen vonñùò Ò¹ÖÓÒ Plugins testen Test auf dem Munin-Node Test auf dem Munin-Master Zusammenarbeit mit Nagios Eine Gegenüberstellung Munin alarmiert Nagios Konfiguration des NSCA Konfiguration des Nagios-Servers Die Konfiguration auf Munins Seite

13 13 Verschlüsselte Kommunikation über TLS Einfache Verschlüsselung Nutzung von Clientzertifikaten Probleme Ausblick Konkrete Pläne für die weitere Entwicklung Anhang 273 A Nodes in der DMZ ansprechen 275 A.1 SSH-Tunnel A.2 Alternative TCP-Tunnel B Die Konfigurationsparameter im Überblick 281 B.1 Konfiguration des Munin-Masters B.1.1 Globale Direktiven B.1.2 Gruppenspezifische Direktiven B.1.3 Node-Direktiven B.1.4 Plugin-Direktiven B.2 Konfiguration des Munin-Nodes C Plugin-Attribute 295 C.1 Globale Attribute des Plugins C.2 Datenspezifische Attribute D Abhängigkeiten der mitgelieferten Plugins 303 E CPAN 311 E.1 DieÔ Ò-Shell einrichten E.2 Installation desæ Ø Ë ÖÚ Ö-Moduls 13