Monitoring mit Graphite

Transkript

1 Monitoring mit Graphite

2 Hallo! 35 Jahre alt Erst Unixadmin, dann Netzwerker Spielplätze sind Web, Enterprise und Service Provider // Monitoring mit Graphite // Falk Stern // OSMC

3 Worum gehts? Graphite, Aufzucht und Pflege Wie kriege ich Daten in Graphite rein? Was kann ich mit Graphite tun? Wie bekomme ich meine Daten aus Graphite wieder raus? // Monitoring mit Graphite // Falk Stern // OSMC

4 Was ist Graphite Graphite ist eine Time-Series Datenbank Graphite speichert einen Wert für eine Metrik für ein Zeitintervall // Monitoring mit Graphite // Falk Stern // OSMC

5 Was ist Graphite? carbon und whisper sind in python geschrieben Die Webapp ist eine Django Applikation // Monitoring mit Graphite // Falk Stern // OSMC

6 Wer entwickelt Graphite? Chris Davis begann 2006 mit der Entwicklung und hat das Projekt 2008 unter der Apache 2.0 Lizenz veröffentlicht. Aktuelle Entwicklungen findet man unter // Monitoring mit Graphite // Falk Stern // OSMC

7 Was kann ich mit Graphite machen? // Monitoring mit Graphite // Falk Stern // OSMC

8 Welche Komponenten hat Graphite carbon whisper graphite webapp // Monitoring mit Graphite // Falk Stern // OSMC

9 whisper? carbon? carbon sorgt dafür, daß Daten in whisper gespeichert werden. Die webapp kann die in whisper gespeicherten Daten anzeigen, als Graph, CSV oder JSON carbon besteht aus 3 Teilen, aber dazu später mehr // Monitoring mit Graphite // Falk Stern // OSMC

10 Performance? carbon mag SSDs Keinen drehenden Rost verwenden! // Monitoring mit Graphite // Falk Stern // OSMC

11 XING HP DL380G8 6 mal 240G SSD ca metrics/s, gespiegelt // Monitoring mit Graphite // Falk Stern // OSMC

12 Daten rein? carbon kennt 2 Datenformate - Text & Pickle Text Format metric value timestamp > servers.webserver.load metric value > servers.webserver.load // Monitoring mit Graphite // Falk Stern // OSMC

13 Daten rein Client TCP/2003 carbon-cache whisper // Monitoring mit Graphite // Falk Stern // OSMC

14 Scaling carbon Client TCP/2003 carbon-relay carboncache carboncache carboncache // Monitoring mit Graphite // Falk Stern // OSMC

15 Scaling carbon Client TCP/2003 carbon-relay carbon-relay carbon-relay carbon-relay carboncache carboncache carboncache carboncache carboncache carboncache // Monitoring mit Graphite // Falk Stern // OSMC

16 carbon-aggregator carbon-aggregator kann vor carbon-cache oder carbonrelay geschaltet werden, um Metriken zu aggregieren. Damit kann die I/O Last verringert werden und Metriken können in kürzeren Intervallen geschickt werden // Monitoring mit Graphite // Falk Stern // OSMC

17 whisper oder wie Graphite Daten speichert whisper ist ähnlich wie RRD Feste Dateigröße Auflösung wird über die Zeit unschärfer Beliebig konfigurierbar: 10s Auflösung für 6 Stunden 60s Auflösung für 7 Tage 5 Minuten Auflösung für 2 Monate 15 Minuten Auflösung für 2 Jahre // Monitoring mit Graphite // Falk Stern // OSMC

18 Warum whisper und nicht RRD? RRD kann nicht mit Updates umgehen, die vor dem letzten Update lagen Wenn RRD nicht regelmäßige Updates bekommt, können Daten verloren gehen // Monitoring mit Graphite // Falk Stern // OSMC

19 Nachteile? whisper ist langsamer als RRD whisper hätte die Daten gerne im höchsten Auflösungsintervall, sonst gibt es Lücken Kommen Metriken öfter als das konfigurierte Intervall, gelten die letzten, die in dem Intervall geschrieben wurden! // Monitoring mit Graphite // Falk Stern // OSMC

20 Wer unterstützt denn Graphite? Brightcove Diamond // Monitoring mit Graphite // Falk Stern // OSMC

21 Daten raus Graphite Webapp Bild CSV JSON // Monitoring mit Graphite // Falk Stern // OSMC

22 Webfrontend // Monitoring mit Graphite // Falk Stern // OSMC

23 Graphen // Monitoring mit Graphite // Falk Stern // OSMC

24 Funktionen // Monitoring mit Graphite // Falk Stern // OSMC

25 Rechnen mit graphite // Monitoring mit Graphite // Falk Stern // OSMC

26 Grafana // Monitoring mit Graphite // Falk Stern // OSMC

27 Dusk // Monitoring mit Graphite // Falk Stern // OSMC

28 Sonstiges Tessera Dashboards aus Graphite Daten Seyren Alarmierung anhand von Graphite Daten Cabot Monitoring Framework, das auch Graphite Daten beachten kann // Monitoring mit Graphite // Falk Stern // OSMC

29 Fragen?

30 Danke für eure Aufmerksamkeit!