Netzwerk Monitoring in der Landesvermessung und Geobasisinformation Brandenburg (LGB) Der Klügste ist der, der weiß was er nicht weiß.

Transkript

1 Netzwerk Monitoring in der Landesvermessung und Geobasisinformation Brandenburg (LGB) Der Klügste ist der, der weiß was er nicht weiß. (Sokrates)

2 Vorstellung 2 Name: Karsten Schöke Nagios-Portal seit 2006 Nickname vicodas Firma: Landesvermessung und Geobasisinformation Brandenburg (LGB) Job: Linux Systemadministrator Die LGB besteht seit dem als Landesbetrieb und ist Rechtsnachfolger des Landesvermessungsamtes Brandenburg und ist neben dem Ministerium des Innern und den Katasterbehörden Bestandteil der Vermessungs- und Katasterverwaltung im Land Brandenburg Internet: -- allgemeiner Internetauftritt -- geobroker.geobasis-bb.de Verkaufplattform der LGB -- isk.geobasis-bb.de Webdienste der LGB, z.b. WMS,WFS, usw. -- isk.geobasis-bb.de/index.php/bb-viewer Brandenburg Viewer

3 Vorstellung IT der LGB 3 Die Landesvermessung und Geobasisinformation Brandenburg (LGB) besteht aus 3 Betriebsteilen und betreut 18 Katasterbehörden. Zentrale IT-Standorte sind Potsdam und Frankfurt /Oder, welche je ein RZ betreiben. Hardware kommt hauptsächlich von HP, meistens c7000 Blades, zum Einsatz. Folgende Key-Verfahren kommen zum Einsatz -- Windows 2003 AD 3 Sites 7 DC, Exchange 2003 zwei Organisationen, ca. 450 XP Clients -- Citrix XenApp6 Infrastruktur mit 250 User, incl. Access Gateway -- Vmware vsphere mit 8 Cluster an 4 Standorten, 38 ESX 4.1U1 Hosts, ca. 450 VM s -- Vmware View mit z.z. 30 ThinClients Wyse P20 -- Debian Linux auf ca. 150 Servern, SuseEL auf ca. 50 Servern, TRU64 auf ca.15 Servern -- HP SAN je IT-Standort eine EVA 6000 und eine EVA 8400 zusammen ca. 250TB -- Backup über Commvault Simpana9 -- Datenbanken: PostgreSQL, Oracle, MySQL, MSSQL, Informix -- Firewall zweistufig Checkpoint, ISA -- Unmengen an Fachverfahren ;-)

4 Monitoring in der LGB 4 aktuell 587 Hosts, 4326 Services auf 4 Nagios Instanzen Zentrale Auswerte/Benachrichtigungsinstanz in Frankfurt (über nsca) Dezentrale Satelliten zum Dateneinsammeln an den Betriebsstandorten

5 Nagios in der LGB - Addons 5 Nagios 3.0.1, mit nsca PNP mit npcd Nagios Business Process Addon Nagvis 1.4 Netways Eventdb angepasst an Windows eventlog2syslog externer Zugang über iphoneapp inag und Windows Gadget Koppelung Ticketsystem TrackIT

6 Monitoring HP SAN EVA - Vorraussetzungen 6 leider keinerlei externer Abfragen direkt auf die Controller möglich. Abfrage ist nur über das von HP mitgelieferte kostenlose Tool evaperf möglich. Vorraussetzungen auf EVA-Managementserver: - evaperf HP Support user friendly names in evaperf einstellen (Mapping UUID zu Namen) #evaperf fnh localhost domain\username #evaperf fn - nrpe_nt folgendes muss in der nrpe.cfg mind. eingerichtet sein: allowed_hosts=<ip_des_nagis_host> command[check_evaperf-as]=cmd /c "C:\Program Files\nrpe_nt\evaperf-as.cmd - awk Getestet auf HP EVA 6000/8000/8400

7 Monitoring HP SAN EVA check_nrpe 7 check_nrpe ruft vom Nagiosserver aus entsp. script auf EVA-Managementserver auf # Define a service to check a script via nrpe # ARG1 command Name in nrpe.cfg # ARG2 timeout in Sekunden define service{ use pnp-service host_name servername service_description eva01_array normal_check_interval 1 check_command check_nrpe!check_evaperf-as!20 dazu folgendes command definieren: # 'check_nrpe' command definition define command{ command_name check_nrpe command_line $USER1$/check_nrpe -H $HOSTADDRESS$ -c $ARG1$ -t $ARG2$

8 Monitoring HP SAN EVA Array Status 8 Abfrage des Arraystatus - Ausgabe iops und MB/s zuerst über evaperf den Namen der EVA auslesen (Node) Diesen anschließend im Script ersetzen. Script für off "C:\Program Files\Hewlett-Packard\EVA Performance Monitor\evaperf" as findstr /I <name_der_eva> awk "{pipe=sprintf(\"%%c\",0x7c); print\"hp Eva Array Status: \"$1\" Req/s,\",\" \"$2\" MB/s\"pipe,\"Requests=\"$1\"Req/s;0;0;0;0\",\"Traffic=\"$2\"MB/s;0;0;0;0\""

9 Monitoring HP SAN EVA Array Controller Status 9 Abfrage des Array Controller - Ausgabe CPU und Data Last in % - je Controller muss ein Script und somit check definiert werden. zuerst über evaperf den Namen des jeweiligen Controller auslesen (Ctlr) Diesen anschließend im Script ersetzen. Script für nrpe: echo off "C:\Program Files\Hewlett-Packard\EVA Performance Monitor\evaperf" cs findstr /I <name_des_controller> awk "{pipe=sprintf(\"%%c\",0x7c); print\"hp Eva Array Controller Status CPU:\"$1\"%%,\",\"Data:\"$2\"%%\"pipe,\"CPU=\"$1\"%%;90;95;0;100\",\"Data=\"$2\"% %;90;95;0;100\""

10 Monitoring HP SAN EVA Array Host Port Status 10 Abfrage der Array Host Port Statistik - Ausgabe von Request/s, Traffic(MB)/sek und Latency/ms für Lese und Schreibvorgänge - je Hostport muss ein Script und somit check definiert werden. zuerst über evaperf den Namen des jeweiligen Controller (Ctlr) und Portname (Name) auslesen. Diese anschließend im Script ersetzen. Script für off "C:\Program Files\Hewlett-Packard\EVA Performance Monitor\evaperf" hps findstr /I <name_des_controller> findstr /I <name_des_hostport> awk "{pipe=sprintf(\"%%c\",0x7c); print\"hp Eva Host Port Statistik Controller 0 Port 1 Read: \"$2\"Req/s,\",$3\"MB/s\", $4\"ms\",\",Write: \"$5\"Req/s\",$6\"MB/s\", $7\"ms\"pipe,\"Requests_read=\"$2\"Req/s;0;0;0;0\",\"Requests_write=\"$5\"Req/s;0;0;0;0\",\" Traffic_read=\"$3\"MB/s;0;0;0;0\",\"Traffic_write=\"$6\"MB/s;0;0;0;0\",\"Latency_read=\"$4\"ms; 0;0;0;0\",\"Latency_write=\"$7\"ms;0;0;0;0\""

11 Monitoring HP SAN EVA monitoring exchange 11 Download aller Scripte über: welche Möglichkeiten gäbe es noch? check_eva Python Lösung aus Basis sssu

12 Monitoring Vmware ESXi Hardware Vorraussetzungen 12 ESXi im Produktivbetrieb keine Console vorhanden Abfrage daher nur per Webzugang - lokalen User welcher Mitglied in Gruppe root ist auf ESXi einrichten (am Besten per VI-Client) - Den neu angelegten User Leserechte erteilen. check_esxi_hardware Download Python Lösung Installation auf Nagios Server unter Debian: #apt-get install python-pywbem Pythonscript aus Download ins libexec Verzeichnis des Nagios Host kopieren Freischaltung des webm Port 5989 von Nagios zum ESXi (auch auf ESXi) Je nach Hardware und Verfügbarkeit NMI Driver installieren. Wichtig das der Vmware Kernel Hardware Panics mitbekommt. für HP: lang=en&cc=us&prodtypeid= &prodseriesid= &prodnameid= &swen void=4091&swlang=13&taskid=135&switem=mtx- 0b8cec cc979bae95a1&mode=3

13 Monitoring Vmware ESXi Hardware Status 13 ESXi Auslesen des Hardwarestatus per webm (web based enterprise managment) Unterstützt wird Hardware folgender Hersteller: - HP - Dell - IBM - Intel - auto versucht die CIM automatisch auszulesen

14 Monitoring Vmware ESXi Hardware Status Nagios Integration 14 command: #'check_esx4i_hardware define command { command_name check_esx4i_wbem command_line $USER1$/check_esxi_hardware.py H -U BN P PW V HWType -p check: # Define a service to check the hardware status of a esx host define service{ use generic-service host_name esx4i-host service_description host_hardware check_command check_esx4i_wbem

15 Monitoring Vmware ESXi Status Data Vorraussetzungen 15 ESXi Auslesen des Stati aller definierten Alarme per vmware API. Grundvoraussetzungen analog Hardware Statusabfrage plus Vmware Perl-SDK check_3i_* - check_3i_storage - check_3i_cpu - check_3i_memory - check_3i_sensors Scripte sind eigentlich für ESXi3 sind aber unter 4.1 auch lauffähig. Nachteil checks über vmware Perl SDK sehr CPU lastig!!!

16 Monitoring Vmware ESXi Status Data Nagios Integration 16 command: #'check_esx4i_cpu define command { command_name command_line --password password' #'check_esx4i_mem define command { command_name command_line --password password' #'check_esx4i_storage define command { command_name command_line --password password #'check_esx4i_sensor define command { command_name command_line --password password' check_esx4i_cpu $USER1$/check_esx_viperl_cpu --server $HOSTNAME$ --username nagios check_esx4i_mem $USER1$/check_esx_viperl_mem --server $HOSTNAME$ --username nagios check_esx4i_storage $USER1$/check_esx_viperl_storage --server $HOSTNAME$ --username nagios check_esx4i_sensor $USER1$/check_esx_viperl_sensor --server $HOSTNAME$ --username nagios

17 Monitoring Vmware ESXi Status Data Nagios Integration 17 check: # Define a service to check the cpu usage of a esx host #define service{ use generic-service ; Name of service template to use host_name esx4i-host service_description host_cpu check_command check_esx4i_cpu # Define a service to check the memory usage of a esx host define service{ use generic-service ; Name of service template to use host_name esx4i-host service_description host_mem check_command check_esx4i_mem # Define a service to check the net usage of a esx host define service{ use generic-service ; Name of service template to use hostgroup_name esx4i-host service_description host_storage check_command check_esx4i_storage

18 Live Demo 18 Wenn möglich Live Demo auf den Systemen der LGB Zugang ist nicht frei und nur während dieser Präsentation möglich!

19 19 Vielen Dank für Eure Aufmerksamkeit. Fragen?