Zentrales Konfigurationsmanagement mit Puppet

Transkript

1 Zentrales Konfigurationsmanagement mit Puppet GUUG - Frühjahrsfachgespräch 2011 Martin Alfke <[email protected]>

2 Einführung Wie managed man 600 Linux-Server mit 20 unterschiedlichen Applikationen?

3 Einführung Wie managed man 600 Linux-Server mit 20 unterschiedlichen Applikationen? Wieviele Server/ Applikationen kann ein Admin verwalten?

4 Konfigurationsmanagement ssh-loop for server in db1 db2 db3; do ssh... done

5 Konfigurationsmanagement ssh-loop for server in db1 db2 db3; do ssh... done Installationsimage Reboot + Reinstallation

6 Konfigurationsmanagement ssh-loop for server in db1 db2 db3 ; do ssh... done Installationsimage Reboot + Reinstallation Reproduzierbar? Fehlertolerant? Verfügbarkeit?

7 Konfigurationsmanagement Vorbereitung Planung Design Initialisierung Betrieb Verbesserung

8 Tools CFEngine seit 1993

9 Tools CFEngine seit 1993 atomare Änderungen

10 Tools CFEngine seit 1993 atomare Änderungen Master-Client

11 Tools CFEngine Bcfg2 ca. seit 2003

12 Tools CFEngine Bcfg2 ca. seit 2003 deklarative Beschreibung

13 Tools CFEngine Bcfg2 ca. seit 2003 deklarative Beschreibung Auswertung der Client Antworten

14 Tools CFEngine Bcfg2 Puppet seit 2005

15 Tools CFEngine Bcfg2 Puppet seit 2005 Ruby Anwendung

16 Tools CFEngine Bcfg2 Puppet seit 2005 Ruby Anwendung Reporting

17 Tools CFEngine Bcfg2 Puppet Open Source

18 Tools CFEngine Bcfg2 Puppet Open Source Fixpunkt Beschreibung

19 Tools CFEngine Bcfg2 Puppet Open Source Fixpunkt Beschreibung Client-Master Setup

20 Puppet Master Manifeste Dateien Vorlagen Client kein Provisioning! FAI Cobbler

21 Puppet Aufbau Master Beschreibung der Clients Client Erstellt Report Dashboard Report Auswertung

22 Puppet Ressourcen Syntax: <resource-type> { <namevar> : <key1> => <value1>, <key2> => <value2>, <key3> => [ <value3>, <value4> ], }

23 Puppet Ressourcen user group Beispiel: group { tux : gid!! => 1050, ensure! => present, } user { tux : uid!! => 1050, gid!! => 1050, } home!! shell! ensure! => /home/tux, => /bin/tcsh, => present,

24 Puppet Ressourcen user group file Beispiel: file { /etc/inet/inetd.conf : ensure! => /etc/inetd.conf, } file { /home/tux : owner! => tux, group! => tux, mode!! => 0700 ensure! => directory, }

25 Puppet Ressourcen user group file package service cron Beispiel: package { apache2 : ensure! => installed, } service { apache2 : ensure! => running, }

26 Puppet Facts hardwaremodel => i386 hostname => client01 ipaddress => kernel => Darwin kernelmajversion => 10.6 operatingsystem => Darwin operatingsystemrelease => timezone => CET

27 Puppet Facts OS und System spezifische Parameter Variablen und Werte sind innerhalb von Puppet verwendbar

28 Puppet Facts OS und System spezifische Parameter Variablen und Werte sind innerhalb von Puppet verwendbar case $operatingsystem { Solaris : {... } Darwin : {... } default: {... } }

29 Puppet Facts OS und System spezifische Parameter Variablen und Werte sind innerhalb von Puppet verwendbar Eigene Facts

30 Puppet Facts OS und System spezifische Parameter Variablen und Werte sind innerhalb von Puppet verwendbar Eigene Facts require facter Facter.add( PUPPET_FUNCTION ) do setcode do %x{/bin/cat /etc/function}.chomp end end

31 Puppet Vorlagen Host-spezifische Konfigurationsdateien Wiederverwendbare Konfigurationsdateien

32 Puppet Vorlagen Host-spezifische Konfigurationsdateien Wiederverwendbare Konfigurationsdateien $document_root! = /srv/wiki $vhost_port!! = 80 $vhost_name!! = wiki.domain.local file { /etc/apache2/apache2.conf content!!! => template ( apache2.erb ), }

33 Puppet Vorlagen Host-spezifische Konfigurationsdateien Wiederverwendbare Konfigurationsdateien $document_root! = / s r v / w i k i $vhost_port!! = 8 0 $vhost_name!! = w i k i. d o m a i n. l o c a l file { /etc/apache2/apache2.conf content!!! => template ( apache2.erb ), } # apache2 config DocumentRoot = <% document_root %> NameVirtualHost = <% vhost_name -%>:<%vhost_port %>

34 Puppet Klassen Gruppieren logisch zusammengehörender Definitionen

35 Puppet Klassen Gruppieren logisch zusammengehörender Definitionen class apache { package{ apache2 : ensure => installed } service{ apache2 : ensure => running } file{ /etc/apache2/apache2.conf : mode!! => 644, owner! => root, group! => root, } }

36 Puppet Module Sammlung von Klassendefinitionen mit Dateien und Vorlagen innerhalb einer Verzeichnisstruktur

37 Puppet Module Sammlung von Klassendefinitionen mit Dateien und Vorlagen innerhalb einer Verzeichnisstruktur modules/ <modulename>/ manifests/ init.pp!!! <- erforderlich <classname>.pp!<- optional (Klassen) templates/!! <- optional (Vorlagen) files/!!!! <- optional (Dateien) lib/!!!!! <- optional (Facts)

38 Puppet Performance Standard: Ruby Webrick bekannt für schlechte Performance einfache Implementierung

39 Puppet Performance Standard: Ruby Webrick bekannt für schlechte Performance einfache Implementierung vorgeschalteter Apache/NGINX/Pound Apache mit mod_passenger

40 Puppet Reporting Client sendet Bericht an Master

41 Puppet Reporting Client sendet Bericht an Master Master speichert Bericht im Dateisystem oder in MySQL-Datenbank

42 Puppet Reporting Client sendet Bericht an Master Master speichert Bericht im Dateisystem oder in MySQL-Datenbank Puppet Dashboard liest Berichte aus Datenbank

43 Puppet Reporting Client sendet Bericht an Master Master speichert Bericht im Dateisystem oder in MySQL-Datenbank Puppet Dashboard liest Berichte aus Datenbank Dashboard erzeugt strukturierte Darstellung

44 Puppet Reporting

45 Allgemein UNIX Abteilung

46 Allgemein UNIX Abteilung ca. 600 Systeme (physikalisch und VM) weltweit verteilt (Europa, Asien, Amerika)

47 Allgemein UNIX Abteilung ca. 600 Systeme (physikalisch und VM) weltweit verteilt (Europa, Asien, Amerika) RHEL, OEL, Solaris, HP-UX

48 Allgemein UNIX Abteilung ca. 600 Systeme (physikalisch und VM) weltweit verteilt (Europa, Asien, Amerika) RHEL, OEL, Solaris, HP-UX Verantwortlich für das Basis-System und DB Betrieb

49 Allgemein UNIX Abteilung Applikations Abteilung

50 Allgemein UNIX Abteilung Applikations Abteilung HPC, Mail-Systeme, DNS,...

51 Allgemein UNIX Abteilung Applikations Abteilung HPC, Mail-Systeme, DNS,... verantwortlich für funktionierende Applikation

52 Ist-Zustand

53 Ist-Zustand vorhandenes Konfigurationsmanagement

54 Ist-Zustand vorhandenes Konfigurationsmanagement kommerzielle Software

55 Ist-Zustand vorhandenes Konfigurationsmanagement kommerzielle Software Lizenzpflichtig

56 Ist-Zustand vorhandenes Konfigurationsmanagement kommerzielle Software Lizenzpflichtig gewachsenes Setup (Standards mit Ausnahmen)

57 Definierte Aufgaben von Puppet

58 Definierte Aufgaben von Puppet Anlegen/Löschen von Usern

59 Definierte Aufgaben von Puppet Anlegen/Löschen von Usern Anlegen/Löschen/Verwalten von Konfigurationsdateien

60 Definierte Aufgaben von Puppet Anlegen/Löschen von Usern Anlegen/Löschen/Verwalten von Konfigurationsdateien Starten/Stoppen/Deaktivieren/ Aktivieren von Diensten

61 Definierte Aufgaben von Puppet Anlegen/Löschen von Usern Anlegen/Löschen/Verwalten von Konfigurationsdateien Starten/Stoppen/Deaktivieren/ Aktivieren von Diensten Installation/Deinstallation von Paketen

62 Puppet Setup

63 Puppet Setup Location Function zwei Module mit Unterklassen

64 Puppet Setup Location Function zwei Module mit Unterklassen Puppet Beschreibungen und Dateien in GIT

65 Puppet Setup Location Function zwei Module mit Unterklassen Puppet Beschreibungen und Dateien in GIT Dashboard

66 Projekt Verlauf

67 Projekt Verlauf Start August 2010

68 Projekt Verlauf Start August 2010 Stand März Funktionsklassen in Puppet ca. 250 Server in Puppet

69 Zentrales Konfigurationsmanagement mit Puppet Fragen?? Martin Alfke