LVM und ZFS reloaded

Transkript

1 gehalten auf dem Frühjarsfachgesprch 2015 in Stuttgart Oliver Rath GreenUnit UG, München 27. März 2015

2 Werbung Motivation Neue Features Zur Person <Werbung> beschäftigt bei der GreenUnit UG in München Entwicklung von Netzbootlösungen (1000 Clients/Server) Entwicklung einer transparenten Desktop Managment Infrastruktur (DMI) </Werbung>

3 Werbung Motivation Neue Features Warum sich mit und beschftigen? Bedarf an performanten Images, die über Netzwerk exportiert werden Starker Entwicklungsschub bei und unter Linux Neue Features

4 Werbung Motivation Neue Features Was gibt es neues bei und? : ( Snapshots) : : RAID-1,5,6 Support : Implementierung von im Linux-Kernel : Mglichkeit, trotz inkompatibler Lizenzen unter Linux zu benutzen

5 Werbung Motivation Neue Features Was gibt es neues bei und? : ( Snapshots) : : RAID-1,5,6 Support : Implementierung von im Linux-Kernel : Mglichkeit, trotz inkompatibler Lizenzen unter Linux zu benutzen

6 Kurz die Grundlagen Grundlagen Device(s) (/dev/sda, /dev/sdb etc.) werden als Physical Volumes (PV) markiert PVs werden zu einer Volume-Group (VG) zusammengefasst

7 Kurz die Grundlagen Grundlagen Device(s) (/dev/sda, /dev/sdb etc.) werden als Physical Volumes (PV) markiert PVs werden zu einer Volume-Group (VG) zusammengefasst Logische Volumes (LV) entnehmen ihre Blöcke aus der VG

8 Kurz die Grundlagen Grundlagen Device(s) (/dev/sda, /dev/sdb etc.) werden als Physical Volumes (PV) markiert PVs werden zu einer Volume-Group (VG) zusammengefasst Logische Volumes (LV) entnehmen ihre Blöcke aus der VG Demo

9 Kurz die Grundlagen Grundlagen Device(s) (/dev/sda, /dev/sdb etc.) werden als Physical Volumes (PV) markiert PVs werden zu einer Volume-Group (VG) zusammengefasst Logische Volumes (LV) entnehmen ihre Blöcke aus der VG Demo

10 Was sind? Grundlagen Komplexes LV aus LV meta und LV data Problem: Schicht zwischen VGs und LVs nicht vorgesehen Lösung LV meta und LV data werden versteckt (erscheinen nur in /dev/mapper) zu einem Thinpool zusammengefasst Aus einem LV thinpool werden die Thinpool-LVs generiert

11 Was sind? Grundlagen Komplexes LV aus LV meta und LV data Problem: Schicht zwischen VGs und LVs nicht vorgesehen Lösung LV meta und LV data werden versteckt (erscheinen nur in /dev/mapper) zu einem Thinpool zusammengefasst Aus einem LV thinpool werden die Thinpool-LVs generiert Hier können beliebig viele (rw) Snapshots generiert werden!

12 Was sind? Grundlagen Komplexes LV aus LV meta und LV data Problem: Schicht zwischen VGs und LVs nicht vorgesehen Lösung LV meta und LV data werden versteckt (erscheinen nur in /dev/mapper) zu einem Thinpool zusammengefasst Aus einem LV thinpool werden die Thinpool-LVs generiert Hier können beliebig viele (rw) Snapshots generiert werden! Demo

13 Was sind? Grundlagen Komplexes LV aus LV meta und LV data Problem: Schicht zwischen VGs und LVs nicht vorgesehen Lösung LV meta und LV data werden versteckt (erscheinen nur in /dev/mapper) zu einem Thinpool zusammengefasst Aus einem LV thinpool werden die Thinpool-LVs generiert Hier können beliebig viele (rw) Snapshots generiert werden! Demo

14 Was sind? Grundlagen Idee: LV wird gegen ein schnelles Device (SSD?) gecached Komplexes LV aus LV meta, LV cache und LV data

15 Was sind? Grundlagen Idee: LV wird gegen ein schnelles Device (SSD?) gecached Komplexes LV aus LV meta, LV cache und LV data Ansatz:

16 Was sind? Grundlagen Idee: LV wird gegen ein schnelles Device (SSD?) gecached Komplexes LV aus LV meta, LV cache und LV data Ansatz: aus LV meta und LV cache wird komplexes LV cachepool (SSD)

17 Was sind? Grundlagen Idee: LV wird gegen ein schnelles Device (SSD?) gecached Komplexes LV aus LV meta, LV cache und LV data Ansatz: aus LV meta und LV cache wird komplexes LV cachepool (SSD) explizites Auswählen des Devices möglich :-)

18 Was sind? Grundlagen Idee: LV wird gegen ein schnelles Device (SSD?) gecached Komplexes LV aus LV meta, LV cache und LV data Ansatz: aus LV meta und LV cache wird komplexes LV cachepool (SSD) explizites Auswählen des Devices möglich :-) LV data wird mit LV cachepool verknpft

19 Was sind? Grundlagen Idee: LV wird gegen ein schnelles Device (SSD?) gecached Komplexes LV aus LV meta, LV cache und LV data Ansatz: aus LV meta und LV cache wird komplexes LV cachepool (SSD) explizites Auswählen des Devices möglich :-) LV data wird mit LV cachepool verknpft Demo

20 Was sind? Grundlagen Idee: LV wird gegen ein schnelles Device (SSD?) gecached Komplexes LV aus LV meta, LV cache und LV data Ansatz: aus LV meta und LV cache wird komplexes LV cachepool (SSD) explizites Auswählen des Devices möglich :-) LV data wird mit LV cachepool verknpft Demo

21 mit Grundlagen Vorgeschichte: LVs verteilen sich automatisch über die verfügbaren Devices Ansatz: Stripes wie spiegeln/anordnen So wird 1, 5, 6, 10, 12 möglich Demo bei Bedarf am Ende

22 Weitere Feautures Grundlagen Cachen aller Metadaten ber daemons (lvmetad und dmmetad) Cluster (clvmd)

23 Weitere Feautures Grundlagen Cachen aller Metadaten ber daemons (lvmetad und dmmetad) Cluster (clvmd) VGs migrieren: vgexport/vgimport

24 Weitere Feautures Grundlagen Cachen aller Metadaten ber daemons (lvmetad und dmmetad) Cluster (clvmd) VGs migrieren: vgexport/vgimport LVs aktivieren / deaktivieren ( activation skip )

25 Weitere Feautures Grundlagen Cachen aller Metadaten ber daemons (lvmetad und dmmetad) Cluster (clvmd) VGs migrieren: vgexport/vgimport LVs aktivieren / deaktivieren ( activation skip )

26 on Linux Lizenzprobleme Funktionsweise Zetabyte (2 128 byte) File System Bekannt aus Solaris sehr stabil sehr sicher nicht das allerschnellste ;-) Alleinstellungsmerkmal 7 (bei : raidz3), sprich drei Parity-Devices (!)

27 Lizenzprobleme on Linux Lizenzprobleme Funktionsweise Problem: -Lizenz inkompatibel mit Kernel-Lizenz GPLv2 Lösung:

28 Lizenzprobleme on Linux Lizenzprobleme Funktionsweise Problem: -Lizenz inkompatibel mit Kernel-Lizenz GPLv2 Lösung: -Code wird auerhalb der Kernels gepflegt

29 Lizenzprobleme on Linux Lizenzprobleme Funktionsweise Problem: -Lizenz inkompatibel mit Kernel-Lizenz GPLv2 Lösung: -Code wird auerhalb der Kernels gepflegt Übersetzen gegen einen bestehenden Kernel ist lizenztechnisch unproblematisch

30 Lizenzprobleme on Linux Lizenzprobleme Funktionsweise Problem: -Lizenz inkompatibel mit Kernel-Lizenz GPLv2 Lösung: -Code wird auerhalb der Kernels gepflegt Übersetzen gegen einen bestehenden Kernel ist lizenztechnisch unproblematisch.. is tainting kernel -Meldung eher politischer Natur

31 Lizenzprobleme on Linux Lizenzprobleme Funktionsweise Problem: -Lizenz inkompatibel mit Kernel-Lizenz GPLv2 Lösung: -Code wird auerhalb der Kernels gepflegt Übersetzen gegen einen bestehenden Kernel ist lizenztechnisch unproblematisch.. is tainting kernel -Meldung eher politischer Natur

32 Lizenzprobleme on Linux Lizenzprobleme Funktionsweise Problem: -Lizenz inkompatibel mit Kernel-Lizenz GPLv2 Lösung: -Code wird auerhalb der Kernels gepflegt Übersetzen gegen einen bestehenden Kernel ist lizenztechnisch unproblematisch.. is tainting kernel -Meldung eher politischer Natur

33 on Linux Lizenzprobleme Funktionsweise Funktionsweise von zpool erzeugt einen Pool von Device-Blcken, der sofort als Dateisystem verfügbar ist zfs kann aus dem Pool auch Block-Devices erzeugen

34 on Linux Lizenzprobleme Funktionsweise Funktionsweise von zpool erzeugt einen Pool von Device-Blcken, der sofort als Dateisystem verfügbar ist zfs kann aus dem Pool auch Block-Devices erzeugen Snapshots sind möglich (ro)

35 on Linux Lizenzprobleme Funktionsweise Funktionsweise von zpool erzeugt einen Pool von Device-Blcken, der sofort als Dateisystem verfügbar ist zfs kann aus dem Pool auch Block-Devices erzeugen Snapshots sind möglich (ro) Clone machen Snapshots wieder schreibfähig

36 on Linux Lizenzprobleme Funktionsweise Funktionsweise von zpool erzeugt einen Pool von Device-Blcken, der sofort als Dateisystem verfügbar ist zfs kann aus dem Pool auch Block-Devices erzeugen Snapshots sind möglich (ro) Clone machen Snapshots wieder schreibfähig Demo

37 on Linux Lizenzprobleme Funktionsweise Funktionsweise von zpool erzeugt einen Pool von Device-Blcken, der sofort als Dateisystem verfügbar ist zfs kann aus dem Pool auch Block-Devices erzeugen Snapshots sind möglich (ro) Clone machen Snapshots wieder schreibfähig Demo

38 Weitere Feautures on Linux Lizenzprobleme Funktionsweise nix neues :-)

39 Noch?