Software oder Appliance basierende Deduplikation Was ist die richtige Wahl? Storagetechnology 2010

Transkript

1 Software oder Appliance basierende Deduplikation Was ist die richtige Wahl? Storagetechnology 2010 Frank Herold Manager PreSales CEE

2 Quantums Portfolio StorNextSoftware DXiSerie ScalarSerie ManagementTools Professional Services & Globaler Support SharedFilesystem VTL, NAS, iscsi Disk Tape KeyManagement Datendeduplizierung Replikation Verschlüsselung Regeln für mehrstufige Speicherung Proaktive Diagnose Zentralisiertes Management

3 Software oder Appliance basierende Deduplikation Was ist die richtige Wahl?

4 Herkömmliche Backup/RecoveryArchitektur Beispiel einer EnterpriseUmgebung Zweigstellen Vor Ort Externe Auslagerung Entfernter Standort Primäres Rechenzentrum Datenbank Entfernter Standort Dateien Virtuell Hauptprobleme beim Kunden Überschreiten des BackupFensters Zeitintensive Wiederherstellung Regelmäßige Kosten für Medien Aufwändige TapeVerwaltung Kostspielige externe Aufbewahrung Disaster Recovery nicht sichergestellt

5 Deduplikation Deduplizierung, auch DataDeduplication, Datendeduplizierung (engl. Deduplication), ist in der Informationstechnologie ein Prozess, der redundante Daten identifiziert und eliminiert, bevor diese auf einen nicht flüchtigen Datenträger geschrieben werden. (Quelle: Wikipedia) Begriffe rund um Deduplizierung: Frontend vs. Backend oder auch Hardware vs. Software Variable vs. Feste Blockgröße Inline vs. Postprocessing Lokale vs. Globale Deduplizierung Deduprate VTL, NAS, ROI, TCO, Filter, Sizing,

6 Deduplikation Frontend vs. Backend 1) Client Deduplizierung 2) Backup Server Deduplizierung File & Application Servers Backup Server File & Application Servers Backup Server 3) Appliance Deduplizierung File & Application Servers Backup Stream Backup Server Dedup Appliance

7 Deduplikation Frontend vs. Backend Nichts ist umsonst! Ingest Prozess Aufteilung des Datenstroms in Blöcke Erstellen einer Signatur für jeden Block Vergleich der Signaturen mit dem Index Komprimierung und Speicherung einzigartiger Blöcke Read oder Restore Zusammensetzen der Daten aus den Blöcken Housekeeping Check der Blocks auf leere Pointer SpaceReclamation Replikation/P2T Vergleich der Blöcke mit dem Index Überprüfung mit dem ZielIndex Übertragung über IP Als Beispiel eine Empfehlung von Symantec für NBU: Einsatz von Prozessoren der neuesten Generation 8 Cores empfohlen Zusätzlicher Hauptspeicher Dedizierter Speicher

8 Deduplikation variable vs. feste Blockgröße A B C D Blöcke mit fester Länge: E F G H Änderung eines Blocks bewirkt Änderung aller anderen Blöcke 8 eindeutige Blöcke A B C D E B C D Blöcke mit variabler Länge: Änderung eines Blocks bleibt auf diesen beschränkt 5 eindeutige Blöcke

9 Deduplikation Inline vs. Postprocessing Restore Replikation P2T Geringste Disk Anforderung Inline Deduplikation Post Deduplikation Nativ VTL/NAS Kleinstes Backup und Restor Zeitfenster

10 Deduplikation lokal vs. global Es geht um die Verwaltung der Metadaten innerhalb einer Lösung, oder global über einen gesamten Storagepool (Cloud?) Technisch ist die globale Metadatenverwaltung effizienter, um: Eine höhere Datenreduktion zu erreichen Eine geringere Replikationslast zu erreichen Im Primärstorage eingesetzt zu werden Alle bisherigen Systeme verwenden mehr oder weniger eine lokale Metadatenverwaltung Praktisch ist dies bislang nicht umgesetzt (bis auf Marketing)

11 Deduplikation Dedupraten Wir brauchen keine extrem hohe Deduprate, um viel Disk einzusparen. 100% 90% Dedup Ratio Disk Savings Disk Savings 80% 70% 60% 50% 40% 30% 20% 10% 0% Wer Wer kennt kennt seine seine Kompressionsrate? Deduprate? Deduplication Ratio 1:1 0% 2:1 50% 3:1 67% 4:1 75% 5:1 80% 6:1 83% 7:1 86% 8:1 87% 9:1 89% 10:1 90% 50:1 98% 100:1 99.0% 500:1 99.8%

12 Deduplikationsrate 1:1 Aufbewahrungszeit 1 Full BU Kein Gewinn bei nur einer Sicherung!

13 Deduplikationsrate steigt auf 14:1 Aufbewahrungszeit 1 vs 14 Full BU Deduplikationsfaktor und Kapazitätseinsparung wird durch die wiederkehrende Sicherung gleicher Daten erreicht.

14 Deduplikationsrate sinkt auf 6:1 Einfluss von 10% BUBU Veränderungsrate Event 1 Event 6 Event Hohe Änderungsrate reduziert die Deduprate & erhöht die Kapazitätsanforderung

15 Deduplikationsrate steigt auf 12:1 2:1 Kompression erhöht den Wert Event 1 Event 6 Event 11 1

16 Archivierung auf /dev/dedup reduziert die Dedup Rate Deduplikationswert sinkt auf 6:1 bei Archivierung Event 1 Event 6 Event

17 Weitere Faktoren Applikationsspezifika Backup Application Commvault EMC Networker CA ArcServe Tivoli Storage Manager HP Data Protector Symantec NetBackup (TAR) Symantec BackupExec Oracle OSB (TAR) Oracle RMAN (8K)

18 Deshalb ist Sizing ein MUSS!!! Daten Datenmenge Datentyp (strukturierte vs. unstrukturierte Daten) Backup Fenster Anforderungen an die Performance Restore Fenster Aufbewahrungszeiten Sicherungsart (full, incremental oder differential Backups) Wachstums und Änderungsraten Datenwachstum (jährlich,...) Änderungsrate zwischen den Backups (full zu full, incr. zu incr....) Data Backup Window Retention Growth

19 Das Konzept #1 Tape Backup Hoch Schnell Zugriffshäufigkeit / RTO Mittel Schnell bis mittel Selten Langsam Kosten: Energie, Kühlung, Platz Hoch Mittel Niedrig Conventional Diskbased Backup Deduplicated Diskbased Backup (NAS, VTL) Kurz Mittel Lang Aufbewahrungszeit/Retention Time/RPO

20 Das Konzept #2 Zentralisiertes Management Tage Wochen Monate Jahre Primary Data Center Abteilung Mehrstufige Replikation Migration DR Facility Integration Datenbank Verschlüsselung Indizierung Selbst reparierend Entfernter Standort Dateien Virtuell Zentrale Replikation Services

21 7 Schritte zu einer erfolgreichen Dedup Lösung 1. Verstehen der Pro s und Con s von Deduplizierung. 2. Identifizieren meiner individuellen Backup und Restoreprobleme (Archiv) je Daten oder Prozessklasse. 3. Auswahl der richtigen Basistechnologien (B2D2RepD2T). 4. Wie stark wachsen meine Daten? Wie stark verändern sie sich? 5. Wie sehen meine SLA s aus? 6. Wie sehen meine DR Szenarien und Vorhaltezeiten aus? 7. Welcher Partner steht mir kompetent zur Seite?

22 Vielen Dank