Windows, Unix, Mac Dateidienst

Transkript

1 IT-Symposium IVV Naturwissenschaften IV der Fachbereiche Biologie Chemie Physik Windows, Unix, Mac Dateidienst Westfälische Wilhelms-Universität Münster IT-Symposium April, Nürnberg Transparente Dateidienste für heterogene Rechnerumgebungen (Windows, Linux/Unix, Mac) A Heinz-Hermann Adam (adamh@uni-muenster.de) Was ist die IVV Naturwissenschaften? o Teil des dezentralen IV- Systems der Universität Münster o Zusammenschluß der naturwissenschaftlichen Fachbereiche o Ziel: Gemeinsame Befriedigung des Bedarfs an fachspezifischen IV-Mitteln (Hardware, Software, Dienste) n Selbsthilfeorganisation n Nutzung von Synergieeffekten o Kein Rechenzentrum o Active Directory Domäne n ca. Server n über. Arbeitsplätze n Über 8. Benutzer o Betriebssysteme n Linux (6%) n OpenVMS n Mac OS (6%) n Tru6 UNIX n Windows (78%)

2 AlphaServer ES d i g i t a l d d i i g g i i t t a a l l SD SD SD UI D U ID H p Pr ol ian td L S tor ag es e rve r Ta pe S imp le x D up lex c h ch UI D S tor ag e S er ve r P r o L i a n t D L 6 8. G B U L T R A S C S I hp proliantmlg K 8. G KB U L T R A S C S I C B A E S C E S C U I DN I CN I C EN T ER EN T ER UI D UI D HP S to rag ew o rk s hs v HP S to rag ew o rk s hs v Ta pe S imp le x D up lex ch c h UID S tor ag e S er ve r IVV Naturwissenschaften IV der Fachbereiche Biologie Chemie Physik PR OLIANT M L 7 Ω hp ProLi ant M L hp ProLi ant M L hp ProLi ant M L h p P ro L ia n t ML IT-Symposium Serverersatz 6 o Erste größere Beschaffungsmaßnahme seit 998 n Geplant seit o Gesamte Infrastruktur wird erneuert o Alte Systeme sind zu ersetzen, zu erneuern oder zu ergänzen o Ausgangssituation n Daten-Silos mit Direct Attached Storage p OpenVMS p Windows p Tru6 UNIX p Linux Linus NWZLicense VNWZ VNWZ/ XNWZ NWZDC FSMO-DC, SFU, WINS VMware Guest auf NWZGSX NWZSamba FS, WS, CM ProLiant ML G X- CPU, GB RAM, 9 GB Storage NWZNAS NWZNAS NWZNAS ProLiant DL 8 G NWZEVA ProLiant DL 8 G X- CPU, X- CPU,, GB RAM, GB RAM Enterprise Virtual Array HSV, GB Cache, 88 GB Storage DC, WINS VMware Guest auf NWZGSX NWZDC NWZLinux NWZHome DC, WINS ProLiant ML 7 PIII-8 CPU, GB RAM, NWZDC 7,8 GB Storage NWZSAN NWZSUS NWZRIS NWZGSX NWZGSX NWZMGMT Ziele o Konsolidierung n Zentrales Speichersystem p Plattenplatz p Datensicherung p Ausfallsicherheit n Hochverfügbarer Fileservice p Transparent für alle Systeme n Einheitliches, hochverfügbares Rechnersystem p Für Scientific Computing p Für Grundversorgung (Active Directory & Co.) n Man-Power o Daten-Pools

3 IT-Symposium Ausbaustufe () Vor o OpenVMS 7.- Cluster mit Advanced Server 7.A ECO- o Transparente Homefilesystem n OpenVMS n Windows o Diverse Windows Fileserver Ab o Windows Storage Server Cluster mit SAN-Storage o Transparente Homefilesysteme n Windows n Linux o Nur noch ein zentrales NAS-Cluster Komponenten o Windows Server Active Directory n vorhanden o Windows Services for Unix.x bzw. Windows Server R n vorhanden o Windows Storage Server R n Update der vorhanden Systeme o Grouplogic ExtremeZ-IP n Zu Installieren o HP StorageWorks Cluster Extension EVA n Noch zu installieren 6

4 IT-Symposium Schemaerweiterung o Installation von Microsoft Services for Unix n Schema-Admin-Rechte erforderlich p Wegen eines Bugs in der SFU-Installationsroutine auch dann, wenn die Schemaerweiterung schon vorhanden ist o Oder adprep bzw. domainprep für Windows Server R o Neue Attribute für p Benutzer n UID, GID, p Gruppen n GID 7 Microsoft Services for Unix bzw. Windows Server R o Domänen Controller n Server for NFS Authentication p Nicht mehr notwendig bei R n User Name Mapping p Nicht mehr notwendig bei R n Server for NIS o File Server n Bestandteil von Windows Storage Server p Server for NFS p Server for NFS Authentication n Nicht mehr notwendig bei R p User Name Mapping (optional im WK AD) n Nicht mehr notwendig 8

5 IT-Symposium File Server o Server for NFS n Exportiert Verzeichnisse als Network File System n File Name Handling p Erzeugen von Dateien mit illegalen Zeichen im Namen n Unix:.DCOPserver_PCFT89_: n Windows:.DCOPserver_PCFT89_² n C:\SFU\common\ Translate_NFS_File_Names.txt p Dateien, die mit einem. beginnen können als versteckte Dateien angelegt werden n Für Multi-Protokoll Zugriff (Microsoft Knowledge Base Artikel 9) p HKLM\Software\Microsoft\Server for NFS\CurrentVersion\Mapping n KeepInheritance = p Sonst werden die geerbten (inherited) NTFS-Zugriffsrechte nicht an per NFS erzeugte Dateien weiter vererbt 9 Migrationsplanung o EVA wird ersetzt durch n EVA 8 p Neuinstallation p Upgrade der EVA o Spiegelung von EVA auf EVA 8 n Continous Access o Schwenk des NAS-Clusters auf die zweite EVA o EVA Upgrade o Spiegelung von EVA 8 auf EVA 8 n Continous Access

6 IT-Symposium Migrationsplanung o NAS-Filer werden erweitert n zusätzliche HP ProLiant Storage Server DL 8 G p Windows Storage Server R n Vorhandene Storage Server müssen auf R aktualisiert werden o NAS-Cluster verwendet HP Secure Path n Inkompatibel mit EVA 8 p MPIO zusätzlich installieren p Oder anderen Migrationspfad... Migrationsdurchführung o Neues Cluster aus neuen Storage Servern (native R) aufsetzten o Alle Dienste vom alten in das neue Cluster übertragen n Optimierung der Clusterressourcen n vdisks können bei der Gelegenheit verkleinert werden n Daten vom alten auf das neue System kopieren o Neues Cluster produktiv schalten o Altes Cluster Evicten n Alte Nodes als R neuinstallieren und in neues Cluster aufnehmen 6

7 IT-Symposium Windows Storage Server Clusters o Kein Active-Active Cluster unter Windows n Zumindest nicht von Microsoft n Nur failover Dienste o Lastverteilung über Clustergruppen (virtuelle Server) n Grenze des failovers n Faustregel: min. Clustergruppe pro Knoten o Quorum n Single quorum device cluster (altes Cluster) p Platte im SAN n Majority Nodes Set Cluster (neues Cluster) p Wichtig für Array Fail-over im SAN (Clusterextension EVA) o Dual-homed n Public network für Zugriff durch Clients n Private network ( crossover ) für heartbeat Cluster Konfiguration o Clustergruppen n Jeweils eigene p Clusteralias p IP-Adressen n Default Cluster Group p Quorum n Virtueller Server - p physikalische Platten p CIFS/NFS/AFP- Freigaben 7

8 IT-Symposium Physical Disks im Cluster o virtuelle Server = Clustergruppen o Typen von Platten n Homeverzeichnisse n Windows Roaming-Profiles n Gruppenplatten p Shared Disk für Arbeitsgruppen n Anwendungssoftware o Möglichst gleichmäßig über Clustergruppen verteilen n Plattenbereiche pro Clustergruppe Einschränkungen mit Physical Disks o Eindeutige Laufwerksbuchstaben im gesamten Cluster notwendig n Failover-Situation p alle Clustergruppen müssen gleichzeitig auf einem NAS- Filer gestartet werden können p D.h., 6 Laufwerksbuchstaben für initiale Konfiguration benötigt o Starke Einschränkung für Erweiterbarkeit n Nur ein weiterer Plattentyp in das Cluster aufnehmbar 6 8

9 IT-Symposium Virtual Mountpoints o Volumes werden in ein leeres Verzeichnis einer Platte pro Clustergruppe gemountet n Laufwerksbuchstabe pro Clustergruppe o Nicht von allen Sharing Protokollen unterstützt n SMB/CIFS n NFS n AFP o Daher doch ein Laufwerksbuchstabe pro Platte 7 Struktur der Disks o Freigaben nicht im Wurzelverzeichnissen o Auf Wurzelebene zusätzliche Metadaten n NFS n AFP n Shadowcopies n TSM (Backup) 8 9

10 IT-Symposium Freigabe der Verzeichisse o CIFS n Für Windows, Linux, Macintosh Client n Eigene Ressource im Cluster o NFS n Für Linux/Unix Server n Eigene Ressource im Cluster n Muss dem Clusterservice ggf. erst bekannt gemacht werden p Services for NFS nach Clusterinstallation neuinstallieren o AFP n Für Macintosh Clients n Group Logic ExtremeZ-IP n Muss installiert werden 9 File Share (CIFS) Ressource o Erweiterte Konfiguration der Freigabe n Normal Share p Wie üblich n Dfs root p Ein Dfs-Baum wird erstellt n Share subdirectories p Es wird auch jedes Verzeichnis der ersten Unterverzeichnisebene freigegeben p Die übergeordnete Freigabe dann zweckmäßiger Weise verstecken$

11 IT-Symposium NFS Share Ressource o Es wird der freizugebende Pfad und der exportierte Name angegeben n Entweder wird das Verzeichnis als ganzes n Oder die enthaltenen Unterverzeichnisse einzeln exportiert o Die Zugriffsrechte auf die Exports werden wie bei NFS üblich auf Hostname Basis vergeben n Vereinfacht durch Client groups p nfsadmin server listgroups p nfsadmin server creategroup <name> p nfsadmin server addmember <name> <host> p nfsadmin server listmember <name> Sevices for Macintosh im Cluster o Nicht clusterfähig o Beschränkung in der Anzahl der Dateien pro Volumen n Paged Pool (siehe Microsoft Knowledge Base Artikel 687) p Max. 7 MB für Windows und alle Applikationen p,9 Millionen Dateien oder,6 Millionen Verzeichnisse, wenn SFM ihn exklusiv hätte n Zeit um den Index der Dateien und Verzeichnisse beim Starten des Dienstes im Speicher zu erzeugen p Bei vorherigem Cluster in der Aufbauphase mehr als zwei Stunden o Nur für kleinere Anwendungen und Umgebungen einsetzbar o Alternativen n Cyan MacServerIP n Grouplogic ExtremeZ-IP

12 IT-Symposium ExtremeZ-IP o Vollständig clusterfähig n Pro Clustergruppe (virtueller Server) ein Dienst n Konfiguration der Volumen findet durch eigene Konsole außerhalb des Clusters statt, aber nur einmal pro Clustergruppe o Analoge Funktionalität zu SFM aber ohne deren Beschränkungen o Darüber hinaus n AFP. n Kerberos Unterstützung o Failover ist nicht transparent n Volumen müssen nach dem failover auf dem Client neu angebunden werden p Behoben seit März 7 in Version. Clusterextension EVA o Failover zwischen den Speichersystemen an den zwei Standorten o Weitere Ressource im Cluster, von der die Physical Disk Ressourcen abhängen n Eine pro vdisk o Majority Node Set Cluster notwendig n Failover der Quorum Disk könnte nicht per CLX stattfinden o Es wird stets die Replica verwendet, die am selben Standort ist wie der Dienste tragende NAS-Filer o SAN-Management Appliance an jedem Standort notwendig o CLX kommuniziert mit Command View auf SMA n Ändert Zoning automatisch o Noch nicht implementiert

13 IT-Symposium Linux + CIFS Probleme o CIFS + Windows Server n Keine Special Files, z.b. Sockets und seltsame Zeichen in Dateinamen, z.b. : p Windows Storage Server (bzw. Microsoft Services for Unix.x) als NFS-Server n File Name handling p SaMBa. als CIFS NFS Gateway o KDE n Kein Login möglich p ~/.xsession-errors n WARNING: Problem deleting stale lockfile ~/.kde/share/config/knotifyrc.lock p KDE-Bug #6 p SaMBa Optionen Red Hat Linux Enterprise Server IV o SaMBa-Server im Active Directory n /etc/samba/smb.conf security = ADS o Greift per NFS auf NAS-Filer zu n /etc/fstab nwznasa:/home_a /ddfs/user/data/a nfs auto o Bietet CIFS-Freigaben für Clients an n /etc/samba/smb.conf [homes] comment = Home Directories browseable = no writeable = yes o Gateway-Funktion für Linux-Clients n /etc/samba/smb.conf unix extensions = yes mangled names = no 6

14 IT-Symposium Inbetriebnahme o Datentransfer altes Cluster neues Cluster n Robocopy n Mehrstufig p Vollständige Kopie n Testen aller Dienste mit Produktionsdaten (Menge und Art) n Umstellung einiger ausgewählter Testbenutzer p Inkrementelle Kopie n Triggert automatisch die Umstellung der Benutzeraccounts auf die neuen Storage Server an o Anpassen des Dfs und der Benutzeraccounts 7 Status S er ver c h c h S to r age Simpl xe IU D Du p le x a Tpe c h c h U I D Du p le x S to r age S er ver Simpl xe c h c h a Tpe Simpl xe S to r age U I D Du p le x a Tpe Duple x U I D Simpl xe a Tpe ch ch o NAS-Filer S er ver S o t r age Ser ver n ProLiant Storage Server DL8 G o Linux Server n ProLiant ML G n Zukünftig VMware Virtual Machine HP St ora gew or ks hsv HP St ora gewor ks hs v U ID U ID ESC EN TER ESC EN TER ESC EN TER ESC EN TER HP St ora gew or ks hsv HP St ora gewor ks hs v U ID U ID o EVA8.87 GB n CD Konfiguration n 6 Disks 8

15 hp Integrity Superdome Cab inet Numb er HKP 8V GSP Rem ote Att en tion B a y B a y B a y B a y B a y B a y B a y B a y B a y B a y hp Sto ra ge Wor ks hp Sto ra ge Wor ks B a y B a y B a y B a y B a y B a y B a y B a y B a y B a y E SC E SC E NTE R E NTE R UID UID HP S torag ewo rk s h sv HP S torag ewo rk s h sv - V~/6Hz.A HP P roliant B L8c U ID R EF ER TO IN ST RU C TIO N M AN U AL FO RC OR R EC T S EL EC TIO N OF PO WE R CO RD hp StorageWorks RPS Input _7V.A MAX hp StorageW orks Tape Array hp StorageWorks H P P roliant B L8c U ID Co m Su pe r Sta c k- Switc h po rt MAC Ad d r: CR 7-9 Se r ia l No. hp StorageWorks DVD hp StorageWorks DVD hp proliant MLg H P P roliant B L8c U ID OK D O W N DO WN hp StorageWorks DVD hp StorageWorks DVD C B A U P U P IT-Symposium Status o Windows Server Active Directory o Windows Storage Server R Cluster n Homedirectories n Windows Roaming-Profiles n Gruppenplatten n Anwendungssoftware o Transparente Homedirectories unter n Windows n Linux/Unix n Macintosh 9 Der Weg zu Daten-Pools o Zentraler Plattenspeicher 6 GB k 6GB k 6GB k FibreCh ann el 6 GB k 6GB k 6GB k FibreCh ann el 6 GB k 6GB k 6GB k FibreCh ann el GB k GB k GB k GB k GB k FibreCh ann el GB k GB k FibreCh ann el GB k GB k FibreCh ann el n Inkrement GB o Anbindung aller Systeme über SAN 6GB k 6GB k 6GB k GB k GB k GB k o NAS-Cluster für Filesharing 6GB k 6GB k 6GB k GB k GB k n NAS-SAN-Fusion o Paritionierbares SMP-System 6GB k 6GB k 6GB k 6GB k 6GB k 6GB k GB k GB k GB k GB k GB Ultr a SCSI n Itanium² n - CPU o Bladesystem 6 GB k 6GB k 6GB k 6 GB k 6GB k 6GB k 6 GB k 6GB k 6GB k 6GB k 6GB k GB k GB k GB k GB k GB k GB k 6GB Ultra 6GB U lt ra 6GB Ultra 6GB Ultra 6GB Ult ra 6GB Ult ra 6GB Ultra 6GB Ultra n x86-6 n VMware Virtual Infrastructure

16 IT-Symposium Q & A Fragen und Antworten NWZnet.uni-muenster.de 6