Grid-Aktivitäten an der RWTH-Aachen

Transkript

1 Grid-Aktivitäten an der RWTH-Aachen M.Kirsch, M. Duda, M. Erdmann, G. Flügge, S. Kappler, Th. Kreß, A. Nowack III. Physikalisches Institut A RWTH Aachen Frühjahrstagung der Deutschen Physikalischen Gesellschaft

2 Überblick DCMS TIER III HH TIER III KA 3 Institute TIER III AC TIER II Prototypisierung automatisierte Installation CMS TIER II TIER I GridKa

3 aktuelle Installation Installierte Services: Computing Element Storage Element/Monitoring Box 2 Workernodes User Interface Installation mittels yaim-skripten: suboptimal Unterstützte VOs: dteam, cms, dcms (-> vgl. entspr. Folie) Softwareversionen: Scientific Linux 303 LCG-Software: LCG-2_3_0 Hardware: PIII-Dual-Prozessoren 750 MHz 512 MB RAM 40 GB Festplatte

4 Ausbau d. GRID-Clusters Testbetrieb -> Produktionsumgebung neue Hardware: CE: Dual-Opteron, mit 500 GB (RAID 10) Plattenplatz SE: 3.75 TB-Fileserver (RAID 5) WN: 10 Dual-Opteron mit je 250 GB Plattenplatz Installationsserver: Single-Opteron mit 750 GB (RAID 5) Plattenplatz Installation in renoviertem Serverraum mit 30 kw Kühlleistung weiterer Ausbau noch dieses Jahr (Volumen noch unbekannt): zusätzl. WN zusätzl. Fileserver (dcache) Computing Element quattor Worker Nodes Storage Element yaim ungenügend: -> quattor

5 quattor 'quattor is an administration toolkit for optimizing ressources' Teil des Extremely Large Fabric management system-projekts (ELFms) am CERN Konzept: Leistungsfähigkeit, Portierbarkeit, Modularität Am CERN derzeit 2000 Rechner unter quattor-kontrolle (bald 6000) Quattor-Working-Group für LCG-Installationen mittels quattor Alle LCG-Services erfolgreich in Orsey installiert Beschreibung der Rechner: Hardware, Software, Administration Betriebssystem(e) LCG-Software quattor Experiment spez. Software... erstellt KickStart-File Installation auf Knopfdruck gibt Rechnerstatus an

6 Installation & Administration Profil für Rechner include Templates Veränderung der Konfiguration: z.b. Hinzufügen neuer Software in CDB einchecken in CDB einchecken xml-profil xml-profil vollständige Konfiguration neue Konfiguration aii: install dispatch-deamon KickStart-File DHCP-Server untersucht Abhängigkeiten Aktionen Client einschalten führt nötige Aktionen aus Installation & Konfiguration fertig! fertig!

7 Quattor an der RWTH Installation von: Software-Repository (derzeit gefüllt mit SL303, quattor, lcg) Konfigurationsdatenbank (CDB) Installationsinfrastruktur (AII) Konfiguration: Adaption der mitgelieferten Templates auf RWTH Umgebung neue Templates erstellt Profile für die neuen Workernodes erstellt (inkl. LCG-Zubehör) automatische Installation der zehn Workernodes: erfolgreich und unkompliziert! erste Erfahrungen mit Softwaremanagement Erlernen des Umgangs mit anderen Konfigurationskomponenten Leider noch keine Möglichkeit des Tests der Rechner als GRID-WN

8 DCMS Zusammenarbeit der deutschen am CMS-Experiment beteiligten Institute der RWTH Aachen sowie der Universitäten Hamburg und Karlsruhe technische Realisierung: eigene Virtuelle Organisation 'dcms' am DESY aufgesetzt Nutzung weiterer GRID-Services des DESY: z.b. Resource Broker kein eigener Software-Manager Ziele: geringere Abhängigkeit von Dritten Erfahrungsaustausch in Sachen GRID/Analyse: gemeinsame Videokonferenz Web-Portal für Informationsaustausch Tools zur MC-Produktion Priorisierung der dcms-nutzer an den teilnehmenden Sites: Einsatz von FairShare im Scheduling (Maui/Torque) Jobs laufen bei den Daten (Einigung auf verteilte Datensamples)

9 Zusammenfassung GRID: Funktionierendes Testsystem mit aktuellen Software-Versionen Hardware für die Erweiterung zum produktionsfähigen TIER II/IIIPrototyp in geeignetem Raum installiert Einsatz eines leistungsfähigen Werkzeugs zur automatisierten Installation und Administration großer Rechencluster erfolgreiche Installation von zehn Workernodes gute Ausgangsbasis für einfache Installation neuer Hardware CMS in Deutschland: fruchtbare Zusammenarbeit der deutschen CMS-Analysegruppen Kommunikation Priorisierung Verteilung allgemein nützlicher Aufgaben

10 Ausblick GRID: vollständige Installation der neuen Hardware mit quattor Ankopplung der neuen Services ans GRID Weiterentwicklungen: dcache, Scheduling, Monitoring,... Analyse bezogenes Computing: Wie lange dauert eigentlich eine Preselektion von Daten? Wie lange dauert die Analyse der selektierten Daten? Wie schnell bekommt man die Ergebnisse der Analyse (Histogramme)? genügt dafür noch der Desktop-Rechner unterm Tisch? braucht es einen (oder mehrere) spezielle Workgroup-Server dafür? lohnt der Einsatz von PROOF (Parallelisierung von ROOT-Jobs)?