Das LHC-Computing-Grid

Größe: px
Ab Seite anzeigen:

Download "Das LHC-Computing-Grid"

Transkript

1 Das LHC-Computing-Grid Von Julian Gethmann WS 11/12 KIT Universität des Landes Baden-Württemberg und nationales Forschungszentrum in der Helmholtz-Gemeinschaft

2 Überblick Ansprüche an die Rechnerinfrastruktur Historie Versprechen von Grid-Computing Vergleich mit Clustern und der Cloud Das LHC-Computing-Grid Anforderungen Ebenen und Organisation Netzwerk Factory Middleware Anwendungsbeispiel Modernere Ansätze 2

3 Vom klassischen HPC zum Grid 1990: Metacomputing (Larry Smarr) Vernetzung der US Supercomputer-Centers 1995: FAFNER (Factoring via Network-Enabled Recursion) und I-WAY (Information Wide Area Year) 1997: Workshop: Building a Computational Grid (Ian Foster, Carl Kesselman) 1999: MONARC Konzept für LHC 2001: LHC Computing Grid (LCG) wird geplant ( ) [CERN] 3

4 Eigenschaften des Grid Computing Grid Data Grid Service Grid Ressource Grid Knowledge Grid Abstraktion von Hardware und Implementierung Weit entfernte Recheneinheiten Nutzer sind auch Anbieter (Virtuelle Organisationen) 4 A computational grid is a hardware and software infrastructure that provides dependable, consistent, pervasive, and inexpensive access to high-end computational capabilities (Ian Foster, Carl Kesselman)

5 Abgrenzung Aspekte der Cloud Keine Gedanken über Wartung des Systems Vertrauen in Anbieter Aspekte des P2P Last auf Nutzer verteilt Dezentral Organisiert Virtuelle Organisationen Selbst organisiert Individuum wird misstraut Organisation wird Vertraut 5

6 Grid für jeden? Nein/Jein Meteorologie Videorendering Ja Bioinformatik Medizin/Virologie Industrie Finanzwesen Teilchenphysik [IMK-TRO] 6

7 Anforderungen des LHC 2,9 MW Limit Stromversorgung (bald 3,5) 1 GHz Daten/Detektor Für >20 Jahre/Laufzeit Speicherplatz (zur Zeit 45 PB) ~1 GHz Datennahme/Detektor ~1 PB/s Paar 100 MB/s (CMS, ATLAS) ~50 MB/s (LHCb) 1,3 GB/s (ALICE) 15 PB/a 7

8 Lösung in mehreren Stufen 49 Mitwirkende aus 34 Ländern 11 TIER TIER 2 (in 66 federations ) 6 VOs ALICE ATLAS CMS DTEAM LHCB SixTrack 8 ALICE experiment ATLAS experiment CMS experiment Grid (LCG) Deployment Group LHCb experiment Single Particle Tracking Code

9 Tier Tier 0 Hat alles Tier 1 U. U. nicht alle Experimente Muss Rechenkapazität vorhalten Muss Band-Archivierung vorhalten Database-Service Tier 2 Oft nicht alle Experimente Hat keine Band-Archivierung Meist keine Simulation Tier 3 Ist nicht in MoU verankert 9

10 Aufbau des Grid [CERN] 10

11 Netzwerk [CERN] 11

12 LHC Optical Private Network 10 Gbits zu Tier 1 1 Gbits zu Tier 2 und kleiner Doppelte Kapazität [CERN] 12

13 Datendurchsatz [gridview.cern.ch] 13

14 Computing CPU-Benchmark für Hochenergie Physik The High Energy Physics Unix Information Exchange (HEPiX) HEPSPEC02 HEPSPEC06 14 Mein Rechner Standard Performance Evaluation Corporation SPEC00 INT 2563 SPEC00 FP 2604 SPEC06 INT 15,8 SPEC06 FP 14,5

15 Hardware Was? Versprochen Installiert Genutzt CPU-Grid [Tage] % CPU-Total [Tage] % CPU-KIT [Tage] % [CERN Accounting Summary Oct. 11] 15

16 Storage 45 PB Festplattenkapazität dcache Auf Bändern CASTOR [CERN Accounting Summary Oct. 11] 16

17 Middleware Globus Toolkit Security Authentification/Authorization Community Authorization Delegation Credential Management glite LCG File Catalog Disk Pool Manager Reliable FileTransferService und gftp Data Managent GridFTP Reliable File Transfer Service Execution Management Grid Resource Allocation and Management service Information Services Monitoring and Discovery Service 17

18 Job-Verarbeitung [Glite 3 Manual] 18

19 Anmeldung am Grid CA Proxies VO Management Services Proxies Attribute Certifi cate Job Description Language Executable = "test.sh"; Arguments = "filea fileb"; StdOutput = "std.out"; StdError = "std.err"; InputSandbox = {"test.sh", "filea", "fileb"}; OutputSandbox = {"std.out", "std.err"}; [Glite 3 Manual] 19

20 Neuere Ansätze Pilot Job DIRAC Overlay (LHCb) Kein Required in JDL AliEn (ALICE) PanDa (ATLAS) Glideln WMS (CMS) [DIRACgrid.org] 20

21 Anwendungsprogramme ROOT Geant4 POOL [root.cern.ch] [http://atlas-computing.web.cern.ch] 21

22 Ihr seid dran 22

Das LHC-Computing-Grid Hauptseminar - Methoden der experimentellen Teilchenphysik

Das LHC-Computing-Grid Hauptseminar - Methoden der experimentellen Teilchenphysik Hauptseminar WS 2011/2012 Das LHC-Computing-Grid Hauptseminar - Methoden der experimentellen Teilchenphysik Julian Gethmann Karlsruher Institut für Technologie 03.02.2012 1 1 Ansprüche an die Rechnerinfrastruktur

Mehr

Cloud-Computing Seminar - Vergleichende Technologien: Grid-Computing Hochschule Mannheim

Cloud-Computing Seminar - Vergleichende Technologien: Grid-Computing Hochschule Mannheim Sven Hartlieb Cloud-Computing Seminar Hochschule Mannheim WS0910 1/23 Cloud-Computing Seminar - Vergleichende Technologien: Grid-Computing Hochschule Mannheim Sven Hartlieb Fakultät für Informatik Hochschule

Mehr

Seminar. Grid-Computing. Wintersemester 2005/2006

Seminar. Grid-Computing. Wintersemester 2005/2006 Seminar Grid-Computing Wintersemester 2005/2006 Gabriele von Voigt, Christian Grimm Stefan Piger, Jan Wiebelitz, Denis Göhr C. Grimm 12. Oktober 2005 Entstehung und Definition Grid-Computing Versuche zur

Mehr

Ralf Enderle 19.11.07. Grid Computing. Seminar am Institut für verteilte Systeme im WS 07/08 - Forschungstrends im Bereich Verteilte Systeme -

Ralf Enderle 19.11.07. Grid Computing. Seminar am Institut für verteilte Systeme im WS 07/08 - Forschungstrends im Bereich Verteilte Systeme - Ralf Enderle 19.11.07 Grid Computing Seminar am Institut für verteilte Systeme im WS 07/08 - Forschungstrends im Bereich Verteilte Systeme - Seite 2 Inhalt Einleitung Konzeptueller Aufbau eines Grid Systems

Mehr

Grundlagen des Grid Computing

Grundlagen des Grid Computing Grundlagen des Grid Computing Grid Middleware Toolkits: glite ICA Joh.. Kepler Universität t Linz glite Grid Middleware für das LHC Grid Wurde im Rahmen des EGEE Projekts entwickelt Basiert auf dem Globus

Mehr

Abschlussvortrag zur Bachelorarbeit. Konzeption und Aufbau eines Grid Testlabors am Beispiel des Globus Toolkit 4

Abschlussvortrag zur Bachelorarbeit. Konzeption und Aufbau eines Grid Testlabors am Beispiel des Globus Toolkit 4 Abschlussvortrag zur Bachelorarbeit Konzeption und Aufbau eines Grid Testlabors am Beispiel des Globus Toolkit 4 Halit Alagöz Fachgebiet Distributed Virtual Reality (DVR) Lehrgebiet Rechnernetze H. Alagöz

Mehr

LCG. LHC Computing Grid. Rolf Reinthaler. Universität Würzburg. 17. Juli 2009

LCG. LHC Computing Grid. Rolf Reinthaler. Universität Würzburg. 17. Juli 2009 LCG LHC Computing Grid Rolf Reinthaler Universität Würzburg 17. Juli 2009 Rolf Reinthaler (Universität Würzburg) LHC Computing Grid 17. Juli 2009 1 / 28 Contents 1 Anforderungen an das LHC Computing 2

Mehr

glite eine Grid Distribution der EGEE GRID Seminar am 08.11.2007 Fakultät für Physik Steen Klemer (Fakultät für Physik) glite 1 / 22

glite eine Grid Distribution der EGEE GRID Seminar am 08.11.2007 Fakultät für Physik Steen Klemer (Fakultät für Physik) glite 1 / 22 glite eine Grid Distribution der EGEE Fakultät für Physik GRID Seminar am 08.11.2007 Steen Klemer (Fakultät für Physik) glite 1 / 22 Übersicht 1 Geschichte Der Opa, Onkel, Bruder und Gleichgesinnte Warum

Mehr

Vergleichende Technologien - Grid-Computing

Vergleichende Technologien - Grid-Computing Vergleichende Technologien - Grid-Computing Sven Hartlieb Fakultät für Informatik Hochschule Mannheim Paul-Wittsack-Straße 10 68163 Mannheim sven.hartlieb@gmail.com Zusammenfassung Immer größerer Bedarf

Mehr

Grid-Computing in der Hochenergiephysik

Grid-Computing in der Hochenergiephysik Grid-Computing in der Hochenergiephysik Auf dem Weg zum Grid (EDG-Tutorial, Cristophe Jaquet) Once upon a time.. Microcomputer Mini Computer Cluster Auf dem Weg zum Grid (EDG-Tutorial, Cristophe Jaquet)

Mehr

Grid-Systeme. Betrachtung verschiedener Softwareplattformen zur Realisierung von Grids und Vorstellung des Globus Toolkit. 07.06.2002 Grid Systeme 1

Grid-Systeme. Betrachtung verschiedener Softwareplattformen zur Realisierung von Grids und Vorstellung des Globus Toolkit. 07.06.2002 Grid Systeme 1 Grid-Systeme Betrachtung verschiedener Softwareplattformen zur Realisierung von Grids und Vorstellung des Globus Toolkit 07.06.2002 Grid Systeme 1 Gliederung Vorstellung verschiedener Plattformen Globus

Mehr

DGI-2 ZentraleDienste

DGI-2 ZentraleDienste DGI-2 Zentrale Daniel Mallmann Institute for Advanced Simulation (IAS) Jülich Supercomputing Centre (JSC) Überblick AP 2.1 - VO-Service-Infrastruktur AP 2.2 - Helpdesk-Infrastruktur AP 2.3 - Zentrale Middleware-Infrastruktur

Mehr

LCG2-basierte MonteCarlo Produktion bei H1

LCG2-basierte MonteCarlo Produktion bei H1 LCG2-basierte MonteCarlo Produktion bei H1 Moritz Karbach Universität Dortmund moritz.karbach@desy.de MonteCarlo Überblick e 27 GeV Generator e h1simrec rekonstruiertes Ereignis p 920 GeV X Detektorsimulation

Mehr

Erweiterung einer D-Grid Ressource um eine Compute Cloud Schnittstelle

Erweiterung einer D-Grid Ressource um eine Compute Cloud Schnittstelle am am Erweiterung einer D-Grid Ressource um eine Compute Schnittstelle 3. DFN-Forum 2010 Kommunikationstechnologien Verteilte Systeme im Wissenschaftsbereich Stefan Freitag Institut für Roboterforschung

Mehr

Bandbreite - unverzichtbar für den wissenschaftlichen Erfolg am Beispiel des CMS-Experiments. Prof. Dr. Martin Erdmann, Dr.

Bandbreite - unverzichtbar für den wissenschaftlichen Erfolg am Beispiel des CMS-Experiments. Prof. Dr. Martin Erdmann, Dr. Bandbreite - unverzichtbar für den wissenschaftlichen Erfolg am Beispiel des CMS-Experiments Prof. Dr. Martin Erdmann, Dr. Volker Gülzow W µ ν Gestern: Mikroskopie der Materie Ortsauflösung Mikroskop:

Mehr

Einiges zur Grid Infrastruktur bei DESY

Einiges zur Grid Infrastruktur bei DESY Einiges zur Grid Infrastruktur bei DESY Andreas Gellrich DESY IT Installations Meeting DESY, 06.12.2006 Nomenklatur Grid Infrastruktur: Ein System aus Diensten und Ressourcen, das Benutzern zur Verfügung

Mehr

Grid-Aktivitäten an der RWTH-Aachen

Grid-Aktivitäten an der RWTH-Aachen Grid-Aktivitäten an der RWTH-Aachen M.Kirsch, M. Duda, M. Erdmann, G. Flügge, S. Kappler, Th. Kreß, A. Nowack Matthias.Kirsch@physik.rwth-aachen.de III. Physikalisches Institut A RWTH Aachen Frühjahrstagung

Mehr

Zend PHP Cloud Application Platform

Zend PHP Cloud Application Platform Zend PHP Cloud Application Platform Jan Burkl System Engineer All rights reserved. Zend Technologies, Inc. Zend PHP Cloud App Platform Ist das ein neues Produkt? Nein! Es ist eine neue(re) Art des Arbeitens.

Mehr

GRID-Computing vom lokalen zum globalen Ressourcenmanagement

GRID-Computing vom lokalen zum globalen Ressourcenmanagement GRID-Computing vom lokalen zum globalen Ressourcenmanagement Lokal job Master Ressourcen Management Queue1 Queue2... Node 1 Node 2.. Benutzer Cluster Ressourcenmanager: LSF (load sharing facility) OpenPBS

Mehr

Grid-Computing RRZN-Kolloquium WS 2003/2004 27.11.2003 Stephan Olbrich

Grid-Computing RRZN-Kolloquium WS 2003/2004 27.11.2003 Stephan Olbrich Grid-Computing RRZN-Kolloquium WS 2003/2004 27.11.2003 Stephan Olbrich Überblick 1. Motivation 2. Charakteristika 3. Anwendungen 4. Anforderungen 5. Services 6. Grid und Visualisierung 7. Quellenangabe

Mehr

Grundlagen des Grid Computing

Grundlagen des Grid Computing Grundlagen des Grid Computing Grid Middleware Toolkits: Globus Toolkit 2 ICA Joh.. Kepler Universität t Linz Globus Toolkit 2 Schon ziemlich alt... Wieso hier? Grundlage für den Großteil der aktuellen

Mehr

Die Grid-Infrastrukur und die NAF am DESY

Die Grid-Infrastrukur und die NAF am DESY Die Grid-Infrastrukur und die NAF am DESY - Aufbau Grid und NAF, aktuelle Ressourcen und Zahlen - Erfahrungen mit erster Analyse von LHC Daten - Einige geplante und mögliche Neuerungen Yves Kemp für DESY

Mehr

Hochleistungsrechnen in Grids. Seminar: Grid-Middleware. Mirko Dietrich mirko.dietrich@hrz.uni-kassel.de. 4. Dezember 2006

Hochleistungsrechnen in Grids. Seminar: Grid-Middleware. Mirko Dietrich mirko.dietrich@hrz.uni-kassel.de. 4. Dezember 2006 Seminar: Hochleistungsrechnen in Grids Grid-Middleware Mirko Dietrich mirko.dietrich@hrz.uni-kassel.de 4. Dezember 2006 2 Inhalt Funktionen einer Grid-Middleware Grid Standards Middleware-Systeme Zusammenfassung

Mehr

Grid-Computing. Übersicht: Ingo Strauch. Mottenlinux-Treffen 10.05.2005. Was versteht man unter dem Grid. Das LHC Computing Grid (LCG)

Grid-Computing. Übersicht: Ingo Strauch. Mottenlinux-Treffen 10.05.2005. Was versteht man unter dem Grid. Das LHC Computing Grid (LCG) Grid-Computing Ingo Strauch Mottenlinux-Treffen 10.05.2005 Übersicht: Was versteht man unter dem Grid Anwendungsgebiete Middleware Das LHC Computing Grid (LCG) Beispiele Referenzen Ingo Strauch, Mottenlinux-Treffen,

Mehr

Talk 5: Technical and Economic Aspects of Inter-domain Service Provisioning

Talk 5: Technical and Economic Aspects of Inter-domain Service Provisioning Talk 5: Technical and Economic Aspects of Inter-domain Service Provisioning Markus Sonderegger, Bas Krist, Roland Haas 08. Dezember 2005 Inhalt 1. Einführung 2. Evolution der Wertekette 3. Beispielszenario

Mehr

SWITCHaai Die Authentifizierungs- und Autorisierungs- Infrastruktur der Schweizer Hochschulen

SWITCHaai Die Authentifizierungs- und Autorisierungs- Infrastruktur der Schweizer Hochschulen SWITCHaai Die Authentifizierungs- und Autorisierungs- Infrastruktur der Schweizer Hochschulen Thomas Lenggenhager thomas.lenggenhager@switch.ch Bern, 11. Juni 2010 Übersicht Die Shibboleth basierte SWITCHaai

Mehr

Grid Seminar 03.12.2004. glite Middleware. Madeleine Theile Fachbereich Informatik Universität Dortmund

Grid Seminar 03.12.2004. glite Middleware. Madeleine Theile Fachbereich Informatik Universität Dortmund Grid Seminar 03.12.2004 glite Middleware Madeleine Theile Fachbereich Informatik Universität Dortmund Grid Seminar 03.12.2004 1 Übersicht 1. EGEE: Projektziele und Umfang 2. Projektstruktur (Subprojekte)

Mehr

Numerische Simulationen mit den Bordmitteln von Globus Toolkit

Numerische Simulationen mit den Bordmitteln von Globus Toolkit Numerische Simulationen mit den Bordmitteln von lobus oolkit Olaf Schneider Workshop: Numerische Simulationen im rid SEINBUCH CENRE FOR COMPUIN - SCC KI Universität des Landes Baden-Württemberg und nationales

Mehr

Scheduling Mechanisms for the Grid

Scheduling Mechanisms for the Grid Scheduling Mechanisms for the Grid Seminar Mechanismen in verteilten Netzen Xu,Yongchun und Zheng,Bin Betreuer: Bjoern Schnizler 1 Definition Grid-Computing Scheduling 2 Definition--Grid 3 Definition--Grid

Mehr

European DataGrid (EDG) Middleware CrossGrid (X#) Middleware Certification Authority (CA) in Karlsruhe

European DataGrid (EDG) Middleware CrossGrid (X#) Middleware Certification Authority (CA) in Karlsruhe European DataGrid (EDG) Middleware CrossGrid (X#) Middleware Certification Authority (CA) in Karlsruhe Marcus Hardt, Ariel Garcia, Ursula Epting 5. März 2004 1 European DataGrid (EDG) Das EDG-Projekt (http://eu-datagrid.org)

Mehr

bw-grid Cluster in Mannheim

bw-grid Cluster in Mannheim bw-grid Cluster in Mannheim Dr. Heinz Kredel mit Helmut Fränznick, Rudi Müller, Steffen Hau, Andreas Baust Inhalt Grid und D-Grid BMBF Projekt bw-grid Cluster Stand: Aufbau und Inbetriebnahme Benutzung

Mehr

Hochleistungsrechnen und Grid-Computing am ZIH

Hochleistungsrechnen und Grid-Computing am ZIH Zentrum für Informationsdienste und Hochleistungsrechnen Hochleistungsrechnen und Grid-Computing am ZIH Dresden, 5.7.2007 Hochleistungsrechner / Speicherkomplex ZIH-Ressourcen im Grid Hardware Software

Mehr

Stand und aktuelle Entwicklungsrichtungen im Grid Computing aus der Perspektive des Technical Computings in der Industrie

Stand und aktuelle Entwicklungsrichtungen im Grid Computing aus der Perspektive des Technical Computings in der Industrie science + computing ag Stand und aktuelle Entwicklungsrichtungen im Grid Computing aus der Perspektive des Technical Computings in der Industrie Vortrag von Dr. Peter Stoll science + computing ag IT-Dienstleistungen

Mehr

Experimenten. really big data

Experimenten. really big data Datenfluss in CERN- Experimenten really big data Gliederung Das CERN Allgemeines Wichtige Errungenschaften Der Weg der Daten Das CMS-Experiment Aufbau Anfallende Daten Trigger Das Grid Die Ebenen des Grid

Mehr

dcache! The dcache team

dcache! The dcache team dcache The dcache team Antje Petersen Patrick Fuhrmann, Tigran Mkrtchyan Paul Millar, Karsten Schwank, Christian Bernardt (at DESY) Dmitry Litvintsev, Albert Rossi (Fermilab) Gerd Behrmann (NorduNet (formerly

Mehr

Grid-Computing. LHC Computing: Datenanalyse im weltweiten GRID

Grid-Computing. LHC Computing: Datenanalyse im weltweiten GRID LHC Computing: Datenanalyse im weltweiten GRID Vortrag: Walter Bender Betreuer: Thomas Kreß 1 Themenüberblick Was ist Grid Computing Einführung technische Entwicklung Vergleich mit Stromnetz Anwendungen

Mehr

Grundlagen des Grid Computing

Grundlagen des Grid Computing Grundlagen des Grid Computing Webservices und Grid Computing Globus Toolkit 4 - Grundlagen ICA Joh.. Kepler Universität t Linz Eine Typische Grid-Applikation (Beispiel) VO Management Service Resource Discovery

Mehr

Hochleistungs-Disk-I/O

Hochleistungs-Disk-I/O Hochleistungs-Disk-I/O mit Lustre, dcache und AFS eine vergleichende Betrachtung Stephan Wiesand DESY DV 33. Treffen des ZKI AK Supercomputing Hamburg, 2010-03-04 Computing am DESY Standort Zeuthen Batch

Mehr

Grundlagen des Grid Computing

Grundlagen des Grid Computing Grundlagen des Grid Computing Grid Middleware Toolkits: Advanced Resource Connector (ARC) ICA Joh.. Kepler Universität t Linz Advanced Resource Connector Entwickelt durch die NorduGrid Collaboration Skandinavische

Mehr

Vorlesung: glite: Eine Grid Middleware für die HEP.

Vorlesung: glite: Eine Grid Middleware für die HEP. Vorlesung: glite: Eine Grid Middleware für die HEP. Yves Kemp DESY IT FHTW Berlin 28.06.2011 Was erwartet Sie die folgenden 60 Minuten? > HEP: Hoch-Energie-Physik (ein anderer Name für Teilchenphysik)

Mehr

Big Data in der Forschung

Big Data in der Forschung Big Data in der Forschung Dominik Friedrich RWTH Aachen Rechen- und Kommunikationszentrum (RZ) Gartner Hype Cycle July 2011 Folie 2 Was ist Big Data? Was wird unter Big Data verstanden Datensätze, die

Mehr

Grid-Computing. J. Clemens, T.Hammer, P.Ueberholz 26.10.2006. IMH - Institut für Modellbildung und Hochleistungsrechnen

Grid-Computing. J. Clemens, T.Hammer, P.Ueberholz 26.10.2006. IMH - Institut für Modellbildung und Hochleistungsrechnen Grid-Computing J. Clemens, T.Hammer, P.Ueberholz IMH - Institut für Modellbildung und Hochleistungsrechnen 26.10.2006 1. Einführung 1.1 Die Idee 1.2 Projekte und Förderung 1.3 Grundlagen 2.1 Aufbau 2.2

Mehr

Programmierung und Leistungsanalyse des bwgrid-clusters. Dr. Heinz Kredel und Dr. Hans-Günther Kruse

Programmierung und Leistungsanalyse des bwgrid-clusters. Dr. Heinz Kredel und Dr. Hans-Günther Kruse Programmierung und Leistungsanalyse des bwgrid-clusters Dr. Heinz Kredel und Dr. Hans-Günther Kruse Inhalt bwgrid Cluster Programmierung Threads, OpenMP, Kommunikation, OpenMPI, Strategien Leistungsanalyse

Mehr

glite Testbed am RRZN und Workload Management Grid Seminar 2005 Stefan Piger, Jan Wiebelitz

glite Testbed am RRZN und Workload Management Grid Seminar 2005 Stefan Piger, Jan Wiebelitz glite Testbed am RRZN und Workload Management Grid Seminar 2005 Stefan Piger, Jan Wiebelitz Agenda Europäische Grid-Projekte/Middleware LHC/LCG EGEE/gLite glite Testbed am RRZN Jobablauf in glite beteiligte

Mehr

8.Vorlesung Cluster-, Grid- und Cloud-Computing Hochschule Mannheim

8.Vorlesung Cluster-, Grid- und Cloud-Computing Hochschule Mannheim Christian Baun, Viktor Mauch 8.Vorlesung Cluster-, Grid- und Cloud-Computing Hochschule Mannheim SS2011 1/43 8.Vorlesung Cluster-, Grid- und Cloud-Computing Hochschule Mannheim Christian Baun, Viktor Mauch

Mehr

Web & Grid. Wie weltweite Forschungskooperation ermöglicht wird. Seminarvortrag von Andreas Herten. Betreut von A. Nowack. andreas.

Web & Grid. Wie weltweite Forschungskooperation ermöglicht wird. Seminarvortrag von Andreas Herten. Betreut von A. Nowack. andreas. Web & Grid Wie weltweite Forschungskooperation ermöglicht wird Seminarvortrag von Andreas Herten andreas.herten@rwth-undso Betreut von A. Nowack Web Idee Entwicklung Grid Übersicht Idee Arten von Grids

Mehr

Elemente einer Grid-Infrastruktur

Elemente einer Grid-Infrastruktur Elemente einer Grid-Infrastruktur Am Beispiel von Globus Toolkit 4 und UNICORE 5 D-Grid Workshop DFN-Betriebstagung 04.03.2009 Bernd Reuther, Joachim Götze TU Kaiserslautern AG ICSY Email: {reuther, j_goetze}

Mehr

Grid-Computing am LRZ 1. Schritt: GSI-SSH

Grid-Computing am LRZ 1. Schritt: GSI-SSH Grid-Computing am LRZ 1. Schritt: GSI-SSH Dr. Helmut Heller und das Grid-Team Verteilte Ressourcen Leibniz-Rechenzentrum der Bayerischen Akademie der Wissenschaften 14.1.2010 1 Überblick Vorteile von Grid

Mehr

LHC Experimente - Trigger, Datennahme und Computing

LHC Experimente - Trigger, Datennahme und Computing Physik an höchstenergetischen Beschleunigern WS12/13 TUM S.Bethke, F. Simon V5: Trigger, Datennahme, Computing 1 LHC Experimente - Trigger, Datennahme und Computing Datenraten Physiksignale Triggerkonzept

Mehr

Grid Computing. Einführung. Marc Lechtenfeld. Seminar Grid Computing Sommersemester 2004 Universität Duisburg-Essen

Grid Computing. Einführung. Marc Lechtenfeld. Seminar Grid Computing Sommersemester 2004 Universität Duisburg-Essen * Grid Computing Einführung Marc Lechtenfeld Seminar Grid Computing Sommersemester 2004 Universität Duisburg-Essen Übersicht 1 Problematik 2 Systemanforderungen 3 Architektur 4 Implementation 5 Projekte

Mehr

glite Data Management Grid Seminar 2005 Julia Coester, Thomas Warntjen

glite Data Management Grid Seminar 2005 Julia Coester, Thomas Warntjen glite Data Management Grid Seminar 2005 Julia Coester, Thomas Warntjen Inhalt Grundsatzentscheidungen von glite Benennung von Dateien Kataloge glite Storage Element glite Transfer Security dcache Interaktion

Mehr

SLA4D-Grid! Einführung, Konzepte und Ergebnisse

SLA4D-Grid! Einführung, Konzepte und Ergebnisse Service Level Agreements for D-Grid SLA4D-Grid! Einführung, Konzepte und Ergebnisse Philipp Wieder, Service Computing, TU Dortmund SLAs in Grid und Cloud Workshop 09. September 2010, Karlsruhe, DE http://www.sla4d-grid.de

Mehr

The world we live in and Supercomputing in general

The world we live in and Supercomputing in general The world we live in and Supercomputing in general Achim Streit aktuelle Prozessoren Desktop Intel Pentium 4 mit 3.2 GHz AMD Athlon XP 3200+ mit 2.2 GHz IBM PowerPC G5 mit 2.0 GHz (64-bit) Server & Workstation

Mehr

High Energy Physics Community Grid

High Energy Physics Community Grid High Energy Physics Community Grid Wolfgang Walkowiak Universität Siegen D-Grid All-Hands-Meeting Göttingen 10. September 2007 1 Grundlegende Fragen der Teilchenphysik Woraus besteht Materie? Welche Kräfte

Mehr

Instrument, Compute, Data Sharing Ressourcen gemeinsam nutzen statt selber aufbauen

Instrument, Compute, Data Sharing Ressourcen gemeinsam nutzen statt selber aufbauen Virtuelle Forschungsumgebungen aufbauen mit D Grid Workshop des WissGridFachberater Teams Instrument, Compute, Data Sharing Ressourcen gemeinsam nutzen statt selber aufbauen 19.01.2011 F.Schlünzen / DESY

Mehr

GT4: An introductory overview

GT4: An introductory overview 4: An introductory overview Institut für Wissenschaftliches Rechnen Olaf Schneider using material of the lobus Alliance and the National e-science Centre, Edinburgh ridka-school 2006, September 11. - 15.

Mehr

Open Grid Services Architecture (OGSA)

Open Grid Services Architecture (OGSA) Open Grid Services Architecture (OGSA) IBM Red Paper; Fundamentals of Grid Computing, 2002 A d v an ced M id d lew are P ro f. D r. C h. R eich rc h @ fh-furtw angen.d e http://www.informatik.fh-furtwangen.de/~reich/advancedmiddlewareallg.ss05/index.html

Mehr

Grid Computing. Guilherme Aschauer, e0627911 TU-Wien Mai 2007

Grid Computing. Guilherme Aschauer, e0627911 TU-Wien Mai 2007 Grid Computing Guilherme Aschauer, e0627911 TU-Wien Mai 2007 Im Bereich des verteilten Rechnens hat seit Beginn der 90er Jahre des vergangenen Jahrhunderts das Modell des Grid Computings immer größere

Mehr

D-Grid, DEISA und PRACE

D-Grid, DEISA und PRACE 3. Forum Kommunikationstechnologien - Verteilte Systeme im Wissenschaftsbereich 26.05. - 27.05.2010 2010 in Konstanz D-Grid, DEISA und PRACE Auswirkung auf die zukünftige deutsche HPC/Grid/Cloud Infrastruktur

Mehr

UBELIX University of Bern Linux Cluster

UBELIX University of Bern Linux Cluster University of Bern Linux Cluster Informatikdienste Universität Bern ID BEKO Grid Forum 7. Mai 2007 Inhalt Einführung Ausbau 06/07 Hardware Software Benutzung Dokumentation Gut zu wissen Kontakt Apple/Mac:

Mehr

Strukturen im D-Grid. Uwe Schwiegelshohn D-Grid GmbH / TU Dortmund. 3. DFN Kommunikationsforum Konstanz, Mai 2010

Strukturen im D-Grid. Uwe Schwiegelshohn D-Grid GmbH / TU Dortmund. 3. DFN Kommunikationsforum Konstanz, Mai 2010 Strukturen im D-Grid Uwe Schwiegelshohn D-Grid GmbH / TU Dortmund 3. DFN Kommunikationsforum Konstanz, Mai 2010 Was ist das Grid? coordinated resource sharing and problem solving in dynamic, multi-institutional

Mehr

Middleware - Cloud Computing Übung

Middleware - Cloud Computing Übung Middleware - Cloud Computing Übung Tobias Distler, Klaus Stengel, Timo Hönig, Johannes Behl Friedrich-Alexander-Universität Erlangen-Nürnberg Lehrstuhl Informatik 4 (Verteilte Systeme und Betriebssysteme)

Mehr

Topics & Trends. SLAC + MS: Implementation des Passwortaustauschs zwischen (Heimdal-) Kerberos und Active Directory

Topics & Trends. SLAC + MS: Implementation des Passwortaustauschs zwischen (Heimdal-) Kerberos und Active Directory Topics & Trends Kerberos 5 SLAC + MS: Implementation des Passwortaustauschs zwischen (Heimdal-) Kerberos und Active Directory Optional Single Sign-On möglich Migration nach Exchange 2003 (CERN, SLAC, PSI,

Mehr

Einführung in Globus 5 Professioneller IT-Betrieb in mittleren und großen Umgebungen

Einführung in Globus 5 Professioneller IT-Betrieb in mittleren und großen Umgebungen 1 Einführung in Globus 5 Professioneller IT-Betrieb in mittleren und großen Umgebungen Florian Zrenner (LRZ) zrenner@lrz.de Übersicht 2 Authentifizierung und Autorisierung - Grid Security Infrastructure

Mehr

Entwickelt sich die Oracle-Datenbank in Richtung Grid Computing?

Entwickelt sich die Oracle-Datenbank in Richtung Grid Computing? Entwickelt sich die Oracle-Datenbank in Richtung Grid Computing? Autor: Christian Antognini, Trivadis GmbH DOAG News Q2_2005 Dieses Werk ist urheberrechtlich geschützt. Die dadurch begründeten Rechte,

Mehr

Grid Computing. Siegmar Alber 0720046 salber@cosy.sbg.ac.at Universität Salzburg. Luca Debiasi 0720045 ldebiasi@cosy.sbg.ac.at Universität Salzburg

Grid Computing. Siegmar Alber 0720046 salber@cosy.sbg.ac.at Universität Salzburg. Luca Debiasi 0720045 ldebiasi@cosy.sbg.ac.at Universität Salzburg Grid Computing Luca Debiasi 0720045 ldebiasi@cosy.sbg.ac.at Universität Salzburg Siegmar Alber 0720046 salber@cosy.sbg.ac.at Universität Salzburg 13.03.2009 1 Inhaltsverzeichnis 1 Einleitung 3 2 Aufbau

Mehr

The Storage Hypervisor

The Storage Hypervisor The Storage Hypervisor Jörg Schweinsberg Director Distribution EMEA Produkthistorie Aktuelle Version 9.0 SANSymphony V R9 Umfassende SAN Features für die Zusammenarbeit über unterschiedliche & inkompatible

Mehr

Grid Computing für datenintensive Anwendungen

Grid Computing für datenintensive Anwendungen Grid Computing für datenintensive Anwendungen Andreas Schreiber Deutsches Zentrum für Luft- und Raumfahrt e.v. (DLR) Köln-Porz Workshop "Wege aus dem Daten-Chaos" Köln-Porz, 16. Mai 2002 1 Überblick Einleitung

Mehr

PROFI UND NUTANIX. Portfolioerweiterung im Software Defined Data Center

PROFI UND NUTANIX. Portfolioerweiterung im Software Defined Data Center PROFI UND NUTANIX Portfolioerweiterung im Software Defined Data Center IDC geht davon aus, dass Software-basierter Speicher letztendlich eine wichtige Rolle in jedem Data Center spielen wird entweder als

Mehr

Instant-Grid. als Baukasten für Grid-Workflows. Ulrich Schwardmann. Gesellschaft für wissenschaftliche Datenverarbeitung mbh Göttingen

Instant-Grid. als Baukasten für Grid-Workflows. Ulrich Schwardmann. Gesellschaft für wissenschaftliche Datenverarbeitung mbh Göttingen als Baukasten für Grid- Ulrich Schwardmann Gesellschaft für wissenschaftliche Datenverarbeitung mbh Göttingen Am Fassberg, 37077 Göttingen Cluster And Network Cluster And Network Grid Infrastruktur Wie

Mehr

Absicherung von Grid Services Transparenter Application Level Gateway

Absicherung von Grid Services Transparenter Application Level Gateway Absicherung von Grid Services Transparenter Application Level Gateway Thijs Metsch (DLR Simulations- und Softwaretechnik) Göttingen, 27.03.2007, 2. D-Grid Security Workshop Folie 1 Überblick Gliederung

Mehr

Physics Analysis in ATLAS with PROOF

Physics Analysis in ATLAS with PROOF DPG 2008 Physics Analysis in ATLAS with PROOF Overview 1) Introduction 2) The PROOF Framework 3) Performance Matthias.Schott@cern.ch Johannes.Ebke@physik.uni muenchen.de ATLAS Experiment LMU Munich, Germany

Mehr

Dezentrale Datenproduktion und -analyse bei DØ

Dezentrale Datenproduktion und -analyse bei DØ Dezentrale Datenproduktion und -analyse bei DØ Thomas Nunnemann LMU München nunne@fnal.gov DPG Mainz 31.3.04 Computing: Aufgaben/Anforderungen Datenaustausch verteilter Datenbankzugriff Prozessierung von

Mehr

Grid Computing 19.12.2008. Grid Computing. Luca Debiasi. Siegmar Alber. Grundlagen. Aufbau. Grids im Laufe der Zeit. Vor- und Nachteile.

Grid Computing 19.12.2008. Grid Computing. Luca Debiasi. Siegmar Alber. Grundlagen. Aufbau. Grids im Laufe der Zeit. Vor- und Nachteile. Luca Debiasi 19.12.2008 Überblick Was ist ein Grid? Vergleiche Geschichte Zukunft und Ziele Worldwide LHC Computing-Grid Frauenhofer Resource Grid Überblick Was ist ein Grid? Vergleiche Geschichte Zukunft

Mehr

VMware Software -Defined Data Center

VMware Software -Defined Data Center VMware Software -Defined Data Center Thorsten Eckert - Manager Enterprise Accounts Vertraulich 2011-2012 VMware Inc. Alle Rechte vorbehalten. Jedes Unternehmen heute ist im Softwaregeschäft aktiv Spezialisierte

Mehr

Private Cloud mit Eucalyptus am SCC

Private Cloud mit Eucalyptus am SCC Private Cloud mit Eucalyptus am SCC Christian Baun 15. Dezember 2009 KIT The cooperation of Forschungszentrum Karlsruhe GmbH und Universität Karlsruhe (TH) http://www.kit.edu Cloud-Comuting = Grid-Computing?!

Mehr

Steinbuch Centre for Computing

Steinbuch Centre for Computing The infrastructure of Grid at KIT Angela Poschlad Steinbuch Centre for Computing Die Kooperation von Outline What is a grid? Gid Grid at tkit GridKa Resources Services Cluster layout Network Monitoring

Mehr

The Cumulus Project: Build a Scientific Cloud for a Data Center

The Cumulus Project: Build a Scientific Cloud for a Data Center The Cumulus Project: Build a Scientific Cloud for a Data Center Marcel Kunze Steinbuch Centre for Computing (SCC) Karlsruhe Institute of Technology (KIT) Germany KIT The cooperation of www.kit.edu Cloud

Mehr

Abschlussvortrag zur Diplomarbeit Aufbau und Analyse einer Shibboleth/GridShib-Infrastruktur

Abschlussvortrag zur Diplomarbeit Aufbau und Analyse einer Shibboleth/GridShib-Infrastruktur Abschlussvortrag zur Diplomarbeit Aufbau und Analyse einer Shibboleth/GridShib-Infrastruktur Stefan Marienfeld Fachgebiet Distributed Virtual Reality (DVR) Lehrgebiet Rechnernetze Stefan Marienfeld Gliederung

Mehr

Cloud Computing im Kontext des D-Grid

Cloud Computing im Kontext des D-Grid im s & im Kontext des AHM 2010 Open Issue Session A. S. fluid Operations GmbH, TU Dortmund 23. März 2010 im s & Kurzvorstellung s und Offene Demonstration OpenNebula Zusammenfassung des 1. AHM Tages im

Mehr

Gliederung. Was ist Cloud Computing Charakteristiken Virtualisierung Cloud Service Modelle Sicherheit Amazon EC2 OnLive Vorteile und Kritik

Gliederung. Was ist Cloud Computing Charakteristiken Virtualisierung Cloud Service Modelle Sicherheit Amazon EC2 OnLive Vorteile und Kritik Cloud Computing Gliederung Was ist Cloud Computing Charakteristiken Virtualisierung Cloud Service Modelle Sicherheit Amazon EC2 OnLive Vorteile und Kritik 2 Bisher Programme und Daten sind lokal beim Anwender

Mehr

Integration von Mechatronik- und Softwaresystemen durch Virtualisierung von PLM-System-Komponenten

Integration von Mechatronik- und Softwaresystemen durch Virtualisierung von PLM-System-Komponenten Integration von Mechatronik- und Softwaresystemen durch 3DEXPERIENCE Customer Forum 26./27. Juni 2013 Mannheim Michael Hopf, Diplôme d'ingénieur - Master Degree, Doktorand KIT Universität des Landes Baden-Württemberg

Mehr

Was darf das Grid kosten?

Was darf das Grid kosten? Was darf das Grid kosten? Dr. Marcel Kunze Steinbuch Centre for Computing Abteilung Integration und Virtualisierung Die Kooperation von Darf das Grid was kosten? Infrastruktur: Geschäftsmodell oder Sponsoring?

Mehr

Das Knowledge Grid. Eine Architektur für verteiltes Data Mining

Das Knowledge Grid. Eine Architektur für verteiltes Data Mining Das Knowledge Grid Eine Architektur für verteiltes Data Mining 1 Gliederung 1. Motivation 2. KDD und PDKD Systeme 3. Knowledge Grid Services 4. TeraGrid Projekt 5. Das Semantic Web 2 Motivation Rapide

Mehr

D-Grid Site Monitoring im Hinblick auf EGI

D-Grid Site Monitoring im Hinblick auf EGI D-Grid Site Monitoring im Hinblick auf EGI Foued Jrad KIT die Kooperation von Die Kooperation von www.kit.edu Agenda Site Functional Tests Ersatz für SFT in D-Grid Zukunft der Site Monitoring in D-Grid

Mehr

Forschungszentrum Karlsruhe in der Helmholtz-Gemeinschaft. Torsten Antoni (Torsten.Antoni@iwr.fzk.de) Rüdiger Berlich (Rüdiger.Berlich@iwr.fzk.

Forschungszentrum Karlsruhe in der Helmholtz-Gemeinschaft. Torsten Antoni (Torsten.Antoni@iwr.fzk.de) Rüdiger Berlich (Rüdiger.Berlich@iwr.fzk. LCG-2 2 Induction Torsten Antoni (Torsten.Antoni@iwr.fzk.de) Rüdiger Berlich (Rüdiger.Berlich@iwr.fzk.de) Christopher Jung Christopher Jung (Christopher.Jung@iwr.fzk.de) Topics: Preliminaries Network User

Mehr

MOGON. Markus Tacke HPC ZDV. HPC - AHRP Markus Tacke, ZDV, Universität Mainz

MOGON. Markus Tacke HPC ZDV. HPC - AHRP Markus Tacke, ZDV, Universität Mainz MOGON Markus Tacke HPC ZDV HPC - AHRP Was ist Mogon allgemein? Das neue High Performance Cluster der JGU Ein neues wichtiges Werkzeug für Auswertung von Messdaten und Simulationen Beispiele Kondensierte

Mehr

Hochverfügbar, skalierbar und sicher in. der Public Cloud

Hochverfügbar, skalierbar und sicher in. der Public Cloud Hochverfügbar, skalierbar und sicher in der Public Cloud Thomas Bachmann CIO @ Mambu GmbH Twitter: @thobach Anwendungsbeispiel Core Banking System Verwaltung von Kunden, Konten, Transaktionen Buchhaltung,

Mehr

SMALL MEDIUM BUSINESS UND VIRTUALISIERUNG!

SMALL MEDIUM BUSINESS UND VIRTUALISIERUNG! SMALL MEDIUM BUSINESS UND VIRTUALISIERUNG! JUNI 2011 Sehr geehrter Geschäftspartner, (oder die, die es gerne werden möchten) das Thema Virtualisierung oder die Cloud ist in aller Munde wir möchten Ihnen

Mehr

Microsoft Azure Fundamentals MOC 10979

Microsoft Azure Fundamentals MOC 10979 Microsoft Azure Fundamentals MOC 10979 In dem Kurs Microsoft Azure Fundamentals (MOC 10979) erhalten Sie praktische Anleitungen und Praxiserfahrung in der Implementierung von Microsoft Azure. Ihnen werden

Mehr

Instant-Grid ein Grid in 15 Minuten

Instant-Grid ein Grid in 15 Minuten Instant-Grid ein Grid in 15 Minuten Vortrag von Andreas Félix beim Practical Linux Forum des LinuxTag 2006 Gesellschaft für wissenschaftliche Datenverarbeitung Göttingen mbh Übersicht über den Vortrag

Mehr

MATRIX FÜR HITACHI VIRTUAL STORAGE PLATFORM-PRODUKTFAMILIE

MATRIX FÜR HITACHI VIRTUAL STORAGE PLATFORM-PRODUKTFAMILIE MATRIX FÜR HITACHI VIRTUAL STORAGE PLATFORM-PRODUKTFAMILIE 1 Technische Daten zur Kapazität Maximale (max.) Anzahl Laufwerke, einschließlich Reserve 264 SFF 264 LFF 480 SFF 480 LFF 720 SFF 720 LFF 1.440

Mehr

Design von Dateninfrastrukturen

Design von Dateninfrastrukturen Design von Dateninfrastrukturen das FENIX-Konzept Daniel Mallmann Forschungszentrum Jülich GmbH Jülich Supercomputing Centre Das Human Brain Project Amunts et al., The Human Brain Project: Towards a European

Mehr

Globus Toolkit Nutzer Training Einführung in das GT4

Globus Toolkit Nutzer Training Einführung in das GT4 1 Globus Toolkit Nutzer Training Einführung in das GT4 Aufbereitung: Stefan Berner und Dr. Helmut Heller (heller@lrz.de) Vortrag: Dr. K. Beronov und Dr. A. Carlson Leibniz-Rechenzentrum der Bayerischen

Mehr

It's all in the Cloud! Cloud Computing Grundlagen

It's all in the Cloud! Cloud Computing Grundlagen It's all in the Cloud! Cloud Computing Grundlagen Folie: 1/25 Agenda Einleitung - Cloud Computing Begriffe Überblick - Wer bietet was? Der Weg zur Private Cloud Einblick - RRZK und Cloud Computing Anmerkung

Mehr

Fraunhofer Resource Grid

Fraunhofer Resource Grid Fraunhofer Resource Grid Fraunhofer Resource Grid Andreas Hoheisel (andreas.hoheisel@first.fraunhofer.de) Uwe Der (uwe.der@first.fraunhofer.de) Computing Grids Computing Grids Das Netz ist der Computer

Mehr

Integration of D-Grid Sites in NGI-DE Monitoring

Integration of D-Grid Sites in NGI-DE Monitoring Integration of D-Grid Sites in NGI-DE Monitoring Steinbuch Centre for Computing Foued Jrad www.kit.edu D-Grid Site Monitoring Status! Prototype D-Grid Site monitoring based on Nagios running on sitemon.d-grid.de

Mehr

Open Source Data Center Virtualisierung mit OpenNebula. 05.03.2013 CeBIT 2013. Bernd Erk www.netways.de

Open Source Data Center Virtualisierung mit OpenNebula. 05.03.2013 CeBIT 2013. Bernd Erk www.netways.de Open Source Data Center Virtualisierung mit OpenNebula 05.03.2013 CeBIT 2013 Bernd Erk VORSTELLUNG NETWAYS NETWAYS! Firmengründung 1995! GmbH seit 2001! Open Source seit 1997! 35 Mitarbeiter! Spezialisierung

Mehr

Open Source Data Center Virtualisierung mit OpenNebula. 22.05.2013 LinuxTag Berlin. Bernd Erk www.netways.de

Open Source Data Center Virtualisierung mit OpenNebula. 22.05.2013 LinuxTag Berlin. Bernd Erk www.netways.de Open Source Data Center Virtualisierung mit OpenNebula 22.05.2013 LinuxTag Berlin Bernd Erk VORSTELLUNG NETWAYS NETWAYS! Firmengründung 1995! GmbH seit 2001! Open Source seit 1997! 38 Mitarbeiter! Spezialisierung

Mehr

synergetic AG Open House 2012 Ihr Unternehmen in der Wolke - Cloud Lösungen von synergetic

synergetic AG Open House 2012 Ihr Unternehmen in der Wolke - Cloud Lösungen von synergetic synergetic AG Open House 2012 Ihr Unternehmen in der Wolke - Cloud Lösungen von synergetic Markus Krämer Vorsitzender des Vorstandes der synergetic AG Verantwortlich für Strategie und Finanzen der synergetic

Mehr