Service Engineering. Qualitätssicherung von Cloud-Services durch Benchmarking und Monitoring. Prof. Dr. Andreas Schmietendorf 1. Service Engineering

Transkript

1 Qualitätssicherung von Cloud-Services durch Benchmarking und Monitoring Prof. Dr. Andreas Schmietendorf 1

2 Motivation zur Themenstellung Prof. Dr. Andreas Schmietendorf 2

3 Motivation Auf der Basis eines harmonisierten Rechtsrahmens sollte ein Standard erstellt werden. Inhalt wären gemeinsame und messbare Kriterien sowie Zertifikate, die von unabhängigen Prüfern vergeben werden. Quelle: Rossbach, C.; Welz, B.: Survivalof thefittest -Wie Europa in der Cloud eine führende Rolle übernehmen kann, Roland Berger StrategyConsultants, SAP, München 2011 Prof. Dr. Andreas Schmietendorf 3

4 Cloud-Qualitätsbewertung Auswertung der Eigenangaben des Cloud-Anbieters, Experimentelle und messtechnische Bewertungen, Berücksichtigung durch Dritte ausgestellter Zertifikate, Bezugnahme auf ggf. vorhandenes Kundenfeedback. Prof. Dr. Andreas Schmietendorf 4

5 Aufgabenbeschreibung Prof. Dr. Andreas Schmietendorf 5

6 Aufgabe 1 Verschaffen Sie sich einen Überblick zu den Zielen und Begriffen von Cloud-Benchmarks. Gehen Sie folgende Aspekte ein: - Verfolgte Zielstellungen und Methodik (Vorgehen)? - Cloud System under Test (SUT)? - Verwendete Metriken und Messgrößen? Recherchieren Sie mit Hilfe des Internets nach Standard- Bechmarks (mind. 5 Beispiele) von Hard- und Softwareanbietern: - Skizzieren Sie das verwendete Last- und Testszenario (SUT)? - Welche Messgrößen verwendet der Benchmark? - Interpretieren und Bewerten Sie entsprechende Messergebnisse? Prof. Dr. Andreas Schmietendorf 6

7 Aufgabe 2 Welche Vorraussetzungen werden benötigt, um angebotene Cloud- Services einem eigenen Benchmark zu unterziehen? - Angebotene Testmöglichkeiten eines Cloud-Anbieters? - Konfiguration des Lastprofils und entsprechender Testdaten? - Form der Dokumentation von Testergebnissen Analyse von mind. 3 Werkzeugen (z.b. Testtreiber) welche die Durchführung eigener Cloud-Benchmark unterstützen: - Abgedeckter Funktionsumfang? - Möglichkeiten zur Last- und Datengenerierung? - Bereitgestellte Schnittstellen zur Ergebnisauswertung? Prof. Dr. Andreas Schmietendorf 7

8 Aufgabe 3 Recherchieren und Testen von mind. 2 Möglichkeiten zur Online- Überwachung betriebener Cloud-Services. - Funktionsumfang zum Servicemonitoring - Verwendete Messgrößen und Beobachtungsintervalle - Interpretation eines durchgeführten Tests bzw. einer Messreihe Wie können die Ergebnisse der Online-Überwachung für ein ITILorientiertes Servicemanagement (V3) verwendet werden? - 2 Funktionen/Prozessbereiche des Service-Operation - Unterstützung des SLA-Managements im Service-Design - Identifizierte Problembereiche bzw. Herausforderungen Prof. Dr. Andreas Schmietendorf 8

9 Organisation Prof. Dr. Andreas Schmietendorf 9

10 Organisation der Übung Bitte berücksichtigen Sie die folgende Vorgehensweise: Die Übung wird in Gruppen durchgeführt! Vorgeschlagene Methode zur Aufgabenlösung - Abstimmung einer geeigneten Vorgehensweise (15 min) - Ausführen der Aufgabenstellungen (120 min) - Erstellung eines Protokolls (45 min) Gesamtzeit für die Durchführung: ca. 180 min Bereitstellung eines entsprechenden Protokolls je Gruppe Prof. Dr. Andreas Schmietendorf 10

11 Aufbau des Protokolls Verwenden Sie bitte des folgende Muster für das Protokoll: Allgemeine Angaben - Versuch, Beteiligte Studenten, Datum - Rahmenbedingungen (Hardware, Software, ) - Methodisches Vorgehen zu Bearbeitung Aufgaben des Laborversuchs - Entsprechend der Struktur der Aufgabenstellung - Textliche Ausführungen zu den Lösungen - Verwendung von Grafiken und Screenshots Zusammenfassung (Bewertung der erreichten Ergebnisse) Genutzte Quellen (z.b. Literatur, Internet, ) Prof. Dr. Andreas Schmietendorf 11

12 Weitere Hinweise Prof. Dr. Andreas Schmietendorf 12

13 Cloud Computing Working Group Einheitliches Verständnis zur Cloud-Performance Entwicklung repräsentativer Lastszenarien einer Cloud-Lösung Bereitstellung eines Frameworks zum Cloud-Benchmarking Spezifikation von Ergebnisberichten (full disclosure report) Quelle: Prof. Dr. Andreas Schmietendorf 13

14 Performanceanalysen - Cloudsleuth Quelle: Prof. Dr. Andreas Schmietendorf 14