Forum 7-it. Software- und System-Qualitätssicherung für IT-Infrastrukturlösungen QADVICE. Hermann Will

Transkript

1 Forum 7-it Software- und System-Qualitätssicherung für IT-Infrastrukturlösungen Hermann Will

2 Copyright Hermann Will 2010 Folie 2

3 Agenda Einführung QS Testobjekte Teststrategie Testtechniken Testmetriken Cloud-Computing Copyright Hermann Will 2010 Folie 3

4 Agenda Einführung QS Testobjekte Teststrategie Testtechniken Testmetriken Cloud-Computing Copyright Hermann Will 2010 Folie 4

5 IT-Qualität in den Schlagzeilen Nov. 2009: Wegen einer Computerpanne musste der neue Airbus A380 der Air France nach dem Start in New York umkehren. Jan 2010: Software Fehler bei der Verarbeitung der Jahreszahl Feb & März 2010: Computerpanne legt S-Bahn-Verkehr auf der Münchner Stammstrecke lahm. April 2010: McAfee Update legt weltweit Rechner lahm. April 2010: Milliarden-IT-Projekt Herkules wird zum Debakel - Im Praxistest versagt das neue System. Mai 2010: Tippfehler schuld an US- Börsencrash.? Mai 2010: Fehlerhafte Nameserverdaten-Aktualisierung legte Domain.de lahm Copyright Hermann Will 2010 Folie 5

6 Software-Qualität ist Sache des Standpunkts...., schwer zu definieren, unmöglich zu messen und leicht zu erkennen. (B. Kitchenham)... die Einhaltung der Anforderungen. (P. B. Crosby)... der Grad, in dem ein Satz inhärenter Merkmale die Anforderungen erfüllt. (ISO 9000:2005) Copyright Hermann Will 2010 Folie 6

7 FCM Modell (factor-criteria-metrics) Quelle: Copyright Hermann Will 2010 Folie 7

8 Softwarequalität (ISO-Norm 9126) Merkmal (Quality Factor) Funktionalität Zuverlässigkeit Benutzbarkeit Effizienz Änderbarkeit Übertragbarkeit Kriterien (Quality Criteria) Angemessenheit, Richtigkeit, Interoperabilität, Ordnungsmäßigkeit, Sicherheit Reife, Fehlertoleranz, Wiederherstellbarkeit Verständlichkeit, Erlernbarkeit, Bedienbarkeit Zeitverhalten, Verbrauchsverhalten Analysierbarkeit, Modifizierbarkeit, Stabilität, Prüfbarkeit Anpassbarkeit, Installierbarkeit, Konformität, Austauschbarkeit Copyright Hermann Will 2010 Folie 8

9 Qualitätsmanagement Qualitätspolitik Qualitätsziele Qualitätsplanung Konstruktiv Personal (Skills) Organisation & Umfeld Prozesse Werkzeuge Normen & Standards Statisch = Analysieren des Testobjekts, um Fehlerwirkungen vorzubeugen Qualitätssicherung Analytisch Analysen Reviews Qualitätsverbesserung Dynamisch = Ausführen eines Testobjekts mit dem Ziel, Fehlfunktionen nachzuweisen, Qualität zu bestimmen, Vertrauen zu gewinnen. Black box White box Copyright Hermann Will 2010 Folie 9

10 Softwareentwicklungsmodelle (LC-Modelle) Aktivitäten Reihenfolge Rollen Normen, Methoden & Standards Artefakte Sequenzielle Modelle Iterative Modelle Evolutionär Inkrementell Copyright Hermann Will 2010 Folie 10

11 Allgemeines V-Modell Abnahmetest Funktionaler Systementwurf Systemtest Technischer Systementwurf Integrationstest Anforderungsdefiniton Komponentenspezifikation Komponententest Programmierung Copyright Hermann Will 2010 Folie 11

12 Scrum Copyright Hermann Will 2010 Folie 12

13 Allgemeiner Testprozess Analyse und Design Realisierung und Durchführung Auswertung und Bericht Abschluss Planung und Steuerung Copyright Hermann Will 2009 Folie 13

14 7 Grundsätze des Testens Testen kann nur die Anwesenheit von Fehlern zeigen Vollständiges Testen ist nicht möglich So früh wie möglich testen Wo Fehler sind, sind meist noch mehr Testware wird stumpf, wenn sie nicht ständig erweitert wird Testen ist abhängig vom Umfeld Keine Fehler bedeutet nicht unbedingt, dass die SW brauchbar ist Copyright Hermann Will 2010 Folie 14

15 Agenda Einführung QS Testobjekte Teststrategie Testtechniken Testmetriken Cloud-Computing Copyright Hermann Will 2010 Folie 15

16 Verfügbarkeitscluster Applikation PE + EE Systemmanagement Cluster-Software File System Volume Manager OS 1 OS n Virtueller Maschinen Monitor Server SAN Copyright Hermann Will 2010 Folie 16

17 Virtuelle Tape Library (CS: CentricStor) (Quelle: ETERNUS V4.1 Benutzerhandbuch) Copyright Hermann Will 2010 Folie 17

18 Agenda Einführung QS Testobjekte Teststrategie Testtechniken Testmetriken Cloud-Computing Copyright Hermann Will 2010 Folie 18

19 Teststrategie Qualitätsziele Qualitätsmerkmale Teststufen Testumgebung Testdokumentation Testtechniken Testautomatisierung Testwerkzeuge Prioritätsvorgaben Metriken Strategie (vom altgriechischen strategós, Feldherr, Kommandant) ist ein längerfristig ausgerichtetes planvolles Anstreben eines Ziels unter Berücksichtigung der verfügbaren Mittel und Ressourcen. (Wikipedia) Copyright Hermann Will 2010 Folie 19

20 Einflussfaktoren Testorganisation LC-Modell Testbasis Risiken Externe Abhängigkeiten Qualitätsziele Teststrategie Lessons learned Einsatzszenarien Werkzeuge Budget & Termin Normen & Standards Copyright Hermann Will 2010 Folie 20

21 Q-Kriterien für CS Dokumenten- Reviews Angemessenheit Sicherheit Code-Reviews Unit-Tests Integrations- Tests Analysierbarkeit Richtigkeit Ordnungsmäßigkeit Reife Systemtests Interoperabilität Fehlertoleranz Wiederherstellbarkeit Felderprobung Prüfbarkeit Modifizierbarkeit Übertragbarkeit Installierbarkeit Benutzbarkeit Effizienz Stabilität Copyright Hermann Will 2010 Folie 21

22 Agenda Einführung QS Testobjekte Teststrategie Testtechniken Testmetriken Cloud-Computing Copyright Hermann Will 2010 Folie 22

23 Testumgebung für den Systemtest (Quelle: Fujitsu Technology Solutions) Copyright Hermann Will 2010 Folie 23

24 Testverfahren für den Systemtest Anforderungen Spezifikationen Handbücher Datenblätter White Paper Kundenszenarien Feldfehleranalysen Äquivalenzklassenbildung Grenzwertanalyse Zustandsbezogene Tests Szenarientests Load- und Stress-Tests Performance-Tests Installations- und Migrationstests Dauertest Failure Injection Explorative Tests Copyright Hermann Will 2010 Folie 24

25 CS Testenvironment Automatisierung der Regressionstests Automatische Erzeugung von Fehlersituationen Utilities für die Testskriptentwicklung Logfile-Analysen Konfigurationserkennung Datengenerierung (Quelle: Fujitsu Technology Solutions) Copyright Hermann Will 2010 Folie 25

26 Toollandschaft Fehlermanagement Anforderungsmanagement Testentwicklung Testmanagement (itb) Spezifikation Entwicklung Abwicklung Reporting Testroboter Testabwicklung Testskriptmanagement Testumgebung Dokumentation Skripts Copyright Hermann Will 2010 Folie 26

27 Agenda Einführung QS Testobjekte Teststrategie Testtechniken Testmetriken Cloud-Computing Copyright Hermann Will 2010 Folie 27

28 Metriken Testobjekt Testware Fehler Kosten Zeit Skills Produkt Projekt Prozesse und Verfahren Personal und Organisation Copyright Hermann Will 2010 Folie 28

29 Testfortschritt Copyright Hermann Will 2010 Folie 29

30 Fehler nach Freigabe (delivered defects) Copyright Hermann Will 2010 Folie 30

31 QS Kennzahlensystem EDB Projektmanagement Fehlermanagement Testmanagement Kostenmanagement Fehler / Problemmeldung Kosten / Fehler Fehler / Test-MM QS-Fehler / Feldfehler PM-Laufzeit Copyright Hermann Will 2010 Folie 31

32 Agenda Einführung QS Testobjekte Teststrategie Testtechniken Testmetriken Cloud-Computing Copyright Hermann Will 2010 Folie 32

33 Amazon EC2 IBM Smart Business Development and Test Microsoft Office Live Cloud Architektur Human as a Service (HuaaS) Crowdsourcing Unter Ausnutzung virtualisierter Rechen- und Speicher- Ressourcen und moderner Webtechnologien stellt Cloud Computing skalierbare, netzwerk-zentrierte, abstrahierte IT-Infrastrukturen, Plattformen und Anwendungen als ondemand Dienste zur Verfügung. Software as a Service (SaaS) Applications Applications Services Platform as a Service (PaaS) Programming Environment (PE) Execution Environment (EE) Infrastructure as a Service (IaaS) Infrastructure Services (IS) Resource Set (RS) Virtual Resource Set (VRS) (Quelle: C. Baun u.a.: Cloud Computing, Springer 2009) Physical Resource Set (PRS) Copyright Hermann Will 2010 Folie 33

34 Copyright Hermann Will 2010 Folie 34

35 Copyright Hermann Will 2010 Folie 35

36 Copyright Hermann Will 2010 Folie 36

37 Copyright Hermann Will 2010 Folie 37

38 Amazon Virtual Private Cloud (VPC) Copyright Hermann Will 2010 Folie 38

39 Quartier der Cloud Quelle: Rechenzentren und Infrastruktur I/2010, heise-verlag Google RZs Quelle: Copyright Hermann Will 2010 Folie 39

40 Vielen Dank für Ihre Aufmerksamkeit! Hermann Will Copyright Hermann Will 2010 Folie 40