Praxiswissen Softwaretest - Testmanagement

Transkript

1 Andreas Spillner Thomas Roßner Mario Winter Tilo Linz Praxiswissen Softwaretest - Testmanagement Aus- und Weiterbildung zum Certified Tester - Advanced Level nach ISTQB-Standard 4., überarbeitete u. erweiterte Auflage dpunkt.verlag

2 Inhaltsverzeichnis 1 Einleitung Basiswissen - komprimiert Praxiswissen Testmanagement - Übersicht 8 2 Fundamentaler Testprozess Testplanung Definition der Teststrategie Art und Umfang der Tests Priorisierung Planung und Koordination der Teststufen Zeit- und Aktivitätenplanung Sicherstellen der Rückverfolgbarkeit Definition der Testumgebung Vorteile frühzeitiger Testplanung Testüberwachung und -Steuerung Überwachen des Testfortschritts Steuern der Testaktivitäten Testanalyse Identifikation der Testbedingungen Umfang und Detaillierungsgrad der Testbedingungen Testentwurf Eingangskriterien der Testbasis Dokumentation der Testfälle Testrealisierung Testdurchführung Bewertung von Endekriterien und Bericht 51

3 x Inhaltsverzeichnis 2.8 Abschluss der Testaktivitäten Prüfung des Testendes Übergabe der Testmittel Retrospektive und Bewertung des Testprojekts »Konservierung«der Testmittel Zusammenfassung 55 3 Kontext des Testmanagements Stakeholder und deren Ziele kennen Entwicklungsmodelle für Software Klassifikation der Entwicklungsmodelle Verbindungen zwischen Testprozess und anderen Bestandteilen des Entwicklungsmodells Der Testprozess im Kontext einzelner Entwicklungsmodelle Allgemeines V-Modell W-Modell V-Modell XT Rational Unified Process (RUP) Extreme Programming (XP) Serum Testen im Kontext der zu testenden Systeme Testen von Multisystemen Testen sicherheitskritischer Systeme Testen im Kontext verschiedener Testaufgaben Management nicht funktionaler Tests Exploratives Testen Zusammenfassung 89 4 Risikoorientierte und andere Testverfahren Einführung Risikoorientiertes Testen Risikoidentifizierung Techniken und Hilfsmittel zur Risikoidentifizierung Risikobewertung Risikoinventar Risikobeherrschung Risikomanagement im Softwarelebenszyklus 112

4 Inhaltsverzeichnis xi 4.3 Risikoorientierte Testpriorisierung und Aufwandszuteilung Zielgerichtete Testkonzepterstellung und Testplanung Testpriorisierung nach Schaefer »Breadth-first«- Bestimmung der Testintensität nach Gutjahr Formale Verfahren zur Risikoidentifizierung und -bewertung Fehlzustandsart- und -auswirkungsanalyse (FMEA) Fehlzustandsart-, -auswirkungs- und -kritikalitätsanalyse (FMECA) Fehlzustandsbaumanalyse (FTA) Vor-und Nachteile von FMEA, FMECA und FTA Quality Function Deployment (QFD) »Leichtgewichtige«Ansätze zum risikoorientierten Test Pragmatic Risk Analysis and Management (PRAM) Systematic Software Testing (SST) Product Risk Management (PRISMA) Risikobeherrschung durch agile Vorgehens weisen Andere Verfahren Anforderungsbasierte Testauswahl Nutzungsbasierte Testauswahl Methodische erfahrungsbasierte Testauswahl Reaktive Testauswahl Zusammenfassung Testaufwandsschätzung Grundlegendes Vorgehen bei der Testaufwandsschätzung Bestandteile und Einflussfaktoren für die Testaufwandsschätzung Techniken zur Aufwandsschätzung Expertenschätzungen Vergleichende Verfahren Formel- und metrikbasierte Schätztechniken Zusammenfassung Testdokumentation Einführung und Übersicht Dokumente auf Organisationsebene Dokumente auf Projektebene 165

5 xii Inhaltsverzeichnis 6.2 Zentrale Testdokumente Qualitätspolitik und Testrichtlinie Teststrategie bzw. Testhandbuch Mastertestkonzept Stufentestkonzept Testberichte Weitere Testdokumente Zusammenfassung Testmetriken definieren Einführung Etwas Maßtheorie Definition und Auswahl von Metriken Darstellung von Messwerten Klassifikation von Testmetriken Testfallbasierte Metriken Testbasis- und testobjektbasierte Metriken Fehlerbasierte Metriken Risikobasierte Metriken Kosten- und aufwandsbasierte Metriken Zusammenfassung Testmetriken anwenden Initiieren der Testaufgaben Überwachen des Testfortschritts Reagieren auf Testergebnisse Reagieren auf veränderte Rahmenbedingungen Beurteilen der Testeffektivität Abschätzen der Restfehler und Zuverlässigkeit Restfehlerwahrscheinlichkeit Zuverlässigkeitswachstumsmodelle Testendebewertung Zusammenfassung 251

6 Inhaltsverzeichnis xiii 9 Der Mehrwert des Testens Nutzen des Testens Qualitätskosten Kosten-Nutzen-Relation optimieren Zusammenfassung Testorganisation Organisationsmodelle Sourcing-Modelle Koordination der Testteams Faktor Kommunikation Zusammenfassung Normen und Standards Ziele und Positionierung Firmenstandards Best Practices und technische Spezifikationen Branchenspezifische Normen und Standards Allgemeingültige Normen und Standards Terminologie-und Vertragsnormen Prozessnormen Produkt-und Dokumentationsnormen Methoden-und Techniknormen Anwendung von Normen Zusammenfassung Reviews, Audits und Assessments Nutzen und Kosten von Reviews Organisation und Management von Reviews Planung und Aufwandsschätzung Kick-off Individuelle Vorbereitung , Reviewsitzung Überarbeitung Nachbereitung Rollen und Verantwortlichkeiten 309

7 xiv Inhaltsverzeichnis 12.4 Reviewarten Managementreviews und Audits Assessments Reviews von Arbeitsergebnissen Kriterien zur Auswahl der Reviewart Erfolgreicher Einsatz von Reviews Organisatorische Erfolgsfaktoren Technische Erfolgsfaktoren Personenbezogene Erfolgsfaktoren Metriken für Reviews Zusammenfassung Fehlermanagement Fehler und Fehlerbericht Dokumentation von Abweichungen Lebenszyklus einer Abweichung Werkzeugeinsatz im Abweichungsmanagement Klassifikation nach IEEE Übersicht über den Klassifikationsprozess Datenmodell: Kategorien, Klassifikationen und Ergänzungsdaten Die Klassifikationsschritte im Detail Tailoring des Standards Zusammenfassung Bewertung und Verbesserung des Testprozesses Allgemeingültige Verfahren und Vorgehensweisen Verbesserung des Softwareentwicklungsprozesses Capability Maturity Model Integration (CMMI) ISO/IEC (SPICE) Vergleich von CMMI und SPICE Bewertung von Testprozessen Testing Maturity Model integrated (TMMi) Business Driven Test Process Improvement (TPI Next ) Systematic Test and Evaluation Process (STEP) Critical Testing Processes (CTP) Vergleich der Bewertungs- und Prozessmodelle 382

8 Inhaltsverzeichnis xv 14.5 Audit und Assessment Durchführung eines Audits oder Assessments Vorbereitung auf ein Audit oder Assessment durch Externe Zusammenfassung Werkzeuge zur Unterstützung des Testprozesses Motivation Open-Source-Einsatz, Anschaffung oder spezifische Implementierung Open-Source-Software Kommerzielle Werkzeuge Maßgeschneiderte Software Auswahl und Beschaffung eines Werkzeugs Grundsätzliche Entscheidung über Einsatz eines Werkzeugs Festlegung von Anforderungen Evaluation Auswertung und Auswahl des zu beschaffenden Werkzeugs Einführung des ausgewählten Werkzeugs Der weitere Lebenszyklus eines Werkzeugs Betrieb Weiterentwicklung Außerbetriebnahme Werkzeuge für das Testmanagement Zusammenfassung Kompetenzen und Teamzusammensetzung Teamrollen und Qualifikationsprofile Individuelle Kompetenz Mitarbeiter auswählen Soziale Teamrollen Faktor Motivation Aus- und Weiterbildung Zusammenfassung 437

9 xvi Inhaltsverzeichnis Anhang A Glossar 441 B Quellenverzeichnis 459 B.l Literatur 459 B.2 Normen und Standards 467 B.3 WWW-Seiten 473 Index 481