KapAnfang. Inhaltsverzeichnis. Teil I Was versteht man unter automatisiertem Testen?

Transkript

1 softtestingivz.fm Seite XV Dienstag, 19. September :29 15 Inhaltsverzeichnis KapAnfang Teil I Was versteht man unter automatisiertem Testen? 1. Entstehung und Entwicklung des automatisierten Testens Automatisiertes Testen Hintergründe zum Testen von Software Die Automated Test Life-Cycle Methodology (ATLM) Die Entscheidung zum automatisierten Testen Auswahl von Testwerkzeugen Einführung des automatisierten Testens Planung, Design und Entwicklung der Tests Ausführung und Verwaltung von Tests Prüfung und Beurteilung des Testprogramms Die Rolle der ATLM beim Testen von Software Der Zusammenhang zwischen der ATLM und dem Lebenszyklus der Systementwicklung Test Maturity Model (TMM) Erweiterung durch ein Reifegradmodell für das automatisierte Testen von Software Entwicklung automatisierter Tests Testaufwand Karriereaussichten als Softwaretester Zusammenfassung Literaturhinweise Die Entscheidung zum automatisierten Testen Ausräumen falscher Erwartungen an automatisierte Tests Erstellen eines Plans für das automatisierte Testen Das ultimative Testwerkzeug Unmittelbare Verringerung des Testaufwands Unmittelbare Verkürzung des Zeitplans Benutzerfreundlichkeit des Testwerkzeugs Universelle Anwendbarkeit der Testautomatisierung %-Tests Vorteile des automatisierten Testens... 43

2 softtestingivz.fm Seite XVI Dienstag, 19. September :29 15 XVI Inhaltsverzeichnis Links Erstellung eines zuverlässigen Systems Verbesserung der Testqualität Verringerung des Testaufwands und Minimierung des Zeitplans Unterstützung durch die Geschäftsführung Vorschlagen eines Testwerkzeugs Zusammenfassung Literaturhinweise Bewertung und Auswahl von Testwerkzeugen Die Systementwicklungsumgebung der Organisation Externe Informationen von Geschäftsführung, Personal und Endbenutzern Werkzeugkriterien vor dem Hintergrund der Systementwicklungsumgebung Güte der Softwarequalität Vorliegende Problemberichte Einschränkungen im Budget Testarten Langfristige Aspekte der Investition Einführung des Testwerkzeugs Vermeiden von Mängeln Werkzeuge zur Unterstützung des Testlebenszyklus Werkzeuge zur Geschäftsanalyse Werkzeuge zum Definieren der Anforderungen Werkzeuge für Analyse und Design Programmierwerkzeuge Metrikwerkzeuge Andere Werkzeuge für den Testlebenszyklus Testwerkzeuge Suche nach geeigneten Testwerkzeugen Verbesserungsmöglichkeiten Definition von Bewertungsbereichen Bewertung von Werkzeugen in der Praxis Bewertungsbericht Lizenzvereinbarungen Zusammenfassung Literaturhinweise

3 softtestingivz.fm Seite XVII Dienstag, 19. September :29 15 Rechts Inhaltsverzeichnis XVII Teil II Einführung automatisierter Tests in ein Projekt 4. Einführung des automatisierten Testens Analyse des Testprozesses Überprüfung des bestehenden Prozesses Testziele Teststrategien Überlegungen zum Testwerkzeug Überprüfung projektspezifischer Systemanforderungen Überblick über die zu testende Anwendung Überprüfung des Projektzeitplans Überprüfung der Kompatibilität des Testwerkzeugs Vorführung des Werkzeugs für das Projektteam Unterstützungsprofil für ein Testwerkzeug Überprüfung der Schulungsanforderungen Zusammenfassung Literaturhinweise Testteam-Management Organisatorische Struktur eines Testteams Durchgangs-Testteam Zentrales Testteam UVV-Testteam Team für Systemmethodik und Tests Zusammenfassung zu Testteams Aufgaben im Rahmen des Testprogramms Umfang des Testaufwands Methoden zum Bestimmen der Testteamgröße Die verhältnisorientierte Methode Die Prozentmethode Die Testverfahrenmethode Die Aufgabenplanungsmethode Faktoren mit Einfluss auf den Testaufwand Einstellen von Testingenieuren Qualitäten von Testingenieuren Zusammensetzung des Testteams Stellenausschreibung Einstellungsaktivitäten Finden von Testingenieuren Gespräche mit Testingenieuren Charakteristika des optimalen Bewerbers Rollen und Verantwortlichkeiten Zusammenfassung Literaturhinweise

4 softtestingivz.fm Seite XVIII Dienstag, 19. September :29 15 XVIII Inhaltsverzeichnis Links Teil III Planung und Vorbereitung der Tests 6. Testplanung: Intelligente Anwendung von Testverfahren Testplanungsaktivitäten Der Anwendungsbereich des Testprogramms Systembeschreibung Kritische und riskante Funktionen Testziele und -strategien Testwerkzeuge Parameter des Testprogramms Verifizierungsmethoden Definition der Testanforderungen Testanforderungsmanagement Werkzeuge für das Anforderungsmanagement Beurteilen der Risiken von Testanforderungen Festlegen von Testprioritäten Anforderungsverfolgbarkeitstabelle Ereignisse, Aktivitäten und Dokumentation des Testprogramms Ereignisse Aktivitäten Dokumentation Die Testumgebung Vorbereitung der Testumgebung Integration und Einrichtung der Testumgebung Der Testplan Kriterien für den Testabschluss/die Akzeptanz der Testergebnisse Beispiel eines Testplans Zusammenfassung Literaturhinweise Testanalyse und -design Analyse der Testanforderungen Testanalyse auf Entwicklungsebene (Struktureller Ansatz) Testanalyse auf Systemebene (Verhaltensorientierter Ansatz) Design des Testprogramms Designmodelle für Testprogramme White-Box-Techniken (Tests auf Entwicklungsebene) Black-Box-Techniken (Tests auf Systemebene) Dokumentation des Testdesigns Entwerfen von Testverfahren Definition von Testverfahren Automatisierte oder manuelle Tests? Standards für das Design automatisierter Tests Richtlinien für das Design manueller Tests

5 softtestingivz.fm Seite XIX Dienstag, 19. September :29 15 Rechts Inhaltsverzeichnis XIX Detailliertes Testdesign Anforderungen an die Testdaten Zusammenfassung Literaturhinweise Entwicklung von Tests Die Entwicklungsarchitektur für Tests Die technische Umgebung Überprüfen der Einsatzbereitschaft der Testumgebung Analyse der Wiederverwendbarkeit vorhandener Automatisierungskomponenten Zeitplan für die Entwicklung/Durchführung von Testverfahren Analyse der Modularitätsbeziehungen Erläuterung der Beispieltabelle für Modularitätsbeziehungen Kalibrierung des Testwerkzeugs Lösungen für Kompatibilitätsprobleme Manuelle Durchführung von Testverfahren Inspektionen von Testverfahren Peer Reviews Konfigurationsmanagement für Testverfahren Richtlinien für das Entwickeln von Tests Der Übergang vom Design zur Entwicklung Wieder verwendbare Testverfahren Wartungsfreundliche Testverfahren Andere Richtlinien Automatisierungsinfrastruktur Tabellengestützte Testautomatisierung Skript zum automatisierten Einrichten der PC-Umgebung Optionen zum automatisierten Aufzeichnen Anmeldefunktion Funktion zum Beenden Navigation Verifizieren von GUI-Standards Smoke-Test Routinen zur Fehlerprotokollierung Verifizierungsskript für die Hilfe-Funktion Funktionen für zeitgesteuerte Hinweisfenster Fortgeschrittene mathematische Funktionen Zusammenfassung Literaturhinweise

6 softtestingivz.fm Seite XX Dienstag, 19. September :29 15 XX Inhaltsverzeichnis Links Teil IV Testdurchführung und -überprüfung 9. Testdurchführung Durchführung und Bewertung von Testphasen Durchführung und Bewertung von Einheitentests Durchführung und Bewertung von Integrationstests Durchführung und Bewertung von Systemtests Ergebnisanalyse bei Regressionstests Durchführung und Bewertung von Benutzerakzeptanztests Fehlerverfolgung und Umgang mit neuen Softwareversionen Fehlerlebenszyklusmodell Verfolgung des Testprogrammstatus Ertragsverwaltung Sammeln und Analysieren von Testmetriken Zusammenfassung Referenzen Überprüfung und Bewertung des Testprogramms Korrektur- und Verbesserungsmaßnahmen Kosten/Nutzen-Analyse des Testprogramms Zusammenfassung Literaturhinweise Teil V Anhang A. Testen von Anforderungen A.1 Ansatz zum Testen von Anforderungen Inhaltsangabe Das Qualitätstor Eine Anforderung messbar machen Quantifizierbare Anforderungen Nicht quantifizierbare Anforderungen Verfolgen Verständlichkeit und Konsistenz Vollständigkeit Relevanz Anforderung oder Lösung? Bewertung durch Beteiligte Verfolgbarkeit Ordnung in einer unordentlichen Welt Schlussfolgerungen Literaturhinweise Anmerkung

7 softtestingivz.fm Seite XXI Dienstag, 19. September :29 15 Rechts Inhaltsverzeichnis XXI B. Werkzeuge zur Unterstützung des Testlebenszyklus B.1 Einführung B.2 Geschäftsanalyse B.2.1 Werkzeuge zur Geschäftsmodellierung B.2.2 Werkzeuge für das Konfigurationsmanagement B.2.3 Fehlerverfolgungswerkzeuge B.2.4 Verwaltung technischer Reviews B.2.5 Dokumentationsgeneratoren B.3 Anforderungsdefinition B.3.1 Werkzeuge für das Anforderungsmanagement B.3.2 Werkzeuge zur Anforderungsverifikation B.3.3 Anwendungsfallgeneratoren B.4 Analyse und Design B.4.1 Werkzeuge für visuelles Modellieren B.4.2 Struktur-, Fluss- und Sequenzdiagramme B.4.3 Generatoren für Testverfahren B.5 Programmierung B.5.1 Werkzeuge zur Syntaxüberprüfung/Debugger B.5.2 Werkzeuge zur Erkennung von Speicherengpässen und Laufzeitfehlern B.5.3 Werkzeuge zur Codeüberprüfung B.5.4 Werkzeuge für die statische und dynamische Analyse B.5.5 Werkzeuge für den Einheitentest B.6 Metrikwerkzeuge B.6.1 Werkzeuge zur Analyse der Code- bzw. Testabdeckung und zur Codeinstrumentalisierung B.6.2 Werkzeuge zur Usability-Beurteilung B.7 Werkzeuge zur Testunterstützung B.7.1 Testdatengeneratoren B.7.2 Werkzeuge für den Dateienvergleich B.7.3 Simulationswerkzeuge B.8 Testphase B.8.1 Werkzeuge für das Testmanagement B.8.2 Werkzeuge zum Testen von Netzwerken B.8.3 Werkzeuge zum Testen von GUI-Anwendungen B.8.4 Werkzeuge für Belastungs-/Leistungstests B.8.5 Werkzeuge zum Testen von Web-Anwendungen B.8.6 Jahr-2000-Testwerkzeuge B.9 Weitere Hersteller von Testwerkzeugen Literaturhinweise C. Die Karriere des Testingenieurs C.1 Technische Kenntnisse C.2 Testprozesse C.3 Teamarbeit

8 softtestingivz.fm Seite XXII Dienstag, 19. September :29 15 XXII Inhaltsverzeichnis Links C.4 Technische Leitung C.5 Test-/Projektmanagement C.6 Geschäfts-/Produktmanagement Literaturhinweise D. Beispiel eines Testplans D.1 Einleitung D.1.1 Absicht D.1.2 Hintergrund D.1.3 Systemübersicht D.1.4 Relevante Dokumente D.1.5 Übergeordneter Zeitplan D.2 Aufgaben und Verantwortlichkeiten D.2.1 Projektorganisation D.2.2 Projektaufgaben und -verantwortlichkeiten D.2.3 Struktur der Testaufgaben D.2.4 Testteamressourcen D.3 Testprogramm D.3.1 Umfang D.3.2 Testansatz D.3.3 Teststrategien D.3.4 Automatisierte Werkzeuge D.3.5 Qualifikationsmethoden D.3.6 Testanforderungen D.3.7 Testdesign D.3.8 Testentwicklung D.4 Testumgebung D.4.1 Testumgebungskonfiguration D.4.2 Testdaten D.5 Testdurchführung D.5.1 Testprogrammberichte D.5.2 Testprogrammmetriken D.5.3 Fehlerverfolgung D.5.4 Konfigurationsmanagement D.6 Detaillierter Testzeitplan Anhang D.A Entwicklungsrichtlinien für Testverfahren D.B Tabelle der Testverifizierungszusammenfassung D.C Testverfahren und -skripts E. Empfohlene Vorgehensweisen E.1 Dokumentierter Prozess E.2 Umgang mit Erwartungen E.3 Pilotprojekt

9 softtestingivz.fm Seite XXIII Dienstag, 19. September :29 15 Rechts Inhaltsverzeichnis XXIII E.4 Überprüfung der Testwerkzeugkompatibilität E.5 Aktualisierung von Testwerkzeugen E.6 Festlegen einer Baseline für Systemeinrichtung und -konfiguration E.7 Softwareinstallationen in der Testumgebungs-Baseline E.8 Übergeordnete Ziele des Testprogramms E.9 Die Automatisierung einfach halten E.10 Standards für das Design und die Entwicklung von Testverfahren E.11 Automatisierte oder manuelle Tests? E.12 Wiederverwendungsanalyse E.13 Kommunikation des Testteams mit anderen Teams E.14 Verträglichkeit der Zeitpläne E.15 Einbeziehung des Kunden E.16 Fehlerdokumentation und Fehlerberichte E.17 Fürsprecher und Experten im automatisierten Testen E.18 Zuordnungen innerhalb des Testteams E.19 Beteiligung von Benutzergruppen E.20 Vorschläge für die Verbesserung von Testwerkzeugen E.21 Beta-Tests E.22 Expertenwissen Stichwortverzeichnis

10