Automatische Testfallgenerierung aus Modellen. 8. Neu-Ulmer Test-Engineering-Day Martin Miethe

Größe: px

Ab Seite anzeigen:

Download "Automatische Testfallgenerierung aus Modellen. 8. Neu-Ulmer Test-Engineering-Day 2013 06.06.2013 Martin Miethe"

Maximilian Baumann
vor 8 Jahren
Abrufe

1 Automatische Testfallgenerierung aus Modellen 8. Neu-Ulmer Test-Engineering-Day Martin Miethe

2 Über sepp.med Über 30 Jahre Erfahrung im industriellen Umfeld Medizintechnik Pharmazie Automotive Automatisierung Avionik Expertise: komplexe und sicherheitskritische Systeme 2

3 3

4 Agenda Herausforderungen der Qualitätssicherung Wieso Testautomatisierung? Testabdeckungen.mzT Automatische Testfallgenerierung aus Modellen Was bringt die Zukunft 4

5 Herausforderungen der Qualitätssicherung Zunehmende Komplexität der Systeme Steigende Anzahl von Features Unterschiedliche IT-Infrastrukturen Stand-Alone Applikationen Client-Server-Anwendungen Cloud-Lösungen Verteilte Systeme Variantenreiche Systeme / Produkte Hoher Zeit- und/oder Kostendruck 5

Stand-Alone Applikationen Client-Server-Anwendungen Cloud-Lösungen

6 Wieso brauchen wir eine Testautomatisierung? 6

7 Wieso Testautomatisierung? Test können beliebig oft wiederholt werden Fehlerfindung während der Implementierungsphase Schnellere Testdurchführung als beim Manuellen Testen schnellere Markteinführung von Produkten Kostengünstige Testdurchführung Ziel der Testautomatisierung Mehr Tests In kürzerer Zeit Bei niedrigeren Kosten Q 7

Implementierungsphase Schnellere Testdurchführung als beim Manuellen Testen

8 Nachteile der Testautomatisierung Hoher Aufwand Konfiguration der Testautomatisierungsumgebung Erstellung / Wartung der automatisierten Testfälle Erstellung / Wartung von Bibliotheksfunktionalitäten Hohe Investition Anschaffungskosten Erstellung / Wartung der Testfälle und Bibliotheken Keine Rollentrennung im Test Systemtester = Testautomatisierer 8

Erstellung / Wartung von Bibliotheksfunktionalitäten Hohe Investition

9 Herkömmliches Testdesign oder Wie kommt man zu den Testfällen 9

10 Herkömmlicher Testprozess: Testdesigner Anforderungen Testidee Testimpl. Testfälle Automatische Testausführung??? Automatisiert 10

11 Gretchenfrage: Wie hältst du s mit der Testabdeckung??? 11

12 Testabdeckung auf Code-Ebene: White Box Test Anweisungsüberdeckungstest Zweigüberdeckungstest Einfacher Bedingungsüberdeckungstest Minimaler Mehrfachbedingungsüberdeckungstest Mehrfachbedingungsüberdeckungstest Pfadüberdeckungstest Modifizierter Bedingungs- /Endscheidungsüberdeckungstest [SL2005] 12

Mehrfachbedingungsüberdeckungstest Mehrfachbedingungsüberdeckungstest

13 Testabdeckung für Blackbox-Tests Requirement-Abdeckung Äquivalenzklassenabdeckung Risk-Abdeckung UseCase-Abdeckung Workflow-Abdeckung 13

14 Was ist.mzt? = Testdesign in Modellen + automatische Testfallgenerierung 14

15 modellzentrierter Test Modellierung Testausführung Automatische Testfallgenerierung Testautomatisierung 15

16 Was ist ein Test-Modell? 16

17 Das Testmodell Das Testmodell beschreibt das SUT (System under Test) UML BPMN State Diagram Activity Diagram Sequence Diagram 17

18 Was ist ein Testfall? 18

19 Der Testfall 19

20 Was steht in einem Testmodell? Hierarchien Requirements Logik Testelemente 20

21 Messbare Testabdeckung mit Modellen Anforderungsabdeckung: einfach Abdeckung komplette Abdeckung Knotenabdeckung Kantenabdeckung Pfadabdeckung mit und ohne Schleifen aber auch Risikoabdeckung Workflow-Abdeckung 21

22 Messbare Testabdeckung mit Modellen Was dem White-Box-Test der Code ist, ist dem Black-Box-Test das Modell 22

23 Automatische Testduchführung Anforderungen Testidee Testimpl. Testfälle Automatische Testausführung??? Automatisiert 23

24 Automatische Testduchführung + Testfallerstellung Anforderungen Testmodell Automatische Testfälle Automatische Testfallgenerierung Testausführung Automatisiert 24

25 Was gewinnt man durch.mzt (1 / 2) Zeit der Implementierungsaufwand wird eingespart Wartbarkeit die Wartbarkeit der Testfälle wird sehr erleichtert Flexibiltät die Teststrategie kann sehr leicht geändert werden Transparenz anhand der Modelle wird die Testabdeckung nachvollziehbar 26

26 Was gewinnt man durch.mzt (2 / 2) Sicherheit anhand der Modelle und der gewählten Generierungsstrategie wird die Testabdeckung messbar Systematik Testfälle werden nach einer vorgegebenen Systematik erstellt Rollentrennung Systemtester modelliert die Workflows, UseCase, das Verhalten des Systems und Testautomatisierer implementiert die automatisierten Testschritte 27

27 Was bringt die Zukunft? Förderprojekt Modellzentrierter Test in virtualisierten Testumgebungen - Test@Cloud Ziel: Testausführung in der Cloud Embedded Systems Testfallgenerierung in der Cloud 28

28 Vielen Dank für Ihre Aufmerksamkeit Tel.: +49 (0) Fax: +49 (0) Web: 29

29 Quellen [SL2005] A. Spillner, T. Linz; Basiswissen Softwaretest Aus und Weiterbildung zum Certified Tester Foundation Level nach ISTQB-Standard; dpunkt.verlag, 2005 [HSVW2012] P. Haberl, A. Spillner, K. Vosseberg, M. Winter; Umfrage 2011: Softwaretest in der Praxis, In Kooperation mit den Hochschulen Bremen und Bremerhaven, der Fachhochschule Köln, ANECON Software Design und Beratung G.m.b.H., dem German Testing Board und dem Swiss Testing Board; dpunkt.verlag, 2012, 30

Ähnliche Dokumente

Automatic Generation of Testcases for System Level Tests. Dr. Martin Beißer, sepp.med gmbh

Automatic Generation of Testcases for System Level Tests Dr. Martin Beißer, sepp.med gmbh Systemtest Der Systemtest ist die Teststufe, bei der das gesamte System gegen die gesamten Anforderungen (funktionale