Effektive Testautomatisierung durch modulare Tests. Michael Oestereich profi.com AG Dr. Frank Spiegel Haufe-Lexware GmbH & Co. KG

Transkript

1 Effektive Testautomatisierung durch modulare Tests Michael Oestereich profi.com AG Dr. Frank Spiegel Haufe-Lexware GmbH & Co. KG

2 Agenda Einführung Vorstellung der Unternehmen Vorstellung des gemeinsamen Projektes Strategien Realisierung Benefit Modularisierung Priorisierung (Risiko, Komplexität, Wiederholrate) Standardisierung, Normierung Interne Qualitätssicherung Kompetenzgerechte Aufgabenverteilung Parametrisierung Wiederverwendung Beispiele Sonderfälle hoher Automatisierungsgrad bei Testautomatisierung geringer Wartungsaufwand hohe Wiederholrate kurze Einarbeitung für Testautomatisierer schneller Projektwechsel der Testautomatisierer möglich Agile ready

3 Agenda Einführung Strategien Realisierung Benefit

4 Haufe - Lexware

5 profi.com Wer ist profi.com? We make software work Software Software Qualitäts- management Experten- Service Erwarten Sie von der profi.com Dienstleistungen aus einer Hand. Für jedes Projekt und jedes Anliegen finden Sie bei uns spezialisierte Unternehmensbereiche. profi.com wurde 2000 mit Firmensitz in Dresden gegründet. Heute wird das Unternehmen durch Büros in Berlin, München, Ulm und San Jose/Kalifornien ergänzt. Die 3 Hauptgeschäftsfelder der profi.com sind: Qualitätsmanagement Expertenservice Software

6 Projekt - Testautomatisierung Daten: 6 Produkte in versch. Ausprägungen (Pro, Std, Versionen) Smoketest (4), erweiterter Smoketest (1), vollautomatisiert (1) ca. 750 Komponenten, davon z. Zt. ca. 350 fertig Wiederverwendung von Komponenten. ca % (da hauptsächlich Smoketests) Aufwand / Komponente ca. 1h (Design + Automatisierung) Dresden: profi.com TestCenter QualityCenter 10.0 QuickTest Professional 10.0 Dresden Freiburg: Lexware Qualitätskontrolle QualityCenter 9.2 QuickTest Professional 9.5 (10) Freiburg

7 Projekt - Testautomatisierung Herausforderungen: Testautomatisierer ohne Erfahrung in kaufmännischer Software und Finanzverwaltung Fachtester ohne Erfahrungen in Testautomatisierung unterschiedliche Versionen der Tools anfangs kein BPT möglich Management der Zusammenarbeit Kalkulation Abrechnung Dresden: profi.com TestCenter QualityCenter 10.0 QuickTest Professional 10.0 Dresden Freiburg: Lexware Qualitätskontrolle QualityCenter 9.2 QuickTest Professional 9.5 (10) Freiburg

8 Agenda Einführung Strategien Realisierung Benefit

9 Testautomatisierung - Strategien Strategien für eine effektive Testautomatisierung:

10 Modularisierung Testfall Buchung erzeugen Anwendung starten Login Buchungsdaten eingeben Buchung speichern Anwendung beenden Testfall Buchung löschen Anwendung starten Login Buchung aufrufen Buchung löschen Anwendung beenden Viele Schritte werden mehrmals automatisiert Modul Start und Login Anwendung starten Login Modul Buchung erzeugen Buchungsdaten eingeben Buchung speichern Modul Buchung löschen Buchung aufrufen Buchung löschen Modul Beenden Logout Anwendung beenden Module können beliebig kombiniert werden

11 Priorisierung - Wiederholrate Die Priorisierung kann unter mehreren Gesichtspunkten erfolgen: Wiederholrate Diese kann beispielsweise im Modul Business Components des Quality Centers über Dependencies Used by Tests sehr gut ermittelt werden

12 Priorisierung - Komplexität Die Priorisierung kann unter mehreren Gesichtspunkten erfolgen: Wiederholrate Komplexität Diese kann beispielsweise im Tab Details durch benutzerdefinierte Felder ermittelt und verwaltet werden

13 Priorisierung - Risiko Die Priorisierung kann unter mehreren Gesichtspunkten erfolgen: Wiederholrate Komplexität Risiko Die Risikoanalyse kann dabei innerhalb des Moduls Requirements mit Quality Center Bordmitteln über den Tab Risk erfolgen

14 Priorisierung - Risiko Risiko Prozess-Risiko Bei Herstellung der Software - Verzögerungen - Herstellungskosten - Produkt-Risiko Beim Einsatz der Software - Software-Fehler - Wartungskosten

15 Priorisierung - Risiko Die Risikoanalyse erfolgt dabei nach zwei wesentlichen Gesichtspunkten... Schwere des Fehlers / Schadens Wahrscheinlichkeit / Häufigkeit des Auftretens.. und kann in Form einer Risiko-Matrix dargestellt werden : Testfälle und Risikomatrix A 1 B 1 C 1 A 2 B 2 C 2 A 3 B 3 C

16 Priorisierung Die Priorisierung kann unter mehreren Gesichtspunkten erfolgen: Wiederholrate Komplexität Risiko... Eine Priorisierung nach weiteren (beispielsweise auch projektspezifischen Gesichtspunkten) kann natürlich zusätzlich erforderlich sein

17 Normierung + Standardisierung Beispiel: Einheitliche Schritte innerhalb einer Komponente Schritt 1: Überprüfung Initialzustand Schritt 2: Eingabe bzw. Überprüfung von Werten Schritt 3: Auslösen einer Aktion ( Schritt 4: Überprüfung Endzustand )

18 Normierung + Standardisierung Beispiel: Einheitliche Parameter für jede Komponente Allgemeine Parameter Spezielle Parameter Allgemeine Parameter

19 Interne Qualitätssicherung Eine interne Qualitätssicherung innerhalb des Automatisierungs- Teams trägt zu erhöhter Stabilität und Qualität der Komponenten und Testfälle bei. Sinnvolle Methoden sind dabei: Reviewing durch 4-Augen-Prinzip / toolgestützt einheitliche Automatisierungsrichtlinien einheitliche Script-Konventionen Hinweis: Insbesondere durch das Konzept der Modularisierung tritt häufig der Fall auf, dass an bestehenden Modulen, Komponenten oder Bibliotheken Änderungen / Ergänzungen vorgenommen werden müssen, die dann auch Einfluss auf bereits fertiggestellte Testfälle haben. Umso wichtiger ist daher also eine zuverlässige QS bei der Automatisierung!

20 Aufgabenverteilung Notwendige Voraussetzungen für die Testautomatisierung Bei herkömmlicher Testautomatisierung benötigt der / die Testautomatisierer: Kenntnis der zu testenden Anwendung Er muss die zu testende Anwendung und die zugrundeliegenden Geschäftsprozesse genau kennen, um notwendige und sinnvolle Testfälle zu erzeugen. Kenntnis von sinnvollen Testdaten für jeden Testschritt Eine Abschätzung der notwendigen Testdaten-Kombinationen ist oftmals nur mit genauem fachlichen Hintergrund möglich. Kenntnisse zum eingesetzten Automatisierungstool o o o Verwendete Skriptsprache Verwaltung der GUI-Objekte der zu testenden Anwendung Möglichkeiten der Parameterübernahme/-Übergabe

21 Aufgabenverteilung Kompetenzgerechte Aufgabenverteilung durch Trennung der Aufgabenbereiche Geschäfts - prozesse Automati - sierung Testdaten Fachtester Testautomatisierer

22 Parametrisierung Erzeugung konkreter Testfälle durch Parametrisierung von logischen Testfällen Testspezifikation Testdatenspezifikation

23 Wiederverwendung V-Modell und Wiederverwendung User Requirements Specification User Acceptance Test Verwendung Functional Specification Integration Test Verwendung Design System Test Verwendung Erstellung Modulare Testfälle System Build

24 Wiederverwendung V-Modell und Wiederverwendung User Requirements Specification User Acceptance Test Verwendung Functional Specification Integration Test Verwendung Design System Test Verwendung Erstellung Modulare Testfälle System Build Verwendung in Produktivumgebung im nächsten Release

25 Agenda Einführung Strategien Realisierung Benefit

26 BPT als Bedingung? Sind die beschriebenen Verfahren nur mittels HP Business Process Testing anwendbar?

27 BPT als Bedingung? Sind die beschriebenen Verfahren nur mittels HP Business Process Testing anwendbar? Prinzipiell können die genannten Verfahren auch mit einer Kombination von QualityCenter und Quicktest Professional (ohne BPT) angewendet werden. Dabei sind folgende Unterschiede zu beachten: Die Parameterübergabe ist nicht so einfach, elegant und übersichtlich. Das Zusammenstellen der Module zu Testfällen erfolgt nicht im QC durch den Fachtester sondern in QTP durch den Testautomatisierer. Die Strukturen zur Verwaltung der Module und Testfälle müssen selbst definiert und verwaltet werden

28 Agenda Einführung Strategien Realisierung Benefit

29 Benefit - Cost Saving Effektivität geringer Wartungsaufwand durch Vermeidung von Redundanz hohe und kalkulierbare Wiederholrate Automatisierung der Script-Generierung (AOM + Process Guidance) Flexibilität kurze Einarbeitung für Testautomatisierer schneller Projektwechsel der Testautomatisierer möglich Kalkulierbarkeit genaue, strukturierte Aufwandskalkulation detaillierte Abrechnung nach Masken und Testfällen möglich

30 Benefit - AGILE ready Module wiederverwendbar bei: Unittest Regressiontest Acceptancetest... Unterstützung des Test Driven Development in zwei Schritten 1. Schritt: Erzeugung der Module als manuelle Komponenten incl. aller Parameter zeitgleich oder vor Erzeugung der Units durch die Entwickler 2. Schritt: Automatisierung der Module / Komponenten bei Existenz des GUI

31 Fragen? Vielen Dank für Ihre Aufmerksamkeit! Ihre Ansprechpartner: Michael Oestereich profi.com AG 0178 / Dr. Frank Spiegel Haufe-Lexware GmbH & Co. KG profi.com AG business solutions Stresemannplatz Dresden Telefon: +49 (351) Haufe-Lexware GmbH & Co. LG Munzinger Straße Freiburg Telefon: +49 (761)