Fachliche Testautomatisierung, verbindet Test-Outsourcing mit Test-Virtualisierung

Transkript

1 Fachliche Testautomatisierung, verbindet Test-Outsourcing mit Test-Virtualisierung

2 Der Stammesverbund Inhaltsverzeichnis Software-Qualitätssicherung Fachliche Testautomatisierung Test-Outsourcing Test-Virtualisierung SPIRIT-TESTING entwickelt Software & Services für ganzheitliche Software- Qualitätssicherung. Mit unserer Toolbox testoffice erzielen wir kontinuierlich Verbesserungen in der Testautomatisierung und dem Testmanagement in Kundenprojekten. SPIRIT-ONSIDE berät Unternehmen in allen Fragen der Software- Qualitätssicherung. Agile und traditionelle Vorgehensmodelle zur Software-Entwicklung sichern wir durch Tools, Methoden und vor allem durch das passende Personal im Rahmen unseres Dienstleistungsportfolios ab. 2

3 Das Stammesgebiet Niederlassungen Grünwald (München) Darmstadt Nürnberg Wolfratshausen Braunschweig Ansprechpartner für Ihre Software- Qualitätssicherung SPIRIT-TESTING Software & Services GmbH Karwendelstr. 8b, Wolfratshausen Fon: SPIRIT-ONSIDE Consulting GmbH Bavariafilmplatz 7, Grünwald Fon:

4 Software-Qualitätssicherung Anforderungen: muss planbar sein muss effektiv sein muss effizient sein muss steuerbar sein 4

5 muss planbar sein, Software-Qualitätssicherung Jedes System ohne eine enge Feedback-Schleife ist ein fehlerbehaftetes System. Software Testen bildet die Feedback Schleife für die Software-Entwicklung Testen muss daher bereits in der Initialphase, der Definition der Anforderungen, ein fester Bestandteil der Vorgehensweise sein Testen wird als Flaschenhals wahrgenommen, wenn der Startzeitpunkt im Entwicklungsprozess verpasst wird. Empfehlung: Testen Sie frühzeitig und ständig! 5

6 muss effektiv sein, Software-Qualitätssicherung Software Testen darf sich nicht auf die Erfahrungen und Kenntnisse von einzelnen Personen erstrecken. Ganz im Gegenteil, die Testfallermittlung sollte auf einer wiederholbaren Testmethodik aufbauen, die stets die gleichen Testfälle für wiederkehrende Aufgaben liefert, unabhängig davon, welche Person den Testfall ermittelt. Die Testfallermittlung muss eine hohe Abdeckung der Anforderungen erzielen. Eine Risikoabschätzung bei der Ermittlung der Testobjekte liefert die Grundlage für eine effektive Testfallermittlung. Empfehlung: Wägen Sie die Risiken im voraus ab! 6

7 muss effizient sein Software-Qualitätssicherung Aktivitäten im Testprozess sollten automatisiert werden, damit Sie schnell und effizient ausgeführt werden können. Der Einsatz von Testwerkzeugen im Testprozess bietet diese Automatisierung In der Testfallermittlung muss über die Beachtung der Projekt- und Produktrisikoanalyse die relevante Anzahl der Testfälle produziert werden. Damit die benötigte Zeit für die Testdurchführung reduziert werden kann und dadurch das Testmanagement zeitlich effizient gestaltet wird. Eine Testdurchführung muss lückenlos protokollieren, damit die Fehlerursache effizient gefunden werden kann, egal ob manuell oder automatisiert. Empfehlung: Setzen Sie Testwerkzeuge ein! 7

8 muss steuerbar sein, Software-Qualitätssicherung Der Testprozess muss mit ausreichenden Messdaten ausgestattet sein, damit jeder Zeit quantitativ ermittelt werden kann, wie sich der Status im Testfortschritt darstellt. Das Ergebnis des Testaufwandes muss jederzeit vorhersagbar sein. Insbesondere muss das Ergebnis einer erfolgreichen Testausführung immer das Gleiche sein. Prioritäten und Kategorien für die Steuerung der Testprozessschritte: Testfallermittlung, Testdurchführung, Regression sind elementar für den Erfolg Empfehlung: Legen Sie im Testwerkzeug, Kriterien für die Steuerung des Testprozesses fest. 8

9 testtipi- Service für die Software-Qualitätssicherung FACHLICHE TESTAUTOMATISIERUNG IM KUNDENPROJEKT, EIN BEISPIEL 9

10 Ausgangslage mit dem Kunden Kleines Entwicklungsteam (5 Entwickler) Vertrieb der Service-Leistung auf Basis der entwickelten Software Individualisierung der Software pro Kunde Anforderung: Erhöhung der Produktqualität Erhöhung der Regressionstestrate Konzentration auf die Entwicklung Auslagerung der Testaktivitäten 10

11 Lösungsszenario für den Kunden Virtuelle testoffice-umgebung für das Testmanagement und die Testautomatisierung Ableitung der Testfälle (fachlich) für einen End-to-End-Test Abbildung der Testfälle über TCDL in testoffice Automatisierung der Testfälle über die testoffice TestEngine HTML-TestEngine & ANROID-TestEngine Virtuelle Testumgebung (Kundenanwendung) Testdurchführung in regelmäßigem Turnus Austausch der Fehlerberichte mit den Kundenentwicklern 11

12 Virtuelle Umgebung für testoffice testoffice dient als Testmanagement und Testautomatisierungswerkzeug Aufbau einer virtuellen Kundenumgebung für die Nutzung von testoffice bzw. für den Austausch der Test- und Fehlerberichte 12

13 Virtuelle Umgebung für testoffice Virtuelle testoffice Umgebung testoffice Client testoffice Scheduler (Testagent) Client Internet Server testoffice Server testoffice Datenbank 13

14 Virtuelle Umgebung für testoffice Tester \ Fachtester (Kunde) Test Manager Entwickler (Kunde) Test Engineer 14

15 Testfallableitung mit dem Kunden In Zusammenarbeit mit dem Kunden wurden auf Basis der Berechtigungsszenarien in der Kundenanwendung die fachlichen Testobjekte erarbeitet Umsetzung der der fachlichen Testfälle für die ermittelten Testobjekte über eine testsites Entscheidungsmatrix und Import der Testfälle in testoffice 15

16 Fachliche Testautomatisierung Strukturierung der Testfälle in Testschritte Erstellung der Testaktionen /-Verifikationen über TCDL-Wizards Hohe Offline-Transparenz durch Screenshots der Live-Anwendung fachliche Testmodule Definition von Testdaten für die fachl. Testmodule Hohe Wiederverwendung, geringe Wartungsaufwände Datengetriebene Testausführung 16

17 TCDL (Test Case Definition Language) Standardisierte Testfallbeschreibung Mit Hilfe der TCDL erstellen Sie ohne Programmierkenntnisse Testfälle, die direkt automatisiert ausgeführt werden können. Test Case Definition Language (TCDL) EINGABE IN, wadresse.ename Volles IST INHALT, eadresse.evorname Jürgen 17

18 Fachliche Testautomatisierung Fachliches Objekt-Repository für die Automatisierung: Automatisiertes Mapping der Masken und Maskenelemente Screenshot Erstellung für die EasyToUse Testfallerstellung (100% Transparenz) Generierung von logischen Objektnamen Versionierung pro Maske / Fenster / Seite XML-Repository für SOAP 18

19 Aufgabenverteilung für die Testautomatisierung 19

20 Aufgabenverteilung für die Testautomatisierung Trennung der Aufgaben zwischen Fachlichem Tester und (95%) Fokussierte Erstellung der Testfälle auf fachlicher Ebene Spezifikation der Automatisierungsanforderungen über die TCDL als Vorgabe für den TestEngineer Automatisierte Testdurchführung ohne Programmierkenntnisse TestEngineer (Entwickler) (5%) 95% aller benötigten Keywords out of the box verfügbar Fokussierte Erstellung der Automatisierungsroutinen Keywords (custom specific) Data-Functions (application specific) 20

21 Test-Virtualisierung der Kundenumgebung Windows Server 2012 Aufbau von VMs zur Abbildung der Kundenumgebung Installation der testoffice testagents für die automatisierte Testausführung Update der Kundenumgebung durch den Kunden 21

22 Test-Virtualisierung Virtuelle Testumgebung Anwendungsserver Client (Testagent) Webserver Testserver Datenbankserver 22

23 Test-Outsourcing (testtipi) Vereinbarung einer Regressionstestrate mit dem Kunden Pflege der Testfälle und Erweiterung der Testbibliothek über Fehlerfälle Manueller, explorativer Test der Anwendung pro Regression Ausführung der automatisierten Testbibliothek Austausch der Fehlerberichte mit den Kundenentwicklern 23

24 Test-Outsourcing (Fehlerberichte) TestReporter: Testprotokolle: Lückenlos, nachvollziehbar Manuell = Automatisiert Fehler-Screenshot s Dump-Files Automatisierte Übernahme der Abweichungsinformationen in das Bug-tracking System 24

25 Test-Outsourcing (Reports) TestReporter: Reporting Templates Charts Tabellen, Reports über den Testfortschritt Aufgabenpakete Abhängigkeiten, Abdeckungsmatrix Fehlerberichte 25

26 testtipi Vorteile & Benefits Vorteile & Benefits Paralleles Arbeiten für die Testautomatisierung, der fachliche Tester erstellt die Testfälle, der TestEngineer stellt die technische Automatisierbarkeit sicher, mittels TCDL spielen beide Aufgaben durch testoffice gesteuert zusammen und erhöhen damit die Effizienz und Effektivität für das Testprojekt! Testen als Service für den Kunden! 26

27 Referenz Vorteile & Benefits Neumann & Neumann Software und Beratungs GmbH testoffice - Automatisierung seit 2013 testtipi Service seit

28 Referenz Vorteile & Benefits Versicherungskammer Bayern Fachliche Testautomatisierung seit 2003 Zuerst auf Basis der SilkTest-TestEngine, heute über die Build-In TestEngine von TestOffice, Umstellungsaufwand (< 1 Monat, bei 3500 Testfällen (Geschäftsprozesse)) Automatisierung über den Verbundtest (Java, Host, Web, Datenbank, Schnittstellen, Oracle Forms, VA Smalltalk) Nutzung der fachlich, funktionalen Testfälle für Performance Tests über das Performance-Modul von testoffice Erstellung, Ausführung und Pflege der Testfälle durch Fachtester, Support durch 2 TestEngineers 28

29 29