Tegernsee, Januar 2010 Ole Barkmann

Transkript

1 Testautomation mit der PASS Test Factory Tegernsee, Januar 2010 Ole Barkmann

2 Agenda Partner PASS PASS Test Factory Success Story Testfallexplosion Lösungen

3 Der Partner PASS Gegründet: 1981 Umsatz 2008: 107 Mio. EUR Mitarbeiter: 620. Düsseldorf.... Hamburg Standorte Deutschland: Hauptsitz: Geschäftsstellen: International: USA: Indien: Aschaffenburg Frankfurt Aschaffenburg. Würzburg Stuttgart. München Hamburg, Düsseldorf, Frankfurt, Würzburg, Stuttgart, München Miami Hyderabad

4 PASS Business Units Insurance Banking Travel Innovation Technologies & Operations Logistics Telco & Sales

5 Marktpositionierung Spezialist im Lösungsgeschäft Produktivität Sicherheit Qualität Produktivität durch Leistungssegmente Antworten und Lösungen Was ist zu tun? Forschung Wie ist es zu tun? Projekt Software Betrieb

6 Produkte / Lösungen Lösungen für Finanzdienstleister Kernbankenlösung Vermögensverwaltung Versicherungen Zulagenverwaltung CRM Online Banking Studie Online Insurance Studie Travel Internet Booking Engine Virtual Travel Office Multi-GDS-Server Logistik Tourenplanung Flottensteuerung Mobiles Touren- und Auftragsmanagement

7 Business Architektur Customer Internet Fax Filiale Payment Service Interface Customer Relationship Management Contract & Sales Management Product Processing Management Product Factory Account Loan Deposit Securities Foreign Exchange Billing Management Accounting Management SB- Terminal Enterprise & Risk Management Data & Service Bus Call Center Mobile Riester Asset External Services Schufa ERP ZfA WM Meldewesen Zahlungsverkehr... Internal Services Organisation Security Help Monitor Print Logging Process Navigation Keytab Reports Archive...

8 Architektur Applikationsfunktionen PRESENTATION LAYER GUI Model < > Event & Navigation Model Business logic components Session Account/ Licensing Profiles Multilingualism Modelling -Tool Automation Templates Repository Components Process Manager KeyTab-Mgt. Meta format SOA LAYER Timer Service Manager Metaformat Security Object Cache Platformindependent ServiceInfo ServiceBindung Validierung... Concurrency Monit./ Log. Language. independent SERVICE LAYER Service Interface SO SO SO Message Adapter DB Adapter CICS Adapter MQ Adapter... Connection Pool History Migration EXTERNAL SYSTEMS Server DB CICS MOM COMPONENT REPOSITORY MODEL-BASED DEVELOPMENT

9 Benchmark Financial Solutions FinanceS 2. Platz 2. Platz

10 Agenda Partner PASS PASS Test Factory Success Story Testfallexplosion Lösungen

11

12 Definitionen Sammlung von Testwerkzeugen Werkzeugkasten bessere Auslastung der Tester Kompetenzzentrum für Testleistungen ca. 400 Mitarbeiter Gebündeltes Expertenwissen Organisationsform

13 Industrielle Fertigung Fließband = Macroprozess Roboter = Microprozess

14 Prozessautomation Qualitätsmanagement Changemanagement Defectmanagement Projektmanagement Problemmanagement Prozesssteuerung Kundenanforderung Engineering Test Factory Abnahme Produkt Artefakte/Ergebnisse (Kundentransparenz) Analyse Design Checklisten Protokolle TestergebnisseDokumentation

15 Test Factory

16 Macro- und Microprozess TestSuite MICRO PROZESS MACRO PROZESS Test Objekt IT-Infrastruktur Test Objekt Integrationstest GUI Test Objekt Schnittstelle

17 Macro- und Microprozess TestSuite MICRO PROZESS MACRO PROZESS Test Objekt IT-Infrastruktur Test Objekt Integrationstest GUI Test Objekt Schnittstelle

18 Charakteristik Hohe Integration unternehmensübergreifend (organisatorisch) Tools (keine Medienbrüche) ALM (Application Lifecycle Management) Hohe Automation Entwicklungsprozesse (ALM) Testprozess (Planung.. Auswertung) Test (Testobject, Monitoring, Logging..) Hohe Qualität Prozesse Nachvollziehbarkeit, Wiederholbarkeit Null Fehlertoleranz Strategie

19 Agenda Partner PASS PASS Test Factory Success Story Testfallexplosion Lösungen

20 Ausgangssituation Problembereich Fehlerhafte Komponenten 75% 30% Errors Im direkten Sichtbereich des Kunden 50% 70% 25% 15% 10% 5% Test Factory fachliche Abnahme betriebliche Abnahme Produktion Phasen

21 Fehlerbehebungsaufwand Nach Deutscher Gesellschaft für Qualität

22 Typische Schwachpunkte Management (Team-Mailbox / Excel) Change & Release / Defect Management (Excel) Spezialisten / Spezialwissen Dokumentation (Teststrategie / Testfälle / Testprotokolle) Testvorbereitung / Testdurchführung (manuell) Kein definierter Testprozess Kein definiertes Controlling

23 Implementierungsverlauf Optimierung Automatisierung Tests Prozesse Engineering Prozesse Test Prozess Problem & Defect Tracking Change Prozess Organisation Projekt Management Qualitäts- Management Problem & Defect Management Change & Release Management Zeit

24 Entwicklungsprozesse sind komplex typischerweise mehr als 100 Aktivitäten Juli

25 Schnelle Integration von Mitarbeitern

26 Optimierung Testautomatisierung Testvorbereitung/Testnachbereitung: Automatisierte Bereitstellung der Testumgebung u. Testdaten Monitoring der Verfügbarkeit Automatisiertes Cleanup nach Testdurchführung Testdurchführung: GUI-Tests Schnittstellentests Batchjobs Regressionstests Testauswertung: toolgestützte Interpretation von Logfiles automatisierte Soll-Ist Vergleiche Testdokumentation: automatisiertes Upload Logfiles Zentralsierung aller Testartefakte automatisierte Archivierung (Revisionspflicht)

27 Übersicht Testdurchführung

28 Fehlerlokalisation heute Fehlerhafte Komponenten 75% ~ 0% Fehler in der Produktion 0,5% bei Abnahmen außerhalb der TestFactory 50% 98% 25% 1,5% 0,5% ~ 0,0% TestFactory fachliche Abnahme betriebliche Abnahme Produktion Phasen

29 Absolute Performancesteigerung Performance > 50 % Kostenersparnis möglich 80 Komponenten pro Monat 60 Komponenten pro Monat 8h/Komponente 10 Komponenten pro Monat 72h/Komponente 30 Komponenten pro Monat 32h/Komponente 12h/Komponente Zeit (Monate)

30 Agenda Partner PASS PASS Test Factory Success Story Testfallexplosion Lösungen

31 Testfallexplosion Ableitung von Keywords aus Use Case typischerweise mehr als 1000 Testfälle bei komplexen Systemen UseCase Testszenario (Keyword-Methode) Testfälle (daten-getrieben) UC1.18.2: User types in data for search parameter Keyword: Enter Search Parameters

32 Testfallexplosion Keywordbasierte Erstellung der Testszenarien UseCase Testszenario (Keyword-Methode) Testfälle (Daten-getrieben)

33 Testfallexplosion Optimierung durch Einsatz der Keyword Methode Erfolgsfaktoren: Wiederverwendung, Pflege, Wartbarkeit Projekterfahrung: > 6-fache Wiederverwendung der Keywords Trennung von Fachlichkeit und Implementierung Erhöhung der Lesbarkeit der Testfälle Implementierung kleiner und einfacher Automatisierungsbausteine Optimierungspotential: Offshore Implementierung rein fachliche Aufrufe technische Implementierung

34 Agenda Partner PASS PASS Test Factory Success Story Testfallexplosion Lösungen

35 Aufbau und Betrieb Test Factory Prä-Initialisierung Assessment Konzeption Tool Evaluierung Initialisierung (Aufbau) Optimierung Application Lifecycle Mgmt. Optimierung Test Prozess Optimierung Testumgebung Einführung Automatisierung Outsourcing Optimierung (Betrieb) Anlass getrieben Kennzahlen basiert Quick Wins

36 Kostenverlauf Initiale Kosten Gesamt Kosten (inkl. Test Factory Aufbau/Pflege) [%] Kosten für Optimierung Pflege/Wartung 100% QS Kosten [%] Kostenreduktion Effekte nach 3 Monaten 50% Initialisierung Optimierung Phasen[Monate]

37 Vielen Dank für r Ihre Aufmerksamkeit Ole Barkmann Head of Business Development Financial Solutions Schwalbenrainweg 24 D Aschaffenburg ole.barkmann@pass-consulting.com Phone: +49 (0) Mobile: +49 (0)