Qualitätssicherung und Software-Testing mit HP Quality Center

Transkript

1 Qualitätssicherung und Software-Testing mit HP Quality Center Düsseldorf, 5. Nov 2008 Udo Blank, Presales Consultant, HP Software Deutschland 2008 Hewlett-Packard Development Company, L.P. The information contained herein is subject to change without notice

2 Agenda 1 HP Quality Center 2 Business Process Testing 3 News HP Quality Center 2 3 November 2008 Shift IT resources to strategic initiatives

3 Quality Center

4 HP BTO Software Marktführendes Softwareportfolio für IT Geschäftsergebnisse STRATEGIE Project & Portfolio Center CIO Office SOA Center APPLIKATIONEN Qualitäts- Quality Center Performance Center Application Security Center Business Service Business Availability Center Operations Center Network Center BETRIEB Business Service Automation Operations Orchestration Client Automation Center Data Center Automation Center IT Service Service Center CTO Office SAP, Oracle, SOA, J2EE,.Net Universal CMDB 4 3 November 2008

5 Unaufhaltsamer Anstieg der IT Komplexität SOA, Shared Services, Web 2.0, Enterprise 2.0 Verteilte Teams Failur e Erhöhter Zeitund Kostendruck Erhöhte Komplexität New and agile business capabilities Business services? Integrierte Geschäftsprozesse CRM Operations e- Commerce Finance 5 3 November 2008 Auswirkung eines einzelnen Fehlers kann erheblich sein! CIO

6 Herausforderungen Quality Business Analysten QA Team Team Applikationsbetrieb SI oder Berater UAT Tool: MS Word Team: 5 Personen Tool: Lotus Notes Team: 5 Personen Tests: Meist automatisiert Model: CMM Tool: Solution Manager Team: 35 Personen Tests: Hauptsächlich manuell Model: ASAP Methodologie Tool: MS Excel Team: 10 Personen Tool: MS Outlook Team: 5 Personen Tests: UAT Ja Nein Kann eine hohe Qualität Ihrer Anwendung garantiert werden? Haben Sie einen konsistenten, wiederverwendbaren Testprozess? Kennen Sie die Quality-to-Risc Trade-offs? 6 3 November 2008

7 HP Quality Center HP Quality Center Dashboard Center Test Director for Quality Center Requirements Definition (add-on) Requirements Risk-based Test Release Defect QA Lab (add on) Functional Testing SAP Security Testing SOA Testing QuickTest Professional Business Process Testing BPT for SAP Change Impact Testing QAInspect Service Test Service Test Foundation Shared data repository Central administration Workflows Open APIs 7 3 November 2008

8 Business-orientiertes Qualitätsmodell The right process mitigates risk Define Design Build Test ALIGN WITH PMO Go Live and Support Continuous Improvement INTEGRATE WITH DEMAND MANAGE REQUIREMENTS Business Requirements Test Strategy Test Requirements Define Use Cases QUALITY MANAGEMENT OPTIMIZE QUALITY Build and Automate Test Cases Create Test Plan Defects Execute Test Scenarios Analyze Test Report Defects OPTIMIZE PERFORMANCE Test Performance Plan Capacity Issues Diagnose Problems Tune Go No-Go LINK TO PRODUCTION HP Software Quality Modell HP Quality Center TestDirector für Quality Center Organisation and Struktur für Qualitätsprozesse Zentrale Kontrollinstanz für alle Testing Assets 8 3 November 2008

9 Enterprise Architektur Weblösung J2EE Technologie Internet Offene API Anpassbare Workflows Hochverfügbarkeitsunterstützung 3rd Party Synchronisierung Unterstützte Umgebungen Applikationsserver Quality Center Instanz Filesystem Repository Testskripte Anlagen Windows, Solaris, AIX, Linux VMware, Citrix Weblogic, Websphere, Jboss, IIS Oracle, SQL Server Datenbankserver Quality Center Projekte 9 3 November 2008

10 Nachverfolgung unterschiedlicher Requirements-Typen kompletter und verifizierbarer Requirements der Requirements- Abhängigkeiten Analyse der Auswirkungen eines Requirement Changes Nutzung existierender Assets in MS Word Requirements Kompletter Requirements-Lifecycle BUSINESS Requirements QUALITÄTS Planung BUSINESS PROZESSE TEST DEFECTS 10 3 November 2008

11 Abschätzung des Requirements - Risikos Automatische Kalkulation des Testaufwandes Optimierung der Testfall- Abdeckung Risikobasierte Qualitätsplanung Umfassende Risikominimierung Ein Vertrag zwischen dem Business und dem Qualitätsteam BUSINESS Requirements QUALITÄTS Planung QUALITÄTS-VERTRAG TEST Manageme nt DEFECTS

12 von Releases und Zyklen Nachverfolgung der Fortschritte des aktuellen Release und Abgleich gegenüber den Planungen Visibilität der Release Qualität und des Release Zustandes bzgl. der Freigabe Vergleich der Releases und Zyklen für die kontinuierliche Prozess- Verbesserung Nachverfolgung des Release Fortschrittes und der Qualität BUSINESS Requirements Release und Zyklen QUALITÄTS Planung BUSINESS PROZESSE TEST Reporting DEFECTS Dashboards 12 3 November 2008

13 Test Optimierung des Testzyklus Zentrale Verwaltung aller Test Assets Entwurf, Erstellung, Planung und Ausführung von Tests Entwurf und Erzeugung manueller und automatisierter Tests ohne Skripts (Framework) Anpassbare Testausführung Verwaltung von Testumgebungen BUSINESS Reqiirements und zeitgesteuerte Remote Ausführung QUALITÄTS Planung BUSINESS PROZESSE TEST DEFECTS 13 3 November 2008

14 Defect Ermittlung von fehleranfälligen Komponenten und SDLC Phasen N:M Verknüpfungen zwischen Verfolgung Defekten und Tests, Test Sets, Test Instanzen und Requirements Speicherung von DefektÄnderungen für lückenlose Dokumentierung und Verbesserungsanalyse von Defekten über den vollen QA-Zyklus QUALITÄTS Planung BUSINESS PROZESSE BUSINESS Anpassbarer Defect WorkflowRequirements und automatische Benachrichtigung TEST DEFECTS 14 3 November 2008

15 Reporting und Analyse Nachverfolgung des Release Fortschrittes und der Qualität Qualitätsanalyse und Visibilität für die Entscheidungsträger Anpassbare Qualitätsreports und Graphen Analyse der Durchführung von Live tests Dokumentengenerator Release und Zyklen QUALITÄTS Planung BUSINESS PROZESSE BUSINESS Requirements TEST Reporting DEFECTS Dashboards 15 3 November 2008

16 Dashboard Nachverfolgung des Release Fortschrittes und der Qualität Qualtiäts-Dashboard und wichtige Performance Indikatoren Übergreifende Projekt-Indikatoren in Echtzeit Visibilität für die Entscheidungsträger Anpassbare Business Logik eingebettet in die KPIs Personalisierte Sichtweisen Release und Zyklen QUALITÄTS Planung BUSINESS PROZESSE BUSINESS Requirements TEST Reporting DEFECTS Dashboards 16 3 November 2008

17 HP TestDirector für Quality Center Business Analysten Yes 17 QA Team Team Applikationsbetrieb SI oder Berater UAT Test Director für Quality Center No X Nutzen durch automatisierte Echtzeit-Metriken ermitteln X Verbesserung der Effizienz durch Zusammenarbeit und bessere Wiederverwendbarkeit 0 X Kostensenkung durch Zentralisierung der Infrastruktur und des Supports X Erfasst, schützt und teilt das Wissen und die Erfahrungen und erhält somit den Nutzen auch bei Veränderungen in den Teams 3 November 2008

18 Quality Center Erweiterungen Business Process Testing / Change Impact Testing For SAP QA TestLab Service Test For SOA ServiceTest QA Inspect Center OTA / Synchronizer API 18 3 November 2008

19 HP Quality Center HP Quality Center Dashboard Center Test Director for Quality Center Requirements Definition (add-on) Requirements Functional Testing QuickTest Professional Business Process Testing Risk-based Test Release Security Testing SAP BPT for SAP Change Impact Testing QAInspect Defect QA Lab (add on) SOA Testing Service Test Service Test Foundation Shared data repository 19 3 November 2008 Central administration Workflows Open APIs

20 Funktionales Testen Beim Funktionalen Testen als Teil des SDLC wird eine Anwendung zum ersten Mal auf Abdeckung der Business Requirements überprüft Funktionales Testen beinhaltet somit die Validierung der Eigenschaften einer Anwendung hinsichtlich Ihrer Implementierung, Vollständigkeit und Fehlerfreiheit Anwendung Requirements Business Anwender 20 3 November 2008? = Anwendung Funktionalität Qualitätssicherung

21 Wie kann funktional getestet werden? Manuell Enge Testfenster und Resourcenmangel Zeit Begrenzte IT Resourcen kombiniert mit straffen Projektplänen verhindern häufig die Durchführung eines kompletten Testzyklus Entwickler replizieren Defekte manuell Effizienz Kosten Risiko 21 Tester und Entwickler reproduzieren Defekte manuell, nicht synchronisiert, haben erhöhten Zeitaufwand und testen möglicherweise nicht auf die glöeiche Weise Automatisiert Ablaufgesteuerte automatisierte Testausführung Schnelle Testausführung spart Zeit und ermöglicht der Qualitätssicherung, Projektziele zu erreichen Automatische Defektreplizierung erhöht Genauigkeit Ermöglicht der Entwicklung die einfache Nachvollziehbarkeit von Softwareproblemen Testen in verschiedenen Umgebungen Umfangreicher Umgebungssupport Unvollständige Testabdeckung bei manueller Regression Komplette Testplanabdeckung Das Testen von Anwendungen in verschiedenen Umgebungen (OS, Browser, Patchlevel, ) ist nur schwer umsetzbar Manuelle Regressionstests können aus Zeitgründen häufig nur unvollständig durchgeführt werden 3 November 2008 Ein einzelner automatisierter Test kann unmodifiziert über unterschiedliche Browser, Entwicklungsumgebungen, Betriebssysteme, ablaufen Komplette Testzyklen können jederzeit über alle Releases, Patches,. durchgeführt werden

22 Vorteile durch automatisiertes Testen: Schnelle Ausführung von Geschäftsprozessen Umfangreiche Umgebungs- und Testplanabdeckung Exakte Problemreproduktion Platformen 1 Intel Betriebssysteme 6 Windows XP, Windows Vista, Citrix, Win NT 4, Win 2003 Clients 4 Internet Explorer 6, Netscape 6, Java, Visual C++ Geschäftsprozesse 5 Login, Suche, Auftragseingabe, Auftragsbestätigung, Auslieferung Datenpools 15 Kombination aus unterschiedlichen Benutzernamen, Passwörtern, Suchbegriffen, Bestellnummern, Lieferdaten Total tests to run: 1, November 2008

23 HP QuickTest Professional Erstellung und Wartung von Tests ohne Skripten 23 3 November 2008

24 Unterstützte Umgebungen HP QuickTest Professional Classic Custom C/S Powerbuilder Delphi PowerBuilder 9,10,10.5,11 ERP/CRM Peoplesoft windows Siebel 5, 6 GUI clients Oracle GUI Forms 24 3 November 2008 Common Web-related environments IE, Netscape JDK, Java foundation classes, AWT ActiveX Custom client server Windows/Win32 Visual basic Stingray Visualage smalltalk ERP/CRM Oracle: 11i JD Edwards web client Legacy 3270, 5250 emulators, Vt100 Operating systems Windows 2000, Windows 2003, XP, Vista, Vista (64bit) Emerging ERP/CRM SAP Siebel 7.X and 8.X Peoplesoft 8.X Oracle 12i.Net WPF from.net 3.0 Winforms Webforms HTC/Viewlink Delphi 8.NET winforms Ajax-Web Extensibility Web services Macromedia flex Wireless Java SWT Citrix VMWare desktop support Mozilla Firefox 2.0, 3.0

25 Business Process Testing (BPT)

26 HP Quality Center HP Quality Center Dashboard Center Test Director for Quality Center Requirements Definition (add-on) Requirements Functional Testing QuickTest Professional Business Process Testing Risk-based Test Release Security Testing SAP BPT for SAP Change Impact Testing QAInspect Defect QA Lab (add on) SOA Testing Service Test Service Test Foundation Shared data repository 26 3 November 2008 Central administration Workflows Open APIs

27 Funktionale Testkomponenten Erfolgreich testen Login Bestellung ablehnen Keine BestellBedingungen Eingabe der Bestellung Functionaler Test Pfad Beispiel Net 30 Einholen der Rechnungs-Nr. (via Webservice) Barzahlung Durchführung der Kundeninformation Auslieferung Auslieferung Artikel Abgleich der Inventardaten 27 3 November 2008 Finanzen Hauptbuchhaltung

28 Traditionelles Testen Test: Löschen einer Bestellung Test: Bestellung Aktualisieren Login Login Bestellung suchen Bestellung suchen Bestellung löschen Bestellung aktualisieren Bestellung anschauen Bestellung anschauen Bestellung anschauen Logout Logout Logout Test: Bestellung erstellen Login Bestellung erstellen 28 3 November 2008

29 HP Business Process Testing Aufwand für Testaufbau und Wartung um >50% reduzieren Anmelden Bestellung erstellen Bestellung Initiieren Bestellung anschauen Bestellung suchen Bestellung löschen Testdaten 29 3 November 2008 Bestellung löschen Bestellung aktualisieren Abmelden Bestellung aktualisieren

30 Synchronisieren von Test Assets für Changes durch zentralisierte Business Komponenten a a Test aktualisiert Test aktualisiert Ticket Order komplettieren Test 1 Test 4 a Test aktualisiert Test November 2008 a Test aktualisiert a Aktualisierter Testverlauf Test 3

31 Aufwands- und Nutzenanalyse Messung des ROI Aggregierter Aufwand (Stunden) 900 Manuell Typischerweise 3 Testzyklen innerhalb eines Upgrades 800 Traditionelle Automation BPT Framework Automation Beschleunigtes Testen ROI innerhalb 2 Testzyklen Traditionelle Automation ROI innerhalb 6 Testzyklen 31 3 November # der Testzyklen Aufwand (Stunden) (Annahme: 35 Business Prozesse)

32 Vergleich der Testmethoden Projektstart Aplikation verfügbar Manuelles Testing Dokumentieren der Testschritte Automatisierung Dokumentieren der Testschritte Business Prozess Testing (manuell und automatisiert) Erstellung des Component flow Durchführung und Analyse der Tests Aufzeichnung der Tests BPT manuell Automatis. Projektende AutomateTestlauf Automat. Durchführung und Analyse der Tests Modifikation der Tests Modifikation der Tests Modifikation Modify tests der Tests Durchführung Modifikation und Analyse der Tests der Tests Testfälle, Parameter, etc. werden gebaut bevor die Applikation verfügbar ist Tests werden früher ausgeführt und Defekte früher erkannt Reduzierung der Zeit für die Pflege/Wartung 32 3 November 2008

33 Marktführerschaft von HP Software Mercury (acquired by HP) obviously is the uncontested leader in the distributed ASQ tools market. HP has best-in-class capabilities across the board Forrester, 2008 IDC, 2007 HP 60% Others 4.8 % Borland 4.8 % IBM (Rational) 15.8% Empirix 5.1 % Compuware 6% Worldwide Distributed Automated Software Quality Tools Forecast and 2006 Vendor Shares, IDC 2007 Source: Source. The Forrester Wave : Functional Testing Solutions, Q3 2008

34 News Quality Center

35 Forward-looking statements This document contains forward looking statements regarding future operations, product development, product capabilities and availability dates. This information is subject to substantial uncertainties and is subject to change at any time without prior notification. Statements contained in this document concerning these matters only reflect Hewlett Packard's predictions and / or expectations as of the date of this document and actual results and future plans of Hewlett-Packard may differ significantly as a result of, among other things, changes in product strategy resulting from technological, internal corporate, market and other changes. This is not a commitment to deliver any material, code or functionality and should not be relied upon in making purchasing decisions November 2008

36 HP Quality Center 10.0 Versionierung Versionsverwaltung von Requirements und Tests

37 HP Quality Center 10.0 Versioning Historie zu jeder Version von Requirements und Tests

38 Versionierung Baselining Erfassen von Baselines Verwalten von Baselines Vergleichen von Baslines bzgl. Änderungen Nutzen von Baselines für neues Projekt

39 HP Quality Center 10.0 Process Enablement Erstellen von Projekten über Templates

40 HP Quality Center 10.0 Process Enablement Konfigurieren von Projekttemplates

41 HP Quality Center 10.0 Process Enablement Steuerung von Projekteigenschaften über Templates Data Mart SAP Template Template Portal Billing China Rollout

42 HP Quality Center 10.0 IT Initiativen IT Initiativen ändern das Testvorgehen für Applikationen SAP Phase 1 CRM Portal Data Mart SAP Phase 2 CRM Integration China Rollout Billing Portal Data Mart Billing Data Mart Testen steht nicht mehr im Kontext zu einer einzelnen Applikation QA ist verantwortlich für end-to-end Validierung pro Initiative

43 HP Quality Center 10.0 Gemeinsame Nutzung von Assets Library: Nutzung von Tests und Requirements SAP Phase 1 CRM Portal Data Mart SAP Phase 2 CRM Integration China Rollout Billing Portal Data Mart Billing Data Mart Data Mart Shared Library Requirements, Tests Requirements Tests Defects

44 HP Quality Center 10.0 Gemeinsame Nutzung von Assets Library: Nutzung von Defects SAP Phase 1 CRM Portal Data Mart SAP Phase 2 CRM Integration China Rollout Billing Portal Data Mart Billing Data Mart Data Mart Shared Defects Requirements Tests Defects

45 Was kommt in QTP 10.0 Neue und angepasste Technologien Delphi & Office support Test Asset Versionierung in Quality Center Testscript Vergleich Gemeinsame Nutzung von Testasset in Quality Center Nutzung von Object Repository, Function Libraries und Recovery Scenarios Performance Messung

46 Vielen Dank!