Business Intelligence for Software Development. Von der Qualitätsmessung zur Prozess-Optimierung für Software-Entwicklungs-Projekte

Transkript

1 Software Quality Objectives Rating for Evaluation Business Intelligen for Software Development Von der Qualitätsmessung zur Prozess-Optimierung für Software-Entwicklungs-Projekte

2 Softwareprojekte Softwareprojekte: - 87% überschreiten den Termin - 56% überziehen das Kostenbudget - 45% liefern nicht die erwarteten Resultate - benötigen aufwändige Pflege und Nachbesserungen Kosten = 60 Milliarden $ jährlich alleine in den USA ( : National Institute of Standards and Technology) 15/05/2012 SQuORING Confidentiel 2

3 CMMI Support Level 5 Optimizing 4 Quantitatively Managed 3 Defined 2 Managed 1 Initial Focus Continuous pross improvement Quantitative management Pross standardization Basic project management Pross Areas Organizational Innovation and Deployment Causal Analysis and Resolution Organizational Pross Performan Quantitative Project Management Requirements Development Technical Solution Product Integration Verification Validation Organizational Pross Focus Organizational Pross Definition Organizational Training Integrated Project Management Risk Analysis Integrated Teaming Integrated Supplier Management Decision Analysis and Resolution Requirements Management Project Planning Project Monitoring and Control Supplier Agreement Management Measurement and Analysis Pross and Product Quality Assuran Configuration Management 15/05/2012 SQuORING Confidentiel 3

4 Qualitätskontrolle & Prozessoptimierung Qualitätskriterien festlegen Produzieren Messen Ausreißer erkennen und behandeln Artefakte & Projekt(e) statistisch bewerten Prozessdaten aggregieren und korrelieren Prozesse optimieren 15/05/2012 SQuORING Confidentiel 4

5 Offene und umfassende Plattform Design Models Requirements Test Coverage Problem Reports - Change Requests User Defined Checklists Optimized Remediation Plan SQuORE Evaluation Engine Dashboards & Reporting SQuORE Server SQuORE DataBase Data Analysis & Modeling 15/05/2012 SQuORING Confidentiel 5

6 Normen- und regelkonform ISO/IEC EN ISO/IEC Ihr Firmen- Standard HIS Metrics SQuORE Evaluation Engine ECSS HandBook DO 178B ISOIEC : Software Product Quality ISO/IEC : Software Product Evaluation ISO/IEC : Software Measurement Pross 15/05/2012 SQuORING Confidentiel 6

7 -Qualität messen und bewerten QUALITY MODEL HIERARCHY INPUT DATA EVALUATION F I N A L Configuration Management Tool Nb of Commit Nb of Bugs R A T I N G Analyzer Cyclomatic < 15? Comment Ratio > 25%? Penalty ANALYSIS MODEL - ARTIFACT PROPAGATION (Function, Class, File, Folder, Application) 15/05/2012 SQuORING Confidentiel 7

8 Entwicklungsumgebung einbinden SDLC Tool Repository Extraction Script Base Measures (CSV, XML, txt) Data Provider Analysis Model (XML files) Dashboard (XML files) Extraction Script Development Data Provider Development Indicator(s) Specification KPI Specification 15/05/2012 SQuORING Confidentiel 8

9 Entwicklungsumgebung einbinden ClearCase Repository What about PR/CR Tracking KPIs? SQL Script Maturity Index : Nb. PR New Nb. PR Open Nb. PR Closed Config.tcl Analysis Model (XML files) Dashboard (XML files) PR Closed / Total PR Extraction Script Development Data Provider Configuration Indicator(s) Specification KPI Specification 15/05/2012 SQuORING Confidentiel 9

10 Entwicklungsumgebung einbinden Rational DOORS What about Requirement Management KPI? Doors View DXL Script Requirement Stability Index Nb. Requirement Nb. Changed Req. Doors DP Tcl script Weekly Analysis Model (XML files) Dashboard (XML files) Req. Unchanged / Total Reqs Extraction Script Development Data Provider Development Indicator(s) Specification KPI Specification 15/05/2012 SQuORING Confidentiel 10

11 Datenfluss im SDLC Change Mgnt. Conf. Mgnt. Coding Mantis Jira ClearQuest SVN GIT, MKS ClearCase Pc-Lint QAC LDRA Testbed CheckStyle Rule Checking GCOV Junit RTRT Test - V&V 15/05/2012 SQuORING Confidentiel 11

12 Dashboard Aufgliederung der Qualitätscharakteristika Güteverteilung der Artefakte Objektive, neutrale Bewertung Abweichungen und Vorhersagen Versionsübergreifende Trendanalyse 15/05/2012 SQuORING Confidentiel 12

13 Die Akteure Entwicklungsleitung Entwicklungsleitung auf Geschäftsführungsebene Projektleitung Misst den Projektfortschritt. Antizipiert die Auswirkungen von Entscheidungen Entwickler Verifiziert die Qualität seines produzierten s Übersichtliche Entdeckt und behebt Nicht- Informationen zur Konformitäten Prozessoptimierung Fortlaufende Information zur Prozessqualität Alle Projekte auf einen Blick Echtzeit Ressourn- Optimierung Direkter & objektiver Feedback Qualitätsmanagement Etabliert best practi -Ansätze Institutionalisiert die Prozesse Tester Zulieferer Sichert die Einhaltung der geforderten Qualitätsmerkmale Auditor Evaluiert die Konformität von Produkt und Prozess Definiert die Teststrategie und führt diese aus. 15/05/2012 SQuORING vertraulich 13 zu. Dokumentiert automatisch Projektqualität Zeitersparnis durch Rechnergestützte Audits Optimale Teststrategie bezogen auf den Projektstand

14 Testen viele sich ergänzende Techniken funktional / strukturell Black box / white box statisch / dynamisch präventiv / konstruktiv 15/05/2012 SQuORING vertraulich 15

15 Aber in einem Punkt herrscht Konsens It is not nessary to speculate or guess about high quality vs. low quality. I have data on about 13,000 projects and the high-quality projects have shorter schedules and lower costs than low-quality projects of the same size and type. Finding and fixing bugs costs more than 50 nts out of every development dollar for low quality projects; less than 30 nts out of every development dollar for high-quality Projects Finding and fixing bugs takes about 40% of the schedule of low quality projects vs. less than 25% for high quality projects. Capers Jones im Februar 2012 in linkedin / Static Analyzers group 15/05/2012 SQuORING vertraulich 16

16 Planung der Tests Teststrategie wird primär nach Projekt-anforderungen und Risikoanalysen festgelegt Budget- und Zeitbeschränkungen erfordern oft Anpassung des idealen Testplans an die realen Gegebenheiten Der Testprozess erfordert also eine fortlaufende Abwägung von Entwicklungsfortschritt, Terminsituation und geforderten Produkteigenschaften 15/05/2012 SQuORING Confidentiel 17

17 Prioritäten setzen Ist ein Ausfall von X schlimmer als ein Ausfall von Y? In Bezug auf: Gefahr für Menschenleben, möglichen Umweltschäden, wirtschaftlichen Verlusten,... X Y 15/05/2012 SQuORING vertraulich 18

18 Fragen zur Bestimmung der Priorität Einschränkungen im Betrieb (Echtzeit, Speicher, C/S,...) Platz in der Architektur Aufwand für Testarbeiten Kritikalität Komplexität Häufigkeit der Ausführung Art der Fehler und deren Häufigkeit Lage der früheren Mängel X Y 15/05/2012 SQuORING vertraulich 19

19 Überblick hilft entscheidend SQuORE kann alle für die Beurteilung eines Projektes hilfreichen Artefakte sammeln und korrelieren Artefakte werden anhand eines Qualitäts- und Entscheidungsmodelles bewertet Aus der Bewertung resultieren konkrete Handlungsvorschläge griffige Entscheidungshilfen 15/05/2012 SQuORING Confidentiel 21

20 Anpassbare Testempfehlungen 15/05/2012 SQuORING Confidentiel 22

21 Testen oder zuvor aufräumen? Kontrollgraph durch statische Analyse Redundanter? Copy / Paste? Ungeschickte Strukturierung? 15/05/2012 SQuORING vertraulich 23

22 Optimierungskriterien (Bsp.) Entscheidung über nächste Tests und Verschönerungsarbeiten : Testabdeckung, HIS Complian und Architekturgüte (A-G) Test abgeschlossen, keinen Aufwand in HIS-complian und Architekturgüte stecken Als nächstes Testen Test erst später 15/05/2012 SQuORING Confidentiel 24

23 Auswirkungen der Tests auf Projektplan Frühwarnsystem: kann Entwicklung die erzeugten PR/CR schnell genug abarbeiten? Verläuft der Trend so, wie aus früheren erfolgreichen Projekten bekannt? 15/05/2012 SQuORING Confidentiel 25

24 Zusammenfassung Voll konfigurierbar, offene Schnittstellen Einheitliches SQuORE «label» für verschiedene Projekte Leistungsindikatoren nach Maß gemäß Ihrem Standard Schnelle Umsetzung aus dem Unternehmen heraus Aggregation aller Projekt-relevanten Daten Ein kooperatives Umfeld, bessere Kommunikation 15/05/2012 SQuORING Confidentiel 26

25 Nutzen Objektive Bewertung: der Softwarequalität der Leistungsfähigkeit der Prozesse Gemeinsame und einvernehmliche Sicht aller Projektbeteiligten Zeitnahe Projektübersicht Gesicherte a priori Entscheidungen Verbessertes Risikomanagement Mittelfristig leistungsfähigere und reifere Prozesse Gesteigerte Produktivität. Optimierte Steuerung von Softwareprojekten Schneller am Markt mit besserem Produkt 15/05/2012 SQuORING Confidentiel 27

26 The SQuORE Kick Start Package Specifying the Software Quality Model Specifying the Software Analysis Model Specifying the User Roles & Groups Specifying the Dashboard Configuring SQuORE Calibrating the Models on Samples of Projects Integrating SQuORE into the Development Environment Customizing the Project Creation Wizard Customizing the Data Providers Automating SQuORE launching Training a Group of Users 15/05/2012 SQuORING Confidentiel 28

27 Unsere Kunden 15/05/2012 SQuORING Confidentiel 30

28 Fragen / Antworten 15/05/2012 SQuORING Confidentiel 31