ISO 29119: Die neue Normenreihe zum Softwaretest

Transkript

1 Embedded & Software Engineering ISO 29119: Die neue Normenreihe zum Softwaretest technik.mensch.leidenschaft Dr. Richard Kölbl, März 2017 DIN EN ISO 9001

2 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 2 technik.mensch.leidenschaft Agenda Agenda l Was ist die Normenreihe ISO/IEC/IEEE 29119? l Braucht Softwaretesten eine Norm? l Inhalte der Norm bis 4 l Positive Effekte beim Einsatz der Norm l Wo und warum sich Agil und Norm nicht beißen sollten

3 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 3 technik.mensch.leidenschaft Was ist die Norm 29119? Was ist die Norm ISO / IEC / IEEE Software Testing? l Es ist eine Normenreihe zum Thema Softwaretest. l Norm / Standard: Systematisch konsolidierte Sammlung von Erfahrung / Good Practices. l Normen zielen auf Rationalisierung, Kostensenkung, Verständigung - allgemeine Vorteile der Industriegesellschaft. l Normen werden fortlaufend aktualisiert.

4 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 4 technik.mensch.leidenschaft Was ist eine Norm und was ein Standard? Standard und Norm l Norm: Industriestandard nach festgelegtem Normierungsverfahren im Konsens erarbeitet und verabschiedet. l Alles andere ist ein De-facto-Standard, z.b. ISTQB. ISTQB Qualität Testbegriffe Testverfahren Testprozesse Unittest

5 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 5 technik.mensch.leidenschaft Der juristische Aspekt Zu bedenken ist: l Systementwicklung hat immer (latenten) juristischen Aspekt. l Entwicklung: Zulieferungen -> Systemintegration l Verteilte Systeme Normen haben das Potential der Rechtsverbindlichkeit. Normen werden im internationalen Konsens erarbeitet.

6 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 6 technik.mensch.leidenschaft Bestandteile der Norm Bestandteile der Norm l IEEE : Software and systems engineering Software testing Part 1: Concepts and definitions. l IEEE : Software and systems engineering Software testing Part 2: Test processes. l IEEE : Software and systems engineering Software testing Part 3: Test documentation. l IEEE : ISO/IEC/IEEE International Standard for Software and systems engineering--software testing--part 4: Test techniques.

7 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 7 technik.mensch.leidenschaft Basisnormen der ISO/IEC/IEEE Die ISO referenziert: l Basisnorm IEC (SIL): Functional safety of... safety related systems. l Norm ISO (ASIL): ISO schlägt das "Wie" vor. Functional safety - Product development at the software level l Norm ISO/IEC 25000: ISO zu "Code Coverage". SW engineering SW Product Quality Requirements and Evaluation ISO zu Qualitätsmerkmalen.

8 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 8 technik.mensch.leidenschaft Das große... ABER? l Gesetzliche Vorgaben in sicherheitsrelevanten Bereichen. l Software besteht immer mehr aus Fremdmodulen. l Es passiert genug. l Ärgerliche Produkte. l Es wird viel Richtiges gemacht, aber z.b. in der falschen Reihenfolge, z.b. nicht in ausreichender Tiefe.

9 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 9 technik.mensch.leidenschaft Das testerische Denken Denken in: l Testebenen: Zur rechten Zeit am rechten Objekt l Testobjekt Testmittel l Testeffizienz und -sensitivität l Testansätzen, -methodiken, -überdeckungen l TESTERFOLG

10 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 10 technik.mensch.leidenschaft Inhalte der Norm ISO : l Begriffe und Definitionen l Software-Testkonzepte: Einführung in den Softwaretest SWTest im Kontext von Organisation und Projekt Generische Testprozesse im SWLebenszyklus Risikobasierter Test Testpraktiken Testautomatisierung Fehlermanagement

11 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 11 technik.mensch.leidenschaft Inhalte der Norm ISO : Beispiele für Stichwörter l actual results (EXAMPLE) l test coverage item l equivalence partition coverage l organizational test policy l organizational test strategy l retesting l regression testing l test case (!)

12 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 12 technik.mensch.leidenschaft Inhalte der Norm ISO : l Begriffe und Definitionen l Prozesse auf organisatorischer Ebene Testspezifikation des Testmanagements Testkonzepte Teststrategien des dynamischen Tests

13 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 13 technik.mensch.leidenschaft Inhalte der Norm ISO : l Begriffe und Definitionen l Dokumentation der Prozesse auf organisatorischer Ebene Teststrategien Testrichtlinie des Testmanagements Testkonzepte des dynamischen Tests

14 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 14 technik.mensch.leidenschaft Inhalte der Norm ISO : l Begriffe und Definitionen l Dokumentation der Prozesse des dynamischen Tests Testentwurfsverfahren Testspezifikation Anforderungen an Testinfrastruktur Testberichte / -protokolle Fehlerbericht

15 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 15 technik.mensch.leidenschaft Inhalte der Norm ISO : Testverfahren l Grundsätzliches zu Testverfahren l Von Testbedingungen zum Testfall l Testverfahren und Prozesse / Dokumente l Detaillierte Darstellung von Testverfahren

16 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 16 technik.mensch.leidenschaft Inhalte der Norm ISO : Testverfahren

17 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 17 technik.mensch.leidenschaft Zum Einsatz der ISO Investitionsbedarf beim Einsatz der ISO l Gewisse finanzielle sowie zeitliche Investition. l Gewisses Hinein- und Umdenken z.b. Testmerkmal -> Testbedingung -> Testüberdeckung -> Testfall l Aufwand für gezielten Test erhöht sich u.u. l Norm ersetzt weder Schulung noch Erfahrung noch Denken.

18 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 18 technik.mensch.leidenschaft Zum Einsatz der ISO (1) Positive Effekte durch den Einsatz der ISO l Aufwand verschiebt sich auf gezieltere Fehlersuche l Konsistente Anleitung (Begriffe, Verfahren, Anleitungen...) l Effizienter Einsatz dieser Testmethoden und -ansätze l Weniger Fehler in Integration, Feldtest, Rollout l Verbleibende "weiße Fehler" besser eingrenzbar

19 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 19 technik.mensch.leidenschaft Zum Einsatz der ISO (2) Positive Effekte durch den Einsatz der ISO l Testen bekommt professionelle Qualität l Ggf. juristische Absicherung l Kompatibilität zu anderen Produkten, Verfahren, Abteilungen... l Höhere Aussagesicherheit über Qualität / Produktreife l

20 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 20 technik.mensch.leidenschaft ISO und agile Prinzipien Warum sich die ISO mit agilen Prinzipien nicht beißen sollte l Agiles Manifest bzw. Scrum Guide absichtlich schmal gehalten. ISO bietet sich für den Bereich Softwaretest an. l Techniken zur Umsetzung sollen hinzukommen. l T-shaped professionals: Testerwissen verteilen. l Tester müssen аnders denken.

21 Mixed Mixed Mode GmbH Mode GmbH - Ein Unternehmen -- Ein Unternehmen der PIXEL Group der PIXEL Group Folie 21 technik.mensch.leidenschaft Eine Art Fazit Voraussetzung zur Umsetzung der ISO l Bewusstsein dafür, dass Testen eigenständige erfahrungsbasierte theoretisch untermauerte Technik ("Testologie") oder Kunst ("ars probandi") ist, l in der sich Laien durchaus von Professionellen unterscheiden.

22 Mixed Mode GmbH Lochhamer Schlag 17 D Gräfelfing Tel.: +49/89/ Fax: +49/89/ Mixed Mode GmbH Ein Unternehmen der PIXEL Group