Testdokumentation. Theorie vs. Praxis

Transkript

1 1 Testdokumentation Theorie vs. Praxis

2 SEQIS 10 things I wished they d told me Was bisher geschah... Open Source Testautomationstools in der Projektpraxis Agiles Testmanagement am Beispiel SCRUM Testmanagement mit externen Partnern Software unter Druck: Erfolgsfaktoren bei Last- und Performancetests... Veranstaltung versäumt? Nutzen Sie unsere Rückblicke (Downloads)!

3 SEQIS 10 things I wished they d told me Unser Wissensangebot für 2011: Nicht zuviel und nicht zuwenig: Testdokumentation Theorie vs Praxis Abweichungsmanagement: Probleme hat doch jeder... ( ) Lasst Roboter arbeiten: Oberflächentestautomation im Fokus ( ) Testdesign für Automationsskripte ( )

4 Testdokumentation Theorie vs. Praxis Dipl. Inf. Josef Fojdl Leitung SEQIS Consulting

5 Motivation Softwaretestdokumentation Josef Fojdl 5

6 Einstufung der Testdokumente Softwaretestdokumentation Josef Fojdl 6

7 Minimale Testdokumentation Softwaretestdokumentation Josef Fojdl 7

8 SEQIS Kurzvorstellung 8

9 Minimale Testdokumentation Softwaretestdokumentation Josef Fojdl 9

10 Minimale Testdokumentation Softwaretestdokumentation Josef Fojdl 10

11 Minimale Testdokumentation Softwaretestdokumentation Josef Fojdl 11

12 1. Dokumentieren Sie immer die Testdurchführung! Nachvollziehbar Kommunizierbar Wiederholbar Softwaretestdokumentation Josef Fojdl 12

13 Erweiternde Dokumente Softwaretestdokumentation Josef Fojdl 13

14 Basis der Testdokumentation Softwaretestdokumentation Josef Fojdl 14

15 Basis der Testdokumentation Softwaretestdokumentation Josef Fojdl 15

16 Basis der Testdokumentation Softwaretestdokumentation Josef Fojdl 16

17 2. Achten Sie darauf die Information zu erhalten! Workshops mit Anwendern und Stakeholdern Bewusste Ablage: Filestore, Tool Softwaretestdokumentation Josef Fojdl 17

18 Testkonzept nach IEEE Testplan Nr. 2. Einführung 3. Zu testendes System und Testobjekte 4. Qualitätsmerkmale, die getestet werden 5. Qualitätsmerkmale, die nicht getestet werden 6. Teststrategie 7. Testendekriterien 8. Abbruchkriterien und Wiederaufnahmebedingungen 9. Dokumente und Berichtswesen 10. Testaufgaben 11. Testumgebung 12. Zuständigkeiten 13. Mitarbeiterprofile und Schulungsmaßnahmen 14. Zeitplan 15. Risiken 16. Genehmigungen Softwaretestdokumentation Josef Fojdl 18

19 3. Halten Sie Ihr Konzept möglichst schlank! Fangen Sie frühzeitig mit der Planung an Laufende Anpassung der Planung an Änderungen Binden Sie das Team mit ein Softwaretestdokumentation Josef Fojdl 19

20 Schaden Risikomatrix Eintrittswahrscheinlichkeit Niedrig Mittel Hoch Niedrig A B C Mittel B C D Hoch C D E Softwaretestdokumentation Josef Fojdl 20

21 Schaden Quellen für Priorisierung über Risiko Schaden Analysen Anwender/Stakeholder Komplexität der Lösung Architekten Entwickler Eintrittswahrscheinlichkeit Niedrig Mittel Hoch Niedrig A B C Mittel B C D Hoch C D E Softwaretestdokumentation Josef Fojdl 21

22 Priorisierung über Fragen Einstufung der Funktionalität Katastrophal Schwer Neutral Ignorierbar Auswirkungen eines Ausfalls für Ihre Arbeit? Auswirkungen eines Ausfalls für Ihr Unternehmen? Auswirkungen eines Ausfalls auf Kunden? Softwaretestdokumentation Josef Fojdl 22

23 Priorisierung über Fragen Einstufung der Funktionalität Katastrophal Schwer Neutral Ignorierbar Auswirkungen eines Ausfalls für Ihre Arbeit? Auswirkungen eines Ausfalls für Ihr Unternehmen? Auswirkungen eines Ausfalls auf Kunden? Softwaretestdokumentation Josef Fojdl 23

24 4. Priorisieren Sie, zumindest nach Optional/Mandatory! Kommunikation des Risikos Einschätzung des Teststandes Reagieren auf Zeitknappheit Softwaretestdokumentation Josef Fojdl 24

25 Optimierung der Testdokumente Softwaretestdokumentation Josef Fojdl 25

26 Softwaretestdokumentation Josef Fojdl 26

27 Softwaretestdokumentation Josef Fojdl 27

28 Softwaretestdokumentation Josef Fojdl 28

29 Softwaretestdokumentation Josef Fojdl 29

30 Softwaretestdokumentation Josef Fojdl 30

31 DO 178 B -> MC/DC DIN EN > SSAS FDA-535 IEEE IEEE 829 ISO Softwaretestdokumentation Josef Fojdl 31

32 Softwaretestdokumentation Josef Fojdl 32

33 5. Stellen Sie sich auf Ihre Umwelt ein! Test wird immer getrieben und somit auch die Dokumentation 6. Konservieren Sie die Testdokumentation! Nachziehen von Änderungen Aufarbeitung der Reste Softwaretestdokumentation Josef Fojdl 33

34 Testfallaufbau Templates erstellen Softwaretestdokumentation Josef Fojdl 34

35 Die Testschritt Schablone Geben Sie in das Feld Username den Wert SEQIS ein, danach geben Sie in das Feld Password den Wert SEQIS ein und klicken anschließend auf den Button Login, um sich am System anzumelden Softwaretestdokumentation Josef Fojdl 35

36 Die Testschritt Schablone <Befehl> <Attribut> <Operation> <Wert> Softwaretestdokumentation Josef Fojdl 36

37 Die Testschritt Schablone <Befehl> <Attribut> <Operation> <Wert> SET GET VER Softwaretestdokumentation Josef Fojdl 37

38 Die Testschritt Schablone <Befehl> <Attribut> <Operation> <Wert> SET GET VER z.b. Username Softwaretestdokumentation Josef Fojdl 38

39 Die Testschritt Schablone <Befehl> <Attribut> <Operation> <Wert> SET GET VER z.b. Username = <> >= <= Softwaretestdokumentation Josef Fojdl 39

40 Die Testschritt Schablone <Befehl> <Attribut> <Operation> <Wert> SET GET VER z.b. Username = <> >= <= Feldwert z.b. SEQIS Boolesche TRUE FALSE Softwaretestdokumentation Josef Fojdl 40

41 Die Testschritt Schablone <Befehl> <Attribut> <Operation> <Wert> SET Username = SEQIS Softwaretestdokumentation Josef Fojdl 41

42 Die Testschritt Schablone <Befehl> <Attribut> <Operation> <Wert> SET SET Username Password = = SEQIS SEQIS Softwaretestdokumentation Josef Fojdl 42

43 Die Testschritt Schablone <Befehl> <Attribut> <Operation> <Wert> SET SET SET Username Password Login = = = SEQIS SEQIS TRUE Softwaretestdokumentation Josef Fojdl 43

44 Testfallaufbau Templates erstellen Aufbau der Testfälle in Modulen Softwaretestdokumentation Josef Fojdl 44

45 Modularer Testfallaufbau Softwaretestdokumentation Josef Fojdl 45

46 Modularer Testfallaufbau Softwaretestdokumentation Josef Fojdl 46

47 Softwaretestdokumentation Josef Fojdl 47

48 Mod_Login SET = <var_ > SET Password = <var_pass> SET Login = TRUE Softwaretestdokumentation Josef Fojdl 48

49 Mod_Login Mod_Auswahl SET = <var_ > SET Password = <var_pass> SET Login = TRUE SET <var_auswahl>= TRUE Softwaretestdokumentation Josef Fojdl 49

50 Mod_Login SET = <var_ > SET Password = <var_pass> SET Login = TRUE Mod_Auswahl SET <var_auswahl>= TRUE Mod_Profile VER = <var_ > VER 2 = <var_ > VER First = <var_firstname> Softwaretestdokumentation Josef Fojdl 50

51 Weitere Tipps Softwaretestdokumentation Josef Fojdl 51

52 7. Optimieren Sie die Testfallerstellung! durch modularisieren und Templates Softwaretestdokumentation Josef Fojdl 52

53 Minimale Kosten nach Juran J.M. Juran s Quality Control Handbook, Third Edition (New York: McGraw Hill, 1979) p Softwaretestdokumentation Josef Fojdl 53

54 Kosten Kostenkurven der Dokumentation Durchführungskosten Minimum Dokumentationskosten 100% Qualität der Dokumentation Softwaretestdokumentation Josef Fojdl 54

55 8. Beachten Sie die Kosten Ihrer Dokumentation! So viel wie nötig, so wenig wie möglich Bauen Sie auf Dokumente die Ihren Prozess unterstützen Softwaretestdokumentation Josef Fojdl 55

56 Testtools für Testmanagement Softwaretestdokumentation Josef Fojdl 56

57 Testtools für Testautomation Softwaretestdokumentation Josef Fojdl 57

58 Testtools für Last- und Performance Softwaretestdokumentation Josef Fojdl 58

59 9. Setzen Sie auf das richtige Tool! Tool für Ihre Anforderungen und Ihren Prozess Ab einem gewissen Reifegrad Gezielte Toolauswahl Softwaretestdokumentation Josef Fojdl 59

60 Einstufung der Testdokumente Softwaretestdokumentation Josef Fojdl 60

61 10. Erweitern Sie Ihre Dokumentation von innen nach außen! Achten Sie auf die Basics die Nutzbarkeit und Wirtschaftlichkeit Softwaretestdokumentation Josef Fojdl 61

62 1. Dokumentieren Sie immer die Testdurchführung 2. Achten Sie darauf die Informationen zu erhalten 3. Halten Sie Ihre Konzepte möglichst schlank 4. Priorisieren Sie, zumindest nach Optional/Mandatory 5. Stellen Sie sich auf Ihre Umwelt ein 6. Konservieren Sie die Testdokumentation 7. Optimieren Sie den Testfallaufbau 8. Beachten Sie die Kosten Ihrer Dokumentation 9. Setzen Sie auf das richtige Tool 10. Erweitern Sie Ihre Dokumentation von innen nach außen! Softwaretestdokumentation Josef Fojdl 62

63 Ich freue mich auf Ihre Fragen! Softwaretestdokumentation Josef Fojdl 63

64 Nächste SEQIS 10 things Nicht zuviel und nicht zuwenig: Testdokumentation Theorie vs Praxis Abweichungsmanagement: Probleme hat doch jeder... ( ) Lasst Roboter arbeiten: Oberflächentestautomation im Fokus ( ) Testdesign für Automationsskripte ( )