Testen von Software. Erfahrungsbericht des INGTES Testcenters. von Ueli Tribelhorn

Transkript

1 Testen von Software Erfahrungsbericht des INGTES Testcenters von Ueli Tribelhorn

2 Testen von Software Testziele Aus der Praxis Fundamentale Qualitätskriterien tskriterien Ausbildung zum Tester Erfahrungsbericht aus dem INGTES Testcenter Seite 2

3 Begriffe was ist ein Defekt? ein Programmfehler (Ursache) was ist eine Fehlerwirkung? ein Nichterfüllen einer Anforderung eine Abweichung zum Sollverhalten Testen zeigt nur die Anwesenheit von Fehlerwirkungen, nie die Abwesenheit von Defekten Erfahrungsbericht aus dem INGTES Testcenter Seite 3

4 Testziele Fehlerwirkungen finden aufzeigen von: Funktionalität Zuverlässigkeit Benutzbarkeit Vertrauen schaffen Erfahrungsbericht aus dem INGTES Testcenter Seite 4

5 Tätigkeiten im Testcenter Setup Kit ausführen Systemtest durchführen hren Resultate besprechen Erfahrungsbericht aus dem INGTES Testcenter Seite 5

6 Systemtests praktisch? Wer soll testen? Ein unabhängiger ngiger Tester + ist unvoreingenommen, hat eher die Sicht des Kunden + behandelt das Programm als Blackbox - kennt das Projekt nicht im Detail, braucht Einarbeitungszeit Erfahrungsbericht aus dem INGTES Testcenter Seite 6

7 Infrastruktur Tests unter den Bedingungen des Kunden ausführen Testrechner mit Images für f r gängige g Betriebssysteme Win 98, ME, NT Win 2000 Professional Win XP Home/Professional Win 2000/2003 Server Linux Virtual Machines? Erfahrungsbericht aus dem INGTES Testcenter Seite 7

8 Testbasis? was liegen für f r Dokumente vor? Anforderungsspezifikation mit Testkriterien Pflichtenheft (ohne Testkriterien) Änderungsanforderung (Legacy Software) Erfahrungsbericht aus dem INGTES Testcenter Seite 8

9 Dokumentation? was wurde getestet? Testprotokoll, abgefasst in Word das Testprotokoll zeigt auf: was wurde getestet, was nicht wie läuft l ein Test ab (Reproduzierbarkeit) was wurden für f r Resultate erzielt Erfahrungsbericht aus dem INGTES Testcenter Seite 9

10 Testprotokoll (1) Referenz auf die Testbasis 1 Dokument-Leitfaden 1.1 Referenzierte Dokumente [1] O:\Projekte\ABB Switzerland Ltd\Scriptgenerator\Dokumente\Scriptgenerator ECScad-ASP.doc [2] O:\Projekte\ABB Switzerland Ltd\Scriptgenerator\Dokumente\Scriptgenerator ECScad-Abnahme.doc [3] O:\Projekte\ABB Switzerland Ltd\Scriptgenerator\Releases\R _V1.1\ReleaseNotes.doc Identifikation des Prüflings und allfälliger lliger Komponenten 2 Testobjekt ABB ECScad Release 1.3 (Build 1683) Erfahrungsbericht aus dem INGTES Testcenter Seite 10

11 Testprotokoll (2) Identifikation der Testumgebung (Pattform, beteiligte Software-Komponenten 4 Testumgebung 4.1 Konfigurationen K1: DIAGNOSTIX unter Win 2000 Pro SP4 deutsch mit DOTNET Framework 1.1 eng, MDAC 2.6 eng, EXCEL 2000 deu (CD Box 5/1363) K2: DIAGNOSTIX unter Win XP SP2 deutsch mit DOTNET Framework 1.1 eng, EXCEL 2000 deu Erfahrungsbericht aus dem INGTES Testcenter Seite 11

12 Testprotokoll (3) Beschreibung der Testschritte und Resultate AK1-02 Anmelden mit einem ungültigen Benutzer - Tritt beim Anmelden ein Fehler auf, soll eine verständliche Fehlermeldung kommen. - Testen: Fehlermeldung bei ungültigen DB-Connection-Parametern. - Testen: Fehlermeldung bei unbekanntem Benutzer. - Testen: Fehlermeldung bei abgelaufenem Benutzer. - Testen: Fehlermeldung bei abgelaufener Programmversion. Erfahrungsbericht aus dem INGTES Testcenter Seite 12

13 Testprotokoll (4) Statistische Fehlerauswertung (QMS) 6 Statistik Erfahrungsbericht aus dem INGTES Testcenter Seite 13

14 Testprotokoll (5)? wenn Fehler auftreten? klassieren reproduzieren Okay 1 Unstimmigkeit 2 unerheblicher Mangel 3 schwerwiegender Mangel kommunizieren Erfahrungsbericht aus dem INGTES Testcenter Seite 14

15 Wann ist das Testen beendet? alle Testkriterien sind abgearbeitet Risiko der nicht getesteten Anforderungen ist klein wirtschaftliche Rahmenbedingungen (Kosten, Zeit) Erfahrungsbericht aus dem INGTES Testcenter Seite 15

16 Fundamentale Qualitätskriterien tskriterien! Sie müssen m nicht alle Details spezifizieren! jede Applikation hat eine Versionsnummer Fehlermeldungen sind in der Sprache der Applikation Bei einer Fehleingabe wird das fehlerhafte Eingabefeld bezeichnet Listen und Comboboxen sind sinnvoll sortiert System reagiert auf eine Bediener-Aktion (Sanduhr, ProgressBar, )... Erfahrungsbericht aus dem INGTES Testcenter Seite 16

17 Ausbildung? wie werde ich Tester? Ausbildungs-Lehrg Lehrgänge als Software Tester: Foundation Level Advanced Level Expert Level Technical Tester Functional Tester Test Manager Links International: Schweiz: testing-board.ch/ Erfahrungsbericht aus dem INGTES Testcenter Seite 17

18 Fazit verbessertes Qualitätsbewusstsein tsbewusstsein weniger fehlerhafte Software ausgeliefert Nebenprodukt: Fundamentale Qualitätskriterien tskriterien Erfahrungsbericht aus dem INGTES Testcenter Seite 18