Wir testen mobile Apps und Webseiten. Wir nennen das Crowdtesting.

Transkript

1 Wir testen mobile Apps und Webseiten. Wir nennen das Crowdtesting. Crowdtesting durch eigene Mitarbeiter: Effizientes Testen von Unternehmenssoftware Markus Steinhauser Marketing & PR Manager Testbirds GmbH

2 Betriebsblindheit Haben Sie wirklich alles getestet? 2

3 Endgerätevielfalt Haben Sie alle Endgeräte? 3

4 Zielgruppenrelevanz Kennen Sie Ihre Zielgruppe? 4

5 Realität Lehrbuch Ungenügende Tests in der Praxis Termindruck, Personalmangel, weitere Projekte lineare Entwicklung Development Test oder iterative Entwicklung Test Entwicklung Entwicklung Test Release Date(s) Entwicklung Test? 5

6 Inhalt Herausforderungen bei der Entwicklung Wie funktioniert Crowdtesting? Externe Crowd vs. interne Mitarbeiter Sicherheit & Geheimhaltung Typische Fehler 6

7 Wie kommt es dazu? Unzureichende QA, Marktanalyse, Zeit Betriebsblindheit Klappt alles!... Wirklich? Unvoreingenommene Nutzer testen anders. Endgerätevielfalt Haben Sie alle? Zielgruppenrelevanz Zielgruppe hat andere Erwartungen/Fähigkeiten als angenommen. Ressourcenmangel Termindruck, Personalmangel, weitere Projekte 7

8 Ablauf eines Projekts Rahmenbedingungen festlegen Was ist das Ziel des Tests? Welche Anforderungen müssen die Tester erfüllen? Auf welchen Geräten/Betriebssystemen soll getestet werden? Gibt es konkrete Fragestellungen? 8

9 Ablauf eines Projekts Crowdtesting Kunde mit neuer Software Projektmanager 1 erarbeiten Briefing 2 wählt aus & betreut Crowd-Plattform 3 Testen mit eigenen Geräten 4 sichert Qualität 7 analysiert und erstellt Abschlussbericht inkl. Handlungsempfehlungen 6 5 Testprotokolle & Bugs/Defects schreiben Testprotokolle legen Bugs/Defects an Live Tracking des Projektfortschritts 9

10 Ablauf Projektmanager als zentrale Anlaufstelle Vorbereitung Intensive Beratung/Consulting durch unsere Testing Spezialisten bzw. Usability Experten Definition des Testprojekts auf Basis des Briefings Selektion der Tester und der Geräte 2. Testdurchführung Testkoordination Qualitätssicherung der Testberichte und eingereichten Bugs inkl. Duplikatsbereinigung Direkter Ansprechpartner Sprachrohr in die Crowd 3. Nachbereitung Zusammenfassung der Ergebnisse Ableitung von Handlungsempfehlungen Durchschnittliche Dauer 1 4 Stunden 3 5 Tage 1 2 Tage Projekt innerhalb einer Woche abgeschlossen! 10

11 Interne oder externe Tester Wer soll testen? Consumer- oder Enterprise Software? Einfache oder komplexe Anwendung? Bedienung durch Jedermann oder Spezialisten? 11

12 Tester & Geräte Die Crowd deckt alle Zielgruppen und Endgeräte ab Zielgruppen Zertifizierte Tester Spezialisten Unterschiedliche Testing- Erfahrung Studenten, Mütter, Führungskräfte, ISTQB CAT (Certified agile Tester) Testmanager Projektmanager IT Systeme (ERP, CRM) ecommerce (Administratoren) Domänenwissen (Medizin, Vertrieb, Ingenieure) und viele mehr Endgeräte und Systeme Sämtliche Kombinationen aus Geräten, Browsern und Betriebssystemen Mobile: ios, Android, Windows Phone (8), Blackberry OS, Desktop: Windows, Mac OS, Linux, FF, IE, Safari, Chrome, Opera, Facebook Apps, Rich Client-Anwendungen, reguläre Desktop Software u.v.m. Geräte nicht im Lab, sondern unter realen Bedingungen: zu Hause, U-Bahn, beim Einkaufen, Tester in verschiedenen Ländern: D/A/CH, UK, US, NL, HU und viele weitere 12

13 Tester & Geräte Woher kommen die Tester? Externe Crowd Testplattform Interne Mitarbeiter 13

14 Die Möglichkeiten Ein dreigegliedertes Lösungsportfolio für jeden Testingbedarf Bug Testing Usability BugAbility Test Cases (strukturiert) Use Cases (explorativ) Flat-Rate-Option Prototypen Beta Tests Wettbewerbs- Analyse End-to-end Bug + Usability 14

15 Bedenken Datenzugriff und Geheimhaltung Ist das denn überhaupt sicher? 15

16 Sicherheitsmaßnahmen Die Crowd ist zur Verschwiegenheit verpflichtet Allgemeine Geschäftsbedingungen (verpflichtend) Verschwiegenheitsvereinbarung (NDA) (auf Kundenwunsch) Jeder Tester muss die allgemeinen Geschäftsbedingungen akzeptieren, wenn er sich bei Testbirds anmeldet. Diese verpflichtet die Tester zur Verschwiegenheit bei allen Projekten. Kann von den Testern auf Wunsch des Kunden unterschrieben werden. Verpflichtet die Tester zur Verschwiegenheit bei bestimmten Projekten. Interne Regelung für Mitarbeiter 16

17 Typische Fehler Lesbarkeit 17

18 Typische Fehler Ansicht 18

19 Typische Fehler Anzeige von Bildern 19

20 Typische Fehler Abgeschnittene Grafiken 20

21 Typische Fehler Rechtschreib- und Tippfehler 21

22 Wie hilft mir das? Das Zusammenspiel aus Projektmanagement, Plattform und Crowd Betriebsblindheit Unvoreingenommene Tester Endgerätevielfalt Geräte Zielgruppenrelevanz Soziodemographische Auswahl Ressourcenmangel Ad-hoc verfügbar 22

23 Kunden Genutzt in sämtlichen Branchen Mithilfe von Testbirds konnten wir unsere DocWallet App vor dem Release sehr flexibel auf Bugs und Usability testen. Überzeugt haben uns vor allem die professionelle Zusammenarbeit sowie die Möglichkeit, auf sämtlichen Systemen und mit unserer Zielgruppe zu testen. Marco Hauprich, Senior Vice President Mobile & New Media Deutsche Post AG 23

24 Ende Vielen Dank für Ihre Aufmerksamkeit! Fragen? Testbirds GmbH Guerickestraße München 24