APPLAUSE 360 L Ö S U N G E N F Ü R Q U A L I T Ä T

A G E N D A 1 Über Applause Knzept 3 Wie funktiniert es 4 Anwendungsgebiete 5 Fallstudien

The Challenge 1

F A K T E N Ü B E R A P P L A U S E 4 G e s c h i c h t e d e r F i r m a 007 Gegründet 00 Mitarbeiter Zwei Jahre hintereinander auf der Frbes Rangliste für die Mst Prmising Cmpanies. Dieses Jahr auf Platz #7 vn 100 Platz #16 vn 5.000 auf der Inc. Liste der am schnellsten wachsenden Unternehmen für 01 und Platz 300 im Jahr 013 60 Millinen Finanzierung Vielzahl vn Analyst-Reprts zu ROI und Tauglichkeit des Knzeptes vn Applause - IDC, Frrester, Gartner Ggle, Facebk, Amazn, BMW, Deutsche Telekm und Adidas arbeiten mit Applause seit mehreren Jahren Allianz mit IBM für Technlgie-Lösungen

F A K T E N Ü B E R A P P L A U S E 5 E r f l g s g e s c h i c h t e d e r I N - T H E - W I L D M e t h d e 140.000 Prfessinelle Tester weltweit 0.000 Tester in DACH 150 aktive Länder 350.000 Angemeldete Test-Geräte 40.000 Versinen getestet 1.000.000 Bugs gefunden.000 Unternehmen weltweit haben IN-THE-WILD Testing in ihre QA Przesse integriert Ggle testet alle neuen Versinen Ihrer Prdukte 4/7 in 30 verschiedenen Ländern

The Challenge Das Knzept

D AD S A S A PA P LP AL UA SU E S E K OK NO ZN EZ PE TP T 1 Te s t i n g - S e r v i c e s S D K - C r a s h and B u g r e p r t s 3 A p p s t r e - A n a l y t i c s 140.000

The Challenge Wie funktiniert es? 3

W I E F U N K T I O N I E R T E S? 1. P l a t t f r m 9 4/7 Zugriff auf Ergebnisse Integratin zu Jira, Redmine, Bugzilla etc. Echtzeit Chat mit den Testern Crash details und Screenshts pr Bug Überwachung Testfrtschritt Autmatisierte Sanity-Checks

W I E F U N K T I O N I E R T E S? 1. P l a t t f r m 10

W I E F U N K T I O N I E R T E S?. C m m u n i t y 13 3-5 Jahre QA Erfahrung (Durschnitt) Evaluierungsprzess neuer Tester Bug-Bewertung und Tester-Ranking (Brnze Silver, Gld) Eigenes Team aufbauen. 10-15 Tester pr Test nehmen Teil Fähigkeiten, Geräte, Demgraphie Eigene Test-Akademie für die Weiterbildung vn Testern Organisierte Cmmunity Treffen weltweit

W I E F U N K T I O N I E R T E S? 3. P r j e k t M a n a g e m e n t 14 1 Dedizierter Prjektmanager Dedizierter Testmanager Interner Mitarbeiter Single Pint f Cntact QA Experte aus der Cmmunity Analyse aktueller Przesse Einbindung vn ITW Testing in aktuelle Strukturen Hat sich durch Ranking und QA Erfahrung qualifiziert Verantwrtlich für die Tester-Kmmunikatin Erstellung eines Testplanes und Testfallkatalges Aufnahme des jeweiligen Testfkus, gewünschte Geräteabdeckung, Tester-Prfile Erstellung und Betreuung der Testzyklen Verantwrtlich für die Ergebnisse + Erster Kntaktpunkt der Tester 4/7 Überprüft jeden einzelnen Bug auf: Fkus Duplikate Reprduzierbarkeit Dafür verantwrtlich, dass alle übergebenen Bugs wertvll sind

W I E F U N K T I O N I E R T E S? 4. Te s t p r z e s s Applause Bug-Fixes vm Kunden werden Überprüft Sicherstellung der Release-Fähigkeit Kunde Bewertet die validierten Bugs Rücksprache mit Testern Exprt der Ergebnisse Applause TTL und PM Überprüfen alle Bugs Stellen sicher, dass alle Bereiche getestet wurden 6 Bewertung Ergebnisse 7 RE-Test Bug-Fixes 5 Validierung der Bugs 4 TESTING 1 Neue Versin Testfkus 3 Test- Erstellung Applause Cmmunity (10-15 Tester) Führt Testfälle durch Sucht explrativ nach Bugs Trägt Bugs auf Plattfrm ein Kunde Übergabe einer neuen Versin alle Wchen Kunde und Applause Festlegung neue Funktinen Benötigte Geräte, Standrte, Sprachen Neue Testfälle Applause Erstellung des Testcycles Einladung und Briefing der Tester 15

The Challenge Einsatzgebiete 4

E I N S A T Z G E B I E T E 1 3 4 B e s c h l e u n i g u n g E n t w i c k l u n g G e r ä t e a b d e c k u n g M ä r k t e a b d e c k u n g + A n w e n d u n g s f ä l l e F l e x i b l e T e i l - A u s l a g e r u n g d e r QA 1 Testing über die Nacht der das Wchenende Ausführung aller Testfälle innerhalb weniger Stunden durch mehrere Tester 3 Aufbau eines dedizierten Teams, welches die Prdukte und Anfrderungen kennenlernt 4 Verfügbarkeit innerhalb weniger Stunden 1 Überprüfung neuer Features auf allen angefrderten Geräten. Regelmäßige Geräteabdeckung standardmäßig vr jedem Release 3 Über 140.000 Tester mit 300.000 registrierten Geräten 1 134 Testmanager in 4+ Ländern. Tester sind in über 150 Ländern vertreten. Funktinales Testing standardmäßig vr jedem Release auch in den Zielmärkten durchführen. 3 Testing drt w die Anwendung verwendet wird. (Aut, U-Bahn, Ländliche Gebiete, Flughafen etc) 1 Erstellung vn Testplänen und Einführung passender Przesse Erstellung und Instandhaltung vn Testfällen. Management aller Test-Suites. 3 On-Site Ressurcen für kmplizierte Testszenaris der Testmanagement 17

The Challenge Fallstudien 5

1 Internet Firma (800+ Mitarbeiter) Aufbau einer QA-Organisatin Testteam aus 0 Testern, Testautmatisierungsexperten, On-Site Testmanagement Anwendungsgebiete: Funktinalität und Usability Te s t - S e t u p Z i e l e Testteam aus 10-15 Testern ausgewählt nach Geräteanfrderungen On-Site QA-Engineer zur Bestandsaufnahme und Przessimplementierung Kntinuierliche Unterstützung vn Testmanagern und Prjektmanagern Untersuchung der aktuellen Przesse und Testpläne Überprüfung der Testabdeckung und Qualität der bestehenden Unit-Tests 1 Einführung vn Qualitätssicherungsprzesse innerhalb des Entwicklungsprzesses nach Best Practice. Reduzierung des Testingaufwandes für das Prduktmanagement 1 Erhöhung der Testabdeckung durch regelmäßige Testzyklen mit der Applause Cmmunity Einführung einer Basisabdeckung durch autmatisierte Tests für Regressinstesting 3 Erstellung und Instandhaltung der Autmatisierungscripts 19

VIP Telekmmunikatin (1.600+ Mitarbeiter) Durchführung vn kmplizierten Testszenarien 100 Tester in 0 verschiedenen Ländern (Eurpa, Süd Amerika, Asien, Arfrika) mussten 15.000 Anrufe an einem Wchenende durchführen. Anwendungsgebiete: Funktinalität und Usability Te s t - S e t u p Z i e l e Ergebnisse 100 Testers haben teilgenmmen 0 Länder abgedeckt (Japan, Singapre, Thailand, Mexic, Süd Krea, Australien, Deutschland, Frankreich ) Die Testers mussten drei VIP Apps installieren und nacheinander testen&vergleichen. 8 call sets mussten durchgeführt werden Nach jedem Set mussten detailierte Fragebögen ausgefüllt werden 1 3 4 Untersuchung der Knnektivität und audi Qualität Überprüfung Verfügbarkeit(Stadt / Land / U-Bahn) Einfluss vn verschiedenen Verbindungstypen (Öffentliches Wifi, Netzwerk Anbieter etc.) Vergleich der Prdukte zu Mitbewerbern 1 3 4 5 15.000 krdinierte Anrufe wurden durchgeführt 9 vn 8 Call Sets knnten nicht durchgeführt werden 73 UX Umfrage-ergebnisse eingereicht 1 kritische App defects entdeckt 10 Knnektivitätsprbleme aufgedeckt 0

3 Teleknferenz Industrie (350+ FTE) Wöchentliche Qualitätskntrllen vr neuen Releases (seit 36 Mnaten) 0-100 Tester in 10 verschiedenen Ländern (Eurpe, Nrth America, Asia) führen wöchentliche Testsessins vn 1- Stunden durch Anwendungsgebiete: Funktinalität Te s t - S e t u p G a l s a n d C h a l l e n g e s R e s u l t s 0-100 Tester nehmen wöchentlich teil. 10 Cuntries cvered (Prtugal, Schweden, Tunesien, Ukraine, Philippinen ) Die Sessins bestehen aus terminierten Telefnknferenzen zwischen allen Testern weltweit Die Tester müssen sich mit je drei verschiedenen Geräten einwählen. 1 3 4 Einführung eines knsistenten Qualitätslevel, welches jede Wche überprüft wird. Schnelle Reaktin auf Fehler durch neue Features der Betriebssystem anpassungen Sicherstellung der Kernfunktinalität durch Regressinstesting Untersuchung der Qualität der Telefnknferenzen auf verschiedenen Platfrmen (Mac, Windws, Andrid, ios) 1 3 5.60 Testfälle insgesamt ausgeführt 18 entdeckte Fehler wurden vm Kunden als Exceptinally valuable der very valuable markiert 470 gefundene Fehler wurden insgesamt vm Kunden behben 1

4 Sftware Industrie (15.000+ Mitarbeiter) Permanente Überprüfung neuer Zahlungssysteme 500 Tester in 8+ Ländern. Tägliche weltweite Durchführung vn Transaktinen mit mehreren Zahlungssystemen. Anwendungsgebiet: Funktinalität Te s t - S e t u p Z i e l e Ergebnisse R e s u l t s 500 Testers Invlviert Kernteam aus 100 Testern 8 Länder abgedeckt Testing frtlaufend seit 1 Mnaten Testing vn neuen Zahlungssystemen Durchführung vn Transaktinen, Aufladung vn Guthaben, Abbuchungen, Käufe 1 Verifizierung der Kmpatibiltät vn neuen Zahlungssystemen mit weltweiten Standards Überprüfung des Zusammenspiels mit anderen Zahlungssystemen- Systemen wie PayPal, Visa, MasterCard etc. 1 3 5.000 Testfälle durchgeführt 54 entdeckte Fehler wurden vm Kunden als Exceptinally valuable der Very valuable markiert 84 Fehler insgesamt gefunden, die im Anschluss behben wurden

Vielen Dank Trsten Meyer Sr. Directr EU Channel & Marketing Tel: 0049/30 60980948 tmeyer@applause.cm 3