ES GIBT EIN LEBEN NACHCI!

Transkript

1 ES GIBT EIN LEBEN NACHCI! DEVOPS, CONTINUOUSDELIVERY& CO RUDOLFE. GROETZ, HEAD OFQA, JUMIOINC 1

2 Wer zum Teufel ist Jumio? 2

3 Kennen sie diese Fragen? - Ist der neue Build schon getestet? - Ich brauch eine neue Testumgebung, wer kann mir eine anlegen? - Wo kann ich den Release Candidate testen? - Ist das neue Feature IE7 kompatibel? - Warum geht die Test3nicht? - Auf welcher Umgebung kann ich dem Kunden das Feature zeigen?

4 Typische Antwort Ähhh..? 4

5 System Test Strategien 1.) Am SprintEnde durch das Scrum-Team Sprint 1 Sprint 2 Sprint 3 2.) Nach dem SprintEnde durch ein externes QA-Team Sprint 1 Scrum-Team arbeitet bereits am neuen Sprint Sprint 2 Sprint 3 3.) Eigener Hardeningsprint Sprint 1 Sprint 2 Hardening 4.) Continuous System Test während des Sprints Sprint 1 Sprint 2 Sprint 3 = Systemtests 5

6 Die Gretchen Frage Ist unsere Testautomation und unsere Systemteststrategie geeignet um unseren Anforderungen gerecht zu werden? 6

7 Jumio System Test Strategie ) Continuous System Test während des Sprints Sprint 1 Sprint 2 = Systemtests Sprint 3 7

8 Potentially shippable? 8

9 Jumio DoD Alle Testumgebungen wurden als Infrastructure as a code gehandhabt - Ein risikobasierter Systemtest fand permanent während der Entwicklung statt - Ein risikobasierter Systemtest hat auf PREPRODmit dem Release Candidate stattgefunden (P4 liefern 3x in Folge kein rotes Ergebnis) - Ein explorativer manueller Systemtest hat auf PREPROD mit dem Release Candidate stattgefunden - Alle Blocker oder Criticals wurden vom PO bewertet (genehmigt/abgelehnt)

10 Das Buch - Vorteile von Continuous Delivery - Empowering Teams - Reducing Error - Lowering Stress - Deployment Flexibility - Practice makes Perfect - Reduce concept to cash time 10

11 Prinzipien unserer Continuous Delivery Pipeline - Deploy the same artifact to every environment - Keep everything in version control (Infrastructure as a code) - Use Testfixtures to setup test data - Automate almost everything - Make results visible to everyone 11

12 Die JUMIO Continuous Delivery Pipeline SourceCode Env/App Cfg DEV QA Diversity OPS Commit Acceptance Performance Preprod OPS Deployment Auf Knopfdruck Customer QA selbstgesteuertes Deployment X-UAT Production Artifact Artefactory repository 12

13 Die JUMIO Continuous Delivery Pipeline SourceCode Env/App Cfg DEV TDDQA Diversity OPS Commit BDD CDD Acceptance Performance Preprod OPS Deployment Auf Knopfdruck ATDD Customer BDTD? QA selbstgesteuertes Deployment X-UAT Production Artifact Artefactory repository 13

14 Die JUMIO Continuous Delivery Pipeline SourceCode Env/App Cfg QA DEV BUILD Diversity OPS Commit DEPLOY Acceptance Performance Preprod OPS Deployment Auf Knopfdruck TEST Customer DESTROY QA selbstgesteuertes Deployment X-UAT Production Artifact Artefactory repository 14

15 Jumio DoD Alle Testumgebungen wurden als Infrastructure as a code gehandhabt - Ein risikobasierter Systemtest fand permanent während der Entwicklung statt - Ein risikobasierter Systemtest hat auf PREPRODmit dem Release Candidate stattgefunden (P4 liefern 3x in Folge kein rotes Ergebnis) - Ein explorativer manueller Systemtest hat auf PREPROD mit dem Release Candidate stattgefunden - Alle Blocker oder Criticals wurden vom PO bewertet (genehmigt/abgelehnt)

16 Gestatten: Test Engineer, System Test Engineer! 16

17 Was bedeutet Systemtest? The question a system test attempts to answer is: Does the product operate the way a user would expect and produce the desired results? 17

18 JumiUM - Spock - Gebish - Webdriver - Chameleon Grid - Webdriver Grid - Appium - UI-Automation - Robotium - Jenkins 18

19 Jenkins Testaspect Grooming 19

20 P1 P4 Admin Backend Story neues Feature entsteht -Acc. Crit 1 Neuer Code Admin Frontend P1 Story Acc. Tests -Acc. Crit 2 1 bestehendes Feature muss angepasst werden -Acc. Crit 3 Client Geänderter Code P3 Story System Tests Regression P2 Story Acc. Tests Regression P4 System Tests Regression 20

21 Test Aspects -Web 21

22 Movie Time 22

23 Die Antwort auf die ultimative Frage "How long would it take your organization to deploy a change that involves just one single line of code? Mary Poppendieck 23

24 Die Antwort auf die ultimative Frage "How long would it take your organization to deploy a change that involves just one single line of code? Mary Poppendieck 462min 24

25 Die Antwort auf die ultimative Frage "How long would it take your organization to deploy a change that involves just one single line of code? Mary Poppendieck 462min/11(Personen)=?? 25

26 Die Antwort auf die ultimative Frage "How long would it take your organization to deploy a change that involves just one single line of code? Mary Poppendieck 462min/11(Personen)= 42 26

27 Flakey Test 27

28 Antwort auf ihre ultimativen Fragen? 28

29 DONE 29