10 things I wished they d told me! aktuell. innovativ. praxisbezogen.

Transkript

1 10 things I wished they d tod me! aktue. innovativ. praxisbezogen.

2 SEQIS 10 things Programm Kritische Erfogsfaktoren und agie Projekte Last- und Performancetest: Jetzt! Das Internet der Dinge (IoT): Der nächste QA Paradigmenwechse, garantiert! Coaborative Documentation: Mit just enough zu mehr Nachhatigkeit

3 Last- und Performancetest: Jetzt! Martin Widbacher Principa Test Consutant

4 Wieso Last- und Performancetest? BerühmteBeispieefür Server-Überastungen: Spritpreis Datenbank Diaboo Appe Bank Austria

5 Last- und Performancetest Setup und Prozess Benutzer & Appikation Internet / WAN / LAN Firewa Load Baancer Web/Appication Server Datenbanken SEQIS Software Testing GmbH

6 Design & scripting Szenario Konfiguration, Durchführung & Monitoring (Controer) Resutatanayse

7 Benutzer & Appikation Last- und Performancetest Setup und Prozess Internet / WAN / LAN Firewa Load Baancer Web/Appication Server Datenbanken Last generieren Script ersteen Auswirkung messen Szenario panen Ergebnis anaysieren SEQIS Software Testing GmbH

8 1. Nehmen Sie auch bei einem LPT den Datenschutz nicht auf die eichte Schuter

9 Nur die wichtigsten Anwendungsfäe (ink. Häufigkeit & Think Times)

10 2. Verproben Sie die Antworten bereits zu Beginn Definieren Sie konkrete Ziee Definieren Sie Kennzahen

11 Viee verschiedene Personen invoviert

12 3. Binden Sie rechtzeitig Experten mit ein Performance ist ein kompexes Gebiet Späte Quaitätssicherung ist teuer Nutzen Sie Best Practices und die Erfahrung von Profis

13 4. Machen Sie einen PoC... das bringt Sicherheit und spart Zeit

14 5. Achtung bei 3rd Party-Services zb Facebook Googe Anaytics Stichwort: (D)DoS-Angriff

15 6. Panen Sie mehrere Iterationen Pro Testiteration wird übicherweise immer nur ein Probem gefunden Pro Iteration immer nur eine Veränderung machen... das kostet Zeit

16 Benutzer & Appikation Anforderungen an Toos (Simuation, Monitoring & Anayse) Internet / WAN / LAN Firewa Load Baancer Web/Appication Server Datenbanken 1. Script ersteen 2.2 Last generieren Auswirkung messen 2.3 Szenario panen 3. Ergebnis anaysieren SEQIS Software Testing GmbH

17 Design & scripting Basisanforderungen Szenario Konfiguration, Durchführung & Monitoring (Controer) Resutatanayse

18 Design und Scripting 1. Script Editor Scriptsprache IDE Recording Debugging Error Handing Dynamische Parameter Response Verifikation und Extraktion Transaktionen Init/Action/End Protokoe... Web (HTML/HTTP) SOAP Citrix AJAX RDP SAP Orace Com/Dcom AFP TCP/IP

19 Szenario Konfiguration, Durchführung & Monitoring 2. Controer Fexibiität der Szenarien Skaierbare und fexibe Last Steuerung separater Lastgeneratoren Monitore Antwortzeiten Load: Hits/s, Throughput/s OS: Linux, Windows, Soaris... DB: SQLServer, Orace, MySQL,... App.Server: Tomcat, JBoss, Apache aber Echtzeit!

20 Resutatanayse 3. Root Cause Anayse Fitermögichkeiten Graphische Auswertungen Reportersteung Customizing des Reports Große Datenmengen Datenimport

21 Lasttestwerkzeuge Open Source Apache Jmeter The Grinder OpenSTA Gating... Kommerzie Neotys NeoLoad HP LoadRunner Microsoft Sikperformer Radview IBM Rationa Performance Tester Visua Studio Loadtest Browsermob/Neustar (GUI)...

22 7. Wähen Sie ein Too mit Echtzeitmonitoring...das ae Ihre Komponenten unterstützt...sonst wird eine vernünftige Anayse sehr schwer

23 Microservices

24 Microservices Impizieren verteite Systeme Viee Remote ProcedureCas (RPCs) Potentiee Probeme: Netzwerk-Latenzzeit Unzuverässige Netzwerke Wechsende Last in den Appikations-Tiers Lastverteiung Viee Prozesse auf Server

25 Microservices Performancetest von Microservices: Microservices einzen testen Abhängigkeiten untereinander kennen Achtung bei externen MS Test der Integration in App

26 Internet ofthings

27 Internet ofthings Herausforderungen Rea-Time Entscheidungen notwendig Anzah der unterschiedichen Devices Unterschiediche Einsatzbedingungen Bandbreite, Packet oss,... Anzah geichzeitiger Verbindungen...

28 Internet ofthings Meist TCP, UDP, Websockets Peer 2 Peer Protokoe (zb Z-Wave, ZigBee) Passendes Too Protoko-Unterstützung Bandbreiten-Beschränkung Latenzsimuation Vorgehen wie bei Standard -LPT

29 8. Sichern Sie Ihre Investition ab

30 LPT Trends Lasttest über das GUI Vorteie: Scripte meist einfacher und schneer zu ersteen Protoko-KnowHow nicht notwendig Nachteie: Fexibiität Stabiität Errorhanding schwierig Weniger Virtuee Benutzer pro Lastgenerator

31 LPT Trends Einbetten in Continuous Integration Stichwort Profiing Buid to Buid -Vergeich Trend-Charts

32 9. Nutzen Sie die passenden Toos Gehen Sie davon aus, dass Sie für Performance Engineering zumindest zwei Toos verwenden werden.

33 10. Starten Sie JETZT Ihren nächsten Last- und Performancetest!

34 Zusammenfassung 1. Nehmen Sie auch bei einem LPT den Datenschutz nicht auf die eichte Schuter 2. Verproben Sie die Antworten bereits zu Beginn 3. Binden Sie rechtzeitig Experten mit ein 4. Machen Sie einen PoC 5. Achtung bei 3rd Party-Services 6. Panen Sie mehrere Iterationen 7. Wähen Sie ein Too mit Echtzeitmonitoring 8. Sichern Sie Ihre Investition ab 9. Nutzen Sie die passenden Toos 10.Starten Sie JETZT Ihren nächsten Last- und Performancetest! 34

35 Last- und Performancetest: Jetzt! Martin Widbacher Principa Test Consutant

36 SEQIS 10 things Programm Kritische Erfogsfaktoren und agie Projekte Last- und Performancetest: Jetzt! Das Internet der Dinge (IoT): Der nächste QA Paradigmenwechse, garantiert! Coaborative Documentation: Mit just enough zu mehr Nachhatigkeit

37 10 things I wished they d tod me! aktue. innovativ. praxisbezogen.