Performancetesten im BIT / LZBTI

Größe: px
Ab Seite anzeigen:

Download "Performancetesten im BIT / LZBTI"

Transkript

1 Performancetesten im BIT / LZBTI Swiss Testing Night, Michael Steger BIT und Andreas Elsener [ipt] Innovation Process Technology AG [ipt] Baarerstrasse 63, 6300 Zug, Schweiz

2 Bundesamt für Informatik und Telekommunikation (BIT) Grösster IT-Leistungserbringer der Bundesverwaltung für die IKT-Leistungen der Departemente EFD, UVEK, EDI und der Bundeskanzlei sowie die Büroautomation des EJPD 1100 Mitarbeiter/innen an 5 Standorten Beratung und Unterstützung im Bereich der IT-Unternehmensarchitektur über die Unterstützung bei der Anforderungserhebung von IT-Lösungen bis hin zu deren Realisierung und Betrieb Informatikausrüster von rund Mitarbeiterinnen und Mitarbeitern Betrieb von über 4000 Servern und 1000 Applikationen für den Bund und Dritte Bedienung von knapp 1900 Standorten in der Schweiz und 183 Standorten weltweit mit insgesamt über Netzwerkkomponenten (Switches, Router, Chiffrierboxen, Firewalls) und rund 550 TVA-Systemen Verantwortung für die Vernetzung der Kantone und des Fürstentums Liechtenstein (Betrieb eines Glasfasernetzes von rund 3100 km) 2

3 Testbereich des BIT (LZBTI) Durchführung funktionaler und nicht funktionaler Tests Testen auf der Stufe System-, Fach- und Abnahmetest Automatisierung von funktionalen Tests Erstellung und Durchführung von Performancetests Schulungen und Einführung von Testmethoden Aufbau von Testcentern Bereitstellung von Testinfrastruktur QS Audits Assessments 3

4 Performancetesten im BIT Performanztests Lasttests Stresstests Projekte Aktivitäten - - E-Census (BFS / EDI) Redesign EDB (EZV / EFD) INSIEME (ESTV / EFD) APVS (BAG / EDI) CRM Web Shop (BBL / EFD) Testmanagement Testplanung Testdurchführung Auswertung und Analyse Lead bei Optimierung Audits 4

5 Vorgehen in 10 Schritten Vorbedingungen Testziele Mengengerüste und Schlüsselszenarien Metriken Performancetest-Tools Aufbau Szenarien Performancetest-Umgebung Schritt-für-Schritt-Ausführung Durchführung der Performancetests Analyse, Auswertung und Optimierung 5

6 1. Vorbedingungen LZ / BZ / TK Vorgehen / Konzepte 6

7 1. Vorbedingungen INSIEME 7

8 3. Mengengerüste und Schlüsselszenarien Erfahrung Kunden / Projekte Anforderungen Strukturiert Exploratives Testen (SET) Mengengerüste + Szenarien Performancetests 8

9 3. Mengengerüste und Schlüsselszenarien CRM Web Shop Redesign EDB oder 110 virtuelle Benutzer? 9

10 SET-Methodik Analyse Realisierung / Durchführung Auswertung / Design Bericht Fehlermeldung Testsession Testfall inkl. Ergebnis Testfactory Test Review Entwicklerinformationen Automatisierter Testfall Automatisierter Testlauf 10

11 5. Performancetest-Tools Subversion Automatisierte Reports BV Netz Jenkins SystemMonitore HP QC Testobjekt 11

12 EIS Umgebung EIS stellt integrierte Entwicklungs- und Test-Umgebungen sowie spezialisierte Software für die Applikationsentwicklung zur Verfügung. 12

13 5. Toolwahl: CRM Web Shop Version virtuelle User Virtual Service Environment Version virtuelle User Automatisierte Berichtsgenerierung Loadrunner-Agents in EIS 13

14 5. Toolwahl: INSIEME Tests auf http-protokoll Tests auf DOM Level Aufwändiger zu automatisieren Sehr einfach zu automatisieren Leichtgewichtig Schwerfälliger Gut für Lasttests Gut für Performanztests Last- und Performanztests Beide kombinieren! 14

15 10. Analyse, Auswertung und Optimierung Analyse und Auswertung Optimierung 15

16 Automatisierte Testprotokolle Datenbank: MSSQL Server Testprotokoll /Testbericht Testergebnis in Datenbank Aufbereitung der Daten mit MS Excel Testauswertung Berichtgenerierung mit MS Word basierend auf SQL Query (*.odc) MSSQL DB Tabellen: -Zeitreihen von Metriken -Diagramme (*.xls) Testprotokoll/ Testbericht (HERMES/*.doc) 16

17 Performancetesting IST Kick-Off SOLL Kick-Off Sprint Roll-Out Sprint Roll-Out Verbesserungsansätze - Vermehrt statisch testen => Reviews - Qualitätsverbesserung durch engere Zusammenarbeit (z.b. in Scrum-Teams: Dev. + Test) - Überprüfung der Frontend-Performance 17

18 Fazit Anforderungen Performancetests Abhängigkeiten Kosten 18

AUFBAU EINER TESTORGANISATION

AUFBAU EINER TESTORGANISATION AUFBAU EINER TESTORGANISATION ODER DIE GEISTER, DIE ICH RIEF... Software-Tester Forum Mittwoch, 16. November 2005 SWX Swiss Exchange, Convention Point Zürich Robin Heizmann, CS IT Quality Management 14.11.2005

Mehr

Basiswissen Softwaretest

Basiswissen Softwaretest Andreas Spillner Tilo Linz Basiswissen Softwaretest Aus- und Weiterbildung zum Certified Tester Foundation Level nach ISTQB-Standard 3., überarbeitete und aktualisierte Auflage I Technische l'^vrau«! D~w.-iE*arit

Mehr

Testen II. (Management, Tools) Daniela Rose. Software Engineering Projekt WS07/08 Fachgebiet Softwaretechnik und Systemgestaltung

Testen II. (Management, Tools) Daniela Rose. Software Engineering Projekt WS07/08 Fachgebiet Softwaretechnik und Systemgestaltung Testen II (Management, Tools) Daniela Rose Fachgebiet Softwaretechnik und Systemgestaltung 12.12.2007 Gliederung 1. Motivation 2. Der grundlegende Testprozess 3. Testen im Softwareentwicklungsprozess 4.

Mehr

Testmanagement. Dirk Tesche

Testmanagement. Dirk Tesche Testmanagement Dirk Tesche Agenda Einführung in die Thematik Testarten Testprozess Agile Methoden und Techniken Testautomatisierung Eingrenzung und Motivation Abbildung entnommen aus: www.campero.de Ziele

Mehr

Einführung von Testautomatisierung reflektiert. Erkenntnisse eines Linienmanagers zu Herausforderungen und Fallgruben

Einführung von Testautomatisierung reflektiert. Erkenntnisse eines Linienmanagers zu Herausforderungen und Fallgruben Einführung von Testautomatisierung reflektiert Erkenntnisse eines Linienmanagers zu Herausforderungen und Fallgruben Matt Young Leiter Test Acquiring Inhaltsverzeichnis Einleitung Testautomatisierung PostFinance

Mehr

Ready for Check-in 3 Praxisbericht Flughafen Wien

Ready for Check-in 3 Praxisbericht Flughafen Wien Ready for Check-in 3 Praxisbericht Flughafen Wien DI Susanne Ebm (Flughafen Wien AG) DI Thomas Bucsics (ANECON) Vorstellung DI Susanne Ebm Seit 2009 beschäftigt bei Flughafen Wien AG Seit Mitte 2011 Leitung

Mehr

Kenntnisse: P R O F I L. Dr. Michael Kuß Beethovenstraße 10 50858 Köln. Tel. 0174 / 3234279 e-mail: Michael.Kuss@PerfCon.de

Kenntnisse: P R O F I L. Dr. Michael Kuß Beethovenstraße 10 50858 Köln. Tel. 0174 / 3234279 e-mail: Michael.Kuss@PerfCon.de P R O F I L Dr. Michael Kuß Beethovenstraße 10 50858 Köln Tel. 0174 / 3234279 e-mail: Michael.Kuss@PerfCon.de Alter: 33 Jahre Verfügbarkeit: ab Nov. 2005 Schwerpunkte: Konzeption, Koordination und Durchführung

Mehr

Testmanagement in IT-Projekten

Testmanagement in IT-Projekten Teil 1: Projektmagazin 05/20009 Teil 2: Projektmagazin 06/2009 1 Test: Prozess, bei dem ein Programm oder ein Software-System ausgeführt wird, um Fehler zu finden Teil 1: Projektmagazin 05/20009 Teil 2:

Mehr

Agile Testing. Der agile Weg zur Qualität. von Siegfried Tanczos, Martin Klonk, Richard Seidl, Helmut Pichler, Manfred Baumgartner. 1.

Agile Testing. Der agile Weg zur Qualität. von Siegfried Tanczos, Martin Klonk, Richard Seidl, Helmut Pichler, Manfred Baumgartner. 1. Agile Testing Der agile Weg zur Qualität von Siegfried Tanczos, Martin Klonk, Richard Seidl, Helmut Pichler, Manfred Baumgartner 1. Auflage Hanser München 2013 Verlag C.H. Beck im Internet: www.beck.de

Mehr

Basiswissen Softwaretest

Basiswissen Softwaretest Basiswissen Softwaretest Vergleich der Vorlesung Software-Engineering Wartung und Qualitätssicherung (Stand WS13/14) mit der 4. überarbeiteten und aktualisierten Auflage von Spillner&Linz: Basiswissen

Mehr

Inhalt. 1 Einführungsveranstaltung. 2 Qualität kompakt

Inhalt. 1 Einführungsveranstaltung. 2 Qualität kompakt Inhalt 1 Einführungsveranstaltung 1.1 Ziel der Veranstaltung Warum Qualität? Inhalt der Veranstaltung 1.2 Formaler Ablauf der Veranstaltung 1.3 Übungs- und Gruppeneinteilung 1.4 Bewertungskriterien mittels

Mehr

Testmanagement bei SAP-Projekten

Testmanagement bei SAP-Projekten Testmanagement bei SAP-Projekten Erfolgreich Planen Steuern Reporten bei der Einführung von SAP-Banking von Alberto Vivenzio, Domenico Vivenzio 1. Auflage Springer Vieweg Wiesbaden 2012 Verlag C.H. Beck

Mehr

Projektmanagement-Plan

Projektmanagement-Plan Applikationsentwicklung FS14 Gruppe 20 Horw, 29.05.2014 Bontekoe Christian Estermann Michael Rohrer Felix Autoren Bontekoe Christian Studiengang Informatik - Software Systems (Berufsbegleitend) Adresse

Mehr

Beispiele zu den Arbeitsgebieten. Applikationsentwicklung OO Applikationsentwicklung prozedural

Beispiele zu den Arbeitsgebieten. Applikationsentwicklung OO Applikationsentwicklung prozedural Beispiele zu den Arbeitsgebieten Informatik-Facharbeiten (IPA) beinhalten normalerweise verschiedene Aspekte aus dem breiten Spektrum der Informatiker-Tätigkeit. Je nach Gesichtspunkt lassen sie sich unterschiedlichen

Mehr

Der SAP Solution Manager als Werkzeug für das Projektmanagement. GI RG Düsseldorf. 25.05.2011 Birgit Lankes

Der SAP Solution Manager als Werkzeug für das Projektmanagement. GI RG Düsseldorf. 25.05.2011 Birgit Lankes Der SAP Solution Manager als Werkzeug für das Projektmanagement. GI RG Düsseldorf. 25.05.2011 Birgit Lankes Der SAP Solution Manager als Werkzeug für das Projektmanagement Solution Manager - Überblick

Mehr

Unser Auftraggeber ist einer der vier Global Player in den Bereichen Wirtschaftsprüfung,

Unser Auftraggeber ist einer der vier Global Player in den Bereichen Wirtschaftsprüfung, Case Study Testautomatisierung mit Coded UI Die Aufgabe Unser Auftraggeber ist einer der vier Global Player in den Bereichen Wirtschaftsprüfung, Steuerberatung und Unternehmens- bzw. Managementberatung.

Mehr

Aufbau und Betrieb eines Testcenters

Aufbau und Betrieb eines Testcenters Aufbau und Betrieb eines Testcenters Kaiserslautern, 4. März 2009 Volker Asmus Wer sind wir? ist ein unabhängiges Beratungsunternehmen für Informationstechnologie und Managementberatung mit ca. 200 Mitarbeitern

Mehr

INFINIGATE. - Managed Security Services -

INFINIGATE. - Managed Security Services - INFINIGATE - Managed Security Services - Michael Dudli, Teamleader Security Engineering, Infinigate Christoph Barreith, Senior Security Engineering, Infinigate Agenda Was ist Managed Security Services?

Mehr

Projektstrukturierung und eine maßgeschneiderte Reportinglösung für HP QC

Projektstrukturierung und eine maßgeschneiderte Reportinglösung für HP QC Projektstrukturierung und eine maßgeschneiderte Reportinglösung für HP QC Christian Köster Talanx Systeme AG Test Competence Center Bad Neuenahr 2014 Test Compentence Center (TCC) IT-Architektur TSY-AR.T

Mehr

Software Engineering. 9. Testen

Software Engineering. 9. Testen Software Engineering 9. Testen Gliederung Vorlesung Einführung V-Modell XT Analyse und Anforderungsmanagement Benutzungsoberflächen Architektur Entwurf Entwurfsmuster Persistenz Testen Konfigurationsmanagement

Mehr

Managed Testing Service

Managed Testing Service Managed Testing Service Skalierbare Testleistungen Von der Testtoolbereitstellung bis zum Testing vor Inbetriebnahme Qualitätssicherung von IT Services durch Testing muss verlässlich, transparent und kostenoptimiert

Mehr

Nichtfunktionaler Abnahmetest: Planung, Durchführung und Automatisierung

Nichtfunktionaler Abnahmetest: Planung, Durchführung und Automatisierung Nichtfunktionaler Abnahmetest: Planung, Durchführung und Automatisierung Uwe Hehn TAV Februar 2005 Hochschule Bremen Uwe.Hehn@methodpark.de Abnahmetest: Warum brauchen wir denn so etwas? Projektabnahme

Mehr

Vortrag Entwicklung von Windows Apps. Medical Apps 2013

Vortrag Entwicklung von Windows Apps. Medical Apps 2013 Vortrag Entwicklung von Windows Apps Medical Apps 2013 Helmuth Schob Bernd Lossack MAS Software GmbH Entwicklung Medical Apps Agenda 1. Plattform Windows 8 2. ALM mit TFS 3. Entwicklungs- und Testumgebung

Mehr

Mitarbeiterprofil. Banken, Versicherung, Finanzen, Automotive, IT-Dienstleister Geburtsjahr 1964 Ausbildung Weitere Qualifikationen/ Zertifikate

Mitarbeiterprofil. Banken, Versicherung, Finanzen, Automotive, IT-Dienstleister Geburtsjahr 1964 Ausbildung Weitere Qualifikationen/ Zertifikate Mitarbeiterprofil Josef Fusser Funktion Beratung seit 1987 Senior Consultant Schwerpunkte - und Teilprojektmanagement (+++) Software-Entwicklung und Qualitätssicherung (+++) Testmethodik, Testvorgehen

Mehr

Testprozessverbesserung, wie geht das?

Testprozessverbesserung, wie geht das? Testprozessverbesserung, wie geht das? MSc, Dipl.-Ing.(FH) Markus Rentschler, Head of System Testing Dept., Hirschmann Automation and Control GmbH, Neckartenzlingen 1 Einleitung... 1 2 Was ist Testen?...

Mehr

Risikoidentifikation in der Praxis oder hinterher ist man immer schlauer!

Risikoidentifikation in der Praxis oder hinterher ist man immer schlauer! Risikoidentifikation in der Praxis oder hinterher ist man immer schlauer! Sven Koos Test- und Qualitätsmanager Q-Event Luzern 2012 Agenda Risiken identifizieren, bewerten, verfolgen, publizieren Ausgangssituation

Mehr

1990 Analytiker-Programmierer mit eidg. Fachausweis, Handelsschule KV Basel

1990 Analytiker-Programmierer mit eidg. Fachausweis, Handelsschule KV Basel Personalprofil Martin Reinli Consultant E-Mail: martin.reinli@arcondis.com AUSBILDUNG BERUFLICHE WEITERBILDUNG SPRACHEN 1992 Eidg. Dipl. Wirtschaftsinformatiker, Handelsschule KV Basel 1990 Analytiker-Programmierer

Mehr

Systemen - Testprozess. Testprozess. Testprozess: Aktivitäten. Testplanung und Teststeuerung. Testplanung und Teststeuerung

Systemen - Testprozess. Testprozess. Testprozess: Aktivitäten. Testplanung und Teststeuerung. Testplanung und Teststeuerung 2007 Dr. Klaudia Dussa-Zieger P r a k t I s c h e Testprozess - Inhalt Testprozess Testen von Software-Systemen Systemen - Testprozess Lehrplan 2003 Testplanung Testausführung ierung Testendebewertung

Mehr

Systemen - Testprozess. Testprozess. Testprozess: Aktivitäten. Testplanung und Teststeuerung. Lehrplan 2003 Testplanung

Systemen - Testprozess. Testprozess. Testprozess: Aktivitäten. Testplanung und Teststeuerung. Lehrplan 2003 Testplanung P r a k t I s c h e Testprozess - Inhalt Testprozess Testen von Software-Systemen Systemen - Testprozess Lehrplan 2003 Testplanung Testausführung ierung Testendebewertung Testberichterstattung Lehrplan

Mehr

Informatik-Atelier Bern GmbH Werkstatt für Informatik-Dienstleistungen und Software-Entwicklung Postfach 631 3000 Bern 9

Informatik-Atelier Bern GmbH Werkstatt für Informatik-Dienstleistungen und Software-Entwicklung Postfach 631 3000 Bern 9 Informatik-Atelier Bern GmbH Werkstatt für Informatik-Dienstleistungen und Software-Entwicklung Postfach 631 3000 Bern 9 Firma Die Firma wurde 1998 mit Sitz in Bern gegründet als Erweiterung der Einzelfirma

Mehr

ALLG. METHODEN DES SOFTWAREENGINEERING

ALLG. METHODEN DES SOFTWAREENGINEERING Test und Testdokumentation ALLG. METHODEN DES SOFTWAREENGINEERING Agenda Maßnahmen zur Qualitätssicherung und Steigerung Tests, Testkategorien und Fehlerarten Teststufen und Testplanung Testdokumentation

Mehr

arvato Heterogene Systemlandschaft

arvato Heterogene Systemlandschaft Verteiltes Testen heterogener Systemlandschaften Dr. Thomas von der Maßen Andreas Wübbeke Februar 2010 1 Inhalt 1 arvato services und das IT-Management im Bertelsmann-Konzern 2 3 Heterogene Systemlandschaft

Mehr

Curriculum Vitae. Personalien. Erfahrungen. Fähigkeiten. Referenz-Nr. 1004 Geburtsdatum 21.08.1984. Soft Skills

Curriculum Vitae. Personalien. Erfahrungen. Fähigkeiten. Referenz-Nr. 1004 Geburtsdatum 21.08.1984. Soft Skills Curriculum Vitae Personalien Referenz-Nr. 1004 Geburtsdatum 21.08.1984 Nationalität Schweizer Erfahrungen Berufliche en Branchenkenntnisse 7 12 1 4 12 Tester Projektleiter Testmanager Entwickler Banking

Mehr

Synergieeffekte der formalen QS von Geschäftsprozessen Referent: A. Peter Zimmermann. Unser Testprozess hat den LEVEL 4 nach ISO / IEC 15504 (SPICE)

Synergieeffekte der formalen QS von Geschäftsprozessen Referent: A. Peter Zimmermann. Unser Testprozess hat den LEVEL 4 nach ISO / IEC 15504 (SPICE) Synergieeffekte der formalen QS von Geschäftsprozessen Referent: A. Peter Zimmermann Unser Testprozess hat den LEVEL 4 nach ISO / IEC 15504 (SPICE) superdata auf einen Blick Produkte FIT Testverfahren

Mehr

Profil 0519. Profil. Jahrgang Ausbildung. xxx ISTQB Certified Tester Foundation Level Ausbildung zur Applikationsentwicklerin Multimedia Magister xxx

Profil 0519. Profil. Jahrgang Ausbildung. xxx ISTQB Certified Tester Foundation Level Ausbildung zur Applikationsentwicklerin Multimedia Magister xxx Profil Jahrgang Ausbildung xxx ISTQB Certified Tester Foundation Level Ausbildung zur Applikationsentwicklerin Multimedia Magister xxx Schwerpunkte Qualitätssicherung (Testfallerstellung, Testdurchführung)

Mehr

Seite: 1 Persönliches Profil Claudia Barthel Stand: 31 May 2011. Allgemeine Angaben: Gründung: April 2008 als Einzelunternehmen Checkup - Barthel

Seite: 1 Persönliches Profil Claudia Barthel Stand: 31 May 2011. Allgemeine Angaben: Gründung: April 2008 als Einzelunternehmen Checkup - Barthel Seite: 1 Persönliches Profil Claudia Barthel Stand: 31 May 2011 CHECKUP-BARTHEL GbR http://www.checkup-barthel.de http://www.screencast.com/t/mjzmotu3mj http://checkup-barthel.de/referenzen/qa.aspx http://checkup-barthel.de/referenzen/pm.aspx

Mehr

Testen - Konzepte und Techniken

Testen - Konzepte und Techniken Testen - Konzepte und Techniken Magdalena Luniak 21.11.2007 Magdalena Luniak () Testen - Konzepte und Techniken 21.11.2007 1 / 42 Übersicht 1 Motivation 2 Grundbegrie 3 Testen im Softwareentwicklungsprozess

Mehr

Curriculum Vitae. Personalien. Erfahrungen. Fähigkeiten. Referenz-Nr. 2002 Geburtsdatum 18.12.1961. Soft Skills

Curriculum Vitae. Personalien. Erfahrungen. Fähigkeiten. Referenz-Nr. 2002 Geburtsdatum 18.12.1961. Soft Skills Curriculum Vitae Personalien Referenz-Nr. 2002 Geburtsdatum 18.12.1961 Nationalität Schweizer Erfahrungen berufliche en Branchenkenntnisse 6 6 4 8 2 5 Projektleitung Consulting NT Systeme Krisenmanagement

Mehr

Senior Consulting. Senior Consulting Strategical, Conceptual and Technical Consulting. 30.01.2011 Seite 1

Senior Consulting. Senior Consulting Strategical, Conceptual and Technical Consulting. 30.01.2011 Seite 1 30.01.2011 Seite 1 This flyer is exclusively for the use of client personnel. No part of it may be distributed, quoted or reproduced outside the client organisation without the prior written approval of

Mehr

TESTPLAN

TESTPLAN <Projektname> Firma TESTPLAN ID Version Ersteller: ------------------- Vorgesetzter des Erstellers:

Mehr

Qualifikationsprofil:

Qualifikationsprofil: Qualifikationsprofil: STEG Jahrgang 1974 Nationalität Deutsch Fremdsprachen Englisch Ausbildung Datenverarbeitungskaufmann Technische Kenntnisse: D B S C R u b a n G m b H D - 7 1 0 3 4 B ö b l i n g e

Mehr

SharePoint Continuous Integration mit TFS Online & Azure VMs Torsten Mandelkow Christian Pappert Microsoft

SharePoint Continuous Integration mit TFS Online & Azure VMs Torsten Mandelkow Christian Pappert Microsoft SharePoint Continuous Integration mit TFS Online & Azure VMs Torsten Mandelkow Christian Pappert Microsoft Agenda SharePoint Continuous Integration mit TFS Online & Azure VMs Fehlende Hardware oder mangelnde

Mehr

egov aus dem Baukasten

egov aus dem Baukasten 1 egov aus dem Baukasten Am Beispiel von ZEMIS Hans Burger Senior IT Consultant 4. November 2014 Agenda AdNovum egov-baukasten ZEMIS Übersicht Nutzungsbeispiele Baukasten Fazit 3 AdNovum Swiss Quality

Mehr

Cross Border Reporting

Cross Border Reporting Cross Border Reporting Matthias Sturzenegger Stv. Leader Service Integration, LISR Filip Milikic CEO and Founder The Same Tough Question in Software QA Wir sind seit über 140 Jahren eine verlässliche

Mehr

Leitfaden API. Testing und Debugging. Erstellt am 4.9.2014 Autor FG API, Rinaldo Lanza. Dokumentenstatus Freigegeben at work Version 1.

Leitfaden API. Testing und Debugging. Erstellt am 4.9.2014 Autor FG API, Rinaldo Lanza. Dokumentenstatus Freigegeben at work Version 1. Leitfaden API Erstellt am 4.9.2014 Autor FG API, Rinaldo Lanza Dokumentenstatus Freigegeben at work Version 1.0 Verteiler Fachgruppe API Änderungen Datum Version Autor Inhaltsverzeichnis 1 Beschreibung

Mehr

Agiles Testmanagement am Beispiel Scrum

Agiles Testmanagement am Beispiel Scrum Agiles Testmanagement am Beispiel Scrum SEQIS Software Testing Know-How Weitere Termine 16. September Testmanagement mit externen Partnern 21.Oktober Software unter Druck: Erfolgsfaktoren bei Last- und

Mehr

TESTAUTOMATISIERUNG & AGILE PROJEKTE EIN BLICK HINTER DIE KULISSEN

TESTAUTOMATISIERUNG & AGILE PROJEKTE EIN BLICK HINTER DIE KULISSEN TESTAUTOMATISIERUNG & AGILE PROJEKTE EIN BLICK HINTER DIE KULISSEN AGenda 27.11.2014, Hacker Day & TIC-Conference 1. Vorstellung T-Systems MMS/Test and Integration Center 2. Was verstehen wir unter Agil?

Mehr

1.1 Basiswissen komprimiert... 4 1.2 Praxiswissen Testmanagement Übersicht... 8. 2 Fundamentaler Testprozess 11

1.1 Basiswissen komprimiert... 4 1.2 Praxiswissen Testmanagement Übersicht... 8. 2 Fundamentaler Testprozess 11 xiii 1 Einleitung 1 1.1 Basiswissen komprimiert.......................... 4 1.2 Praxiswissen Testmanagement Übersicht.............. 8 2 Fundamentaler Testprozess 11 2.1 Testplanung und -steuerung........................

Mehr

Unser verflixtes 7. Jahr im Testmanagement. Bernd Schindelasch 26. Juni 2013

Unser verflixtes 7. Jahr im Testmanagement. Bernd Schindelasch 26. Juni 2013 Unser verflixtes 7. Jahr im Testmanagement Bernd Schindelasch 26. Juni 2013 Agenda EWE TEL GmbH Testmanagement bei EWE TEL (klassisch) Agile - SCRUM Testmanagement im SCRUM-Projekt Ausblick und Zusammenfassung

Mehr

Webinar Oracle Applications Testing Suite 6. November 2013 Jens Bielenberg, Andreas Böttcher

Webinar Oracle Applications Testing Suite 6. November 2013 Jens Bielenberg, Andreas Böttcher Webinar Oracle Applications Testing Suite 6. November 2013 Jens Bielenberg, Andreas Böttcher PRIMUS DELPHI GROUP GmbH 1 Agenda Vorstellung Überblick Functional Testing(Test Manager / Open Script) Demo

Mehr

Entwicklungsoptimierung mit einem ALM Tool Positionierung mit Fallstudie

Entwicklungsoptimierung mit einem ALM Tool Positionierung mit Fallstudie Entwicklungsoptimierung mit einem ALM Tool Positionierung mit Fallstudie Gerald Heller Agenda Standortbestimmung ALM Typischer industrieller Setup und Probleme Vorstellung von QualityCenter als ALM tool

Mehr

1.1 Basiswissen komprimiert... 4 1.2 Praxiswissen Testmanagement Übersicht... 8. 2 Testprozess und Testwerkzeuge 11

1.1 Basiswissen komprimiert... 4 1.2 Praxiswissen Testmanagement Übersicht... 8. 2 Testprozess und Testwerkzeuge 11 xi 1 Einleitung 1 1.1 Basiswissen komprimiert.......................... 4 1.2 Praxiswissen Testmanagement Übersicht.............. 8 2 Testprozess und Testwerkzeuge 11 2.1 Fundamentaler Testprozess.........................

Mehr

Realistische und aussagekräftige Lasttests mit loadit

Realistische und aussagekräftige Lasttests mit loadit Realistische und aussagekräftige Lasttests mit loadit 5. Juli 2012 Jens Müller NovaTec Ingenieure für neue Informationstechnologien GmbH Leinfelden-Echterdingen, München, Frankfurt am Main, Jeddah / Saudi-Arabien

Mehr

Fachliche Testautomatisierung, verbindet Test-Outsourcing mit Test-Virtualisierung

Fachliche Testautomatisierung, verbindet Test-Outsourcing mit Test-Virtualisierung Fachliche Testautomatisierung, verbindet Test-Outsourcing mit Test-Virtualisierung Der Stammesverbund Inhaltsverzeichnis Software-Qualitätssicherung Fachliche Testautomatisierung Test-Outsourcing Test-Virtualisierung

Mehr

Automatisiertes UI Testing. Mark Allibone, 18.04.2013, #2

Automatisiertes UI Testing. Mark Allibone, 18.04.2013, #2 Coded UI Testing Automatisiertes UI Testing Mark Allibone, 18.04.2013, #2 Eine klassische Applikations Architektur Grafische Oberfläche Business Logik Datenzugriff (Datenbank, Cloud, etc) Mark Allibone,

Mehr

Testmanagement mit externen Partnern

Testmanagement mit externen Partnern Testmanagement mit externen Partnern SEQIS Software Testing Know-How 10 things Termine 29. April 10. Juni 16. September Open Source Testautomationstools in der Projektpraxis Agiles Testmanagement am Beispiel

Mehr

Whitepaper Coded UI Tests & Rich Information Bugs

Whitepaper Coded UI Tests & Rich Information Bugs Einleitung Dieses Whitepaper stellt die neuen Möglichkeiten von Visual Studio 2010 im Bereich der Testautomatisierung vor sowie die Neuerungen zum Sammeln von Informationen um Bugs aufzufinden und reproduzieren

Mehr

Aktivitäten rund um den Softwaretest bei den Softwareforen Leipzig

Aktivitäten rund um den Softwaretest bei den Softwareforen Leipzig Aktivitäten rund um den Softwaretest bei den Softwareforen Leipzig Dr. André Köhler (Geschäftsführer) Robert Neumann (Spezialist Mobile Testing) 1 Testen ist ein zentrales Element in unserer Themenlandschaft

Mehr

Jens Borchers. Kritische Erfolgsfaktoren beim Abnahmetest in Redevelopment- Projekten Erfahrungen aus einem Großprojekt

Jens Borchers. Kritische Erfolgsfaktoren beim Abnahmetest in Redevelopment- Projekten Erfahrungen aus einem Großprojekt Chemnitz 24.11.2006 Jens Borchers Kritische Erfolgsfaktoren beim Abnahmetest in Redevelopment- Projekten Erfahrungen aus einem Großprojekt Vortrag bei der RePro2006 in Chemnitz am 24. November 2006 Kritische

Mehr

Ihre fachlichen Schwerpunkte liegen im Test-, Projekt-, Lieferanten- und Risikomanagement von großen IT-Projekten in unterschiedlichen Technologien.

Ihre fachlichen Schwerpunkte liegen im Test-, Projekt-, Lieferanten- und Risikomanagement von großen IT-Projekten in unterschiedlichen Technologien. Kathrin Brandt Diplm-Wirtschaftsinfrmatikerin (FH) Bitzerweg 8 53639 Königswinter Mbil: +49 173 60 33 077 Tel : +49 2244 92 78 850 Mail: kathrin.brandt@kb-it-beratung.de www.kb-it-beratung.de Persönliches

Mehr

Testen von Data-Warehouse- und Business-Intelligence-Systemen

Testen von Data-Warehouse- und Business-Intelligence-Systemen Edition TDWI Testen von Data-Warehouse- und Business-Intelligence-Systemen Vorgehen, Methoden und Konzepte von Herbert Stauffer, Beat Honegger, Hanspeter Gisin 1. Auflage Testen von Data-Warehouse- und

Mehr

Softwareentwicklungspraktikum Sommersemester 2007. Testdokumentation

Softwareentwicklungspraktikum Sommersemester 2007. Testdokumentation Softwareentwicklungspraktikum Sommersemester 2007 Testdokumentation Auftraggeber Technische Universität Braunschweig

Mehr

Qualität ist kein Zufall Erfolgreiches Testmanagement in SAP-Einführungs-, Rollout- und Upgradeprojekten

Qualität ist kein Zufall Erfolgreiches Testmanagement in SAP-Einführungs-, Rollout- und Upgradeprojekten Qualität ist kein Zufall Erfolgreiches Testmanagement in SAP-Einführungs-, Rollout- und Upgradeprojekten Marcus Bayer, Fabian Kehle MHPBoxenstopp: 11.06.2013 2013 Mieschke Hofmann und Partner Gesellschaft

Mehr

Tester als Coach ein Erfolgsmodell

Tester als Coach ein Erfolgsmodell Tester als Coach ein Erfolgsmodell Ein Praxisbericht aus dem Leben eines Testers in Scrum-Projekten - Michael Egli bbv Software Services AG www.bbv.ch 03.09.2015 Q-Event 2015 Erfolgsfaktor Testing 1 Inhaltsverzeichnis

Mehr

Systemen - Testen im Softwarelebenszyklus

Systemen - Testen im Softwarelebenszyklus P r a k t I s c h e Entwicklung und Test Testen von Software-Systemen Systemen - Testen im Softwarelebenszyklus Entwickler erstellen ihr System bzw. ihre Software und testen es/sie zur Entwicklungszeit

Mehr

ISTQB Certified Tester Foundation Level Embedded Systems

ISTQB Certified Tester Foundation Level Embedded Systems ISTQB Certified Tester Foundation Level Embedded Systems Kurzeinführung Inhalte 1 Über ALTRAN 2 Einführung ISTQB, GTB, Certified Tester Was ist das? 3 Motivation Wozu Testen? 4 Grundlagen des Testens Aktivitäten,

Mehr

LOAD TESTING 95% BRAUCHEN ES, 5 % MACHEN ES: LOAD TESTING MIT VS LEICHTGEMACHT NICO ORSCHEL MVP VS ALM, CONSULTANT

LOAD TESTING 95% BRAUCHEN ES, 5 % MACHEN ES: LOAD TESTING MIT VS LEICHTGEMACHT NICO ORSCHEL MVP VS ALM, CONSULTANT LOAD TESTING 95% BRAUCHEN ES, 5 % MACHEN ES: LOAD TESTING MIT VS LEICHTGEMACHT NICO ORSCHEL MVP VS ALM, CONSULTANT AIT GmbH & Co. KG Ihre Software effizienter entwickelt. ÜBERSICHT GRÜNDE UND ZEITPUNKT

Mehr

-Kommentare ein-und ausschalten. -Kommentare ein-und ausschalten. Seite 1 DI Christian Eggbauer mobilkom austria

-Kommentare ein-und ausschalten. -Kommentare ein-und ausschalten. Seite 1 DI Christian Eggbauer mobilkom austria Diese Diese Kommentarfelder Kommentarfelder können können Sie Sie über über das das Menü Menü Ansicht Ansicht -Kommentare ein-und ausschalten. -Kommentare ein-und ausschalten. Dies Dies ist ist die die

Mehr

2013 Master Management in Informationstechnologie (Fachhochschule Exia.Cesi in Straßburg)

2013 Master Management in Informationstechnologie (Fachhochschule Exia.Cesi in Straßburg) Personalprofil Jessica Gampp Consultant E-Mail: jessica.gampp@arcondis.com AUSBILDUNG BERUFLICHE WEITERBILDUNG BESONDERE TÄTIGKEITEN SPRACHEN 2013 Master Management in Informationstechnologie (Fachhochschule

Mehr

Quality Point München

Quality Point München Quality Point München Aktuelle Tendenzen auf dem Gebiet Test und QS Paul, was gibt es Neues auf unserem Gebiet? Kleine Schritte in bekannte Richtungen aber kein echter neuer Trend 1 1 Produkte (1) Verschiedene

Mehr

Wert- und Effizienzsteigerung durch IT Optimierung. Christian Hartmann Deutsche Post World Net IT Brief

Wert- und Effizienzsteigerung durch IT Optimierung. Christian Hartmann Deutsche Post World Net IT Brief HP OpenView, Mercury und Peregrine Anwendertreffen Stuttgart, 12. Juni 2007 Wert- und Effizienzsteigerung durch IT Optimierung Christian Hartmann Deutsche Post World Net IT Brief Copyright Vivit Worldwide

Mehr

Internes Kontrollsystem in der IT

Internes Kontrollsystem in der IT Internes Kontrollsystem in der IT SOA 404 und SAS 70 stellen neue Anforderungen an Qualität und Sicherheit der IT 2007 by Siemens AG. All rights reserved. Neue Sicherheitsanforderungen durch SOX ENRON,

Mehr

Praxiswissen Softwaretest - Testmanagement

Praxiswissen Softwaretest - Testmanagement Andreas Spillner Thomas Roßner Mario Winter Tilo Linz Praxiswissen Softwaretest - Testmanagement Aus- und Weiterbildung zum Certified Tester - Advanced Level nach ISTQB-Standard 4., überarbeitete u. erweiterte

Mehr

Effektive Testautomatisierung durch modulare Tests. Michael Oestereich profi.com AG Dr. Frank Spiegel Haufe-Lexware GmbH & Co. KG

Effektive Testautomatisierung durch modulare Tests. Michael Oestereich profi.com AG Dr. Frank Spiegel Haufe-Lexware GmbH & Co. KG Effektive Testautomatisierung durch modulare Tests Michael Oestereich profi.com AG Dr. Frank Spiegel Haufe-Lexware GmbH & Co. KG Agenda Einführung Vorstellung der Unternehmen Vorstellung des gemeinsamen

Mehr

Stuttgarter Test-Tage 2011 Der Fluch des grünen Balkens in sehr großen Projekten

Stuttgarter Test-Tage 2011 Der Fluch des grünen Balkens in sehr großen Projekten main {GRUPPE} Seite 1 Jürgen Nicolai Geschäftsführender Gesellschafter Liebknechtstrasse 33 70178 Stuttgart Tel : 0711 2270225 Fax : 0711 2270497 Mail : j.nicolai@main-gruppe.de Web: www.health4j.de Stuttgarter

Mehr

Profil Stefan Preishuber

Profil Stefan Preishuber Profil Stefan Preishuber, +49 178 1725057 Seite 1 von 6 Profil Stefan Preishuber Persönliche Daten Name: Stefan Preishuber Geburtsdatum: 25. Mai 1971 Geburtsort: Weissenburg/Deutschland Staatsbürgerschaft:

Mehr

Best Practices zur Standardisierung von Testmetriken als Teilaspekt zur Erreichung von Automotive SPICE Level 3 [ASPICE 3.0]

Best Practices zur Standardisierung von Testmetriken als Teilaspekt zur Erreichung von Automotive SPICE Level 3 [ASPICE 3.0] Best Practices zur Standardisierung von Testmetriken als Teilaspekt zur Erreichung von Automotive SPICE Level 3 [ASPICE 3.0] Max Hefke EDQ Lemförder Electronic GmbH 1 Agenda 1. Firmenportrait 2. Einführung

Mehr

NÉMETORSZÁGI ÁLLÁSAJÁNLATOK IT TERÜLETEN

NÉMETORSZÁGI ÁLLÁSAJÁNLATOK IT TERÜLETEN NÉMETORSZÁGI ÁLLÁSAJÁNLATOK IT TERÜLETEN Cégünk, az Extventure Capital Ltd. (www.extventure.com) egy sikeres IT tanácsadó cég, amely 15 éve foglalkoztat magyar szakértőket alkalmazottként Németországban,

Mehr

Test Management Services Der Quick Start für SAP Projekte

Test Management Services Der Quick Start für SAP Projekte Test Management Services Der Quick Start für SAP Projekte Agenda Übersicht Herausforderungen beim Testen von SAP Projekten Der Test Management Service im Detail Testkonzept Trainings Test Workbench Test

Mehr

Last- und Performancetest mit freien Werkzeugen. Stefan Siegl, 17.04.2012

Last- und Performancetest mit freien Werkzeugen. Stefan Siegl, 17.04.2012 Last- und Performancetest mit freien Werkzeugen Stefan Siegl, 17.04.2012 Über mich Consultant der NovaTec GmbH Performance Engineer Leitung CA Application Performance Management Verantwortlich für Produkte

Mehr

THOMAS WEHRSPANN. Diplom Wirtschaftsinformatiker Scrum Master. Geburtsjahr 1978 Profil-Stand Juli 2015

THOMAS WEHRSPANN. Diplom Wirtschaftsinformatiker Scrum Master. Geburtsjahr 1978 Profil-Stand Juli 2015 THOMAS WEHRSPANN Diplom Wirtschaftsinformatiker Scrum Master Geburtsjahr 1978 Profil-Stand Juli 2015 Triona Information und Technologie GmbH Wilhelm-Theodor-Römheld-Str. 14 55130 Mainz Fon +49 (0) 61 31

Mehr

T4 - Testen im Software- Lebenszyklus

T4 - Testen im Software- Lebenszyklus AK 2 am Armin Beer, Siemens PSE und Wirtschaftlichkeitsaspekte Armin Beer, Siemens PSE 2 1 Aufgabe: Test einer Applikation aus dem Sozialversicherungsbereich Client-side Web Browser Network Internet Web

Mehr

Testautomatisierung. Lessons Learned. qme Software. Gustav-Meyer-Allee 25 13355 Berlin. Telefon 030/46307-230 Telefax 030/46307-649

Testautomatisierung. Lessons Learned. qme Software. Gustav-Meyer-Allee 25 13355 Berlin. Telefon 030/46307-230 Telefax 030/46307-649 Testautomatisierung Lessons Learned qme Software GmbH Gustav-Meyer-Allee 25 13355 Berlin Telefon 030/46307-230 Telefax 030/46307-649 E-Mail qme Software info@qme-software.de GmbH Testautomatisierung Lessons

Mehr

Gegenseitige Beeinflussungen von Testautomatisierung, Testmanagement und Entwicklung

Gegenseitige Beeinflussungen von Testautomatisierung, Testmanagement und Entwicklung Gegenseitige Beeinflussungen von Testautomatisierung, Testmanagement und Entwicklung Jan Düttmann Archimedon Software + Consulting GmbH & Co. KG Marienstraße 66 32427 Minden Stephan Kleuker Hochschule

Mehr

Effiziente Testautomatisierung in agilen Projekten

Effiziente Testautomatisierung in agilen Projekten Effiziente Testautomatisierung in agilen Projekten Neue Software-Trends, Wien 15.9.2011 DI Manfred Baumgartner ANECON Software Design und Beratung G.m.b.H. Alser Str. 4/Hof 1 A-1090 Wien Tel.: +43 1 409

Mehr

Die eid-projekte der Schweiz (SuisseID, Swiss Trust IAM, )

Die eid-projekte der Schweiz (SuisseID, Swiss Trust IAM, ) Die eid-projekte der Schweiz (SuisseID, Swiss Trust IAM, ) Reinhard Riedl, Leiter E-Government Institut & Mitglied des Expertenrats E-Government Schweiz Europa baut eine Infrastruktur für die E-Society

Mehr

Testen im Software- Entwicklungsprozess

Testen im Software- Entwicklungsprozess Technologie-Event 2006 Testen im Software- Entwicklungsprozess W.Lukas, INGTES AG Was nicht getestet wurde, funktioniert nicht. -- R.Güdel (ca. 1998) Seite 2 Was sollen wir tun? Anomalien & Defekte von

Mehr

Zwei starke Werkzeuge mit Methodik vereint Dynamic Process Testing (DPT)

Zwei starke Werkzeuge mit Methodik vereint Dynamic Process Testing (DPT) Zwei starke Werkzeuge mit Methodik vereint Dynamic Process Testing (DPT) Agenda 1 2 3 4 5 6 Testpille - Die Herausforderung Testpille - Die Realisierung Testpille - Die Keyfacts Testpille - Der Prozess

Mehr

Testautomatisierung und Agiles Testen

Testautomatisierung und Agiles Testen Testautomatisierung und Agiles Testen Durch Testautomatisierung und agile Methoden zu mehr Stabilität und Transparenz in der Softwareentwicklung. Wir zeigen Ihnen wie. Wie effizient ist ihr Softwaretest?

Mehr

Prozesse visualisieren mit Informatik- Werkzeugen Ist Schaffhausen bereit? Beat Kobler, Abteilungsleitung Service Center, KSD Schaffhausen

Prozesse visualisieren mit Informatik- Werkzeugen Ist Schaffhausen bereit? Beat Kobler, Abteilungsleitung Service Center, KSD Schaffhausen Prozesse visualisieren mit Informatik- Werkzeugen Ist Schaffhausen bereit? Beat Kobler, Abteilungsleitung Service Center, KSD Schaffhausen 1 Agenda Ausgangslage Prozessmanagement KSD Anforderungen / Ziele

Mehr

Testautomatisierung. Märchen, Möglichkeiten und praktischer Nutzen. Richard Seidl 21. Januar 2013 TU Dresden. Medizin- und Informationstechnik AG

Testautomatisierung. Märchen, Möglichkeiten und praktischer Nutzen. Richard Seidl 21. Januar 2013 TU Dresden. Medizin- und Informationstechnik AG Medizin- und Informationstechnik AG Testautomatisierung Märchen, Möglichkeiten und praktischer Nutzen Richard Seidl 21. Januar 2013 TU Dresden Kardiologische Funktionsdiagnostik Vitalfunktions-Monitoring

Mehr

Qualitätsicherung im agilen Umfeld

Qualitätsicherung im agilen Umfeld SOGETI Deutschland GmbH 1 Qualitätsicherung im agilen Umfeld Ein Expertenthema? 18. September 2014 Michael Fischlein Technical Manager & CAT-Trainer 22.09.2014 SOGETI Deutschland GmbH 2 International 4

Mehr

Inhaltsverzeichnis Einführung...1 Performance und Entwicklungsprozess...13

Inhaltsverzeichnis Einführung...1 Performance und Entwicklungsprozess...13 Inhaltsverzeichnis 1 Einführung...1 1.2 Ein Performancemeeting...1 1.3 Das fachliche und technische Umfeld...4 1.4 Performanceaspekte...5 1.5 Neue Herausforderungen...8 1.6 Performance als interdisziplinäre

Mehr

Konzept eines Datenbankprototypen. 30.06.2003 Folie 1 Daniel Gander / Gerhard Schrotter

Konzept eines Datenbankprototypen. 30.06.2003 Folie 1 Daniel Gander / Gerhard Schrotter Konzept eines Datenbankprototypen 30.06.2003 Folie 1 Daniel Gander / Gerhard Schrotter Inhalt (1) Projektvorstellung & Projektzeitplan Softwarekomponenten Detailierte Beschreibung der System Bausteine

Mehr

Saarbrücker Reihe Projekt Management an der Scheer Management Academy Praxisbericht: Projektmanagement mit PRINCE2 und agilen Elementen

Saarbrücker Reihe Projekt Management an der Scheer Management Academy Praxisbericht: Projektmanagement mit PRINCE2 und agilen Elementen Saarbrücker Reihe Projekt Management an der Scheer Management Academy Praxisbericht: Projektmanagement mit PRINCE2 und agilen Elementen Markus H. Götz, PMP Agenda Projekt Zentrale Leitstelle Polizei Thüringen

Mehr

Lasttests von Web-Anwendungen. René Schwietzke, Ronny Vogel Xceptance Software Technologies GmbH, 2011

Lasttests von Web-Anwendungen. René Schwietzke, Ronny Vogel Xceptance Software Technologies GmbH, 2011 Lasttests von Web-Anwendungen René Schwietzke, Ronny Vogel Xceptance Software Technologies GmbH, 2011 1 Agenda Wer sind wir? Was ist ein Lasttest? Simulation von Web-Nutzern Testplanung Ausgewählte Aspekte

Mehr

T3 Testen im Software- Lebenszyklus

T3 Testen im Software- Lebenszyklus T3 Testen im Siemens AG Österreich 2005 All Rights Reserved Institut f. Software Technology, TU-Graz Armin Beer, PSE Support-Center Test AK- 2 1 AK- Definition Test der einzelnen implementierten Komponenten

Mehr

Profil Anke Kemmer (freiberufliche IT-Beraterin)

Profil Anke Kemmer (freiberufliche IT-Beraterin) Profil Anke Kemmer (freiberufliche IT-Beraterin) Profil: Berufserfahrung: ca. 9 Jahre im IT-Sektor Schwerpunkte: Requirements Engineering Softwareentwicklung Testmanagement Zertifizierungen: Sun Certified

Mehr

Traceability als Erfolgsfaktor für die Qualitätssicherung von Software

Traceability als Erfolgsfaktor für die Qualitätssicherung von Software Traceability als Erfolgsfaktor für die Qualitätssicherung von Software Veranstaltung Referent Datum SE13 - Workshop: Traceability - Nutzung und Nutzen Yavuz Sancar, corporate quality consulting GmbH 26.

Mehr

2 3 4 5 6 7 8 9 10 12,999,976 km 9,136,765 km 1,276,765 km 499,892 km 245,066 km 112,907 km 36,765 km 24,159 km 7899 km 2408 km 76 km 12 14 16 1 12 7 3 1 6 2 5 4 3 11 9 10 8 18 20 21 22 23 24 25 26 28

Mehr