Trends & Benchmarks Report Schweiz Wo stehen wir wohin geht es? Testing In Kooperation mit

Transkript

1 Trends & Benchmarks Report Schweiz Wo stehen wir wohin geht es? Testing 2013 In Kooperation mit

2 Inhaltsverzeichnis Testing Trends & Benchmarks Schweiz EDITORIAL TRENDWAVE 2013 KEY MESSAGES PROJEKTE VORGEHEN AGILITÄT REIFE ORGANISATION TESTAUFWAND TESTWERKZEUGE TESTAUTOMATISIERUNG ERHEBUNGSGRUNDLAGEN Requirements Trends & Benchmarks Schweiz 2013 Agile Trends & Benchmarks Schweiz 2013

3 EDITORIAL Testing Trends & Benchmarks Schweiz Seit 5 Jahren fühlt SwissQ den Puls der IT Community und veröffentlicht jährlich Zahlen und Fakten zum Stand des Software Testings in der Schweiz und gibt einen Ausblick auf die wichtigsten Trends der kommenden Zeit. Seit letztem Jahr werden die Testing Trends und Benchmarks ergänzt durch die beiden Themenbereiche Requirements Engineering und Agile. Diese erscheinen in separaten Reports. Die Datenbasis bildet einerseits die Online-Umfrage und andererseits persönliche Interviews mit IT-Entscheidungsträgern aus unterschiedlichen Firmen, Branchen und Regionen. Für die diesjährige Ausgabe konnten wir auf 580 ausgefüllte Fragebogen - ein neuer Rekord - und um die 25 Interviews zurückgreifen. An dieser Stelle ein herzliches Dankeschön an alle, die mit ihrem Input dazu beigetragen haben. Neu führt SwissQ die Studie zu den Trends & Benchmarks in Kooperation mit dem Institut für Technologiemanagement der Universität St.Gallen (HSG) durch. Die Zusammenarbeit zeigt auf, wie wichtig diese Themen für die heutigen Unternehmen geworden sind. Es freut uns, mit dieser Kooperation erneut eine Brücke zwischen der akademischen und unternehmerischen Welt schlagen zu können. Der Report gliedert sich wie gehabt in 2 Teile: die SwissQ Trend Wave und die Benchmarks. Im ersten Teil wird aufgezeigt, wie sich einzelne Trends entwickeln. Dies auf Basis der Testing Trend Wave Die kondensierte Darstellung der wichtigsten Themen auf einer Seite erlaubt einen raschen Überblick. Dadurch lässt sich der Einfluss der Marktveränderungen auf das eigene Unternehmen abschätzen und es können, falls notwendig, geeignete Vorhaben initiiert werden. Eine einfache Massnahme um den Veränderungsdruck aufzuzeigen ist es, die Trends und Benchmarks intern bekannt zu machen. Wie bereits in den letzten Jahren offeriert SwissQ den Unternehmen die Gelegenheit, die Trends & Benchmarks intern vor ihren Mitarbeitern zu präsentieren. Zielpublikum sind vor allem die Tester Community, Software Ingenieure, Projektleiter, Requirements Engineers und das Management. Die Präsentation ermöglicht, einen externen Blick auf die aktuellen Veränderungen zu bekommen, die Motivation und den Stellenwert des Testings zu steigern, sowie von Ideen für die konstante Weiterentwicklung des Testings zu profitieren. Falls gewünscht, können die Ergebnisse aus dem Requirements Engineering und Agile Report auch miteinbezogen werden. Den zweiten und umfangreicheren Teil des Reports bilden die Benchmarks. Die Grafiken sind das Rückgrat des Reports und ermöglichen es, sich im Vergleich mit anderen Unternehmen zu positionieren. Der Vergleich mit den Vorjahren erlaubt es zudem zu sehen, in welche Richtung sich die Unternehmen entwickeln. Unter Projekte ist zum Beispiel ersichtlich, dass sich einerseits die Anzahl der Neuentwicklungen im Vergleich zum Vorjahr reduziert hat und es andererseits immer mehr Grossprojekte gibt. Es gibt also weniger, dafür aber grössere Neuprojekte. Dies hat wohl damit zu tun, dass immer weniger Vorhaben auf der grünen Wiese starten. Entweder werden bestehende Lösungen erweitert oder dann komplett neu gebaut, was oft sehr teuer ist. Bei den Vorgehen halten sich Wasserfall und agile Vorgehen die Waage, wobei viele Unternehmen auf mehr als ein Vorgehensmodell setzen. Im besten Fall gelingt es, die Vorzüge beider Modelle zu vereinen. In der Praxis tut man sich aber an den Übergängen und mit den unterschiedlichen Rollen und Zusammenarbeitsmodellen schwer. Gerade auch die Tester müssen lernen, mit beiden Welten umzugehen bzw. umzudenken und die notwendige Flexibilität an den Tag zu legen. Hier muss sicherlich noch mehr Erfahrung gesammelt bzw. Ausbildung betrieben werden. Die grösste Herausforderung im Testing bleiben die mangelhaften Anforderungen. Da ist es spannend zu sehen, dass zu den am häufigsten angewandten Techniken zur Testfallermittlung die anwendungsfall- und geschäftsprozessbasierten Vorgehen gehören, welche beide sauber modellierte Anforderungen voraussetzen. Das drückt sich wiederum darin aus, dass von den Testaktivitäten die Testfallermittlung am schlechtesten abschneidet. Ein Grund, vermehrt agile Methoden in Betracht zu ziehen? Bei den Testinvestitionen ist und bleibt der Fokus auf der Testautomatisierung und dem Auf- und Ausbau der Regressionstests. Dies deckt sich mit der anfangs erwähnten Tatsache, dass vor allem Erweiterungs- und Wartungsprojekte stattfinden, bei denen naturgemäss die Sicherstellung der bestehenden Funktionalität mittels Regressionstests einen hohen Stellenwert hat. Die Automatisierung wiederum ist ein zwingendes Instrument, um der wachsenden Regression Herr zu werden. Wir hoffen, dass die vorliegenden Trends und Benchmarks Sie dazu inspirieren, neue Herausforderungen aktiv anzugehen und die aktuell besten Massnahmen in Ihrem Unternehmen zu ergreifen.

4 TRENDWAVE 2013 Testing Trends & Benchmarks Schweiz INTRODUCTION GROWTH MATURITY DECLINE Priority ALM Tools Keyword Driven Test Automation Embedded Testing Load and Performance Testing Agile Testing Scrum (but) Exploratory Testing Session Based Testing / SET Security & Penetration Testing Waterfall / Scrum Hybrid Business Driven Test Automation ISO 9126 ISTQB FL & AL Level Outsourcing App / Mobile Testing Agile Test Management Accessibility Testing ISO Model Based Testing TIME INTRODUCTION Das Thema wurde erkannt und einige Unternehmen arbeiten an ersten Umsetzungen. Es ist allerdings nicht absehbar, ob sich dieser Trend positiv weiterentwickelt und das Testing tatsächlich erheblich beeinflussen wird. GROWTH Das Thema wird immer mehr anerkannt und viele Unternehmen gehen darauf ein. Es entstehen die ersten Werkzeuge und Beratungsfirmen bieten Dienstleistungen dazu an. Mit der fehlenden Erfahrung bei der Umsetzung gehen oft diverse Risiken einher. MATURITY Die meisten Unternehmen arbeiten an der Umsetzung oder haben diese bereits abgeschlossen. Das Wissen zu dem Thema ist oft sehr verbreitet, wobei häufig auch Unterarten dazu entstehen. DECLINE Das Thema wurde von den meisten Unternehmen, mit Ausnahme einzelner Nachzügler, bereits umgesetzt. Wissen in diesen Bereichen neu aufzubauen generiert oft keinen Nutzen mehr, da dieses in Kürze obsolet wird.

5 TRENDWAVE 2013 Testing Trends & Benchmarks Schweiz Ziel der Trendwave ist es aufzuzeigen, welche Themen in nächster Zeit sowohl die Disziplin Testen beeinflussen werden, als auch die Personen und Organisationen, welche sich damit befassen. Sie hilft somit dem Leser, sich gezielt auf diese Veränderungen vorzubereiten und sie wo immer möglich aktiv mitzugestalten. Haben viele Aussagen unverändert Bestand, so sind doch einige Trends erkennbar, wie z.b. der wachsende Anteil an Testautomation oder die sinkende Beschäftigung externer Testressourcen. Die Technologien, welche den Consumer-Markt in den letzten Jahren verändert haben Smartphones und Tablets, SocialMedia und die Cloud - finden vermehrt auch in der Unternehmenswelt Verwendung. Die Revolution von unten hat stattgefunden, Endkunden wie Mitarbeiter kommen mit ihren eigenen Geräten und verlangen Funktionen und Content auf diesen nutzen zu können. Doch auch die Usability Anforderungen an herkömmliche Anwendungen steigen rasant was auf dem Handy geht, muss doch am Monitor erst recht möglich sein. Steigende Komplexität der IT und Öffnung der Unternehmungen durch das Thema Mobile sind die Herausforderungen der modernen Organisationen. Diese rasante Entwicklung stellt nicht nur Business Analysten und Software Entwickler vor neue Herausforderungen. Gerade das Testing wird dadurch immer komplexer, aufwändiger und vor allem schneller. Kein Wunder also, werden rund die Hälfte der IT-Projekte in der Schweiz agil durchgeführt (davon grösstenteils mit Scrum). Viele Firmen haben diese Trends erkannt. Einige berücksichtigen sie bereits in ihren aktuellen Projekten und Produkten, andere sammeln erste Erfahrungen und bauen langsam Wissen auf. Folgerichtig liegt der primäre Fokus auf zwei Bereichen. Einer davon ist Agile Testing, denn die meisten der Befragten arbeiten inzwischen mindestens zum Teil mit agilen Vorgehensweisen. Doch die grundlegend andere Ausgangslage in Bezug auf Kultur, Zeitpunkt der Involvierung und Erwartungen, was Testing liefern muss, stellt viele Tester und ihre Organisationen vor erhebliche Probleme. Der zweite Bereich ist das Requirements Engineering, der damit direkt eine der grössten Herausforderungen aufgreift: Die mangelhafte Qualität von Anforderungen. Zufall oder Schicksal, die parallele Entwicklung dieser beiden Themen kann nur von Vorteil sein. Haben wir letztes Jahr noch prophezeit, dass Mobile Testing für viele Organisationen und Software-Tester auf dem Radar erscheinen würden, so sind sie für viele inzwischen Alltag. Die immer kürzeren Entwicklungs- und Releasezyklen können dabei nur mit Hilfe von Testautomation beherrscht werden. Ein Thema, das uns schon viele Jahre begleitet und oft immer noch nicht zufriedenstellend gelöst wurde. Die Prognose für 2013? Manuelles Testen wird wieder an Bedeutung gewinnen. In Testautomatisierung wird weiter investiert, die Testabdeckung kann weiter erhöht werden. Auf der anderen Seite wird der Kostendruck weitere Effizienzsteigerungen erzwingen und entsprechend leichtere Prozesse fordern. Testorganisationen müssen sich dabei vermehrt integrieren und weniger auf Separation setzen.

6 KEY MESSAGES Testing Trends & Benchmarks Schweiz Es gibt eine Verschiebung zu weniger Neuentwicklungen und mehr Erweiterungen und Wartungsprojekten. Dafür steigt der Anteil der Mega-Projekte über 20 Mio. CHF stetig. 2 3 Neue, technologie- und prozessgetriebene Vorgehen, wie mobile Testing, agiles Testen oder Session Based Test Management, setzen sich immer mehr durch. Wasserfall und agile Vorgehen halten sich die Waage, und werden oft in Kombination eingesetzt. Wasserfall / Scrum Hybrid Projekte sind auf dem Vormarsch, lösen aber viele Unsicherheiten aus Die Reife des Requirement Engineering Prozesses hat gegenüber dem Test weiterhin Nachholbedarf. Mangelhafte Anforderungen sind die grösste Herausforderung im Testing. Von den Testaktivitäten wird die Testfallermittlung klar am schlechtesten bewertet. Strukturiert Testfälle herzuleiten, fällt vielen immer noch schwer. Bei der Ausbildung wird weiterhin auf Zertifikate gesetzt. Der ISTQB Foundation Level und Advanced Level Test Manager waren und bleiben populär In die Testautomatisierung und den Auf- und Ausbau der Regressionstests wird stetig investiert. Das Outsourcing ist für viele keine gangbare Lösung. Der durchschnittliche Testaufwand im Verhältnis zum Gesamtprojektaufwand wurde über die Jahre konstant auf 16 - geschätzt. Bei den Tools für das Testmanagement und die Testautomatisierung zersplittert der Markt zusehends. Zudem kann man sich in den wenigsten Firmen auf ein Tool einigen.

7 Projekte Testing Trends & Benchmarks Schweiz Projektart Im letzten Jahr betrug der Anteil der Neuentwicklung noch 39%. Es gab eine klare Verschiebung hin zu weniger Neuentwicklungen und mehr Erweiterungen und Wartungsprojekten. 17% 25% 6% 5% 47% Projektgrösse (in CHF) Erweiterung einer bestehenden Lösung Neuentwicklung Betrieb, Support, Wartung, Re-Design,... Migration Einführung Standard-Software Projekterfolg Die letzten drei Jahre haben Bewegung bezüglich des Projekterfolgs gezeigt. Zum einen haben inzwischen 4% der Unternehmen den Mut, Projekte zu stoppen, wenn der mangelnde Erfolg dies verlangt (2011 <1%). Auf der anderen Seite konnten seit 2011 immerhin fast 50 % mehr Projekte in time und on budget beendet werden (von 23.7% auf 36.3%)! % 35.1% 36.3% Projekt in Zeit, Budget, Funktionalität beendet 37.2% 25.1% Aufstellung der IT 27.1% Projekt im Rahmen, über Budget und/oder Zeit 23.7% 17.5% 20.8% Projekt verlängert/neu geplant 14.7% % 11.6% Projekt mit grossen funkt. Änderungen 0.6% 4.1% Projekt gestoppt 4.2% 48.7% 15% Erfahrung der Mitarbeiter Durchschnittliche Bewertung % 12.9% 1 5% 5.2% 10.8% 12.9% über 20 Mio Erfüllung von Regularien Business-/ Kundenfokus Qualität Erfüllung des Auftrags/Ziele Flexibilität Innovation Budget und Ressourcen Prozesse Standardisierung bis 1 Mio bis 20 Mio über 20 Mio Effizienz 1 Ungenügend Zufriedenstellend 3 Gut 4 Sehr gut

8 VORGEHEN Testing Trends & Benchmarks Schweiz Angewandte Vorgehensmodelle Viele Unternehmen setzen auf mehr als ein Vorgehensmodell. Wasserfall hat erstaunlicherweise wieder zugelegt, was mit der gestiegenen Anzahl Grossprojekte zusammenhängen kann, wobei die Umsetzung in den verschiedenen Teams agil erfolgt. Gründe für agile Methoden Besserer Umgang mit sich stetig ändernden Prioritäten gilt als ein Hauptgrund für den Einsatz agiler Methoden, ebenso wie die Zusammenarbeit zwischen Business und IT und die Beschleunigung von Time-to-Market. Beschleunigung Time-to-Market Agil 49% (51%) Iterativ (22%) Wasserfall 53% (4) RUP 1 (16%) Hermes 1 (12%) ( ) = Werte Umfrage 2012 Entwicklungsprozesse vereinfachen Produktivität erhöhen Sichtbarkeit erhöhen Mit sich ändernden Prioritäten umgehen Teammoral verbessern Scrum Agile Hybrid (Mix aus verschiedenen Methoden) 29.3% 85.7% Wartbarkeit erhöhen Risiken minimieren Kanban Lean Development Extreme Programming (XP) 24.3% 12.1% 10.7% Zusammenarbeit Business IT verbessern ScrumBan 6.4% Kosten reduzieren Agile Unified Process (AgileUP) 5.7% Feature Driven Development (FDD) 3.6%

9 AGILITäT Testing Trends & Benchmarks Schweiz Testing im Kontext von Agilität Die Abnahmetests erfolgen direkt im Sprint 21.6% 38.8% 32.4% Man hat jederzeit den Überblick, was gerade getestet wird 21.6% 51.8% 20.1% 31.7% glauben immer noch an grosse zentrale Vorgaben. Jedes Team organisiert sich selbstständig und macht Testing ein bisschen anders Wir wenden Embedded Testing an Die Unsicherheit der Tester ist grösser geworden, da die Prozesse unklar sind 14.4% % 13.6% 36.4% % 57.6% 5 setzen auf Embedded Testing. Der Durchbruch ist geschafft, Testen entfaltet immer mehr seinen Nutzen. 57.6% sehen keine Unsicherheit in Bezug auf Prozesse. Dies im Gegensatz zu den Aussagen der IT- Executives. Die Rolle Test Manager gibt es nicht mehr Es braucht deutlich weniger Aufwand für das Testing Es gibt keine formalen Vorgaben mehr bezüglich Dokumentation von Tests 21.6% 66.2% 9.3% 82.1% 15.9% 74.6% 66.2% sehen immer noch die Existenzberechtigung der Rolle des Test Managers. Wir arbeiten ausschliesslich mit Akzeptanzkriterien % 91.4% sehen weiterhin Bedarf an Testspezifikationen und Testfällen. Wir testen nur explorativ Es werden keine Testspezifikationen / Testfälle mehr benötigt 17.1% 74.3% 91.4% 74.3% der Befragten setzen neben dem explorativen Testen weitere Testarten ein Voll einverstanden Mehrheitlich einverstanden Nicht einverstanden Kann ich nicht beurteilen

10 REIFE Testing Trends & Benchmarks Schweiz Reifegrad Beurteilen beim Testing etwas über einem Drittel die Reife als schwach oder mittelmässig, sind es beim RE fast die Hälfte der Befragten. Ansehen des Testens 4 3 Test RE Es ist für den Erfolg der Organisation strategisch Es ist ein wichtiger Faktor, um verlässliche Software zu produzieren 19% 51% Es ist ein notwendiges Übel 1 Es hat tiefe Priorität Die Kosten für Tests könnten wir uns sparen 8% 2% Schwach Mittelmässig Gut Sehr gut Ausgezeichnet Die grössten Herausforderungen Die zu späte Lieferung der Software wurde neu aufgenommen und hat sich prompt zum Renner entwickelt, der allen anderen ein paar Prozentpunkte streitig gemacht hat. ( ) = Werte Umfrage 2012 Testdaten 19% (24%) Testumgebung 21% (3) Automatisierung 22% (33%) Zu späte Lieferung der SW 26% (NEU) Zu wenig Budget / Ressourcen 29% (3) Tester zu spät involviert 3 (38%) Anforderungen mangelhaft 5 (63%)

11 REIFE Testing Trends & Benchmarks Schweiz Zufriedenheit mit Testaktivitäten Die Aktivitäten Testmanagement und Testdurchführung schneiden am besten ab. Das klare Schlusslicht bildet die Testfallermittlung. Anwendung der Testtechniken Die grundlegenden Black Box-Techniken kommen nur sporadisch zum Einsatz. Am verbreitetsten sind noch die Äquivalenzklassen- und Grenzwertanalyse. Zufrieden Mittelmässig Unzufrieden 12% 9% 15% 18% 18% 32% 35% 39% 38% 44% % wenden exploratives Testen an. Wobei der Begriff oft mit Adhoc Testing gleichgesetzt wird. Anwendungsfallbasiert Anwendungsfälle und Geschäftsprozesse bilden eine ideale Basis für die Definition von Testfällen. Die Techniken sind entsprechend verbreitet. 56.8% Risikobasiert % 46% 38% 56% 44% 4 Exploratives Testen Geschäftsprozessbasiert 41.6% 40.1% Äquivalenzklassenanalyse 23.7% Testmanagement Testplanung Testfallermittlung Testdurchführung Testauswertung Grenzwertanalyse Fehlerbasiert Checklistenbasiert 21.8% 18.3% 11.7% Entscheidungstabellen 10.4% Zustandsbasiert 7.6% Nur 38% sind zufrieden mit der Testfallermittlung. Dies deckt sich mit den Erfahrungen bei SwissQ Test Assessments. Strukturiert Testfälle herzuleiten fällt vielen schwer. Klassifikationsbaumverfahren 1.9%

12 ORGANISATION Testing Trends & Benchmarks Schweiz Wer führt Testaktivitäten durch? Unit Tests Ausbildung Nach wie vor ist der ISTQB Foundation Level das meistverbreitete Zertifikat. Dahinter liefern sich Zertifikate aus den Disziplinen Test, ITIL, RE und Projekt Management ein Kopf-an-Kopf-Rennen. Agile holt derzeit mit dem Certified Scrum Master auf. 84% Entwickler Hab ich schon Ist geplant Mal in ferner Zukunft Systemtests 52% IT Tester ISTQB Foundation Level ISTQB Advanced Level Test Manager ITIL Abnahmetests Testautomatisierung Last & Performance Tests 48% Fachbereich Endbenutzer 54% IT Tester 54% IT Tester IREB Cert. Professional for Requirements Engineering ISTQB Advanced Level Test Analyst Projektmanagement (IPMA, PMI,...) Certified Scrum Master ISTQB Advanced Level Technical Test Analyst Agile Testing Qualitätsmanagement (dipl. Quality Manager,...) Certified Product Owner Agiles Requirements Engineering ISTQB Expert Level Entwickler IT Tester RE / BA Fachbereich Niemand Endbenutzer

13 ORGANISATION Testing Trends & Benchmarks Schweiz Einsatz externer Ressourcen 41.1% Die Unterstützung der Testaktivitäten durch externe Ressourcen hat sich gegenüber dem letzten Jahr verringert. So beziehen nun 41.1% statt 33.8% keine externen Ressourcen mehr. Investitionen Der Fokus ist und bleibt auf der Testautomatisierung und dem Auf- und Ausbau der Regressionstests. Am anderen Ende der Skala finden sich wie gehabt die Auslagerung von Testaktivitäten und die Anstellung neuer Testmitarbeiter. Testautomatisierung Auf- und Ausbau Regressionstests Keine externen Ressourcen 8.8% Testdaten-Management Bezug externer Ressourcen (Insourcing) Bezug als Dienstleistung (Managed Service) 11.9% 41.1% Testumgebungen Aus-/ Weiterbildung Mitarbeiter Auslagerung an externe Ressourcen (Outsourcing) 38.2% Testmanagement-Tools Testprozesse / Methoden Anstellung neuer Test-Mitarbeiter 58.9% Auslagerung von Testaktivitäten Insgesamt nehmen 58.9% externe Unterstützung in Anspruch. Der Anteil des Outsourcing hat sich gegenüber 2012 von 5.9% auf 8.8% leicht erhöht, ist aber immer noch relativ klein. Investitionen nehmen ab Investitionen nehmen zu

14 TESTAUFWAND Testing Trends & Benchmarks Schweiz Testaufwand im Verhältnis zum Gesamtaufwand Testaufwand im Verhältnis zum Entwicklungsaufwand % 19.4% 20.1% 23.5% 14.4% 8.2% 1.9% 1 6.9% 9.7% 16.9% 21.3% 20.7% 20.4% 4.1% < 5% % darüber < 5% % darüber Auf den ersten Blick scheint sich der Testaufwand von Jahr zu Jahr stark zu verändern. Analysiert man die Zahlen genauer, stellt man jedoch fest, dass der durchschnittliche Testaufwand im Verhältnis zum Gesamtprojektaufwand konstant auf 16 geschätzt wurde Gesamtaufwand Entwicklungsaufwand Ähnlich wie beim Gesamtaufwand hat es beim Testaufwand im Verhältnis zum Entwicklungsaufwand über die Jahre hinweg Verschiebungen gegeben. Trotzdem ist auch hier der Durchschnitt stabil bei 21-3 geblieben.

15 TESTWERKZEUGE Testing Trends & Benchmarks Schweiz Testmanagement-Tools HP QC /ALM beherrscht weiterhin den Markt. Tricentis Tosca hat sich aber zu einer ernstzunehmenden Konkurrenz entwickelt. Dahinter ist der Markt angesichts der stetig wachsenden Zahl von Alternativen zersplittert. Weiterhin kommen oft mehrere Tools zum Einsatz (namentlich die MS Office Palette). Testautomatisierungs-Tools Insgesamt bleibt der Markt stark fragmentiert. Es wurden fast 30 verschiedene Tools genannt. HP QC / ALM 52% HP Quick Test Professional (QTP) 34.5% MS Office 38% Eigenentwicklung 27.2% Tricentis Tosca Tricentis Tosca 26.8% Eigene Entwicklung 14% xunit (z.b. junit, TestNG,...) 24.1% MS TFS Test Manager 9% Selenium (RC/WebDriver) 15.3% Polarion QA / ALM 7% MS TFS / Visualstudio 8.8% Bugzilla Testopia IBM Rational Quality Manager Inflectra Spira TestLink 6% 4% 3% 3% HP QC / ALM MS Office Tricentis Tosca Eigene Entwicklung MS TFS Test Manager QF Test Ranorex IBM Rational Functional Tester (RFT) FitNesse % 4.2% 4.2% HP Quick Test Professional (QTP) Eigenentwicklung Tricentis Tosca Selenium (RC/WebDriver) SmartBear QAComplete 2% 4 6 Lisa 3.4% 4 SilkCentral Test Manager 1% Canoo Webtest 2.3% keines 3% Andere

16 TESTAUTOMATISIERUNG Testing Trends & Benchmarks Schweiz Testautomatisierung pro Teststufe Automatisierte Tests auf Stufe Systemtest % % 5.4% 13.8% 34.5% 22.2% 8.8% 21.5% 14.2% 8.8% 13.8% 14.9% % der Testfälle automatisiert 6.1% 12.6% 12.6% 9.2% 12.3% 22.2% über 8 Unit Tests Systemtests Abnahmetests Kosteneinsparungen > 8 % der Testfälle automatisiert Insgesamt wird das Potential für Einsparungen durch Automatisierung höher eingeschätzt als im Vorjahr. Wie schon im Vorjahr hat ein beachtlicher Teil der Teilnehmenden gesagt, dass keine Aussage möglich ist % 82% der Befragten haben automatisierte Tests auf einer oder mehreren Stufen % 6.9% Kosten gestiegen 22.6% 19.5% 23.7% 21.8% 10.2% 16.1% 2.8% 10.7% bis 1 bis bis 5 bis % Keine Aussage möglich

17 ERHEBUNGSGRUNDLAGEN Testing Trends & Benchmarks Schweiz Wirtschaftssektor Wenig überraschend ist, dass der Anteil an Finanzen und Versicherungen stetig sinkt. Von 35% im 2011 über 28.4% im 2012 zu 24.8% im Zeitgleich stieg der Anteil staatlicher Betriebe von 6.5% auf inzwischen 9%. Aufgabenbereich Viele Teilnehmende umschreiben ihre Tätigkeit mit mehr als einer Rolle. Das Spektrum der zu erfüllenden Aufgabenbereiche ist insgesamt sehr breit gefächert. IT Finanzen, Versicherungen Staatliche und staatsnahe Betriebe Industrie Transport und Verkehr Telekom MedTech Andere IT-Mitarbeitende % 5.9% 4.2% 2.4% 7.3% 24.8% 37.7% Über die Hälfte der Befragten arbeitet in Firmen mit mehr als 250 IT-Mitarbeitenden Test Manager 35.5% Test Engineer / Test Analyst / Tester 27.8% Berater / Consultant Projektleiter Teamleiter Abteilungsleiter / Bereichsleiter Requirements Engineer Business Analyst Quality Manager / QS-Verantwortlicher Softwareentwickler / Developer SW Engineer in Test / Testautomatisierer C-Level (CEO / CIO /...) 18.6% 18.3% 17.8% % 12.6% % 6.6% % 29. Scrum Master Product Owner 5.7% 5.2% % % % % 1 15% 25% 3 35%

18 Requirements Trends & Benchmarks Schweiz 2013 Testing Trends & Benchmarks Schweiz Möchten Sie mehr wissen? Sie erhalten den detaillierten Report mit weiteren Analysen über Requirements Engineering über Requirements Trends & Benchmarks Schweiz 2013 Viele weitere Zahlen und Details sind im Requirements Trends & Benchmark Report 2013 zu finden. RE-Aufwand im Verhältnis zum Gesamtaufwand Zufriedenheit Erheben von Anforderungen 44.1% 42.1% 13.8% 24.7% 22.6% 20.4% 18.3% Analysieren von Anforderungen 48.7% 33.3% 17.9% Dokumentieren von Anforderungen 35.9% 44.1% % Prüfen von Anforderungen 36.4% % 2.73% 0.5% Verwalten von Anforderungen 28.2% 40.5% 31.3% < 5% % darüber RE Aufwand im Verhältnis zum Gesamtaufwand Zufrieden Mittelmässig Unzufrieden

19 Agile Trends & Benchmarks Schweiz 2013 Testing Trends & Benchmarks Schweiz Möchten Sie mehr wissen? Sie erhalten den detaillierten Report mit weiteren Analysen über agile Trends über Agile Trends & Benchmarks Schweiz 2013 Viele weitere Zahlen und Details sind im Agile Trends & Benchmark Report 2013 zu finden. Verwendete Tools im agilen Umfeld Management Practices MS Office (Word, Excel) 52.9% Sprint Review / Product Demo 78.6% Atlassian JIRA / Greenhopper HP QC / ALM MS Team Foundation Server % 47.1% Backlog Management Daily Standup Burndown Chart Definition of Done 75.7% 73.6% 64.3% 62.1% Bugzilla 10.7% Retrospektiven 61.4% IBM Rational Team Concert Eigene Entwicklung Scrumy 8.6% 6.4% 4.3% Release Planning Taskboard Planning Poker Dedicated Product Owner % 41.4% Version One 3.6% Velocity Chart 28.6% Rally Software Development 2.1% Definition of Ready 17.9% Inflectra SpiraDevelopment Andere 1.4% 14.3% On-Site Customer Co-Location Work in Progress (WiP) Limits 16.4% 9.3% 7.1% 4 4 6

20 Über Uns SwissQ unterstützt ihre Kunden in den Themen Requirements, Testing und Agilität. Wir stellen dabei sicher, dass die richtige Funktionalität schnell und richtig geliefert wird. Dies durch das Bereitstellen von Expertise, Ressourcen, Assessments, Methoden und Trainings. Unsere Vision ist es, die Wertsteigerung in der IT durch perfektes Requirements Engineering, professionelles Software Testing und den bewussten Einsatz von agilen Methoden zu verbessern. Nebst der Erbringung von hochqualitativen Services, verfolgen wir diese Vision durch die Schaffung von unabhängigen Plattformen wie dem Swiss Testing Day und dem Swiss Requirements Day, die den Wissens- und Erfahrungsaustausch ermöglichen. Ausserdem helfen wir hellen Köpfen, ihr Wissen durch unsere Schulungen zu erweitern. by SwissQ Consulting AG Stadthaus-Quai 15 CH-8001 Zürich Tel Fax Facebook: swissqconsulting