Andreas Hartmann, Stephan Müller adesso AG. JSF Testing: Tools and Technics

Transkript

1 Andreas Hartmann, Stephan Müller adesso AG JSF Testing: Tools and Technics

2 Speaker Andreas Hartmann Principal Software Engineer Tätigkeitsschwerpunkte: - Konzeption und Implementierung von Softwarearchitekturen und Frameworks auf Basis der JEE Plattform - Serviceorientierte Architekturen und Portaltechnologien im Kontext der Versicherungs- und Banken-Branche Stephan Müller [smueller@adesso.de] Senior Software Engineer Tätigkeitsschwerpunkte: - Konzeption und Implementierung von Portalen und Webanwendungen - Enterprise Architekturen und Webtechnologien

3 Agenda - Classification - Tools I : JSF-Testing - Tools II : Web-Testing - Tools III: Load-/Performance-Test and more - Technology Mapping - Conceptual View

4 Classification

5 Tools I: JSF-Testing JSFUnit JSFUnit Static Analysis Apache MyFaces Test

6 Tools: JSFUnit Facts: In-Container Testing - Greybox-Tests möglich - mit Cactus oder Arquillian - reale HTTP-Requests mit HtmlUnit - Voller Zugriff auf Managed Beans, FacesContext, EL Expressions und den Komponentenbaum - Paralleler Zugriff auf die gerenderte Html-Antwort - keine Mocks Steckbrief: Version: 1.3.0Final ( ) Unterstützte Testwerkzeuge: JUnit, TestNG Unterstützte JSF-Versionen: JSF 1.1, JSF1.2, JSF2.0 Anwendungsbereich: Entwicklertest Webseite:

7 Tools: JSFUnit In-Container Testing Grexbox-Test - kombiniert Whitebox und Blackbox Tests - Testclient erzeugt realen HTTP-Requests auf JSF Seiten (Blackbox- Test) - Testclient prüft Zustand der Managed-Bean über JSF Framework (Whitebox-Test) Testausführung mit Cactus (nur mit JUnit3) - Tests werden mit Anwendung im Container deployed - Ausführung durch Aufruf von Testseite / JSFUnitConsole Testausführung mit Arquillian (mit JUnit4 / TestNG) - Tests rufen Anwendung als Remote Client auf vgl. (Reference Guide, Kap 10.2)

8 Tools: JSFUnit In-Container Testing Testmöglichkeiten - Managed Beans Scopes EL Expressions - Navigation - UI Komponenten - Fehlerbehandlung mit Faces Messages - Konfigurationseinstellungen - und vieles mehr...

9 Tools: JSFUnit Beispiel index.jsp <f:view> <h:form id="form1"> <h:outputtext id="question" value="bitte Namen eingeben:" /> <h:inputtext id="input" value="#{mbean.text}" /> <h:commandbutton id="submit" value="absenden" action="/hello.jsp" /> </h:form> </f:view> hello.jsp <f:view> <h:outputtext id="output" value="hallo, #{mbean.text}" /> </f:view>

10 Tools: JSFUnit Beispiel public void testhalloandreas() throws IOException { JSFSession jsfsession = new JSFSession( "/index.jsf" ); JSFClientSession client = jsfsession.getjsfclientsession(); JSFServerSession server = jsfsession.getjsfserversession(); assertequals( "/index.jsp", server.getcurrentviewid() ); client.setvalue( "input", "Andreas" ); client.click( "submit" ); } assertequals( "/hello.jsp", server.getcurrentviewid() ); assertequals( "Andreas", server.getmanagedbeanvalue( "#{mbean.text}" ));

11 Tools: JSFUnit Analysis Facts: - Statische Analyse sucht nach fehlerhaften Konfigurationen - Prüft drei Bereichen Anwendungskonfiguration Views TLD Dateien Steckbrief: Version: 1.3.0Final ( ) Unterstützte Testwerkzeuge: JUnit Unterstützte JSF-Versionen: JSF 1.1, JSF1.2, JSF2.0* Anwendungsbereich: Entwicklertest Webseite: canalysis * keine Annotations

12 Tools: JSFUnit Analysis Statische Analyse - Konfiguration Prüft die ManagedBean Definition - Sind alle Managed Beans im Scope Session oder Application serialisierbar? - Besitzt die Managed Bean für jede managed-property eine Set- Methode? - Existieren doppelte Managed Bean Namen? - Ist der angegebene Scope gültig? - Existiert die angegebene Klasse? - Implementiert die konfigurierte Klasse das richtige Interface oder leitet von der korrekten Framework Klasse ab? JSF2.0 Annotations werden nicht unterstützt

13 Tools: JSFUnit Analysis Beispiel import org.jboss.jsfunit.analysis.abstractfacesconfigtestcase; public class StaticAnalysisFacesConfigTest extends AbstractFacesConfigTestCase { private static Set<String> paths = new HashSet() {{ }}; add( "WebContent/WEB-INF/faces-config.xml" ); public StaticAnalysisFacesConfigTest() { super( paths ); } }

14 Tools: JSFUnit Analysis Statische Analyse - Views Prüft Value & Method Expressions - Wird eine nicht-existente Managed Bean referenziert? - Implementieren die referenzierten Managed Beans alle notwendigen Get- und Set-Methoden?

15 Tools: JSFUnit Analysis Beispiel import org.jboss.jsfunit.analysis.abstractviewtestcase; public class StaticAnalysisViewTest extends AbstractViewTestCase { private static Set<String> absviewpaths = new HashSet() {{ }}; add( "WebContent/index.jsp" ); private static Set<String> recviewpaths = new HashSet() {{ }}; add( "WebContent/views" ); } public StaticAnalysisViewTest() { super(absviewpaths, recviewpaths, "WebContent/WEB-INF/facesconfig.xml"); }

16 Tools: Apache MyFaces Test Facts: - Sub-Projekt von Apache MyFaces - Stellt Mock-Objekte für die JavaServer Faces und Servlet API bereit - Unit-Tests prüfen das Verhalten von Framework und Komponenten - Wird u.a. zum Test von MyFaces Komponenten genutzt Steckbrief: Version: (nur im SVN) Unterstützte Testwerkzeuge: JUnit Unterstützte JSF-Versionen: JSF 1.1, JSF1.2, JSF2.0 Anwendungsbereich: Entwicklertest Webseite:

17 Tools: Apache MyFaces Test Mock-Klassen JavaServer Faces API - application (MockApplication) - externalcontext (MockExternalContext) - facescontext (MockFacesContext) - lifecycle (MockLifecycle) Servlet API - config (MockServletConfig) - request (MockHttpServletRequest) - response (MockHttpServletResonse) - servletcontext (MockServletContext) - session (MockHttpSession)

18 Tools II: Web-Testing Selenium/Webdriver Selenium-IDE Selenium-Grid QuBicTest

19 Tools II: Selenium/Webdriver Facts: - Testframework für Web- Anwendungen - Tests werden in einem Fenster des gewünschten Browser ausgeführt - Unterstützung gängiger Browser Hilfreich für Kompatibilitätstest Keine browserspezifischen Anpassungen notwendig - Unterstützung für verschiedene Sprachen Steckbrief: Version: 2.0 alpha 5 ( ) Unterstützte Testwerkzeuge: JUnit, TestNG Anwendungsbereich: Entwicklertest, Integrationstest Webseite:

20 Tools II: Selenium/Webdriver Selenium - Führt Tests als JavaScript Anwendung im Browser aus - Unterstützte Browser Firefox, IExplorer, Safari, Opera, Google Chrome, etc. - Steuerung über Selenium-RC Java-Server zur Steuerung des ausgewählten Browsers Client Bibliothek für bevorzugte Sprache (Java, C#, PHP, Ruby,...)

21 Tools II: Selenium/Webdriver Webdriver - Steuert Browser über einen Treiber fern Native Treiber für HtmlUnit, IExplorer, Firefox, Chrome - Gründe für den Einsatz von Webdriver Behandlung multipler Frames, Browserfenster, Popups, Alerts Navigation zwischen Webseiten AJAX UI Elemente - Integration in Selenium 2.0 Selenium Tests mit Webdriver API ausführen (WebDriverBackedSelenium) Alternative Browser via Selenium RC steuern(selenesecommandexekutor) vgl.

22 Tools II: Selenium/Webdriver public void fillinputfieldandsubmit() { selenium.open( "/de/" ); assertequals( "adesso AG - Herzlich willkommen!", selenium.gettitle() ); // Eingabefeld auslesen, Suchbegriff eingeben & Anfrage absenden assertequals( "Suchen", selenium.getvalue( "textfield" ) ); selenium.type( "textfield", "Jobs" ); selenium.click( "suchicon" ); selenium.waitforpagetoload( "30000" ); assertequals("adesso AG - Ergebnisse Ihrer Suchanfrage", selenium.gettitle() ); }

23 Tools II: Selenium/Webdriver public void fillinputfieldandsubmit() { } driver.get( " ); assertequals( "adesso AG - Herzlich willkommen!", driver.gettitle() ); // Eingabefeld finden, leeren, Suchbegriff eingeben & Anfrage absenden WebElement search = driver.findelement( By.id( "textfield" ) ); assertequals( "Suchen", search.getvalue() ); search.clear(); search.sendkeys( "Jobs" ); search.submit(); // Titel der Seite prüfen assertequals("adesso AG - Ergebnisse ihrer Suchanfrage,driver.getTitle());

24 Tools II: Selenium IDE Facts: - Firefox-Plugin - Capture- and Replay Funktion Aufzeichnen und Ausführen von Tests Interaktives Testen im Browser Exportfunktion für verschiedene Sprachen (Java, C#, PHP, Ruby,...) Erleichtert die Erstellung automatisierter Tests Steckbrief: Version: ( ) Unterstützte Testwerkzeuge: --- Anwendungsbereich: Entwicklertest, Integrationstest Webseite:

25 Tools II: Selenium IDE

26 Tools II: Selenium Grid Facts: - 1 Test n Testinstanzen - Selenium Hub steuert n Selenium-RC Instanzen Paralleles Testen Testen mit unterschiedlichen Browsern Umgebungsspezifische Tests möglich - Amazon EC2 Image verfügbar Steckbrief: Version: ( ) Unterstützte Testwerkzeuge: JUnit, TestNG Anwendungsbereich: Kompatiblitätstest, Lasttest Webseite:

27 Tools II: QubicTest Facts: - Eclipse-Plugin - Graphischer Test-Editor Capture- and Replay Funktion Darstellung als Flowcharts Fehlerhafter Testschritt wird markiert Export als Selenium-Test möglich Steckbrief: Version: ( ) Anwendungsbereich: Integrationstest Webseite:

28 Tools II: QubicTest

29 Tools III: Load-/Performance-Test JMeter and more Eclipse Memory Analyzer JavaMelody

30 Tools III JMeter Facts: - Werkzeug zur Durchführung von Lasttests HTTP/HTTPS FTP JDBC LDAP SOAP/XML-RCP JUnit - Erstellung von Testplänen - Performancemessung Steckbrief: Version: 2.4 (Juli 2010) Anwendungsbereich: Load-/Performance-Test Webseite:

31 Tools III JMeter

32 Tools III JMeter Regular Expression Extractor HTTP Request*

33 Tools III Eclipse Memory Analyzer Facts: - Java Heap Analyzer Steckbrief: Version: (August 2010) Anwendungsbereich: Speicheranalyse Webseite:

34 Tools III Eclipse Memory Analyzer JConsole jmap -dump:file=d:/wastememory.hprof 4300

35 Tools III Eclipse Memory Analyzer

36 Tools III JavaMelody Facts: - Monitoring von JEE Anwendungen (Spring, EJB 3, Quartz und u.a. JSF) - Es werden u.a. der Speicherverbrauch Anzahl der User Sessions Anzahl der JDBC Connections Aktive Threads HTTP Fehler in Echtzeit erfasst und entsprechend aufbereitet dargestellt. Steckbrief: Version: (Oktober 2010) Anwendungsbereich: Monitoring Webseite: lody/

37 Tools III JavaMelody

38 Technology Mapping QS Tools JSFUnit MyFaces Test WebDriver / Selenium JMeter / MAT / JavaMelody Entwickler-Tests Integrations-Tests Last-/Performance-Tests and more

39 Conceptual View Auswahl der für das Projekte angemessenen Testwerkzeuge Testanforderungen bei der Architektur mit berücksichtigen Festlegung was wie getestet werden soll Integration der Tests in den Buildprozess Regressionsfähigkeit der Tests Testdaten

40 Conceptual View Softwarequalität nach ISO/IEC 912 Prüfkriterien - Funktionalität Prüfkriterien Zuverlässigkeit Prüfkriterien - Benutzbarkeit Prüfkriterien - Effizienz Prüfkriterien - Wartbarkeit Prüfkriterien - Übertragbarkeit Risikoanalyse Testinfrastruktur Prüfgegenstände Prüfmethodik Quality-Gates Berichtswesen Prüfverantwortliche QS-Werkzeuge Artefaktverwaltung

41 Vielen Dank für ihre Aufmerksamkeit /