Selenium. Ines Pichlbauer 1/12

Transkript

1 Selenium Kategorie: Autor: Capture & Replay Ines Pichlbauer 1/12

2 1. Überblick Tool: Selenium Hersteller: ThoughtWorks Inc. Webseite: Kategorie: Capture & Replay Tool, Testroboter Lizenz: Open Source, siehe Tabelle 1 Eigenschaften: Automatisierung der Tests von Web- und AJAX-Anwendungen, Durchführung von Browsertests Version: siehe Tabelle 1 Version Lizenz Selenium Core Apache License - v 2.0 Selenium IDE 1.0 beta 2 Apache License - v 2.0 Selenium Remote Control 1.0 beta 1 Apache License - v 2.0 Selenium Grid Apache License - v 2.0 Selenium on Rails Abhängig von der Rails-Version Apache License - v 2.0 Selneium on Ruby Apache License - v 2.0 Cubic Test (for Eclipse) Eclipse Public License - v 1.0 Tabelle 1 Versions- und Lizenzsübersicht Inhaltsverzeichnis 1. Überblick Allgemeines Funktionsbeschreibung Testerstellung Selenium IDE Selenium Remote Control CubicTest für Eclipse Testausführung TestRunner Selenese Testfall Fazit Quellen und Weiterführendes /12

3 2. Allgemeines Selenium ist ein Testtool mit dem Weboberflächentests erstellt und automatisiert abgespielt werden können. Es kann Benutzer und deren Aktionen in unterschiedlichen Browsern simulieren. Die Geschichte von Selenium 1 begann im Jahr 2004, als für ein internes Projekt der ThoughtWorks Incorporated 2 ein JavaScriptTestRunner geschrieben werden sollte. Aus diesem kleinen Tool sind bis heute sieben Open Source-Projekte entstanden, die auf unterschiedliche Weise das automatisierte Testen von Web- und AJAX-Anwendungen ermöglichen. Die Selenium IDE, der Selenium Core und Selenium Remote Control werden an dieser Stelle vorgestellt. Diese drei Teilpropjekte stehen unter der Apache License Version 2.0 zur Verfügung. Doch nicht nur die Tatsache, dass das Selenium Framework zur freien Verfügung steht, sondern auch Seleniums Plattformunabhängigkeit durch die Verwendung von DHTML und JavaScript, trägt zur Beliebtheit des Frameworks bei. Der Selenium Core, zurzeit in der Version verfügbar, ist das Hauptmodul, um Webanwendungen automatisiert zu testen. Dies geschieht in der frameworkeigenen Testsprache Selenese. Die IDE und Selenium Remote Control bauen auf den Core auf und bieten darüber hinaus zusätzliche Funktionalität, die unter 3.1 Testerstellung näher erläutert wird. Ein weiteres Werkzeug, das zur graphischen Erstellung und Ausführung von Selenium- Testfällen genutzt werden kann ist Cubic Test. Auf dieses von Selenium unabhängige Plugin für Eclipse wird unter eingegangen. 3. Funktionsbeschreibung Die Softwareunterstützung kann in die Testerstellung und die Testausführung aufgegliedert werden. Die folgenden Betriebssysteme werden sowohl bei der Ausführung als auch bei der Erstellung unterstützt: Windows OS X Linux Solaris /12

4 3.1. Testerstellung Selenium-Tests können auf unterschiedliche Weisen erstellt werden. Zum Einen mit der Selenium IDE, wie in Abbildung 1 dargestellt, oder in einer der vielen unterstützten Programmiersprachen, die in Tabelle 3 aufgelistet sind Selenium IDE Die Selenium IDE in der Version 1.0b2, ist eine Firefoxerweiterung mit deren Hilfe sich Tests direkt im Browser aufzeichnen, debuggen und abspielen lassen. Sie enthält bereits den Selenium Core, so dass nach der Installation ohne weitere Einstellungen mit der Testerstellung bzw. aufzeichnung begonnen werden kann. Dies geschieht durch Aufnehmen der Benutzeraktionen im Browser und setzt folglich keinerlei Programmierkenntnisse voraus. Abbildung 1 Selenium IDE 4/12

5 Abbildung 1 zeigt die IDE mit einer Testsuite, bestehend aus zwei Testfällen. Testsuiten fassen einzelne Testfälle in einer bestimmten Reihenfolge zusammen. Standardmäßig befindet sich die IDE von Beginn an im Aufnahmemodus, am aktivierten roten Button rechts im Fenster zu sehen. Die Base URL definiert die URL von der aus alle weiteren Aktionen relativ ausgeführt werden. Die in Tabelle 2 zu sehenden Funktionen, enthalten alle zum Abspielen eines Testfalls nötigen Optionen. Button Funktion Reguliert die Wiedergabegeschwindigkeit eines Tests Spielt eine geöffnete Testsuite ab Spiel einen einzelnen Testfall ab Unterbricht einen Test bei dem aktuellen Testschritt bzw. setzt ihn fort Führt Testschritte einzeln aus und stoppt nach jedem Schritt Spielt den Test im Selenium TestRunner ab Startet die Aufnahme Tabelle 2 Menüleiste mit Abspieloptionen Um einen Testfall mit Anweisungen zu füllen, wird der Aufnahmebutton gedrückt und alle für den Testfall gewünschten Aktionen im Browser ausgeführt. Standardmäßig erfolgt die Testaufzeichnung in Selenese, da die interne Verarbeitung über den Selenium Core erfolgt. Alle Anweisungen werden in Tabellenform in der IDE aufgelistet. Command, Target und Value können von dort aus im Nachhinein bearbeitet werden. Weiterhin können Testfälle direkt im Selenese-Code über dem Tab Source bearbeitet werden. Erstellte Tests lassen sich in alle in Tabelle 3 aufgeführten Programmiersprachen exportieren. Dies ist nützlich, sobald z.b. Formulare wiederholt und mit unterschiedlichen Daten ausgefüllt werden sollen, die aus einer Datenbank oder Datei gelesen werden. Dies ist bei manuell aufgezeichneten Tests nicht möglich. Über Datei Export Testcase As kann ein Test beispielsweise als Javatest exportiert und mit Selenium Remot Control verwendet werden. In Listing 1 ist ein in Java exportierter JUnittestfall zu sehen. Soll ein Test von Beginn an in einer bestimmten Programmiersprache aufgezeichnet werden, kann dies unter Options Format voreingestellt werden. package com.example.tests; import com.thoughtworks.selenium.*; import java.util.regex.pattern; public class NewTest extends SeleneseTestCase { public void setup() throws Exception { setup(" "*chrome"); } 5/12

6 public void testnew() throws Exception { selenium.open("/schulungen/index.html"); selenium.click("link=certified Tester"); verifytrue(selenium.istextpresent("techniken und Begriffe")); } } Listing 1 Generierter Selenium Javatest Selenium Remote Control Selenium Remote Control ermöglicht es, Tests unterschiedlicher Programmiersprachen auf einer entfernten Webanwendung auszuführen. Der Selenium Server muss auf der Client-Seite gestartet werden und läd über den Selenium Core den im Test spezifizierten Browser mit der Webseite. Ab jetzt kommuniziert der Test über ein HTTP-Proxy auf dem Selenium Server mit dem Browser, der nun alle weiteren Testschritte ausführt. In Abbildung 2 ist die Remote Control Architektur dazu zu sehen. Abbildung 2 Remote Control Architektur /12

7 Ein weiterer Vorteil der Remoteausführung ist die Möglichkeit, Selenium-Tests mit Unittestframeworks zu kombinieren. Tabelle 3 enthält momentan unterstützte Testframeworks. Dies ermöglicht beispielsweise das Lesen von Testdaten aus Dateien oder von Schleifenbildungen über Testschritte, so dass diese mehrfach ausgeführt werden können, ohne doppelten Code schreiben zu müssen. Sprache Framework Selenium DIE Selenium Remot Control C# NUnit Standardcodegenerierung Browsermanipulation und Assertionprüfung Java JUnit Modifizierbare Browsermanipulation und Assertionprüfung Standardcodegenerierung Perl -- Browsermanipulation und -- Assertionprüfung PHP -- Browsermanipulation und -- Assertionprüfung Python Unittest Standardcodegenerierung Browsermanipulation und Assertionprüfung Ruby RSpec, Standardcodegenerierung Browsermanipulation und Assertionprüfung Test::Unit Tabelle 3 Unterstützte Programmiersprachen und Testframeworks CubicTest für Eclipse CubicTest ist eine von Selenium unabhängige Anwendung zur Testfallerstellung von Selenese und Watir Tests. Es ermöglicht eine graphische Testerstellung per Drag&Drop, sowie die Aufnahme von Tests in verschiedenen Browsern. Abbildung 3 zeigt die Oberfläche von CubicTest. Für einen neuen Test muss zuerst ein CubicTest-Projekt angelegt werden, das später alle Tests und Testsuiten enthält. Danach stehen alle von Selenium unterstützten Commands zur Verfügung. 7/12

8 Abbildung 3 Oberfläche von CubicTest Soll beispielsweise geprüft werden, ob ein bestimmter Text auf der Webseite vorhanden ist, kann das Element TXT Text auf die Arbeitsfläche in eine Seite bzw. in einen Zustand gezogen werden. Im in Abbildung 4 zu sehenden Bereich können danach die Eigenschaften, die zum lokalisieren des Elements nötig sind, eingetragen werden. Abbildung 4 Elementeigenschaften 8/12

9 Auf diese Art und Weise kann der komplette Test spezifiziert werden. Über einen Rechtsklick auf den Test und die Auswahl des Menüpunkts Run CubicTest with Selenium kann der Test gestartet werden. Auch eine Debug-Möglichkeit ist vorhanden. Über Selenium Remote Control wird der Test ausgeführt. Nach einem erfolgreichen Test werden alle korrekt durchlaufenen Testschritte grün und fehlgeschlagene Schritte rot markiert (in Abbildung 5 zu sehen). Abbildung 5 Erfolgreiche Testschritte 3.2. Testausführung Die Ausführung von Selenium-Tests ist in vielen Browsern möglich. Die gängigen Browser, wie Firefox, Opera, Safari und der Internet Explorer werden zur Browsernavigation unterstützt. Weitere unterstützte Browser können auf der Selenium Homepage 4 eingesehen werden TestRunner Der Selenium TestRunner ist eine HTML-Seite, von der aus Test Suiten oder einzelne Tests gestartet werden können. Die zu testende Anwendung muss dafür auf demselben Server, wie der TestRunner selbst installiert sein. Die TestRunner-Webseite wird in dem Browser geöffnet, in dem auch die Tests abgespielt werden sollen. Er ist in drei Bereiche unterteilt. Ganz links in Abbildung 6 befindet sich der Test Suite Bereich. Dort können Test Suiten mit zwei zusätzlichen Optionen, die Anwendung in einem eigenen Fenster zu starten oder die Tests automatisch ablaufen zu lassen, geladen werden. In der Fenstermitte werden die einzelnen Testschritte des aktuellen Tests angezeigt. Die Information, ob ein Test oder einzelne Testschritte erfolgreich waren oder gescheitert sind, wird durch grüne oder rote Markierung der Schritte visualisiert. Der rechte Bereich beinhaltet das sogenannte Control Panel. Es bietet die Möglichkeit, alle Tests einer Suite, den aktuellen Test oder einzelne Schritte eines Tests ablaufen zu lassen auch die Ablaufgeschwindigkeit ist individuell einstellbar. Wird ein Test schrittweise durchlaufen so ist es möglich, den DOM-Baum und dazu aufgezeichnete Informationen anzuschauen. Während der gesamten Dauer eines Tests oder eines Test Suite Durchlaufs werden Metainformationen zu Testdauer, erfolgreicher oder fehlgeschlagener und noch nicht 4 9/12

10 abgeschlossener Tests aktualisiert. Im gesamten unteren Bereich werden standardmäßig alle ausgeführten Aktionen in der zu testenden Webapplikation angezeigt. Abbildung 6 Selenium Core TestRunner Selenese Testfall In Listing 2 ist ein mit der IDE aufgezeichneter Selenese-Testfall als Beispiel zu sehen, der den folgenden Ablauf beschreibt: Im Webbrowser soll die URL eingegeben werden. Der Link mit dem Namen Certified Tester soll angeklickt und die dazugehörige Seite geöffnet werden. Sie enthält den Text Techniken und Begriffe. Das Vorkommen dieses Textes soll im letzten Schritt überprüft werden. Jeder Testfall besteht aus einer HTML-Seite. Ein Link im Header der Seite gibt unter selenium.base die Basis-URL an, so dass alle weiteren Operationen des Tests relativ angegeben werden können. Ein Testschritt wird als Zeile einer dreispaltigen Tabelle definiert. Die erste Spalte umfasst dabei die Anweisung (command), die zweite beschreibt das Ziel (target) und die dritte Spalte, falls nötig, einen erwarteten Wert (value). Im Beispiel wird zuerst die Anweisung erteilt, die Start-URL aufzurufen. Die nächste Tabellenzeile weist den Browser an, auf den Link Certified Tester zu klicken. Nach dem Laden der Seite wird mit dem Befehl verifytextpresent überprüft, ob der Text Techniken und Begriffe auf der Seite vorhanden ist. Ist dies der Fall, wird der erfolgreiche Testdurchlauf durch einen grünen Balken im linken Fensterbereich in der IDE dargestellt. Dort wird auch die Anzahl der Testläufe und fehlerhafter Testläufe angezeigt. Im unteren Fensterbereich kann zwischen Logging- Informationen und der Selenium Referenz umgeschaltet werden, so dass die entsprechenden Informationen dort angezeigt werden. 10/12

11 <html> <head> // holt Base URL aus der Textbox <link rel="selenium.base" href="" /> <title>new Test</title> </head> <body> <table cellpadding="1" cellspacing="1" border="1"> <thead> <tr><td rowspan="1" colspan="3">new Test</td></tr> </thead> <tbody> <tr> <td>open</td> <td>/schulungen/index.html</td> <td></td> </tr> <tr> <td>click</td> <td>link=certified Tester</td> <td></td> </tr> <tr> <td>verifytextpresent</td> <td>techniken </td> <td></td> </tr> </tbody> </table> </body> </html> Listing 2 Selenese Test Um mehrere Tests hintereinander auszuführen, gibt es die Möglichkeit sie in einer Test Suite zusammen zu fassen. Auch die Test Suite besteht aus einer HTML-Seite. Im Unterschied zum Testfall besteht eine Test Suite Tabelle jedoch aus nur einer Spalte, die einen Link auf die jeweiligen Testfälle enthält. 4. Fazit Selenium bietet je nach Kenntnisstand des Benutzers unterschiedliche Möglichkeiten zur Testentwicklung und Automatisierung. Die Bedienung der IDE ist intuitiv und zum Kennenlernen von Selenium sehr gut geeignet. Sollen kompliziertere Tests und Testsuiten entwickelt werden sollte allerdings auf Selenium Remote Control zurückgegriffen werden. In Kombination mit den Unittesting-Frameworks ist Selenium ein mächtiges Werkzeug. 11/12

12 CubicTest erleichtert die Testfallerstellung, auch für komplexe Tests. Durch die Exportfunktionalität ist das Ausführen der Tests auch unabhängig von der CubicTest- Enwicklungsumgebung möglich. 5. Quellen und Weiterführendes /12