Arne Limburg open knowledge GmbH. Mobile Testing mit Android

Transkript

1 Arne Limburg open knowledge GmbH Mobile Testing mit Android

2 Meine Person Arne Limburg Enterprise Architeckt open

3 Herausforderungen Vielfalt der Geräte Bildschirmauflösung Eingabemethode Capabilities Vielfalt der Umwelteinflüsse Umgebung (Netz, Batterie, Standort) Nutzerverhalten

4 Was tun? Rechne mit allem! Rechne mit nichts! Testen, Testen, Testen!

5 Testen Konzentration auf das Wesentliche Geräte Android-Versionen Länder Operatoren Test-Automatisierung

6 Testen - Agenda Unit-Tests Funktionstests Abnahme- und Regressionstests Stresstests

7 Unit-Testing A unit is the smallest testable part of an application.

8 Ziel von Unit-Testing korrekte Funktionsweise von kleinen Einheiten der Software (Testen einzelner Methoden) Automatisch Regelmäßig (Continuous Integration) Regressionssicher

9 Android Testing Framework JUnit-Unterstützung für On-Device-Testing Oberklassen zum Testen von Android-Komponenten Activity Content-Provider Service

10 Mock-Kontexte MockContext Alle Methoden werfen Exception IsolatedContext Isolation vom Device Datenbank- und Datei-Operationen möglich RenamingDelegatingContext Kommunikation mit dem Device möglich Datenbank- und Datei-Operationen werden umgeleitet

11 Android Testing - Architektur

12 Unit-Test-Klassenhierarchie Package android.test junit.framework.testcase AndroidTestCase InstrumentationTestCase ApplicationTestCase ActivityTestCase LoaderTestCase ProviderTestCase2 ServiceTestCase ActivityUnitTestCase ActivityInstrumentationTestCase2

13 PoviderTestCase2 Testen eines isolierten Content-Providers Verwendung von IsolatedContext Bereitstellen eines MockContentResolvers API setcontext(context) (von AndroidTestCase) getmockcontentresolver() getprovider

14 ProviderTestCase2 public class PositionProviderTest extends ProviderTestCase2<PositionProvider> { public GeoContactProviderTest() { super(geocontactprovider.class, GeoContactProvider.AUTHORITY); } public void testinsert() { }

15 ServiceTestCase Standardmäßig mit echtem Context und MockApplication Herausforderung: Testen von Threading API setapplication(application) setcontext(context) (von AndroidTestCase) startservice(intent) bindservice(intent)

16 ServiceTestCase public class UpdaterServiceTest extends ServiceTestCase<UpdaterService> { public UpdaterServiceTest() { super(updaterservice.class); } } public void teststartservice() { }

17 Code Diving...

18 ActivityUnitTestCase Leitet von InstrumentationTestCase ab Isoliertes Testen einer Activity API (Auszug) getstartedactivityintent() getstartedactivityrequest() getrequestorientation() isfinishedcalled()

19 ActivityUnitTestCase public class Positio ActivityUnitTest extends ActivityUnitTestCase<Position Activity> { public PositionOverviewActivityUnitTest() { super(positionoverviewactivity.class); } } public void testonlistitemclick() { }

20 Code Diving...

21 Unit-Tests Herausforderung: Umgang mit Abhängigkeiten Klassisches Vorgehen: Erstellen von Mocks On-Device: Mock-Implementierungen des Android Testing Frameworks Off-Device: Gängige Java-Mocking- Frameworks (EasyMock, Mockito,...)

22 public class PositionOverviewActivityTest public void onitemclick() { } }

23 public class PositionOverviewActivityTest public void onitemclick() { } }

24 public void onitemclick() { ShadowActivity a = shadowof(activity); Intent startedintent = a.getnextstartedactivity(); }

25 Code Diving...

26 Continuous Integration Regelmäßiges Bauen und Testen (CI-Server) z.b. Jenkins Voraussetzung: Automatisiertes Bauen und Testen Ant oder Maven Zusatzfeature: Code-Abdeckung mit EMMA

27 Agenda Unit-Tests Funktionstests Abnahme- und Regressionstests Stresstests

28 Funktionstests Testen der Interaktion mit der Umgebung Testaufbau UI-Verhalten Klickpfade State-Saving / -Restoring Testinhalt Änderung der Konfiguration (Orientierung, Sprache, Tastatur, Location) Änderung der Ressourcen (Batterie, Netzwerk, Bluetooth, GPS Eingehender Anruf / SMS Tool: Auch Android JUnit

29 Unit-Test-Klassenhierarchie Package android.test junit.framework.testcase AndroidTestCase InstrumentationTestCase ApplicationTestCase ActivityTestCase LoaderTestCase ProviderTestCase2 ServiceTestCase ActivityUnitTestCase ActivityInstrumentationTestCase2

30 InstrumentationTestCase API (Auszug) <T> T launchactivity(string, Class<T>, Bundle) <T> T launchactivitywithintent(string, Class<T>, Intent) void sendkeys(string) void sendkeys(int ) void sendrepeatedkeys(int ) Instrumentation getinstrumentation()

31 Instrumentation API (Auszug) ActivityMonitor addmonitor( ) Activity waitformonitor( ) Activity waitformonitorwithtimeout( ) void startactivitysync( ) void sendxxxsync( ) void startperformancesnapshot() void endperformancesnapshot() void startprofiling() Void stopprofiling()

32 ActivityInstrumentationTestCase2 Leitet von InstrumentationTestCase ab Testen von UI-Verhalten à Testen eines gesamten Worksflows Erzeugen von TouchEvents mit TouchUtils Überprüfen von Layout mit ViewAsserts Eventuell Verwendung von Third-Party- Framework (Robotium)

33 ActivityInstrumentationTestCase2 public class Position ActivityUiTest extends ActivityInstrumentationTestCase2<Pos ity> { public PositionOverviewActivityUiTest() { super(positionoverviewactivity.class); } } public void testclickonlist() { }

34 Code Diving...

35 ActivityUnitTestCase vs. ActivityInstrumentationTestCase2 ActivityUnitTestCase Reines Testen des Codes Kein Test des UI- Verhaltens Kein Test des Workflow- Verhaltens ActivityInstr TestCase2 Testen des UI- Verhaltens Testen des Workflow- Verhaltens

36 Robotium Selenium nur für Android Baut auf Instrumentation auf Weniger komplex zu bedienen Black-Box-Testing möglich

37 Android Emulator fernsteuern Steuerung von Geo-Koordinaten, Telefonie, Netzwerk (Geschwindigkeit, Delay), Batterie, SMS, Sensoren DDMS-Perspektive in Eclipse Verbinden via Telnet Beispiel: telnet localhost 5554

38 Continuous Integration Best Practice Funktionstests selten ausführen Klassifizierung von Echter Unit-Test Test einer Komponente mit Workflow-Test (gesamter Use-Case)

39 Agenda Unit-Tests Funktionstests Abnahme- und Regressionstests Stresstests

40 MonkeyRunner Creative Commons by Simon Englisch

41 MonkeyRunner Python / Jython Testen kompletter Use-Cases Vergleichen der Ergebnisse über Bildschirm-Fotos Paralleles Testen verschiedener Devices und Auflösungen via Scripting

42 MonkeyRunner MonkeyRunner API void alert( ), integer choice( ), string input( ) void sleep( ) MonkeyDevice waitforconnection( ) MonkeyDevice API (Auszug) void installpackage( ) void startactivity( ) Void broadcastintent( ) void drag( ), void press( ), void touch( ), void type( ) MonkeyImage takesnapshot() MonkeyImage API (Auszug) MonkeyImage getsubimage( ), boolean sameas( ), void writetofile( )

43 Agenda Unit-Tests Funktionstests Abnahme- und Regressionstests Stresstests

44 Würden Sie einen Affen mit Ihrem Telefon spielen lassen? Rex Features

45 Monkey Schicken zufälliger Events Anzahl und Geschwindigkeit konfigurierbar Reihenfolge reproduzierbar (durch Angabe von seed) Wahrscheinlichkeit einzelner Event- Arten konfigurierbar à Suchen von spezifischen Bugs

46 Agenda Unit-Tests Funktionstests Regressionstests Stresstests

47 Fazit - Testing Unit-Tests Off Device (Robolectric) On Device (Android Testing Framework) Regelmäßig (Continuous Integration) mit Simulator Vor der Auslieferung mit echten Geräten Funktionale Tests UI-Interaktion Gesamter Workflow (automatisiert) Regressionstests (MonkeyRunner) Stresstests (Monkey)

48 Q&A Vielen Dank für Ihre Zeit. Kontakt: open knowledge GmbH Bismarckstr. 13

49 Weitere Sessions