Mobile Computing. J2ME - Mobile Media API. Ablauf. 1. Anwendungsbereich. 1. Multimedia-Prozesse. 1. Eigenschaften der MMAPI

Transkript

1 Mobile Computing Mobile Media API Ein Einblick in die Multimedia- Programmierung von Pocket-Devices Ablauf 1. Überblick über J2ME und die MMAPI 2. Klassen und Interfaces 3. Abspielen 4. Aufnehmen 5. MIDlet 6. Beispielcode 1. Anwendungsbereich Polyphone Geräte benötigen Unterstützung von einer API Soundunterstützung bei Spielen Ansprechen der integrierten Digitalkameras Abspielen von Video-Clips 1. Multimedia-Prozesse ProtocolHandling: Daten von einem File, Server, etc. in einen Media- Prozess einlesen ContentHandling: Einen Input parsen und in einem File abspeichern 1. Eigenschaften der MMAPI 1. Architektur von Java und MMAPI Unterstützung beim Aufnehmen und Abspielen von Audio- und Videodaten Arbeiten mit den Vorlagen der CLDC Erweiterbare Architektur Die API wurde für verschiedene Zwecke geschaffen und findet einen breiten Anwendungsbereich

2 1. Architektur von J2ME und MMAPI (JSR-135) 1. Die vier verschiedenen Konzepte in der MMAPI Player Manager Controls DataSource 1. Architektur der MMAPI 1. Optionale Pakete (JSR-234) Syntax der url: <protocol>:<content location> z.b. capture://audio um aufzunehmen Beispiele: AudioFormatControl ZoomControl ReverbControl PanControl SoundSource3D TunerControl DopplerControl 1. Zustände eines Players 2. Die wichtigsten Klassen Manager.createPlayer() import javax.microedition.media.*; Unrealized realize() Closed start() Started Manager DataSource ContentDeskriptor Realized prefetch() stop() deallocate() Prefetched Nur für Audio

3 2. Die wichtigsten Interfaces import javax.microedition.media.*; Player RecordControl VideoControls PlayerListener SourceControl 2. Controls Controls sind über den Player erhältlich: Player.getControl(String controltype); Status muss REALIZED sein 2. Das PlayerListener Interface 3. Abspielen von Audio Das Interface fängt asynchrone Ereignisse für einen Player ab. Folgende Funktion muss überschrieben werden playerupdate(player player, String event, Object data); Den Player registrieren: player.addplayerlistener(object obj);. Abspielen eines einzelnen Tones: Manager.playTone(ToneControl.C4, 4000, 100); catch(mediaexception e) { Ein C in der 4-ten Oktave 4000 Millisekunden auf der Lautstärke 100 abspielen (Skalierung 0-100) 3. Abspielen eines WAV-Files 3. Abspielen eines Video-Clips Um ein WAV-File aus einer Jar-Datei abzuspielen, muss der InputStream auf das File gelegt werden und anschliessend dem createplayer(inputstream, String) übergeben werden. InputStream is = getclass().getresourceasstream("test.wav"); Player player = Manager.createPlayer(is, "audio/x-wav"); player.prefetch(); Im Unterschied zu der Audio- Ausgabe muss hier noch ein Video- Control angefordert werden. Player player = Manager.createPlayer("eineUrl"); VideoControl vc = (VideoControl)player.getControl("VideoControl"); if(vc!= null) { Display display = Display.getDisplay(this); Item video = (Item)vc.initDisplayMode(vc.USE_GUI_PRIMITIVE, this); Form f = new Form("Playing Video..."); f.append(video); display.setcurrent(f); else throw new RuntimeException("Video can not be played");

4 4. Vorgehen bei Audioaufnahmen 4. Aufnehmen mit der Kamera 1. Ein RecordControl vom Player anfordern 2. Dem RecordControl einen ByteArrayOutputStream übergeben 3. Den RecordControl und den Player starten Eine eigene Klasse z.b. CameraCanvas schreiben, die von Canvas erbt, um die Aufnahme mit dem Display abzugleichen Einen VideoControl erzeugen Eine Form erzeugen Das Item von CameraCanvas der Form mit Form.append(CameraCanvas.getItem()) anhängen Den Player starten Die Aufnahme mit VideoControl.getSnapshot( jpeg ); abschliessen 5. MIDlet 5. Lebenszyklus eines MIDlet s Ein MIDlet ist nötig, um eine Applikation unter J2ME auszuführen Es gibt keine main-funktion, stattdessen wird das Programm über startapp() gestartet Das Interface MIDlet schreibt die Funktionen startapp(), destroyapp() und pauseapp() vor MIDlet wird erzeugt Konstruktor wird aufgerufen Angehalten MIDlet wird beendet destroyapp() MIDlet wird vom Gerät gestartet (oder fortgestetzt) starapp() MIDlet wird vom Gerät unterbrochen pauseapp() Gelöscht Aktiv MIDlet wird beendet destroyapp() 6. Beispiel: Aufnahme / Wiedergabe Die Hauptklasse AudioFile erbt von MIDlet und implementiert das Interface CommandListener Die Klassen RecordThread und PlayThread sind nur innerhalb von AudioFile sichtbar und erben von Thread 6. Attribute von AudioFile private Display display; private Form form; private Player player; private RecordThread trec; private PlayThread tplay; private ByteArrayOutputStream output; private Command record = new Command("Rec", Command.SCREEN, 1); private Command play = new Command("Play", Command.SCREEN, 2);

5 6. Funktionen von AudioFile extends MIDlet implements CommandListener public AuidioFile() { display = Display.getDisplay(this); form = new Form("Demo Recorder"); form.addcommand(record); form.addcommand(play); form.setcommandlistener(this); display.setcurrent(form); public void commandaction(command c, Displayable d) { if(c == record) { trec = new RecordThread(5000); tplay.start(); else if(c == play){ tplay = new PlayThread(); trec.start(); public class RecordThread extends Thread{ private int time; public RecordThread(int t){ time = t; public void run(){ player = Manager.createPlayer("capture://audio"); RecordControl rc = (RecordControl)player.getControl("RecordControl"); output = new ByteArrayOutputStream(); rc.setrecordstream(output); VolumeControl vc = (VolumeControl)player.getControl("VolumeControl"); vc.setlevel(0); rc.startrecord(); this.sleep(time); player.stop(); rc.stoprecord(); rc.commit(); vc.setlevel(100); catch (IOException ioe) { catch (MediaException me) { catch (InterruptedException e) { public class PlayThread extends Thread implements PlayerListener{???Fragen??? public void run(){ byte[] buf = output.tobytearray(); ByteArrayInputStream is = new ByteArrayInputStream(buf); try{ player = Manager.createPlayer(is, "audio/x-wav"); player.addplayerlistener(this); player.prefetch(); catch(throwable t) { player = null; public void playerupdate(player player, String event, Object data){ if(event == PlayerListener.END_OF_MEDIA) { defplayer(); catch(mediaexception e) { player = null; TheEnd Besten Dank für Ihre Aufmerksamkeit Unterlagen zu diesem Vortrag mail to: lukas_oldani@gmx.ch