Berühren fürs Begreifen Multitouch-Steuerung moderner Computersysteme

Transkript

1 Berühren fürs Begreifen Multitouch-Steuerung moderner Computersysteme Matthias Vogt

2 Übersicht Einführung Ubiquitous Computing Seamless Interaction Probleme heutiger Computersysteme Lösungsansätze Projektziele Risiken

3 Machines that fit the human environment, instead of forcing humans to enter theirs, will make using a computer as refreshing as taking a walk in the woods. - Mark Weiser ( 27. April 1999)

4 Ubiquitous Computing Allgegenwärtigkeit von Computern Technologie tritt in den Hintergrund Dritte Generation des Computing [1]

5 Seamless Interaction Ubiquitous Computing benötigt Seamless Interaction Zwei Bestandteile von Seamless Interaction Smooth transition nahtloser Übergang unterschiedlicher Arbeitsumfelder Continuity gleichbleibende Bedienung zwischen Arbeitsfeldern

6 Heutige Computersysteme Nicht intuitives Verhalten (kein do what I mean ) Aufgaben sind zu komplex Computer sind alt Letzter Paradigmenwechsel in der Bedienung mehr als 10 Jahre alt Komplexität der Aufgaben ist in den letzten 10 Jahren stetig gewachsen. Neue Eingaben-Technologien sind in den letzten Jahren einsatzbereit geworden, werden aber kaum unterstützt

7 Vgl. Mac OS 5 und heute (2008) (1996) [2][3]

8 Menübaum von OpenOffice

9 Probleme heutiger Computersysteme Zwei Betrachtungsweisen: Interaktion mit Eingabegeräten Aufbau von Oberflächen entsprechen nicht Mentalen Modellen

10 Probleme der Eingabe Tastenkombinationen müssen erlernt werden Maus ist langsam und hält auf (z.b. beim Schreiben von Briefen oder Dokumenten) Verbesserung: Trackpoint beschleunigt Arbeiten (Ted Selker- IBM Reasearch) Indirektion durch Maus hoher kognitiver Aufwand

11 Probleme vom Userinterface Unterschiedliche Bedienung gleicher Funktionen Befehle und Funktionen sind versteckt auf PC und Mac Verschachtelte Baumstruktur Man muss Profi sein um einen Brief zu schreiben

12 Zusammenfassung Computer sind nicht für neue Technologien ausgelegt Wenig Unterstützung von neuen Technologien Hardware ist nicht verbreitet Interfaces sind alt und überladen und nicht ohne großen Aufwand bedienbar Wir arbeiten mit falschen mentalen Modellen

13 Mögliche Lösungsansätze Neue Arten der Interaktion mit Computern Multitouch, Speech, Tracking, Wearable computing, Neural Interface Neue Interfaces und Bedienung Enso Swype Physikbasiert

14 Multitouch Direktes Anfassen Mehrere Benutzer Auflösen von Indirektion Kooperatives Arbeiten Annäherung an Mentale Modelle möglich Gesten-Steuerung

15 Enso

16 Swype Video: [4]

17 Mentale Modelle Sind Erwartungshaltungen von Menschen Vorstellungen von Menschen an etwas abgeleitet von der Realität Werden durch z.b. physikalische Gesetzmäßigkeiten, Werbung, Erfahrungen, Kulturen etc. geprägt

18 Dynambient

19 Projektziele Was sind natürliche Touch-Gesten? Wie lassen sich diese ermitteln? Beobachtung von realer Interaktion und Überführung auf Touch Gesten Integration neuer, einfacher Bedienung Aufbau eines Mockup Swype, Enso in Kombination mit Touch Multitmodalität Erste Experimente mit Balance und Touch Experimente mit Speech und Touch

20 Mockup [5]

21 Risiken Mängel der Technologie (Touch Hardware) Akzeptanz der Benutzer Missinterpretation des Benutzerverhaltens Kein Zugang zu Technologien (Enso, Swype, ) Minimierung der Risiken: Erfahrungen mit Single Modalität Philipp Roßberger: Physikbasierte Interaktion in kollaborativen computergestützten Umgebungen (2008) Joachim Boetzer et al.: Gestenbasierte Interaktion mit Hilfe von Multitouch und Motiontracking (2008) Johann Heitsch: Ein Framework zur Erkennung von dreidimensionalen Gesten (2008) Joachim Boetzer: Bewegungs- und gestenbasierte Applikationssteuerung auf Basis eines Motion Trackers (2008) Mohammadali Rahimi, Matthias Vogt: Gestenbasierte Computerinteraktion auf Basis von MultitouchTechnologie (2008) Dominik Charousset: Eignungsuntersuchung von Eyetracking als zusätzliche Interaktionstechnik in Computerspielen (2008)

22 Fragen? Vielen Dank für die Aufmerksamkeit!

23 Literatur [Weiser 1991] WEISER, Mark: The Computer for the Twenty-First Century. In: Scientific American 265 (1991), S [Ishii u. a. 1994] ISHII, Hiroshi ; KOBAYASHI, Minoru ; ARITA, Kazuho: Iterative design of seamless collaboration media. In: Commun. ACM 37 (1994), Nr. 8, S ISSN [Roßberger 2008] Philipp Roßberger: Physikbasierte Interaktion in kollaborativen computergestützten Umgebungen. In Hochschule für Angewandte Wissenschaften (HAW) Hamburg, Masterarbeit (2008) [Raskin 2008] RASKIN, Aza: FEATURE The linguistic command line. In: interactions 15 (2008), Nr. 1, S ISSN

24 Literatur [Morguet 2000] MORGUET, Peter: Stochastische Modellierung von Bildsequenzen zur Segmentierung und Erkennung dynamischer Gesten. München, Technische Universität München, Dissertation, 2000 [Rossberger Luck 2008] Reducing the gap: Improving mental models of Guis using physics simulations. Hamburg, Haw Hamburg, ?i=

25 Bildernachweis [1] [Ubiquitous ID Center 2008] UBIQUITOUS ID CENTER: Ubiquitous Computing Shema. Webseite URL [2] [3] [4] [5] [Kruger u. a. 2003] KRUGER, Russell ; CARPENDALE, Sheelagh ; SCOTT, Stacey D. ; GREENBERG, Saul: How people use orientation on tables: comprehension, coordination and communication. In: GROUP 03: Proceedings of the 2003 international ACM SIGGROUP conference on Supporting group work. New York, NY, USA : ACM, 2003, S ISBN