TP2. Gefördert durch: Projektträger: Halbzeitpräsentation TP

Transkript

1 TP2 Gefördert durch: Projektträger: Halbzeitpräsentation TP2 1

2 Ziele: Technisches Systemkonzept, Integration und Demonstratoren Bereitstellung von Verfahren: Einheitliche Sensordaten-Erfassung und Verarbeitung in Laboren, Simulatoren und ealfahrzeugen Aufbereitung von Fahrzeugsensordaten für die Kontextmodellierung Synchronisation und Fusion der erfassten Insasseneigenschaften und des Fahrkontextes Nutzen: Erstmaliger Aufbau eines Versuchsfahrzeugs zur Erfassung vielfältiger Insasseneigenschaften unter realen Fahrbedingungen. Einsatz einer projektweit einheitlichen eferenz-plattform zur Datenverarbeitung Gewünschte Ergebnisse: Versuchsfahrzeug zur Offline-Validierung der Insassenmodelle Live-Präsentation neuer Fahrzeugfunktionen, die an den Insassenzustand angepasst sind Halbzeitpräsentation TP2 2

3 olle im Gesamtprojekt Bereitstellung eines eferenzsystems für das Gesamtprojekt: TP1: Anforderungen, Szenarien TP3: Sensorik, Algorithmen Systemkonzept und eferenzplattform TP4: Anwendungen TP1: Evaluation AP2.1: Architektur Spezifikation AP2.2: Schnittstellen zur Evaluation des Gesamtsystems Fahrdemonstratoren AP2.3: Aufbau von Versuchsträgern AP2.4: Sensorik-Integration Versuchsträger Jahr 1 Jahr 2 Jahr 3 Halbzeitpräsentation TP2 3

4 Gesamtarchitektur Fahrer Fahrdaten Beifahrer Fond-Insassen Steuerung, Bedienung Erfassung Fahrer Motion-Tracking, Blick, Vitaldaten Fahr- und Bedienverhalten Erfassung Beifahrer Motion-Tracking Erfassung Fond-Insassen Motion-Tracking Oberkörperpose Fahrer- Eingenschaften Skelettmodell Skelettmodelle Fahr- und Bedienverhalten Insassen- Modellierung Trainingsdaten Szenarien-Umsetzung Insassenmodell [Zustände und Intentionen] Ergebnis Ausgabe Termine, Kontakte, oute Fahrzeug- HMI Erfassung Gewohnheiten Anzeige Smartphone / Smartwatch Online- Dienste Eigenschaften Nutzerdaten und Verhalten Alle Insassen Oberkörperpose Fahrzeug- Aktorik Halbzeitpräsentation TP2 4

5 eferenzplattform (1 / 4) Sensorik ADTF EXLAP ohdaten: GB und Tiefenbilder,... Feature-Erkennung: Pose, Kopf, Augen,... Datenübertragung als XML Training von Lernenden Algorithmen Daten- Aufzeichnung ADTF Datenfusion/Modellierung EXLAP Datenübertragung als XML Daten- Aufzeichnung VAPI Fahrzeugdaten: Geschwindigkeit, GeoPosition, Drehdrücksteller,... Fahrzeug CAN-Daten: Frames ADTF: Automotive Data and Time-Triggered Framework EXLAP: Extensible Lightweight Asynchronous Protocol VAPI: Vehicle Application Programming Interface Halbzeitpräsentation TP2 5

6 eferenzplattform (2 / 4): ADTF ADTF (Automotive Data and Time Triggered Framework) Entwicklung durch Audi Electronics Venture und Zusammenarbeit mit verschiedenen Audi Fachabteilungen Features ADTF ermöglicht Entwicklung von Funktionen innerhalb von unabhängigen Filtern Datenflussorientierte Konfiguration von Filtergraphen mit Hilfe einer grafischen Oberfläche Zeitsynchrones Aufzeichnen und Abspielen von Daten Verfügbar für Windows und Linux Halbzeitpräsentation TP2 6

7 eferenzplattform (3 / 4): EXLAP EXLAP (Extensible Lightweight Asynchronous Protocol) XML Protokoll zur Übertragung von Objekten und Aufruf von Funktionen Entwicklung durch Volkswagen AG in Zusammenarbeit mit Nordsys GmbH Funktionsumfang: Publish-/Subscribe-Protokoll mit Client-Server-Architektur Verteilte Objekte und Funktionsaufrufe Kommunikation über IP-basierte Netzwerke, Bluetooth und S232 Spezifikation von Schnittstellen und Diensten über Interface-Beschreibungssprache (.xml) Sicherheit: Verschlüsselung (SSL), Authentifizierung (Zertifikate), echteverwaltung Programmierwerkzeuge: Codegenerierung, EXLAP-Browser Unterstützt vielfältige Betriebssysteme Linux (PPC, AM, x86, amd64) Windows (x86, amd64) Mac Os X (x86, amd64) ios Android Unterstützt verschiedene Programmiersprachen (c/c++, c# und Java) Unterstützt ADTF (exlap2adtf-toolbox) Protokollspezifikation steht unter Creative Common Licence zur Verfügung Halbzeitpräsentation TP2 7

8 eferenzplattform (4 / 4): Vehicle API VAPI (Vehicle Application Programming Interface) Motivation: Fahrzeuge unterscheiden sich (z. B. Bussysteme, Datenformat) Lösung: Zugriff auf Fahrzeug Daten und Funktionen unabhängig vom konkreten Fahrzeugtyp Entwicklung durch die Volkswagen AG in Zusammenarbeit mit der Nordsys GmbH Verfügbar für Linux (PPC, AM, x86) Unterstützt ADTF (vapi2exlap-toolbox) Unterstützt EXLAP Konfiguration über Fahrzeugprofile Halbzeitpräsentation TP2 8

9 Versuchsträger Aufbau ealfahrzeug (Volkswagen T5) Sensorik: 3x Nahinfrarot-Tiefenkamera (Sitzhaltung) 3x Farbkamera (Identifikation) 1x Nah-Infrarot-Kamera (Fahrerblick) Insassen-Modellierung: 4x Car-PC 3x Car-PC (Bildverarbeitung) 1x Car-PC (Fahrzeug-Anbindung & Insassen-Modell) Bedienung: Visteon Head-Unit (im Aufbau) Aufbau Simulator-Fahrzeug (Volkswagen Passat) Sensor-Wheel und Pedalerie zur Anbindung an Fahrsimulation Variable Sensorik-Ausstattung für verschiedene Fahrversuche Bedienung: Visteon Head-Unit (im Aufbau) Halbzeitpräsentation TP2 9

10 Schnittstellen zur Evaluation Halbzeitpräsentation TP2 10

11 Ausblick Vervollständigung der Versuchsträger Beifahrer-Beobachtung Vitaldaten-Erfassung Mobilgeräte-Integration Erweiterung der Schnittstellen um Ergebnisse des Insassen-Modells Fusionierte Basisdaten Insassen-Zustände Insassen-Intentionen Fahrer-Gewohnheiten Halbzeitpräsentation TP2 11