Dr. Peter G. Baum Koordinator Wasserzeichen Technologien Technicolor Content als Trigger Die Verbindung zwischen 2 nd Screen und Fernseher
2 5/21/2012 Companion-Gerät als Chance
Fernsehen im Umbruch Zuschauer nutzen vor dem Fernseher zunehmend parallel andere Geräte. 2 nd Screen Device oder besser Companion Device? Jeder Inhalt benötigt eine angepasste Lösung. Persönliches Zusatzgerät eröffnet neue Möglichkeiten. 3 5/21/2012
Das Companion Gerät als Chance Zuschauerbindung Hintergrundinformationen Bonus-System Community-Portal Gewinnspiele Programmempfehlungen Zusatzeinnahmen Online-Shop Zielgerichtete Werbung Werbung ( Buzz-Generierung ) Social Media: Google+, Facebook, Twitter Zuschauerrückmeldung Echtzeit Feedback Interaktives Fernsehen 4 5/21/2012
Integration von Companion Gerät und TV Umfassendes TV-Erlebnis bedingt Synchronisation von Fernseher und Companion Gerät Erkennen von Kanalwechsel bei Live-Content Erkennen von Sendung und Zeit bei Aufnahmen Insbesondere bei zeitversetztem Fernsehen Kein manueller Eingriff des Zuschauers erforderlich Gezielte Zusatzinformation Semi-automatische Social-Media Kommentare Gezielte, personalisierte Werbung 5 5/21/2012
Personalisiert & Synchronisiert Inhalt auf dem Companion Gerät - personalisiert - mit TV Inhalt synchronisiert Online Shop Social Media Kommentar abgeben: Clay sollte zurücktreten Clay sollte kämpfen Hintergrundinformationen 6 5/21/2012
Zusatzdatenströme Interaktives Live Programm Externer Server Individuelle Daten Sendung Zeitstempel Sendung Zeitstempel Personalisierte Antwort 7 21.05.2012
Verbindungsmechanismen Für bestes Zuschauer-Erlebnis ist eine Verbindung Companion Gerät und Fernseher notwendig. Verbindung zwischen Companion Gerät und Server Netzwerkprotokoll standardisiert: WiFi, TCP/IP Daten standardisiert (http) oder proprietär (App) Verbindung zwischen Companion Gerät und Fernseher Kein allgegenwärtiger Standard Netzwerkfähigkeit nur bei neuen Geräten Manuell / zeitgesteuert Audio Fingerprinting Audio Watermarking 8 21.05.2012
9 5/21/2012 Audio Fingerprinting
Audio Fingerprinting Audio Fingerprinting ist ein Verfahren, das es erlaubt, die Ähnlichkeit von Audiosignalen zu ermitteln. Signal A Merkmalextraktion Merkmalvergleich Signal B Merkmalextraktion 10 21.05.2012
Audio Fingerprinting Workflow Fernsehanstalt Zuschauer Audiosignal Companion Gerät & Merkmalextraktion Merkmalextraktion Fernseher / Video-Rekorder Sendungs-ID & Zeitstempel AV-Signal 11 Merkmalvergleich Datenbankserver mit Sendungs-ID & Zeitstempel Internet
Audio Fingerprinting Eigenschaften Das Audiosignal wird in keinster Weise verändert. Gleich oder sehr ähnliche Audiosignal können nicht unterschieden werden (Titelmelodie, Jingle ) Es wird eine Datenbank benötigt Der Fingerprint- Detektor benötigt Netzwerkanschluss (Datenbank zu groß für mobile Geräte) Merkmalsvergleich wird zentral durchgeführt: Servergröße muss entsprechend der Zuschauerzahl ausgelegt werden Problem Live-Inhalte: Füllen und Abfrage der Datenbank muss gleichzeitig erfolgen 12 21.05.2012
13 5/21/2012 Audio Watermarking
Audio Watermarking Audio Watermarking ist ein Verfahren zur Einbettung von Daten in das Audiosignal ohne Beeinträchtigung der Audioqualität. Signal Daten Einbettung Audiosignal mit Daten 14 21.05.2012
Audio Watermarking Workflow Fernsehanstalt Zuschauer Audiosignal mit Wasserzeichen Sendungs-ID & Zeitstempel Audio & Video-Signal Watermark- Einbettung Fernseher / Video-Rekorder Companion Gerät mit Watermark-Detektor Sendungs-ID & Zeitstempel 15
Audio Watermarking Eigenschaften Audio Signal dient als Übertragungsmedium, d.h. das Signal muss verändert werden Keine Formatänderung des Audio Signals Vollkommen ohne Einfluss bei Übertragung und Verarbeitung Mit speziellen Detektoren lesbar, ansonsten kein Unterschied zu nicht markiertem Signal Detektor direkt im Endgerät Kein zentraler Server notwendig Keine Netzwerkverbindung notwendig Infrastruktur unabhängig von der Anzahl an Zuschauern Kein Unterschied zwischen Live und vorproduziertem Inhalt 16 21.05.2012
Audio Watermarking Status Was kann man von einem Audio Watermarking System erwarten? Robust gegen gängige digitale Signalverarbeitungsprozesse Verlustbehaftete Kompression (mp3, AC-3, MPEG Layer 2, etc) Robust gegen Mikrophonaufnahmen Unhörbar für goldene Ohren auch in kritischen Audiosignalen in professioneller Hörumgebung Datenrate 1-10 Bit / Sekunde bei guter Robustheit Detektor mit großen Reserven echtzeitfähig auf einem mobilen Gerät (Akku-Laufzeit!) Embedder wesentlich schneller als Echtzeit Die Eigenschaften sind voneinander abhängig! 17 5/21/2012
Watermarking Kompromiss Vier sich widersprechende Anforderungen Hohe Robustheit Hohe Audioqualität Niedrige Rechenzeit Hohe Datenrate Optimaler Kompromiss hängt von Anwendung ab
19 5/21/2012 Fingerprinting vs. Watermarking
Watermarking vs. Fingerprinting Ziel Vorbereitung Detektion Detektionsinfrastruktur Watermarking Identifikation von individuellen Signalkopien Einfügen von Daten (ID, Zeitstempel) in das Signal Extrahieren der Daten aus dem Signal. Nur Companion-Gerät Fingerprinting Identifikation von ähnlichen Signalen Extrahieren und Speichern von Merkmalen plus ID und Zeitstempel Extrahieren von Merkmalen Vergleich mit anderen Signalen Companion-Gerät plus Server für Datenbank und Vergleich Synchronisationsgenauigkeit Hoch Abhängig von Inhalt
Systemgrenzen Beide System müssen in extrem schwierigen Umgebungen arbeiten Diverse Signalarten (Pop, Klassik, Sprache, Geräusche) Umgebungsgeräusche Akustische Umgebung (Echo, Hall) Position und Richtung des Companion-Geräts Unterschiedliche Qualität der Aufnahme-Hardware im Companion-Gerät Um den Zuschauer nicht zu enttäuschen, ist eine realistische Einschätzung der Eigenschaften notwendig. 21 5/21/2012
22 5/21/2012 Zusammenfassung
Zusammenfassung Das Companion-Gerät eröffnet viele neue Möglichkeiten, wenn es mit dem Fernseher synchronisiert ist. Mit aktuellen Geräten kann die Synchronisation nur mit Audio Watermarking oder Audio Fingerprinting durchgeführt werden. Audio Watermarking ist sehr flexibel einsetzbar und erlaubt höchste Synchronisationsgenauigkeiten. Audio Fingerprinting ist vor allem dann sinnvoll, wenn der Inhalt nicht modifiziert werden kann, benötigt aber einen Server für Datenbank und Vergleichsberechnungen. 23 5/21/2012
Danke für Ihre Aufmerksamkeit! Fragen? Kontakt: peter.baum@technicolor.com 24 21.05.2012