Tilo Strutz. Bilddatenkompression

Transkript

1 Tilo Strutz Bilddatenkompression

2 Aus dem Programm Informations- und Kommunikationstechnik Telekommunikation von D. Conrads Einführung in die Digitale Bildverarbeitung von A. Erhardt Digitale Signalverarbeitung von K.-D. Kammeyer und K. Kroschel Nachrichtenübertragung von K.-D. Kammeyer Satellitenortung und Navigation von W. Mansfeld Grundlagen der Informationstechnik vonm.meyer Kommunikationstechnik vonm.meyer Signalverarbeitung vonm.meyer Digitale Sprachsignalverarbeitung von P. Vary, U. Heute und W. Hess Information und Codierung von M. Werner Digitale Signalverarbeitung mit MATLAB von M. Werner Digitale Signalverarbeitung mit MATLAB -Praktikum von M. Werner Nachrichtentechnik von M. Werner Nachrichten-Übertragungstechnik von M. Werner Digitale Audiosignalverarbeitung von U. Zölzer

3 Tilo Strutz Bilddatenkompression Grundlagen, Codierung, Wavelets, JPEG, MPEG, H , überarbeitete und ergänzte Auflage Mit 189 Abbildungen und 72 Tabellen STUDIUM

4 Bibliografische Information der Deutschen Nationalbibliothek Die Deutsche Nationalbibliothek verzeichnet diese Publikation in der Deutschen Nationalbibliografie; detaillierte bibliografische Daten sind im Internet über < abrufbar. Das in diesem Werk enthaltene Programm-Material ist mit keiner Verpflichtung oder Garantie irgendeiner Art verbunden. Der Autor übernimmt infolgedessen keine Verantwortung und wird keine daraus folgende oder sonstige Haftung übernehmen, die auf irgendeine Art aus der Benutzung dieses Programm-Materials oder Teilen davon entsteht. Höchste inhaltliche und technische Qualität unserer Produkte ist unser Ziel. Bei der Produktion und Auslieferung unserer Bücher wollen wir die Umwelt schonen: Dieses Buch ist auf säurefreiem und chlorfrei gebleichtem Papier gedruckt. Die Einschweißfolie besteht aus Polyäthylen und damit aus organischen Grundstoffen, die weder bei der Herstellung noch bei der Verbrennung Schadstoffe freisetzen. 1. Auflage , aktualisierte und erweiterte Auflage , aktualisierte und erweiterte Auflage , überarbeitete und ergänzte Auflage 2009 Alle Rechte vorbehalten Vieweg+Teubner GWV Fachverlage GmbH, Wiesbaden 2009 Lektorat: Reinhard Dapper Walburga Himmel Vieweg+Teubner ist Teil der Fachverlagsgruppe Springer Science+Business Media. Das Werk einschließlich aller seiner Teile ist urheberrechtlich geschützt. Jede Verwertung außerhalb der engen Grenzen des Urheberrechtsgesetzes ist ohne Zustimmung des Verlags unzulässig und strafbar. Das gilt insbesondere für Vervielfältigungen, Übersetzungen, Mikroverfilmungen und die Einspeicherung und Verarbeitung in elektronischen Systemen. Die Wiedergabe von Gebrauchsnamen, Handelsnamen, Warenbezeichnungen usw. in diesem Werk berechtigt auch ohne besondere Kennzeichnung nicht zu der Annahme, dass solche Namen im Sinne der Warenzeichen- und Markenschutz-Gesetzgebung als frei zu betrachten wären und daher von jedermann benutzt werden dürften. Umschlaggestaltung: KünkelLopka Medienentwicklung, Heidelberg Technische Redaktion: FROMM MediaDesign, Selters/Ts. Druck und buchbinderische Verarbeitung: Krips b.v., Meppel Gedruckt auf säurefreiem und chlorfrei gebleichtem Papier. Printed in the Netherlands ISBN

5 V Vorwort zur vierten Auflage Das Entwickeln und Anwenden eines Systems zur Kompression von Daten sind wie das Kochen einer Mahlzeit. Folgende Dinge sind mindestens zu beachten: Für wen wird gekocht (Applikation)? Welche Zutaten werden benötigt (Methoden, Techniken)? Was kosten die Zutaten (Komplexität der Algorithmen, Hardwarekosten)? Wie groß ist der Vorbereitungsaufwand (Entwicklungskosten)? Wie lange muss gekocht werden (Dauer der Kompression eines Signals)? Welchen optischen Eindruck wird das angerichtete Essen machen (Signalqualität)? Wie gut wird das Essen schmecken (Kompressionsverhältnis)? Es ist leicht einzusehen, dass der Aufwand für die Zubereitung möglichst klein sein sollte, der Genuss beim Essen aber möglichst groß. Für manche Anlässe kommt es auch nur auf den maximalen Genuss an, für andere ist es in erster Linie wichtig, dass das Essen schnell auf den Tisch kommt. Das Buch Bilddatenkompression enthält alle Zutaten, die für das Entwickeln eines Kompressionssystems hilfreich sind, sortiert sie nach Einsatzgebiet und beschreibt ihre Wirkungsweise. Außerdem findet der Leser einige Rezepte, wie die Ingredienzen erfolgreich miteinander kombiniert werden können. Die vierte Auflage wurde wieder um einige Zutaten bereichert, andere wurden ausführlicher erläutert. Neben den 28 neuen Abbildungen und Tabellen sowie den vielen kleinen Änderungen und Verbesserungen, die teilweise durch meine Studenten angeregt wurden, fällt vor allem auf, dass den meisten Kapiteln ein Abschnitt mit Testfragen und Aufgaben nachgestellt wurde. Dies ermöglicht dem Leser, das Verständnis für den dargebotenen Stoff besser zu prüfen. Für ausgewählte Aufgaben sind die Lösungen am Ende des Buches aufgelistet. Die wichtigsten inhaltlichen Erweiterungen sind mit Angabe der Kapitel: Beispiele für die Bildkompression mit Vektorquantisierung (3), bessere Strukturierung des Abschnitts zur Codierungsadaptation (4), wesentliche Erweiterung der Ausführungen zu den informationstheoretischen Grundlagen (Markow-Modell, Verbund- und bedingte Wahrscheinlichkeit) (5), ergänzende Angaben zur Prädiktion von Signalwerten (6), Beschreibung des Wavelet-Filterentwurfs anhand von Pol-Nullstellen-Plänen (6), wesentliche Erweiterung des Abschnitts zum Lifting-Schema (6), Beschreibung der ganzzahligen Wavelet-Transformation (6), leichte Modifikationen am WaveQA-Algorithmus (Quelltexte, 9/7-Wavelet-Transformation u.a.) (7, Anhang D), wichtige Ergänzungen zur optimalen Anpassung der Quantisierungsintervalle an die Zerlegungsstufen der Wavelet-Transformation (7), erweiterte Ausführungen zum YCbCr-Farbraum, um den Varianten in verschiedenen Standards gerecht zu werden (8), neue Farbraumtransformationen (YCgCo und YCgCo-R) (8),

6 VI Abbildungen (auch farbig) zur besseren Erläuterung der verschiedenen Farbraumtransformationen (8), wesentliche Ergänzungen zur DCT-basierten Kompression im JPEG-Standard (Basisbilder, Codetabellen, Syntax, ausführliches Decodierungsbeispiel im Anhang) (9), JPEG 2000: vollständige Liste der Teile des Standards, Überblick über Part 2 (9), Codierungsbeispiel (Anhang C), Erläuterungen zu den aktuellenformaten für das hochauflösende Fernsehen (HDTV) (10), Lösungen zu ausgewählten Aufgaben (Anhang E), Aktualisierung von Sachwortregister und Formelzeichenliste und Anpassen der Terminologie an international übliche Schreibweisen. Die Erweiterungen der Ausführungen zum DCT-basierten JPEG-Standard sind der Tatsache geschuldet, dass auch nach neun Jahren JPEG 2000 der alte JPEG-Standard immer noch die dominierende Rolle in digitalen Geräten und im Internet spielt. Das vorliegende Buch ist im Einzelnen wie folgt gegliedert: Kapitel 1 führt den Leser in die Problematik der Übertragung von Daten und in die Notwendigkeit der Kompression ein. Anschließend werden im zweiten Kapitel die Grundlagen der Datenkompression behandelt. Es wird begründet, warum Kompression möglich ist und wie man die Leistungsfähigkeit eines Kompressionsalgorithmus bewerten kann. Kapitel 3 beschäftigt sich mit der Datenreduktion, also dem Weglassen von (irrelevanten) Informationen. Es werden die Abtastratenumsetzung und Verfahren zur Quantisierung diskutiert. Die Kapitel 4 und 5 befassen sich mit den Codierungsverfahren. Anhand von einfachen Beispielen wird zunächst die Codierung einzelner Symbole und die Anpassung an die statistischen Eigenschaften des zu verarbeitenden Signals beschrieben. Anschließend werden Verfahren erläutert, welche die Beziehungen zwischen den Symbolen eines Signals zur Steigerung der Kompression ausnutzen. Die Ausführungen im Kapitel 6 beinhalten drei wesentliche Methoden zur Dekorrelation von Signalwerten. Den Beginn machen Techniken zur Prädiktion von Signalwerten. Danach werden die Grundlagen diskreter Transformationen erläutert und verschiedene Transformationsarten vorgestellt. Eine besondere Stellung nehmen dabei die Wavelet- Transformation und die fraktale Transformation ein. Im dritten Teil dieses Kapitels werden die Grundlagen von Filterbänken behandelt. Die wichtigen Eigenschaften von Wavelet-Filterbänken und die Probleme bei der Implementierung der diskreten Wavelet- Transformation werden anhand von Quelltextbeispielen diskutiert. Kapitel 7 widmet sich ausschließlich den Aspekten der waveletbasierten Kompression. Anhand von Quelltexten eines lauffähigen C-Programms wird eine mögliche Variante zur Codierung auf Basis der diskreten Wavelet-Transformation vorgestellt. Kapitel 8 beschreibt die Eigenschaften des menschlichen Auges, das Helligkeits- und das Farbsehen. Das Verständnis der visuellen Wahrnehmung ist eine Voraussetzung für die sinnvolle Entwicklung von Algorithmen zur Bilddatenkompression. Es werden alle modernen Farbräume und die entsprechenden Transformationen erläutert.

7 VII Das Kapitel 9 befasst sich mit den Standards zur Einzelbildkompression JPEG, JPEG-LS und JPEG Es wird gezeigt, wie Verfahren und Methoden der Datenkompression zu leistungsfähigen Systemen kombiniert werden können. Ziel ist dabei nicht die vollständige Darlegung der Standards, sondern die Darstellung der Konzepte unter Bezugnahme auf die in den vorangegangenen Kapiteln beschriebenen Grundlagen. Kapitel 10 stellt grundlegende Verfahren zur Bildsequenzkompression vor. Dabei geht es im Wesentlichen um die Verringerung der zeitlichen Korrelation durch Methoden der Bewegungskompensation. Das letzte Kapitel behandelt die Standards zur Kompression von Videodaten. Es beschreibt die Besonderheiten bei der Verarbeitung von Bildsequenzen und zeigt die Entwicklung der Methoden beginnend mit MPEG-1 bis hin zum neuen Standard H.264. Im Anhang des Buches finden sich die verwendeten Testbilder, ein vollständiges Beispiel für die Decodierung eines JPEG-Bitstroms, ein Beispiel zur Codierung in JPEG 2000, die Quelltexte der beschriebenen Algorithmen und Lösungen zu ausgewählten Testfragen. Leipzig, im Mai 2009 Tilo Strutz

8 VIII Vorwort zur ersten Auflage (Auszug) Die digitale Kommunikationstechnik hat in den letzten Jahrzehnten eine enorme Entwicklung erfahren und ist dabei, nach und nach jene Verfahren zu verdrängen, die zeitund wertekontinuierliche Signale verarbeiten. Digitales Telefonieren ist mittlerweile der Standard, digitales Fernsehen wird bereits praktiziert. Auch das Radio erreicht den Hörer unter anderem durch das Internet in digitaler Form. Für den zunehmenden Einsatz von Digitaltechnik gibt es gute Gründe. Erstens ist dadurch meist eine bessere Qualität der Signale realisierbar, vor allem weil die digitale Übertragung einen besseren Schutz gegen Übertragungsfehler ermöglicht. Zweitens ist die Verarbeitung digitaler Signale oft auch einfacher als die von analogen Signalen. Diese Vorteile müssen allerdings durch einen Nachteil erkauft werden: digitale Signalquellen produzieren sehr große Datenmengen. Trotz der rasanten Entwicklung von Speichermedien (Festplatten im mehrstelligen Gigabyte-Bereich) und Übertragungsmedien mit Bandbreiten von vielen Megabit pro Sekunde stößt man in der Praxis ständig an Leistungsgrenzen, da die Datenflut in gleichem Maße steigt. Oft ist die modernste Technik nicht jedem Nutzer zugänglich. Aber auch die Bedürfnisse der Technikbenutzer sind dem technisch Machbaren stets einen Schritt voraus. Dies ist der Grund, warum Informationstechnologien zur effizienten Datenkompression für die Speicherung und Übertragung von Signalen immer wichtiger werden. Insbesondere die Bild- und Video-Codierung hat eine wachsende Bedeutung, da hier zwei- und sogar mehrdimensionale Signale verarbeitet werden müssen. Typische Anwendungen der Datenkompression sind: Archivierung von Daten jeglicher Art, digitales Fernsehen, Videoaufzeichnung, Bildtelefon, Videokonferenz, digitale Fotografie, Videoüberwachung, Telemedizin u.v.a.m. Dieses Buch wendet sich an Ingenieure der Nachrichten-, Informations- und Medientechnik, Informatiker und Physiker sowie an Studierende in einem entsprechenden Hauptstudium. Aber auch der interessierte Leser mit einer adäquaten technischen Vorbildung findet hier einen geeigneten Lesestoff. Das Buch vermittelt allgemeine informationstheoretischen Grundlagen für die Datenkompression, erläutert Algorithmen verschiedener Codierungsmethoden und beschreibt spezielle Verfahren und Methoden für die Bild- und Videokompression. Insbesondere wird auf die modernen Verfahren der waveletbasierten Kompression und die damit verbundenen Problemstellungen eingegangen. Besonderer Wert wurde auf die Anreicherung der theoretischen Basis mit Beispielen gelegt, die eine Diskussion der Effekte und Ergebnisse ermöglichen. Desweiteren sind die Quelltexte einiger Algorithmen, wie zum Beispiel der arithmetischen Codierung, im Anhang abgedruckt. Das Lehrbuch ist somit als vorlesungsbegleitendes Material, für das Selbststudium und als Nachschlagewerk geeignet. Rostock, im Oktober 2000 Tilo Strutz

9 IX Inhaltsverzeichnis 1 Einführung 1 2 Grundlagen der Datenkompression Informationsgehalt und Entropie Kriterien zur Kompressionsbewertung Kompressionsverhältnis Signalqualität Rate-Distortion-Funktion Merkmale eines Kompressionsalgorithmus Redundanz und Irrelevanz Redundanz Irrelevanz Testfragen Datenreduktion Modifikation der Abtastrate Unterabtastung Überabtastung Quantisierung Skalare Quantisierung Vektorquantisierung Praktische Anwendung Testfragen Entropiecodierung Codierungstheorie Morse-Code Shannon-Fano-Codierung Huffman-Codierung Golomb- und Rice-Codes Golomb-Codes Rice-Codes Exponentielle Golomb-Codes Universelle Präfixcodes Decodierung von Präfixcodes

10 X Inhaltsverzeichnis 4.8 Arithmetische Codierung Festkomma-Implementierung Beschleunigte Implementierung Binäre arithmetische Codierung Codierungsadaptation Semi-adaptive Anpassung von Präfixcodes Kontextbasierte Codierung Anpassung durch Sortieren Voll-adaptive Anpassung von Präfixcodes Adaptation der arithmetischen Codierung Codierung von sehr großen Symbolalphabeten Testfragen Präcodierung Informationstheoretische Grundlagen Markow-Modell Verbundwahrscheinlichkeit Verbundentropie und bedingte Entropie Praktische Implikationen Lauflängencodierung Allgemeine Codierung mehrwertiger Signale Signale mit Vorzugsamplitude Verarbeitung binärer Signale Phrasen-Codierung Der LZ77-Algorithmus Der LZ78-Algorithmus Der LZW-Algorithmus Blocksortierung Bit-Markierung Viererbaum-Codierung Maximalwert-Codierung Minimalwert-Bäume Testfragen Techniken zur Dekorrelation Prädiktion von Signalwerten Einfache lineare Prädiktion Lineare Prädiktion höherer Ordnung Prädiktion mit Quantisierung D-Prädiktion

11 Inhaltsverzeichnis XI Nichtlineare Prädiktion Der Wertebereich von Prädiktionsfehlern Anmerkungen Transformationen Diskrete Transformationen Orthogonale Transformation Biorthogonale Transformation Diskrete Fourier-Transformation (DFT) Karhunen-Loève-Transformation(KLT) Diskrete Kosinus-Transformation (DCT) Diskrete Walsh-Hadamard-Transformation (WHT) Diskrete Wavelet-Transformation (DWT) Fraktale Transformation Filterbänke Zwei-Kanal-Filterbänke Oktavfilterbänke D-Filterung Beste Basen Wavelet-Pakete Implementierung von Filterbänken Das Lifting-Schema Kompressionssysteme Testfragen Waveletbasierte Bildkompression Überblick Encoder Transformation Quantisierung Präcodierung Entropiecodierung Decoder Decodierung des Bitstroms Rekonstruktion der Transformationskoeffizienten Rücktransformation Kompressionsergebnisse Wahrnehmung und Farbe Visuelle Wahrnehmung Netzhaut und Sehnerven Die Lichtempfindung

12 XII Inhaltsverzeichnis 8.2 Farbsysteme Was ist Farbe? CIE-Normfarbtafel Der RGB-Farbraum Der CYM-Farbraum Der HLS-Farbraum Die Yxx-Farbräume Farbpaletten Testfragen Standards zur Einzelbildkompression (JPEG) Historie JPEG DCT-basierte Kompression Die Arbeitsmethoden JPEG-Syntax und Organisation der Daten Kompressionsergebnisse JPEG-LS Verlustlose Kompression Der Kompressionsalgorithmus Encodierungsprozeduren Das Datenformat Resultate der verlustlosen Kompression JPEG 2000 Waveletbasierte Kompression Das Kompressionsverfahren Die Datenstruktur Dateiformat-Syntax (JP2) Erweiterungen im Part Kompressionsergebnisse im Vergleich Testfragen Grundlegende Verfahren zur Bildsequenzkompression Struktur eines Video-Codecs Bewegungsschätzung und -kompensation Bewegungsarten und Schätzverfahren Block-Matching Warping Testfragen Standards zur Bildsequenzkompression Einführung

13 Inhaltsverzeichnis XIII 11.2 Bildformate MPEG-Systemschicht Kompressionsverfahren (MPEG-1/2) Struktur von Video-Elementarströmen Verarbeitung von I-Bildern Verarbeitung von P- und B-Bildern Bewegungskompensation Bitratensteuerung Besonderheiten von MPEG H.263 und MPEG H MPEG H Grundkonzept Dekorrelation Quantisierung Codierung Filter zur Unterdrückung von Blockartefakten Profile und Levels Erweiterungen Testfragen A Testbilder B JPEG Decodier-Beispiel C JPEG 2000 Codier-Beispiel D Quelltexte ELösungen zu ausgewählten Aufgaben Formelzeichen und Abkürzungen Literatur Sachwortverzeichnis