1 MPEGStatusbericht

2 Weitere Arbeitspunkte JVT Committee Draft verabschiedet MPEG-21: Multimedia Framework Intellectual Property Management and Protection (IPMP), z.B. für MPEG-4 SNHC-AFX: Erweiterung der 3D Computer Graphics Spezifikationen Systems: Amendments, Corrigenda, MPEG-4 over IP, JVT over MPEG-2 Transport, JVT over IP (RTP) Digital Cinema: Voruntersuchungen, Requirements, Archiving, Distribution

3 AHG on Advanced FGS Arbeiten zu Fine Granularity Scalability (FGS) wurden mit subjektiven Tests abgeschlossen Vorteile bei variablen/gestörten Kanälen konnten gegenüber Simulcast nachgewiesen werden Fraglich ob altes FGS überhaupt zum Einsatz kommt

4 AHG on Advanced FGS Neue FGS-Verfahren auf der Basis des JVT-Codecs wurden vorgestellt Sehr gute Ergebnisse im Vergleich zu Single Layer Coding, wesentlich besser als altes FGS Untersuchung in AHG on Advanced FGS Zunächst muss Bedarf von Industrie nachgewiesen werden

5 AHG on Interframe Wavelet Coding Videocodierung mit Wavelets 3D Wavelet Transformation kombiniert mit Bewegungskompensation über eine GOP Transformation ähnlich JPEG2000 Subpixel MC (1/4-Pel), variable Blocksize, Lifting Filter Performance nahe an Single Layer JVT Codec Bitstrom dabei voll skalierbar (Zeit, Auflösung, Qualität) Sehr viel versprechende Ergebnisse Weitere Untersuchung/Optimierung in AHG Durchführung von Exploration Experiments

6 MPEG-7 Working Drafts für Version 2 verabschiedet, MDS und Video Weitere Proposals werden in Core Experimenten untersucht Definition von Profiles, Levels Conformance, Interoperability

7 AHG on 3DAV Neue Technologien aus Computergraphik: Image- Based Rendering (IBR) IBR refers loosely to techniques that generate new images from other images rather than from geometric primitives (Marc Levoy) Panoramen/Mosaiken, Lichtfelder, Layered-Depth Images, etc. Übertragung der Prinzipien auf Video, Video-Based Rendering (VBR)

8 Systeme mit gekrümmten Spiegeln z.B. Panoramic Video

9 Systeme mehreren planaren Spiegeln und mehreren Kameras z.B. Panoramic Video

10 Systeme mehreren omidirektional angeordneten Kameras z.B. Ladybughttp:// Panoramic Video

11 Courtesy of Prof. Yokoya of Nara Institute of Science and Technology Panoramic Video

12 Eine Szene wird von N Kameras aufgezeichnet, deren Kalibrierung bekannt ist Interpolation von Zwischenansichten Freie Navigation in der Szene, beliebiger Standpunkt und Blickwinkel (in praktischen Grenzen) Multiview Video

13 Courtesy of Prof. Matsuyama of Kyoto University Multiview Video

14 Live broadcast event: Super Bowl 2001 Captured by 30 cameras Courtesy of Prof. Kanade of Carnegie Mellon Univ. Multiview Video

15 Erzeugung eines Tiefeneindrucks durch Übertragung von getrennten Ansichten für jedes Auge Technology ist altbekannt (IMAX), aber: keine Möglichkeit zur Darstellung von Bewegungsparallaxe Neue Verfahren modellieren und übertragen die Tiefeninformation explizit => ermöglicht Parallax Viewing Geschätzte Disparitäten, bzw. gemessene Tiefen (ZCam) Stereo Video

16 Neue Technologien zu VBR sind vorhanden und in Entwicklung Erzeugung (Aufnahme) Verarbeitung Repräsentation Codierung Übertragung Darstellung, Interaktion Es besteht Standarisierungsbedarf? MPEG hat eine Adhoc Gruppe zur Untersuchung ins Leben gerufen MPEG Standardisierung

17 Aufgaben: Definition des Arbeitsgegenstandes Beschreibung der Applikationen Definition der Requirements Klärung der Beziehungen zu vorhandenen MPEG Standards Im Stadium von Vorarbeiten Was dann passiert, hängt von den Ergebnissen der Voruntersuchungen ab AHG on 3DAV