1

MPEGMPEGStatusberichtStatusbericht

2

Weitere ArbeitspunkteWeitere Arbeitspunkte

JVT Committee Draft verabschiedet

MPEG-21: Multimedia Framework

Intellectual Property Management and Protection (IPMP), z.B. für MPEG-4

SNHC-AFX: Erweiterung der 3D Computer Graphics Spezifikationen

Systems: Amendments, Corrigenda, MPEG-4 over IP, JVT over MPEG-2 Transport, JVT over IP (RTP)

Digital Cinema: Voruntersuchungen, Requirements, Archiving, Distribution

3

AHG on Advanced FGSAHG on Advanced FGS

Arbeiten zu Fine Granularity Scalability (FGS) wurden mit subjektiven Tests abgeschlossen

Vorteile bei variablen/gestörten Kanälen konnten gegenüber Simulcast nachgewiesen werden

Fraglich ob „altes“ FGS überhaupt zum Einsatz kommt

4

AHG on Advanced FGSAHG on Advanced FGS

Neue FGS-Verfahren auf der Basis des JVT-Codecs wurden vorgestellt

Sehr gute Ergebnisse im Vergleich zu Single Layer Coding, wesentlich besser als „altes“ FGS

Untersuchung in AHG on Advanced FGS

Zunächst muss Bedarf von Industrie nachgewiesen werden

5

AHG on Interframe Wavelet CodingAHG on Interframe Wavelet Coding

Videocodierung mit Wavelets

3D Wavelet Transformation kombiniert mit Bewegungskompensation über eine GOP

Transformation ähnlich JPEG2000

Subpixel MC (1/4-Pel), variable Blocksize, Lifting Filter

Performance nahe an Single Layer JVT Codec

Bitstrom dabei voll skalierbar (Zeit, Auflösung, Qualität)

Sehr viel versprechende Ergebnisse

Weitere Untersuchung/Optimierung in AHG

Durchführung von „Exploration Experiments“

6

MPEG-7MPEG-7

Working Drafts für Version 2 verabschiedet, MDS und Video

Weitere Proposals werden in Core Experimenten untersucht

Definition von Profiles, Levels

Conformance, Interoperability

7

AHG on 3DAVAHG on 3DAV

Neue Technologien aus Computergraphik: Image-Based Rendering (IBR)

„IBR refers loosely to techniques that generate new images from other images rather than from geometric primitives“ (Marc Levoy)

Panoramen/Mosaiken, Lichtfelder, Layered-Depth Images, etc.

Übertragung der Prinzipien auf Video, Video-Based Rendering (VBR)

8

Systeme mit gekrümmten Spiegeln z.B. http://www.remotereality.com/

Panoramic VideoPanoramic Video

9

Systeme mehreren planaren Spiegeln und mehreren Kameras

z.B. http://www.fullview.com

Panoramic VideoPanoramic Video

10

Systeme mehreren omidirektional angeordneten Kameras

z.B. http://www.ptgrey.com/, Ladybug

Panoramic VideoPanoramic Video

11

Courtesy of Prof. Yokoya of Nara Institute of Science and Technology

Panoramic VideoPanoramic Video

12

Eine Szene wird von N Kameras aufgezeichnet, deren Kalibrierung bekannt ist

Interpolation von Zwischenansichten Freie Navigation in der Szene, beliebiger Standpunkt

und Blickwinkel (in praktischen Grenzen)

Multiview VideoMultiview Video

13

Courtesy of Prof. Matsuyama of Kyoto University

Multiview VideoMultiview Video

14

Live broadcast event: Super Bowl 2001 Captured by 30 cameras Courtesy of Prof. Kanade of Carnegie Mellon Univ.

Multiview VideoMultiview Video

15

Erzeugung eines Tiefeneindrucks durch Übertragung von getrennten Ansichten für jedes Auge

Technology ist altbekannt (IMAX), aber: keine Möglichkeit zur Darstellung von Bewegungsparallaxe

Neue Verfahren modellieren und übertragen die Tiefeninformation explizit

=> ermöglicht Parallax Viewing Geschätzte Disparitäten, bzw. gemessene Tiefen

(ZCam)

Stereo VideoStereo Video

16

Neue Technologien zu VBR sind vorhanden und in Entwicklung

Erzeugung (Aufnahme) Verarbeitung Repräsentation Codierung Übertragung Darstellung, Interaktion

Es besteht Standarisierungsbedarf?

MPEG hat eine Adhoc Gruppe zur Untersuchung ins Leben gerufen

MPEG StandardisierungMPEG Standardisierung

17

Aufgaben: Definition des Arbeitsgegenstandes Beschreibung der Applikationen Definition der Requirements Klärung der Beziehungen zu vorhandenen MPEG

Standards

Im Stadium von Vorarbeiten

Was dann passiert, hängt von den Ergebnissen der Voruntersuchungen ab

AHG on 3DAVAHG on 3DAV