170 likes | 347 Views
MPEG Statusbericht. Weitere Arbeitspunkte. JVT Committee Draft verabschiedet MPEG-21: Multimedia Framework Intellectual Property Management and Protection (IPMP), z.B. für MPEG-4 SNHC-AFX: Erweiterung der 3D Computer Graphics Spezifikationen
E N D
MPEG Statusbericht
Weitere Arbeitspunkte • JVT Committee Draft verabschiedet • MPEG-21: Multimedia Framework • Intellectual Property Management and Protection (IPMP), z.B. für MPEG-4 • SNHC-AFX: Erweiterung der 3D Computer Graphics Spezifikationen • Systems: Amendments, Corrigenda, MPEG-4 over IP, JVT over MPEG-2 Transport, JVT over IP (RTP) • Digital Cinema: Voruntersuchungen, Requirements, Archiving, Distribution
AHG on Advanced FGS • Arbeiten zu Fine Granularity Scalability (FGS) wurden mit subjektiven Tests abgeschlossen • Vorteile bei variablen/gestörten Kanälen konnten gegenüber Simulcast nachgewiesen werden • Fraglich ob „altes“ FGS überhaupt zum Einsatz kommt
AHG on Advanced FGS • Neue FGS-Verfahren auf der Basis des JVT-Codecs wurden vorgestellt • Sehr gute Ergebnisse im Vergleich zu Single Layer Coding, wesentlich besser als „altes“ FGS • Untersuchung in AHG on Advanced FGS • Zunächst muss Bedarf von Industrie nachgewiesen werden
AHG on Interframe Wavelet Coding • Videocodierung mit Wavelets • 3D Wavelet Transformation kombiniert mit Bewegungskompensation über eine GOP • Transformation ähnlich JPEG2000 • Subpixel MC (1/4-Pel), variable Blocksize, Lifting Filter • Performance nahe an Single Layer JVT Codec • Bitstrom dabei voll skalierbar (Zeit, Auflösung, Qualität) • Sehr viel versprechende Ergebnisse • Weitere Untersuchung/Optimierung in AHG • Durchführung von „Exploration Experiments“
MPEG-7 • Working Drafts für Version 2 verabschiedet, MDS und Video • Weitere Proposals werden in Core Experimenten untersucht • Definition von Profiles, Levels • Conformance, Interoperability
AHG on 3DAV • Neue Technologien aus Computergraphik: Image-Based Rendering (IBR) • „IBR refers loosely to techniques that generate new images from other images rather than from geometric primitives“ (Marc Levoy) • Panoramen/Mosaiken, Lichtfelder, Layered-Depth Images, etc. • Übertragung der Prinzipien auf Video, Video-Based Rendering (VBR)
Panoramic Video • Systeme mit gekrümmten Spiegeln • z.B. http://www.remotereality.com/
Panoramic Video • Systeme mehreren planaren Spiegeln und mehreren Kameras • z.B. http://www.fullview.com
Panoramic Video • Systeme mehreren omidirektional angeordneten Kameras • z.B. http://www.ptgrey.com/, Ladybug
Panoramic Video • Courtesy of Prof. Yokoya of Nara Institute of Science and Technology
Multiview Video • Eine Szene wird von N Kameras aufgezeichnet, deren Kalibrierung bekannt ist • Interpolation von Zwischenansichten • Freie Navigation in der Szene, beliebiger Standpunkt und Blickwinkel (in praktischen Grenzen)
Multiview Video • Courtesy of Prof. Matsuyama of Kyoto University
Multiview Video • Live broadcast event: Super Bowl 2001 • Captured by 30 cameras • Courtesy of Prof. Kanade of Carnegie Mellon Univ.
Stereo Video • Erzeugung eines Tiefeneindrucks durch Übertragung von getrennten Ansichten für jedes Auge • Technology ist altbekannt (IMAX), aber: keine Möglichkeit zur Darstellung von Bewegungsparallaxe • Neue Verfahren modellieren und übertragen die Tiefeninformation explizit • => ermöglicht Parallax Viewing • Geschätzte Disparitäten, bzw. gemessene Tiefen (ZCam)
MPEG Standardisierung • Neue Technologien zu VBR sind vorhanden und in Entwicklung • Erzeugung (Aufnahme) • Verarbeitung • Repräsentation • Codierung • Übertragung • Darstellung, Interaktion • Es besteht Standarisierungsbedarf? • MPEG hat eine Adhoc Gruppe zur Untersuchung ins Leben gerufen
AHG on 3DAV • Aufgaben: • Definition des Arbeitsgegenstandes • Beschreibung der Applikationen • Definition der Requirements • Klärung der Beziehungen zu vorhandenen MPEG Standards • Im Stadium von Vorarbeiten • Was dann passiert, hängt von den Ergebnissen der Voruntersuchungen ab