Mpeg7 und Mpeg21

Logo

Christian Eiermann Reihold-Würth-Hochschule Künzelsau Medientechnologie WS 2009/2010 /23

Einführung inMPEG 7 / MPEG 21

1

Logo


Agenda

• MPEG Standards• MPEG 7• - Warum MPEG7?• - MPEG 7 Definitions• - Mögliche Anwendungsbereiche• MPEG 21• Fazit

2

Logo


Rückblick

• MPEG 1: Interactive CD, MP3• MPEG 2: DTV, STB, DVD• MPEG 4: Multimedia für Web und Mobile• MPEG 7: ?• MPEG 21: ?

3

Logo


MPEG 7

• Multimedia Content Description Interface • ISO/IEC: 15938• Entwickelt von: MPEG• Standard definiert seit: 2002• Hauptaufgabe: Standard für Content

Management / Beschreibung von multimedialen Daten mithilfe von Metainformationen

4

Logo


Metadaten

• Griech.: ”Daten über Daten”- technische Daten (Auflösung, Abtastrate,…)- Angaben über Inhalt

• z. B. MP3 (ID3-Tags): Interpret, Album, Jahr, Genre, …

• Metadaten müssen sich nicht zwangsläufig auf dem gleichen Medium befinden wie Multimedia-Daten

5

Logo


• Notwendigkeit von MPEG 7 durch multimediale Datenflut (insbes. im Web)

• Verschiedene Geräte mit unterschiedlichen Anforderungen

• Anwendbar auf: Audio, Video, Multimedia• Unabhängig von Medium und Kodierung• Einfache Bedienbarkeit• Standardisierung der Schnittstellen (XML)

Warum MPEG 7?

6

Logo


XML

• (E)Xtensible Markup Language• W3C• Erweiterung von HTML i.w.S.• Universelles Format zum Austausch strukturierter

Informationen für das WWW• Interoperabilität von Systemen (Handy, TV, PC)• Kommunikation: M2M oder HCI

7

Logo


MPEG 7 Definitions

I. Descriptors (D) - Beschreibung der Merkmale

Audio VisualFrequenz Farbe

SzenentitelTempo PersonenTempowechsel TexturenTonart FormenMusikinstrumente OrtKlangfarbe GesichtserkennungMelodiestruktur Bewegung ObjekteSprache Bewegung Kamera

unterste Ebene: -Merkmalsextraktion-einfach beschreibbar, kann weitgehend automatisiert werden

Oberste Ebene: semantische Information

8

Logo


MPEG 7 Definitions

II. Description Schemes (DS)- Beziehungen zw. Komponenten / Semantik

III. Description Definition Language (DDL)- Sprache um D und DS zu erzeugen- DS editieren / erweitern

9

Logo


Semantik

• Semantik = Bedeutungslehre / Bedeutung der Zeichenz.B. “bank” = Kreditinstitut, Damm, Flussufer, Schräglage (bei Schiffen),...

• Infos über Orte, Personen und Dinge sollen automatisch miteinander in Beziehung gebracht werden, z.B. FOAF (Friend of a friend)

10

Logo


MPEG 7 Software: Caliph

11

Logo


• Automated Voice Response (AVR) z.B. für Callcenter• Liederkennung (z.B. Shazam für iPhone)• Gesichtserkennung in Bildern und Videos

Mögliche Anwendungsbereiche

12

Logo


Anwendung Gesichtserkennung: iPhoto

13

Logo


MPEG 7 Spoken Content Demonstrator

14

Logo


Anwendung Bildersuche: Sketch and Search

15

Logo


Anwendung: Bildersuche Teil 2

• Verkehrsüberwachung• Kameraüberwachung nach Wichtigkeit• Suche nach semantischen Inhalten (z.B.

Personen, Gegenstände) in Bildern und Videosignalen

• Content Based Image Retrieval

16

Logo


MPEG 21

• ISO/IEC: 15938• Entwickelt von: MPEG• Standard definiert seit: 2002• Hauptaufgabe von MPEG 21: Schaffung eines

Standards für die Erzeugung, Produktion und Freibgabe sowie Handel mit Multimediainhalten.

17

Logo


Warum MPEG 21?

• Integration komplexer Technologien zu einem Gesamtsystem

• Effiziente und automatisierte Interoperabilität zwischen verschiedenen Multimedia-Dienstanbietern

• Alle am Arbeitsfluss Beteiligte sollen berücksichtigt werden

• Sicherheit (DRM)

18

Logo


• Rollen: Anbieter, Konsument, Autor, Verteiler• Digital Items

19

Logo


Fazit MPEG 7

• MPEG 7: Beschreibung durch und Generierung von Metadaten für MM-Inhalte und in Beziehung zueinander setzen

• Deutlich erleichterte Suchmöglichkeit sobald Suchmaschinenalgorithmen ausgereift

• Eine Suchmaschine um alle Features zu Nutzen wird wohl kaum machbar sein

• Sehr viel Inhalt (ca. 2000 Zeilen), wenig Nutzer• Konkurrenz: TVanytime (EPG oder auf

Webseiten)

20

Logo


Fazit MPEG 21

• Multimedia Framework, welches eine Infrastruktur zur Erzeugung, Produktion und

• Noch mehr Inhalt als MPEG 7, noch weniger Nutzer

• Viele Unternehmen schaffen eigene Standards

21

Logo


Quellen

• A. Heyna, M. Briede, U. Schmidt: Datenformate im Medienbereich

• http://www.chiariglione.org (Website MPEG)• Ali Tabatabai / Sony US Research Lab. • Matthias Gruhne / Fraunhofer Institut• http://www.chrisharrison.net/projects/searchbys

ketch• www.youtube.com

22

Logo


Bei Fragen oder Anregungen schreiben Sie mich einfach an.Kommentare sind erwünscht.

Mpeg7 und Mpeg21

Documents

Transcript of Mpeg7 und Mpeg21