MPEG-7 - MPEG-7

MPEG-7 это мультимедиа содержание описание стандарт. Он был стандартизирован в ISO /IEC 15938 (интерфейс описания мультимедийного контента).[1][2][3][4] Это описание будет связано с самим контентом, чтобы обеспечить быстрый и эффективный поиск материала, который представляет интерес для пользователя. MPEG-7 официально называется Мультимедийный контент Описание Интерфейс. Таким образом, это нет стандарт, который касается фактического кодирования движущихся изображений и аудио, например MPEG-1, MPEG-2 и MPEG-4. Оно использует XML хранить метаданные, и может быть прикреплен к временной код чтобы отметить определенные события, или синхронизировать текст песни к песня, Например.

Он был разработан для стандартизации:

  • набор схем описания («DS») и дескрипторов («D»)
  • язык для определения этих схем, называемый Описание Определение Язык ("DDL")
  • схема кодирования описания

Сочетание MPEG-4 и MPEG-7 иногда упоминается как MPEG-47.[5]

Вступление

MPEG-7 предназначен для обеспечения дополнительных функций по сравнению с предыдущим MPEG стандарты, представляющие информацию о содержимом, а не о самом содержимом («биты о битах»). Эта функция представляет собой стандартизацию описаний мультимедийного контента. MPEG-7 можно использовать независимо от других стандартов MPEG - описание может быть даже приложено к аналоговому фильму. Однако представление, которое определено в MPEG-4, то есть представление аудиовизуальных данных в виде объектов, очень хорошо подходит для того, что будет построено на стандарте MPEG-7. Это представление является основой процесса категоризации. Кроме того, описания MPEG-7 можно использовать для улучшения функциональности предыдущих стандартов MPEG. С помощью этих инструментов мы можем создать описание MPEG-7 и развернуть его. Согласно документу с требованиями 1 «Описание состоит из схемы описания (структуры) и набора значений дескриптора (экземпляров), которые описывают Данные». Значение дескриптора - это «создание дескриптора для заданного набора данных (или его подмножества)». Дескриптор - это синтаксическое и семантическое определение содержания. Алгоритмы извлечения находятся внутри области применения стандарта, поскольку их стандартизация не требуется для обеспечения взаимодействия.

Запчасти

MPEG-7 (ISO / IEC 15938) состоит из разных частей. Каждая часть охватывает определенный аспект всей спецификации.

Части MPEG-7[4][6]
ЧастьЧислоДата первого публичного выпуска (Первое издание)Дата последнего публичного выпуска (издание)Последняя поправказаглавиеОписание
Часть 1ИСО / МЭК 15938-1200220022006Системыархитектурная структура MPEG-7, передача контента MPEG-7 - TeM (текстовый формат для MPEG-7) и двоичный формат для описаний MPEG-7 (БиМ )[7]
Часть 2ИСО / МЭК 15938-220022002Язык определения описания
Часть 3ИСО / МЭК 15938-3200220022010Визуальный
Часть 4ИСО / МЭК 15938-4200220022006Аудио
Часть 5ИСО / МЭК 15938-5200320032015Схемы мультимедийного описания
Часть 6ИСО / МЭК 15938-6200320032011Справочное программное обеспечение
Часть 7ИСО / МЭК 15938-7200320032011Тестирование на соответствие
Часть 8ISO / IEC TR 15938-8200220022011Извлечение и использование описаний MPEG-7
Часть 9ИСО / МЭК 15938-9200520052012Профили и уровни
Часть 10ИСО / МЭК 15938-1020052005Определение схемы
Часть 11ISO / IEC TR 15938-11200520052012Схемы профилей MPEG-7
Часть 12ИСО / МЭК 15938-1220082012Формат запроса
Часть 13ИСО / МЭК 15938-1320152015Компактные дескрипторы для визуального поиска

Связь между описанием и содержанием

Независимость между описанием и содержанием

Требование к архитектуре MPEG-7: описание должно быть отдельно от аудиовизуального контента.

С другой стороны, должен быть отношение между содержанием и описанием. Таким образом, описание объединяется с самим контентом.

С правой стороны вы можете увидеть эту связь между описанием и содержанием.

Инструменты MPEG-7

Связь между различными инструментами и процессом разработки MPEG-7

MPEG-7 использует следующие инструменты:

  • Дескриптор (D): Это представление функции, определенной синтаксически и семантически. Возможно, уникальный объект описывался несколькими дескрипторами.
  • Схемы описания (DS): Укажите структуру и семантику отношений между его компонентами, эти компоненты могут быть дескрипторами (D) или схемами описания (DS).
  • Описание Определение Язык (DDL): Он основан на языке XML, который используется для определения структурных отношений между дескрипторами. Он позволяет создавать и изменять схемы описания, а также создавать новые дескрипторы (D).
  • Системные инструменты: Эти инструменты имеют дело с бинаризацией, синхронизацией, транспортировкой и хранением дескрипторов. Он также касается Интеллектуальная собственность охрана.

Справа вы можете увидеть взаимосвязь между инструментами MPEG-7.

Приложения MPEG-7

Есть много приложений и прикладных областей, которые выиграют от стандарта MPEG-7. Вот несколько примеров применения:

Программное обеспечение и демонстраторы для MPEG-7

  • Калиф и Эмир: Аннотация и поиск изображений на основе MPEG-7 (GPL). Создает файлы XML MPEG-7.[9]
  • Реализация C #: Реализация дескрипторов MPEG-7 с открытым исходным кодом на C #.
  • Frameline 47 Обозначение видео: Frameline 47 от универсальных систем доставки. Первое коммерческое приложение MPEG-7, Frameline 47, использует расширенную схему контента на основе MPEG-7, чтобы иметь возможность записывать видеофайлы целиком или сегменты и группы сегментов из этого видеофайла в соответствии с соглашением MPEG-7 ( коммерческий инструмент)
  • Eptascape ADS200 использует кодировщик MPEG 7 в реальном времени на аналоговом видеосигнале камеры для выявления интересных событий, особенно в приложениях наблюдения, проверьте демонстрации увидеть MPEG-7 в действии (коммерческий инструмент)
  • Инструмент аннотаций IBM VideoAnnEx: Создание документов MPEG-7 для видеопотоков с описанием структуры и указанием ключевых слов из контролируемого словаря (двоичная версия, ограниченная лицензия)
  • iFinder Medienanalyse- и поисковая система: Механизм извлечения метаданных и поиска на основе MPEG-7 (коммерческий инструмент)
  • Аудиокодер MPEG-7: Создание документов MPEG-7 для аудиодокументов, описывающих звуковые характеристики низкого уровня (двоичная версия и исходный код, Java, GPL)
  • Извлечение визуального дескриптора MPEG-7: Программное обеспечение для извлечения визуальных дескрипторов MPEG-7 из изображений и областей изображений.
  • Веб-служба извлечения функций XM: Функциональные возможности модели экспериментов (XM) доступны через интерфейс веб-сервисов, что позволяет автоматически характеризовать изображения с визуальным описанием низкого уровня MPEG-7.
  • Аудиоанализатор TU Berlin MPEG-7 (Веб-демонстрация): Создание документов MPEG-7 (XML) для аудио документов (WAV, MP3). Реализованы все 17 звуковых дескрипторов низкого уровня MPEG-7 (коммерческие)
  • TU Berlin MPEG-7 Демонстратор голосового контента (Веб-демонстрация): Создание документов MPEG-7 (XML) с описанием SpokenContent из входного речевого сигнала (WAV, MP3) (коммерческий)
  • Библиотека MP7JRS C ++ Полная реализация MPEG-7 частей 3, 4 и 5 (визуальные, аудио и MDS) Joanneum Research Институт информационных и коммуникационных технологий - Аудиовизуальная медиа-группа.
  • БилВидео-7: MPEG-7-совместимая распределенная система индексирования и поиска видео, поддерживающая сложные, мультимодальные, составные запросы; разработан Bilkent University Multimedia Database Group (BILMDG ).
  • UniSay: Продвинутый постпроизводственный анализ файлов и обработка звука на основе MPEG-7.

Смотрите также

Ограничения

Стандарт MPEG-7 изначально был написан на Схема XML (XSD), который составляет полуструктурированные данные. Например, время просмотра фильма, аннотированного с использованием MPEG-7, в XML является машиночитаемые данные, поэтому программные агенты будут знать, что число, выражающее время работы, является положительным целым числом, но такие данные не могут быть интерпретированы машиной (не могут быть поняты агентами), потому что они не передают семантика (значение), известное как «Семантический разрыв. » Чтобы решить эту проблему, было много попыток сопоставить MPEG-7 Схема XML к Язык веб-онтологий (OWL), который является структурированные данные эквивалент терминов стандарта MPEG-7 (MPEG-7Ontos, COMM, SWIntO и т. д.). Однако эти сопоставления на самом деле не связывали «Семантический разрыв," потому что низкоуровневые функции видео сами по себе не подходят для представления семантики видео.[10] Другими словами, аннотирование автоматически извлекаемой функции видео, такой как распределение цвета, не дает смысла фактического визуального контента.[11]

Сравнивать

Рекомендации

  • Б.С. Манджунат (редактор), Филипп Салембье (редактор) и Томас Сикора (редактор): Введение в MPEG-7: интерфейс описания мультимедийного контента. Wiley & Sons, апрель 2002 г. - ISBN  0-471-48678-7
  • Харальд Кош: Технологии распределенных мультимедийных баз данных, поддерживаемые MPEG-7 и MPEG-21. CRC Press, январь 2004 г. - ISBN  0-8493-1854-8
  • Гиоргос Стаму (редактор) и Стефанос Коллиас (редактор): Мультимедийный контент и семантическая сеть: стандарты, методы и инструменты. Wiley & Sons, май 2005 г. - ISBN  0-470-85753-6
  • Хён-Гук Ким, Николас Моро и Томас Сикора: MPEG-7 Audio и не только: индексирование и поиск аудиоконтента. Wiley & Sons, октябрь 2005 г. - ISBN  0-470-09334-X
  1. ^ ISO. «ISO / IEC 15938-1: 2002 - Информационные технологии - Интерфейс описания мультимедийного контента - Часть 1: Системы». Получено 2009-10-31.
  2. ^ MPEG. «О MPEG - Достижения». chiariglione.org. Архивировано из оригинал 8 июля 2008 г.. Получено 2009-10-31.
  3. ^ MPEG. "Круг полномочий". chiariglione.org. Архивировано из оригинал 21 февраля 2010 г.. Получено 2009-10-31.
  4. ^ а б MPEG. «Стандарты MPEG - Полный список стандартов, разработанных или разрабатываемых». chiariglione.org. Архивировано из оригинал 20 апреля 2010 г.. Получено 2009-10-31.
  5. ^ NetworkDictionary. «Полный словарь протокола, глоссарий и справочник - М». Архивировано из оригинал на 01.01.2010. Получено 2009-12-26.
  6. ^ ISO / IEC JTC 1 / SC 29 (30 октября 2009 г.). «MPEG-7 (интерфейс описания мультимедийного контента)». Архивировано из оригинал 31 декабря 2013 г.. Получено 2009-11-10.
  7. ^ ISO / IEC JTC1 / SC29 / WG11 (октябрь 2004 г.). «Обзор MPEG-7 (версия 10)». chiariglione.org. Получено 2009-11-01.
  8. ^ «Онтология MPEG-7». Получено 29 июн 2017.
  9. ^ Люкс, Матиас. «Калиф и Эмир: аннотация и поиск фотографий в формате MPEG-7». Материалы 17-й международной конференции ACM по мультимедиа. ACM, 2009.
  10. ^ Сикос, Лесли Ф .; Пауэрс, Дэвид М.В. (2015). «Поиск видеоинформации на основе знаний с LOD»: 35–37. Дои:10.1145/2810133.2810141. Цитировать журнал требует | журнал = (Помогите)
  11. ^ Болл, Сюзанна; Клас, Вольфганг; Шет, Амит (1998). «Обзор использования метаданных для управления мультимедийными данными». Использование метаданных для интеграции и применения цифровых медиа. Макгроу-Хилл. п.3. ISBN  978-0070577350.

внешняя ссылка