Просмотр видео - Video browsing

Просмотр видео, также известный как поисковый поиск видео, представляет собой интерактивный процесс беглого просмотра видеоконтента с целью удовлетворения некоторой потребности в информации или интерактивной проверки актуальности видеоконтента. Первоначально предлагалось помочь пользователям просматривать одно видео с помощью визуальных миниатюр,[1] современные инструменты просмотра видео позволяют пользователям быстро находить нужную информацию в видеоархиве с помощью итеративного взаимодействие человека с компьютером через поисковый поиск подход.[2][3] Многие из этих инструментов предполагают наличие умного пользователя, которому нужны функции для интерактивной проверки видеоконтента, а также функции автоматической фильтрации контента. Для этого есть несколько функций видео взаимодействия.[4] обычно предоставляются, например, сложная навигация по видео или поиск по контентный запрос. Инструменты просмотра видео часто основываются на более низком уровне анализ видеоконтента, Такие как обнаружение перехода между выстрелами, извлечение ключевых кадров, определение семантических концепций и создание обзора структурированного содержимого видеофайла или видеоархива. Кроме того, они обычно предоставляют сложные функции навигации, такие как расширенные временные шкалы,[5] визуальные панели поиска или список выбранных миниатюр, а также средства для запроса контента. Примерами запросов к контенту являются фильтрация кадров с помощью визуальных концепций (например, только кадры, показывающие автомобили), по некоторым конкретным характеристикам (например, по цвету или фильтрации движения), с помощью эскизов, предоставленных пользователем (например, визуально нарисованный эскиз), или с помощью контента: поиск сходства на основе.

История

Просмотр видео был первоначально предложен иранским инженером Фаршидом Арманом, тайваньским ученым-компьютерщиком Ардингом Хсу и ученым-компьютерщиком Минг-Йи Чиу, когда они работали в Сименс, и он был представлен на Международная конференция ACM в августе 1993 г.[1][6] Они описали обнаружение выстрела алгоритм для сжатое видео который изначально был закодирован дискретное косинусное преобразование (DCT) стандарты кодирования видео Такие как JPEG, MPEG и H.26x. Основная идея заключалась в том, что, поскольку коэффициенты DCT математически связаны с пространственной областью и представляют содержимое каждого кадра, их можно использовать для обнаружения различий между видеокадрами. В алгоритме подмножество блоков в кадре и подмножество DCT-коэффициентов для каждого блока используются как вектор движения представление для кадра. Работая со сжатыми представлениями DCT, алгоритм значительно снижает вычислительные требования для распаковки и обеспечивает эффективный просмотр видео.[7] Алгоритм представляет отдельные кадры видеопоследовательности в виде r-кадра, эскиза кадра, обрамленного областью отслеживания движения. Позже была принята разновидность этой концепции для QBIC мозаики видеоконтента, где каждый r-кадр представляет собой заметный кадр из кадра, который он представляет.[8]

Разборка видео браузера

Разборки в браузере видео (VBS)[9] - это ежегодный конкурс в реальном времени для инструментов исследовательского поиска видео, в котором международные исследователи используют инструменты просмотра видео для максимально быстрого решения специальных задач поиска видео на умеренно большом наборе данных. Основная цель VBS, которая началась в 2012 году на Международной конференции по моделированию мультимедиа (MMM), - повысить производительность инструментов просмотра видео. С 2016 года VBS также сотрудничает с TRECVID.[10]

Рекомендации

  1. ^ а б Арман, Фаршид; Депомье, Реми; Хсу, Ардинг; Чиу, Мин-Йи (октябрь 1994 г.). «Контент-просмотр видеопоследовательностей». Труды Второй международной конференции ACM по мультимедиа. Ассоциация вычислительной техники: 97–103. Дои:10.1145/192593.192630. ISBN  0897916867.
  2. ^ Поддержка исследовательского поиска в видеотеке: когда раскадровки недостаточно. М. Г. Кристель. 2008 г.
  3. ^ Video Explorer - инструмент для навигации и поиска в одном видео, основанный на быстром анализе контента. К. Шёффманн, М. Ташвер и Л. Бозоэрменьи. 2010 г.
  4. ^ Инструменты взаимодействия с видео: обзор последних работ. К. Шеффманн, М. А. Худелист и Дж. Хубер. 2015 г.
  5. ^ Интерфейсы для просмотра мобильного видео на основе временной шкалы. В. Хюрст и К. Майер. 2008 г.
  6. ^ Арман, Фаршид; Хсу, Ардинг; Чиу, Мин-Йи (август 1993 г.). «Обработка изображений на сжатых данных для больших баз видеоданных». Материалы Первой Международной конференции ACM по мультимедиа. Ассоциация вычислительной техники: 267–272. Дои:10.1145/166266.166297. ISBN  0897915968.
  7. ^ Чжан, Хунцзян (1998). «Просмотр и поиск видео на основе содержания». In Furht, Borko (ред.). Справочник Интернет- и мультимедийных систем и приложений. CRC Press. стр.83–108 (89). ISBN  9780849318580.
  8. ^ Стил, Майкл; Hearst, Marti A .; Лоуренс, А. Роу (1998). «Video Workbench: интерфейс прямого управления для редактирования цифровых медиа видеооператорами-любителями» (PDF). Семантический ученый: 1-19 (14). Получено 18 октября 2019.
  9. ^ Разборки в браузере видео
  10. ^ TRECVID, Инициатива по академическому тестированию NIST