Автоматическое распознавание контента - Automatic content recognition

Автоматическое распознавание контента (ACR) - это технология идентификации для распознавания содержимого, воспроизводимого на мультимедийном устройстве или присутствующего в мультимедийном файле. Устройства, поддерживающие ACR, позволяют пользователям быстро получать дополнительную информацию о контенте, который они видят при любом вводе данных или поиске. Например, разработчики приложения могут затем предоставлять зрителям персонализированный дополнительный контент.[1]

Как это устроено

Чтобы начать распознавание, выбирается короткий медиаклип (аудио, видео или и то, и другое). Этот клип можно выбрать из мультимедийного файла или записать на устройстве. С помощью таких алгоритмов, как дактилоскопия, информация из фактического перцептивного контента берется и сравнивается с базой данных эталонных отпечатков пальцев, каждый эталонный отпечаток соответствует известной записанной работе.[2] База данных может содержать метаданные о работе и связанную информацию, включая дополнительные носители. Если отпечаток медиаклипа совпадает, программа идентификации возвращает соответствующий метаданные в клиентское приложение.[3]

Отпечатки пальцев и водяные знаки

ACR на основе аудио широко используется на рынке. Две ведущие методологии: акустическая дактилоскопия и водяные знаки. Другой распространенный подход использует снятие отпечатков пальцев с видео.

Акустическая дактилоскопия генерирует уникальные отпечатки пальцев из самого контента. Методы снятия отпечатков пальцев работают независимо от формата контента, кодека, битрейта и методов сжатия.[4] Это позволяет использовать в разных сетях и каналах. Поэтому он широко используется для интерактивного телевидения, приложений второго экрана и мониторинга контента.[5][6] Популярные приложения, такие как Shazam, YouTube, Facebook,[7] Thetake, WeChat и Weibo используют аудио отпечатки пальцев методика распознавания контента, воспроизводимого с телевизора, и запуска дополнительных функций, таких как голосования, лотереи, темы или покупки.

В отличие от снятия отпечатков пальцев, цифровые водяные знаки требует вставки цифровых тегов, содержащих информацию о контенте, в сам контент до его распространения. Например, широковещательный кодер может вставлять водяной знак каждые несколько секунд, который может использоваться для идентификации широковещательного канала, идентификатора программы и отметки времени. Водяной знак обычно не слышен или невидим для пользователей. Терминальные устройства, такие как телефоны или планшеты, считывают водяные знаки вместо того, чтобы фактически распознавать воспроизводимый контент.[8] Технология водяных знаков используется в области защиты СМИ для отслеживания происхождения нелегальных копий.[9]

Компания Next / Market Insights ожидает, что 2,5 миллиарда устройств будут интегрированы с технологией ACR для обеспечения синхронизированного просмотра видео в реальном времени и по запросу.[10]

История

В 2011 году технологию ACR в телеконтенте применили Apple Inc. с Shazam сервис, который привлек внимание телеиндустрии. Shazam ранее был сервисом распознавания музыки, который распознавал музыку по звукозаписям. Используя собственную технологию отпечатков пальцев для идентификации каналов и видео в прямом эфире, Shazam расширила свой бизнес до телевизионных программ. В 2012 году провайдер спутниковой связи DIRECTV в партнерстве с поставщиком программ лояльности по телевидению Viggle, чтобы обеспечить интерактивный просмотр на втором экране. В 2013 году LG начала сотрудничество с Когнитивные сети (позже куплен Vizio и переименован в Inscape), поставщика ACR, чтобы обеспечить взаимодействие, управляемое ACR.[11] В 2015 году технология ACR распространилась на еще большее количество приложений и смарт-телевизоров. Социальные приложения и производители телевизоров любят Facebook, Twitter, Google, WeChat, Weibo, LG, Samsung, и Vizio Телевизоры использовали технологию ACR, разработанную собственными силами или интегрированную сторонними поставщиками ACR.[нужна цитата ] В 2016 году были доступны дополнительные приложения и мобильная ОС со встроенными сервисами автоматического распознавания контента, включая Peach, Omusic и Mi OS.[12][13][14]

Приложения

Идентификация содержания

Технология ACR помогает аудитории легко получать информацию о просмотренном контенте. За умные телевизоры а в приложениях со встроенной технологией ACR аудитория может проверить название проигрываемой песни или описание фильма, который они смотрели.[15] В дополнение к этому идентифицированный видео- и музыкальный контент может быть связан с поставщиками интернет-контента для просмотра по запросу, третьими сторонами для получения дополнительной справочной информации или дополнительных носителей.

Улучшение контента

Поскольку устройства могут быть «осведомлены» о просматриваемом или прослушиваемом контенте, устройства второго экрана могут подавать пользователям дополнительный контент, помимо того, что представлен на основном экране просмотра. Технология ACR может не только идентифицировать контент, но также может определять точное местоположение внутри контента. Таким образом, пользователю может быть представлена ​​дополнительная информация. ACR может включать множество интерактивных функций, таких как опросы, купоны, лотереи или покупка товаров на основе метки времени.[16]

Измерение аудитории

В реальном времени измерение аудитории Теперь показатели достижимы, применяя технологию ACR в смарт-телевизорах, телевизионных приставках и мобильных устройствах, таких как смартфоны и столы. Эти данные измерений очень важны для количественной оценки потребления аудитории и определения политики ценообразования на рекламу.

Мониторинг трансляций

Рекламодателям и владельцам контента важно знать, когда и где воспроизводился их контент. Традиционно агентства или рекламодатели должны вручную проверять презентацию. В масштабе это можно проверить только методом статистической выборки. Технология ACR позволяет автоматически отслеживать контент, воспроизводимый на ТВ. Такая информация, как время воспроизведения, продолжительность, частота, может быть получена без каких-либо ручных усилий.[17][18] Многие люди выразили некоторую озабоченность[ласковые слова ] однако об информации, которую эти смарт-телевизоры отправляют компаниям, собирающим эти данные. Однако почти в каждом наборе есть опция для отключения этой функции.[19]

Альтернативными подходами являются технологии автоматического распознавания контента на основе видео. Это набор технологий, которые вращаются вокруг конвергенции видео и телевидения повсюду.[20] что сделает методы аудио и цифровых водяных знаков неспособными обрабатывать миллионы уникальных исходящих потоков и миллиарды часов видеоматериалов, подлежащих просмотру с извлечением или обогащением метаданных по отношению к контенту в режиме реального времени. Где акустический отпечаток пальца не может полагаться на базу данных эталонных отпечатков пальцев. Цифровые водяные знаки полагается на навязчивые кадры на стадии производства, запечатлевающие каждый фрагмент контента.[21] Эффективность этих методов была поставлена ​​под сомнение на основании их предполагаемой неспособности эффективно масштабироваться до объема создаваемого видео.[22] На практике для монетизации и других пользовательских приложений ACR справочная база данных или наличие водяных знаков должны охватывать только те видео, которые являются целями монетизации. Например, видео, размещенное на YouTube и просмотренное только один раз, не обязательно должно присутствовать во всемирной базе данных ACR или иметь водяной знак.

Поставщики технологий ACR

Поставщики услуг ACR включают ACRCloud, Red Bee Media, Digimarc, Gracenote, Kantar Media, Услуги Inscape Data, и Shazam.

Смотрите также

Рекомендации

  1. ^ «Автоматическое распознавание содержимого (ACR)». Gartner. Получено 21 июн 2020.
  2. ^ «ACR (автоматическое распознавание контента)». Получено 27 февраля 2017.
  3. ^ «Автоматическое распознавание контента, создающее экосистемы с учетом контента» (PDF). Цивилизация. Циволюция. Архивировано из оригинал (PDF) 23 сентября 2015 г.. Получено 24 июн 2015.
  4. ^ "Panako: масштабируемая акустическая система снятия отпечатков пальцев, обрабатывающая изменение шкалы времени и высоты звука". Universiteit Gent. Получено 27 февраля 2017.
  5. ^ Главный, саамский. «Nielsen предоставляет интерактивную рекламу в реальном времени на смарт-телевизорах, чтобы поддерживать заинтересованность потоковой аудитории». Adweek. Получено 2018-01-11.
  6. ^ Бринк, Кайл. «Учебник по автоматизированному содержанию». Viggle. Viggle. Архивировано из оригинал на 2015-06-24. Получено 22 июн 2015.
  7. ^ «Автоматическое распознавание контента Facebook». Старком МедиаВест Групп. SMG. Архивировано из оригинал 6 июля 2015 г.. Получено 6 июля 2015.
  8. ^ Бринк, Кайл. «Старший вице-президент по разработке продуктов». Учебник по автоматическому распознаванию контента. Viggle. Получено 22 июн 2015.
  9. ^ Солана, Анна. «Как эти скрытые водяные знаки на видео могут помочь обнаружить пиратство и подделанные изображения | ZDNet». ZDNet. Получено 2018-01-11.
  10. ^ «Технология ACR для продвижения социального телевидения к 2017 году вырастет до 2,5 млрд устройств». СЛЕДУЮЩИЙ / ИНФОРМАЦИЯ О РЫНКЕ. Получено 24 июн 2015.
  11. ^ «LG сотрудничает с Cognitive Networks, чтобы сделать телевизоры Smart TV умнее и интерактивнее». Engadget. Получено 23 августа 2016.
  12. ^ «ACRCloud усиливает признание песен для самой популярной новой социальной сети, Peach». Сеть новостей музыкальной индустрии. Сеть новостей музыкальной индустрии. Получено 3 марта 2016.
  13. ^ Виктория, Хо. «Xiaomi поможет вам назвать песню, которую вы не можете перестать напевать». Mashable. Mashable. Получено 3 марта 2016.
  14. ^ «ACRCloud обеспечивает запуск первой на Тайване службы распознавания музыки / гудения для Omusic». Сеть новостей музыкальной индустрии. Получено 3 марта 2016.
  15. ^ Вайс, Том (23 января 2018 г.). «Том Вайс: Преодолевая барьеры для адресной рекламы в Европе». Новости широкополосного телевидения. Получено 30 августа 2018.
  16. ^ Волк, Майкл. «Три способа автоматического распознавания контента изменят телевидение». Forbes. Получено 20 июн 2015.
  17. ^ «Автоматизированное распознавание контента, создающее экосистемы с учетом контента» (PDF). csimagazine. Цивилизация. Получено 24 июн 2015.
  18. ^ «Политика конфиденциальности Roku (Разделы I-B-4 и IV-E)». roku.com. Року. Получено 30 октября 2017.
  19. ^ «Смарт-телевизоры Samsung, LG и Vizio записывают и обмениваются данными обо всем, что вы смотрите, Consumer Reports исследует информационных брокеров, которые хотят превратить ваши привычки к просмотру в деньги». Потребительские отчеты. Получено 27 февраля 2017.
  20. ^ Рамачандран, Шалини; Враница, Сюзанна (2015-10-20). "Comcast стремится использовать сокровищницу телевизионных данных". Wall Street Journal. ISSN  0099-9660. Получено 2016-05-16.
  21. ^ «Недостатки водяного знака». smallbusiness.chron.com. Получено 2016-05-16.
  22. ^ «Facebook объявляет о своей попытке ContentID ... с использованием Audible Magic | Techdirt». Techdirt. Получено 2016-05-16.