Цифровая видеоснятие отпечатков пальцев
Снятие отпечатков видео или хеширование видео — это класс методов уменьшения размерности. [ 1 ] при котором система идентифицирует, извлекает, а затем суммирует характерные компоненты видео как уникальные или набор множественных перцептивных хешей или отпечатков пальцев , что позволяет однозначно идентифицировать это видео. Эта технология доказала свою эффективность при поиске и сравнении видеофайлов. [ 2 ] [ 3 ]
История и процесс
[ редактировать ]Видеоснятие отпечатков пальцев было впервые использовано на практике компанией Philips в 2002 году. [ 4 ] [ не удалось пройти проверку ]
Существуют различные методы снятия отпечатков пальцев с видео. Ван Оствеен полагался на изменения интенсивности изображения в последовательных видеокадрах. [ 4 ] Это делает дактилоскопию видео устойчивой к ограниченным изменениям цвета или преобразованию цвета в оттенки серого исходного видео. Другие пытались уменьшить размер отпечатка пальца, рассматривая только изменения в кадре. [ 5 ]
Снятие отпечатков видео не зависит от каких-либо дополнений к видеопотоку. Отпечаток видео нельзя удалить , поскольку он не добавляется . Кроме того, отпечаток эталонного видео можно создать в любой момент из любой копии видео. [ 6 ] [ 7 ]
По сравнению с цифровыми водяными знаками
[ редактировать ]Снятие отпечатков пальцев на видео не следует путать с цифровыми водяными знаками , которые основаны на вставке идентифицирующих элементов в контент и, следовательно, на изменении контента. Некоторые водяные знаки можно вставлять так, чтобы они были незаметны для зрителя. Надежный водяной знак может быть сложно обнаружить и удалить, но удаление невидимых водяных знаков является существенным недостатком.
Поскольку водяные знаки должны быть вставлены в видео, они идентифицируют только копии конкретного видео, сделанные после этого момента. Например, если во время трансляции вставлен водяной знак, его нельзя использовать для идентификации копий видео, сделанных до трансляции.
Водяные знаки имеют некоторые преимущества перед отпечатками пальцев. Уникальный водяной знак можно добавить к контенту на любом этапе процесса распространения, а в один и тот же видеоконтент можно вставить несколько независимых водяных знаков. Это может быть особенно полезно при отслеживании истории копии видео. Обнаружение водяных знаков в видео может указывать на источник несанкционированной копии.
В то время как системы снятия отпечатков видео должны выполнять поиск в потенциально большой базе данных эталонных отпечатков пальцев, система обнаружения водяных знаков должна выполнять только вычисления для обнаружения водяного знака. Эти вычисления могут быть значительными, и когда необходимо протестировать несколько ключей водяных знаков, водяные знаки могут не масштабироваться до объемов, необходимых коммерческим приложениям, таким как создаваемые пользователем видеосервисы .
Приложения
[ редактировать ]Управление правами и отслеживание распространения
[ редактировать ]Снятие отпечатков видео представляет интерес в области управления цифровыми правами (DRM), особенно в отношении распространения несанкционированного контента в Интернете. Системы снятия отпечатков видео позволяют поставщикам контента ( например , киностудиям ) или издателям ( например , сайтам пользовательского контента (UGC)) определять, содержит ли какой-либо из файлов издателя контент, зарегистрированный с помощью службы отпечатков пальцев. При обнаружении зарегистрированного контента издатель может предпринять соответствующие действия – удалить его с сайта, монетизировать, добавить правильную атрибуцию и т. д.
Снятие отпечатков видео может использоваться для мониторинга телевещания ( например , мониторинга рекламы, мониторинга новостей ) и общего мониторинга средств массовой информации . Решения для мониторинга вещания могут информировать поставщиков контента и владельцев контента с помощью плейлистов о том, когда и где использовался их видеоконтент. Типичное применение описано в этом примере использования отпечатков видео для телевизионных производств и вещательных компаний. [ 8 ]
С точки зрения поставщика контента, в большинстве приложений необходимо использовать как видео, так и аудио отпечатки пальцев. [ 9 ] Рассмотрим онлайн-публикацию « мэшапов ». Мэшапы могут состоять из контента из нескольких источников, которые скомпилированы вместе и объединены в уникальную звуковую дорожку. Поскольку звуковая дорожка отличается от оригинальной версии, защищенный авторским правом материал в этих коллажах останется незамеченным, если использовать только методы снятия отпечатков пальцев. В других случаях мэшапы состоят из саундтрека из коммерческого источника видео, например фильма, используемого с другим видеопотоком. В этом случае отпечаток видео не будет совпадать, а отпечаток аудио будет совпадать. Если аудио- и видеопотоки не принадлежат одному и тому же шедевру, может возникнуть вопрос о добросовестном использовании .
Это несоответствие имеет реальное применение в мировом онлайн-сообществе с точки зрения кинопроката . Фильмы, показанные в странах, отличных от страны их происхождения, часто дублируются на другие языки. Это изменение в звуке делает фильмы практически неузнаваемыми с помощью технологий снятия отпечатков пальцев, если только на копиях всех известных версий не были сняты отпечатки пальцев. Однако использование видеоотпечатков позволяет владельцу контента снять отпечатки пальцев только один раз, и каждая последующая версия останется узнаваемой. Если клиент желает узнать, саундтрек на каком языке присутствует в конкретном видео, необходимо использовать звуковой отпечаток.
Другое применение — компании могут отслеживать утечку конфиденциальных записей или видео, а знаменитости — отслеживать наличие в Интернете несанкционированных видеороликов (например, видеороликов, снятых любителями с помощью видеокамеры или мобильного телефона).
Интерактивные медиа
[ редактировать ]Снятие отпечатков видео, примененное к Smart TV, открывает возможности для новой категории приложений интерактивного телевидения . Телевизионные устройства, интегрированные с программным обеспечением для снятия отпечатков пальцев в реальном времени, могут автоматически распознавать видеоконтент на экране, чтобы активировать интерактивные функции и приложения поверх программ. Предприниматель Марк Кьюбан вложил средства в использование этой технологии для создания интерактивных функций для своих кабельных сетей HDNet и ее преемника AXS. [ 10 ]
Видеоотпечатки также можно использовать для создания видеорекламы с учетом содержания . В качестве одной из реализаций, если поставщик видеоуслуг распространяет контент, который содержит телевизионную рекламу, транслируемую по всей стране, на национальную рекламу может быть выполнено локализованное наложение текста/графики. Таким образом, национальный рекламный ролик будет иметь локальное наложение информации, специфичной для этого рекламного ролика. Например, если национальный рекламный ролик содержит 15-секундный ролик о внедорожнике Ford Explorer, с помощью технологии отпечатков пальцев местные операторы могут наложить информацию о местном дилерском центре (номер телефона, рекламную акцию и т. д.) на 15-секундный рекламный ролик. создание локализованной рекламы внедорожника, которая, по-видимому, ориентирована только на местную аудиторию.
Уголовное расследование
[ редактировать ]Снятие отпечатков пальцев с видео также используется властями для отслеживания распространения незаконного контента, такого как видеоролики, связанные со счастливыми пощечинами , терроризмом и сексуальным насилием над детьми .
В 2008 году голландская компания Ziuz совместно с голландской полицией , TNO и Амстердамским университетом разработала технологию снятия отпечатков пальцев для обнаружения видеороликов, связанных с сексуальным насилием над детьми. [ 11 ] [ 12 ]
В апреле 2014 года британская компания Friend MTS Ltd. передала в дар свою технологию снятия видеоотпечатков пальцев (известную как F1) Международному центру по делам пропавших и эксплуатируемых детей (ICMEC), чтобы помочь повысить эффективность расследований по детской порнографии и остановить продолжающийся обмен аналогичными данными. файлы через Интернет. [ 6 ] [ 13 ] ICMEC распространяет эту технологию среди правоохранительных органов, поставщиков программного обеспечения и поставщиков онлайн-услуг , чтобы препятствовать распространению таких материалов. [ 14 ] [ 15 ]
См. также
[ редактировать ]- Акустический отпечаток пальца
- Перцептивное хеширование
- Анализ видеоконтента
- Обнаружение копирования видео
Ссылки
[ редактировать ]- ^ Ву, Гэншэнь; Лю, Ли; Го, Юйчэнь; Дин, Гуйгуан; Хан, Юнгонг; Шен, Цзяли; Шао, Линг (август 2017 г.). «Неконтролируемое глубокое хеширование видео со сбалансированным вращением» (PDF) . Материалы двадцать шестой международной совместной конференции по искусственному интеллекту . стр. 3076–3082. дои : 10.24963/ijcai.2017/429 . ISBN 9780999241103 . Проверено 9 ноября 2022 г.
- ^ Лионг, Венеция Эрин; Лу, Дживэнь; Тан, Яп-Пэн; Чжоу, Цзе (июнь 2017 г.). «Глубокое хеширование видео» (PDF) . Транзакции IEEE в мультимедиа . 19 (+6): 1209–1219. дои : 10.1109/TMM.2016.2645404 . S2CID 4666560 . Проверено 9 ноября 2022 г.
- ^ Сун, Цзинкуань; Чжан, Ханьван; Ли, Сянпэн; Гао, Ляньли; Ван, Мэн; Хонг, Ричан (2018). «Самоконтролируемое хеширование видео с помощью иерархического двоичного автокодировщика». Транзакции IEEE при обработке изображений . 27 (7): 3210–3221. arXiv : 1802.02305 . Бибкод : 2018ITIP...27.3210S . дои : 10.1109/TIP.2018.2814344 . ПМИД 29641401 . S2CID 3633912 .
- ^ Jump up to: а б Оствеен Дж., Калкер Т. и Хайтсма Дж. (2002, март). Извлечение признаков и стратегия базы данных для снятия отпечатков видео. На Международной конференции по достижениям в области визуальных информационных систем (стр. 117-128). Шпрингер, Берлин, Гейдельберг.
- ^ Ван Рест, JHC (2002), Индексирование и поиск видео с использованием подписей , магистерская диссертация.
- ^ Jump up to: а б Лиат Кларк (30 апреля 2014 г.). «Технология отслеживания жестокого обращения с детьми передана в дар всему миру» . Проводная Великобритания .
- ^ «Контроль контента: цифровые водяные знаки и отпечатки пальцев» (PDF) . Архивировано из оригинала (PDF) 14 ноября 2014 г. Проверено 08 июля 2017 г.
- ^ «Технология снятия отпечатков видео для телепроизводства и вещания» . ивитек . 30 августа 2017 г.
- ^ «Видеоотпечатки Philips будут работать параллельно со звуком Gracenote» . Переосмыслить . Проверено 16 октября 2021 г.
- ↑ Марк Кьюбан выделяет финансирование на Flingo — CNET
- ^ Эндебак, П., Краай, В., Рааймакерс, С., Рангелова, Э., де Рой, О., Теан, А., и Уорринг, М. (2008). Визуальные инструменты для помощи следователям по делам о детской порнографии . TNO Science and Industry, Делфт, Амстердамский университет, Нидерланды .
- ^ Джон Шавмейкер, Питер Ян Доэтс, Вернер Бейлер, Харальд Стиглер, Феликс Ли, Хельмут Нойшмид, Вессель Краай, Пол Брандт, Питер Эндебак, Елена Рангелова и Энди Тиан. http://pietereendebak.nl/files/schavemaker-2010-vdFP.pdf , 2010 г.
- ^ Джефф Элдер (30 апреля 2014 г.). «Британская компания жертвует технологии для борьбы с детской порнографией» . Уолл Стрит Джорнал .
- ^ «Новая технология снятия отпечатков пальцев на видео создана для удаления детской порнографии в Интернете» . МаркетВотч . 30 апреля 2014 г.
- ^ «Отпечатки пальцев, используемые для отслеживания изображений нарушений» . Небесные новости. 5 мая 2014 г. Архивировано из оригинала 8 мая 2014 г.