Обзор системы

Система представляет сервис, позволяющий пользователю по переданному видео узнать, использовался ли в нем хромакей или технология дипфейк на конкретных интервалах.

Функционал позволяет пользователю настраивать пороги уверенности и длительности классифицируемых интервалов.

В ходе анализа проблемы было выявлено, что использование технологии хромакей приводит к неестественному освещению вокруг объектов в движении. В связи с этим было принято решение оценивать разностные кадры в течении видео

В системе используются следующие модели компьютерного зрения:

• ResNet50
• EfficientNetB0
• ResNext101x64

Основные трудности:

• Мало движений – разностные кадры пустые, нужен другой метод
• Много движений – в кадре движется не только объект, но и фон
• Светлые или темные кадры – разницу на краях не видно
• Рентген, который не перекрывается движущимися объектами
• На видео присутствует и хромакей и дипфейк – пока убирали дипфейк из разностного кадра, в дальнейшем планируем найти различие в артефактах

Примеры:

• Мало движений https://www.youtube.com/watch?v=L0CjAwPnLsg
• Много движений https://www.youtube.com/shorts/_JYUgCWaCwc
• Светлое https://www.youtube.com/shorts/6Lf8O306Dqw
• Темное https://www.youtube.com/watch?v=pAJzTAL7j70
• Рентген https://www.youtube.com/watch?v=TQgtGzetPk8
• Хромакей и дипфейк https://www.youtube.com/shorts/noaZCbzm7gM

Обзор системы

Система интеллектуального включения рекламы в видео-контент, построенная на базе алгоритмов компьютерного зрения позволяет автоматически заменять рекламные баннеры в видео роликах, фильмах, стримах и т.д..

Процесс создания рекламных включений состоит из следующих этапов:

• Загрузка видео ролика: в котором необходимо сделать рекламные включения.
• Загрузка баннеров: для включения. Можно использовать любое количество картинок.
• Получение результата видео в котором включены рекламные баннеры, загруженные пользователем