Tagbox Machine Box’s - это современная модель распознавания изображений, которая работает локально и поставляется со встроенным обучающим API.

Более чем один клиент Machine Box спрашивал об обнаружении цветных полос, черного видео, конечных титров и производственных логотипов в их медиаресурсах с помощью Tagbox. У них есть куча архивных видеоматериалов, которые были либо оцифрованы с видеокассеты, либо созданы таким образом, чтобы в видеофайле присутствовали цветные полосы, планки и другие элементы.

Я хотел проверить, можно ли решить эту проблему за несколько минут с помощью конечной точки обучения Tagbox, поэтому я нашел около 100 примеров конечных титров, цветных полос, черных экранов и производственных логотипов.

Идея состоит в том, чтобы в решениях для управления мультимедийными активами, решениях для рабочих процессов и решениях для перекодирования использовалось Videobox для запуска каждого видео через обученную модель распознавания изображений Tagbox и получение обратно объекта JSON с отметками времени, в которых эти вещи появляются.

Я сохранил каждый пример изображения в отдельной папке на моем ноутбуке, запустил Tagbox и запустил удобный небольшой скрипт для перебора каждого изображения и teach их в Tagbox. Примерно через 3 минуты он был готов к тестированию.

Я нашел несколько образцов видео с конечными титрами, открывающими производственными логотипами, цветными полосами и черным цветом между сегментами и пропустил их через Tagbox через Videobox.

Полученный ответ на API Videbox сообщил мне, где именно эти элементы находятся в каждом видеофайле, с превосходной точностью. Разработчик может взять этот JSON и использовать его для улучшения своих поисковых индексов или временных шкал в пользовательском интерфейсе.

Консоль Videobox имеет способ визуализировать эти метаданные на приблизительной временной шкале для демонстрационных целей. Я сделал снимок экрана и наложил его на видео на шкале времени iMovie.

Как вы можете видеть, цветные полосы заканчиваются через 9 секунд видео, за ними следуют некоторые производственные логотипы, секунда черного цвета, а затем другие логотипы.

Вы можете настроить степень уверенности в своем пользовательском интерфейсе, чтобы лучше соответствовать различным ситуациям и вариантам использования, чтобы элементы, для которых Tagbox имеет низкий уровень достоверности, можно было отфильтровать.

Попробуйте сейчас бесплатно - занимает около 20 минут.