Найдите сегмент видео в другом видео

Question

у нас есть следующая проблема: у нас есть пул входных видеороликов (около 2-5 минут на видео) и пул выходных видео. Теперь мы хотим автоматически узнать, какое входное видео (или его части) используется в выходном видео. В идеале не только распознается, что используется входное видео, но и сколько секунд используется. Входное видео также можно редактировать (цвет, вырезы и т. Д.). Одна из идей заключалась бы в создании скриншотов (каждые 10 секунд) из входного видео для последующего поиска выходных видеороликов и анализа сходства.

Есть ли программный инструмент unix? или у кого-то есть идея?

Answer 1

Обычная технология, которую вы делаете, называется «Отпечаток пальца».

Это, по существу, создает отпечаток отпечатков кадров или сцен в исходном видео, а затем ищет другие видеоролики, чтобы узнать, соответствует ли он совпадению.

Сложность этой технологии заключается в технике, используемой для фактического создания отпечатка пальца для кадра, а также в способности работать даже при масштабировании, изменении размера видео, воспроизведении на границе видео и т. Д.

существует хороший обзор в этой научной статье:

• http://www.cs.dartmouth.edu/~farid/dfd/index.php/publications/show/400