Автоматическое удаление скучных фрагментов из видеоролика

Проблема автоматической обработки и анализа информации актуальна не только для больших объёмов текста, но и для видео. Но прогресс в этой области есть.

Учёные из университета Карнеги-Меллон разработали технику, которая способна выделять из видеоряда «интересные» фрагменты, удаляя скучные. Программа называется LiveLight, а результат её работы можно оценить на конкретных примерах.

Программа определяет «интересность» каждого кадра, оценивая его новизну, то есть отличие от других кадров видеоролика. Таким образом, она с лёгкостью удалит фрагмент, в котором длительное время в кадре почти ничего не происходит, оставив только его начальную часть (поскольку её новизна высока, по сравнению с предыдущими кадрами). В общем, ничего фантастического: вполне очевидный алгоритм. Правда, авторы применили несколько инновационных техник для более эффективной обработки видео. Например, кадры сравниваются не попиксельно, а по своеобразному «словарю», так что обработка видео происходит линейно, без обращения к предыдущим кадрам. На достаточно мощном компьютере программа может работать почти в реальном времени.

LiveLight должна найти применение в системах видеонаблюдения, не оборудованных датчиками движения, а также в любительской видеосъёмке. Через несколько лет, если лайфблогинг станет популярным у населения и на каждом человеке появится носимая видеокамера, такие программы можно использовать для эффективного сжатия личного видеоархива.

Презентация LiveLight состоялась 26 июня 2014 года на конференции Computer Vision and Pattern Recognition в Коламбусе (Огайо).