Strategies for development and evaluation of video summarization algorithms

Abstract

Sumarização de vídeos é uma área bastante popular que consiste em gerar uma sinopse de um dado vídeo contendo os eventos mais importantes. Ela também é aplicada na análise de grandes quantidades de vídeos digitais, sendo útil na aceleração das tarefas de indexação, busca e recuperação por conteúdo. No entanto, devido ao fato de que existem vários gêneros de conteúdo de vídeos, que incluem esportes documentários, noticiários, programas de TV, entre outros, definir se um evento é ou não importante é um problema em aberto. Várias abordagens têm sido propostas para lidar com esse problema, as quais podem ser ou voltadas para um domínio específico, trabalhando somente com vídeos de um dado gênero, ou de propósito geral, trabalhando com qualquer tipo de vídeo independente do seu gênero. Além disso, a avaliação de métodos de sumarização de vídeos não é uma tarefa trivial, uma vez que isso depende fortemente de fatores subjetivos, normalmente baseados em uma média de opiniões de usuários, para determinar a qualidade dos resumos gerados, o que também se torna um fardo ao comparar um método específico contra outros. Este trabalho discute algumas das estratégias utilizadas para sumarização de vídeos e apresenta três diferentes abordagens que lidam com vídeos de qualquer gênero, juntamente com suas respectivas métricas de avaliação e as evoluções entre essas abordagens. A comparação dos resultados obtidos com outros métodos mostra que foi possível desenvolver um método que não apenas possui uma qualidade superior em relação ao estado da arte mas também é rápido e eficiente, sendo aplicável em ambientes de gerenciamento de vídeos.