Approche spatio-temporelle pour l'indexation de documents vidéo : application à la détection de copies illégales
Institution:
Paris 8Disciplines:
Directors:
Abstract EN:
Illegal exploitation of video content on internet became a major problem for audiovisual industry in general and for movie industry in particular. To fight against this phenomenon, content owners require new tools to help them identifying illicit file sharing, precisely and without errors. Required technologies must be at the same time relevant and robust against the various transformations which can alter video content in the copied files compared to the original ones. In this context, we propose a video search tool based on a new approach of the video spatiotemporal characterization. Initially, the approach consists in segmenting the signal in several parts, corresponding to more than the shots, thus producing temporal positions which we call "salient positions". These positions represent good pivots to ensure local relevant characterization of video contents, due to their uniform temporal distribution along the video signal and their strong persistence among the various copies. To detect the salient positions, we developed a new approach of temporal segmentation based on the analysis of SpatioTemporal Video Slices (STVS). The exploitation of the information conveyed by these slices allows us to infer the shots transitions corresponding to the salient positions. The richness of STVS in spatiotemporal information encouraged us to exploit them in the direct characterization of videos. Indeed, for each salient position, a segment of STVS is extracted then characterized using images indexing approaches. The detection of copy is achieved by similarity measurement on characteristics of STVS segments between copies and originals.
Abstract FR:
L'exploitation illégale des documents vidéo sur Internet est devenue un enjeu majeur pour l'industrie audiovisuelle en général et cinématographique en particulier. Pour lutter contre ce phénomène de piraterie, les ayants-droit ont besoin de nouveaux outils permettant d’assurer une veille sécuritaire sur leurs actifs numériques. De tels outils s'appuient sur des technologies permettant l'identification de copies vidéo illégalement partagées sur Internet. Ces technologies doivent être à la fois pertinentes et robustes aux différentes transformations que peuvent subir les copies vidéo par rapport à leurs originaux. Dans ce contexte, nous proposons un outil de recherche de vidéos basé sur une nouvelle approche de caractérisation "spatio-temporelle" du signal vidéo. L'approche consiste dans un premier temps à segmenter le signal en plusieurs plans produisant ainsi des positions temporelles que nous appelons "positions saillantes". Ces positions représentent de bons pivots pour assurer une caractérisation locale et pertinente du contenu vidéo, dûe à leur uniforme répartition le long du signal vidéo et leur forte persistance dans les différentes copies. Pour détecter les positions saillantes, nous avons développé une nouvelle approche de segmentation temporelle basée sur l'analyse des tranches spatio-temporelles des vidéos que nous appelons les "STVS". L'exploitation des informations véhiculées par ces tranches nous permet de déduire les changements de plans coïncidant avec les positions saillantes. La richesse des STVS en informations spatio-temporelles nous a encouragés à les exploiter dans la caractérisation des vidéos. En effet, pour chaque position saillante, un segment de la STVS est caractérisé en utilisant des approches issues du domaine de l'indexation d'images. La détection de copie est effectuée par la suite via une mesure de similarité portant sur les caractéristiques des différents segments STVS entre copies et orignaux.