Macro-segmentation sémantique des séquences multimédia
Institution:
Ecully, Ecole centrale de LyonDisciplines:
Directors:
Abstract EN:
Segmentation of video into temporal semantic units provides important indexing information for efficient content-based browsing and navigation. In this work we are concerned withe the problem of macro-segmentation aiming at automatic generating of content tables of videos. We propose a deterministic approach which is a sort of finite automation and allows one to formulate content parsing rules based on a priori knowledge of the video production principles. The approach has been adopted und tested on tennis video. We propose also a statistical segmentation framework where content parsing rules are chosen so as to optimize the system performance measured as recall and precision. The framework is applied to the task of film segmentation into semantic scenes. The higher segmentation performance has been shown with respect to conventional rule-based ans statistical methods. In this work we are also concerned with the problem of automatic video summarization.
Abstract FR:
La segmentation de vidéo en unités sémantiques temporelles fournit des indices qui sont importants pour organiser un parcours et une navigation efficaces basés sur le contenu. Dans ce travail nous sommes concernés avec le problème de macro-segmentation visant de produire automatiquement des tables des matières de vidéos. Nous proposons une méthode déterministe qui est une sorte d'un automate fini et qui permet de formuler des règles de segmentation basées sur la connaissance à priori des principes de production de vidéo. La méthode a été adoptée et évaluée sur la vidéo de tennis. Nous proposons aussi une approche statistique où les règles de segmention sont choisies de manière à ce que les indices de performance, précision et rappel, soient maximisés. L'approche est appliquée à la tâche de segmentation de films en scènes sémantiques. Dans ce travail nous sommes aussi concernés avec le problème de création automatique de résumé vidéo.