ACCUEIL

Consignes aux
auteurs et coordonnateurs
Nos règles d'éthique
Autres revues >>

Document Numérique

1279-5127
 

 ARTICLE VOL 15/2 - 2012  - pp.41-66  - doi:10.3166/dn.15.2.41-66
TITRE
Vers un résumé automatique de séries télévisées basé sur une recherche multimodale d’histoires

TITLE
Towards an automatic TV series summarization based on a multimodal stories partitionning

RÉSUMÉ

Les séries télévisées récentes multiplient les personnages principaux, développant ainsi des intrigues complexes présentées à travers plusieurs histoires entremêlées. Nous proposons une approche de détection automatique de ces histoires afin de générer un résumé vidéo par extraction de scènes représentatives de ces dernières, et nous présentons un outil de visualisation rapide des histoires et du résumé obtenus. A partir d’une segmentation des épisodes en scènes (présentant une unité de temps, d’action et de contenu sémantique), les histoires s’obtiennent en regroupant les scènes, non nécessairement contiguës, qui présentent une similarité sémantique forte. Les modalités utilisées sont visuelles, audio et textuelles. Nos expérimentations sont menées sur deux séries télévisées de formats différents.



ABSTRACT

Modern TV series have complex plots made of several intertwined stories following numerous characters. In this paper, we propose an approach for automatically detecting these stories in order to generate video summaries and we propose a visualization tool to have a quick and easy look at TV series. Based on automatic scene segmentation of each TV series episode (a scene is defined as temporally and spatially continuous and semantically coherent), scenes are clustered into stories, made of (non necessarily adjacent) semantically similar scenes. Visual, audio and text modalities are combined to achieve better scene segmentation and story detection performance. An extraction of salient scenes from stories is performed to create the summary. Experimentations are conducted on two TV series with different formats.



AUTEUR(S)
Philippe ERCOLESSI, Christine SÉNAC, Hervé BREDIN, Sandrine MOUYSSET

MOTS-CLÉS
détection d’histoires, résumé de séries télévisées, classification spectrale, regroupement hiérarchique, multimodalité.

KEYWORDS
plot de-interlacing, TV Series summarization, spectral clustering, hierarchical clustering, multimodality.

LANGUE DE L'ARTICLE
Français

 PRIX
• Abonné (hors accès direct) : 7.5 €
• Non abonné : 15.0 €
|
|
--> Tous les articles sont dans un format PDF protégé par tatouage 
   
ACCÉDER A L'ARTICLE COMPLET  (487 Ko)



Mot de passe oublié ?

ABONNEZ-VOUS !

CONTACTS
Comité de
rédaction
Conditions
générales de vente

 English version >> 
made by WAW Lavoisier