| HAL-Inria | Publications, software ... of Inria's scientists |
Fusion of Speech, Faces and Text for Person Identification in TV Broadcast
Hervé Bredin
1
Johann Poignant
2
Makarand Tapaswi
3
Guillaume Fortier
4
Viet Bac Le
5
Thibault Napoléon
6
Gao Hua
3
Claude Barras
1
Sophie Rosset
1
Laurent Besacier
7
Jakob Verbeek
4
Georges Quénot
8, *
Frédéric Jurie
4, 9
Ekenel Hazim Kemal
3
*
Corresponding author
4
LEAR - Learning and recognition in vision
Inria Grenoble - Rhône-Alpes, LJK - Laboratoire Jean Kuntzmann, INPG - Institut National Polytechnique de Grenoble
7
GETALP - Groupe d’Étude en Traduction Automatique/Traitement Automatisé des Langues et de la Parole
LIG - Laboratoire d'Informatique de Grenoble
8
MRIM - Modélisation et Recherche d’Information Multimédia [Grenoble]
LIG - Laboratoire d'Informatique de Grenoble, Inria - Institut National de Recherche en Informatique et en Automatique
9
Equipe Image - Laboratoire GREYC - UMR6072
GREYC - Groupe de Recherche en Informatique, Image, Automatique et Instrumentation de Caen
Hervé Bredin 1
Mail :
Author IdHAL : hbredin arXiv : https://arxiv.org/a/hbredin ORCID : https://orcid.org/0000-0002-3739-925X
Johann Poignant 2
Author
Makarand Tapaswi 3
Author
Guillaume Fortier 4
Author
Viet Bac Le 5
Author
Thibault Napoléon 6
Mail :
Author
Gao Hua 3
Author
Claude Barras 1
Mail :
Author IdHAL : claude-barras
Sophie Rosset 1
Mail :
Author IdHAL : sophie-rosset
Laurent Besacier 7
Mail :
Author IdHAL : laurent-besacier
Jakob Verbeek 4
Mail : Site :
Author Employer institution : Institut National de Recherche en Informatique et en Automatique IdHAL : verbeek ORCID : https://orcid.org/0000-0003-1419-1816
Georges Quénot 8
Mail :
Correspondent author IdHAL : georges-quenot ORCID : https://orcid.org/0000-0003-2117-247X
Frédéric Jurie 4, 9
Mail : Site :
Author IdHAL : frederic-jurie ORCID : https://orcid.org/0000-0002-2686-0020
Ekenel Hazim Kemal 3
Author
1
LIMSI - Laboratoire d'Informatique pour la Mécanique et les Sciences de l'Ingénieur (Université Paris-Sud Bât. 507 - Rue du Belvédère -91405 ORSAY CEDEX - France)
- UP11 - Université Paris-Sud - Paris 11 (Bâtiment 300 - 91405 Orsay cedex - France)
- Université Paris-Saclay (Espace Technologique, Bat. Discovery - RD 128 - 2e ét., 91190 Saint-Aubin - France)
- UFR 919 - Sorbonne Université - UFR d'Ingénierie (SORBONNE UNIVERSITE
FACULTE DES SCIENCES ET INGENIERIE
UFR D'INGENIERIE
Tour 55/65 - 2e étage
4 place Jussieu
75252 Paris cedex 05 - France)
- SU - Sorbonne Université (21 rue de l’École de médecine - 75006 Paris - France)
- CNRS - Centre National de la Recherche Scientifique : UPR3251 (France)
- Université Paris Saclay (COmUE) (Espace Technologique, Bât. Discovery - RD 128 - 2è ététage, 91190 Saint-Aubin - France)
2
LIG - Laboratoire d'Informatique de Grenoble (UMR 5217 - Laboratoire LIG - Bâtiment IMAG - 700 avenue Centrale - Domaine Universitaire de Saint-Martin-d’Hères
Adresse postale : CS 40700 - 38058 Grenoble cedex 9 - France
Tél. : 04 57 42 14 00 - France)
- UPMF - Université Pierre Mendès France - Grenoble 2 (BP 47 - 38040 Grenoble Cedex 9 - France)
- UJF - Université Joseph Fourier - Grenoble 1 (BP 53 - 38041 Grenoble Cedex 9 - France)
- Grenoble INP - Institut polytechnique de Grenoble - Grenoble Institute of Technology (46 avenue Félix Viallet 38031 Grenoble Cedex 1 - France)
- INPG - Institut National Polytechnique de Grenoble (46 avenue Félix Viallet 38031 Grenoble Cedex 1 - France)
- CNRS - Centre National de la Recherche Scientifique : UMR5217 (France)
- UGA - Université Grenoble Alpes (CS 40700 - 38058 Grenoble cedex - France)
3
KIT - Karlsruhe Institute of Technology (Campus North, Hermann-von-Helmholtz-Platz 1, 76344 Eggenstein-Leopoldshafen / Campus South, Kaiserstraße 12, 76131 Karlsruhe - Germany)
4
LEAR - Learning and recognition in vision (INRIA Grenoble Rhône-Alpes
655, avenue de l'Europe
38330 Montbonnot, France - France)
- Inria Grenoble - Rhône-Alpes (Inovallée
655 avenue de l'Europe
38330 Montbonnot - France)
- Inria - Institut National de Recherche en Informatique et en Automatique (Domaine de Voluceau Rocquencourt - BP 105 78153 Le Chesnay Cedex - France)
- LJK - Laboratoire Jean Kuntzmann (Bâtiment IMAG, CS 40700, F-38058 Grenoble Cedex 9 - France)
- UPMF - Université Pierre Mendès France - Grenoble 2 (BP 47 - 38040 Grenoble Cedex 9 - France)
- UJF - Université Joseph Fourier - Grenoble 1 (BP 53 - 38041 Grenoble Cedex 9 - France)
- Grenoble INP - Institut polytechnique de Grenoble - Grenoble Institute of Technology (46 avenue Félix Viallet 38031 Grenoble Cedex 1 - France)
- Inria - Institut National de Recherche en Informatique et en Automatique (Domaine de Voluceau Rocquencourt - BP 105 78153 Le Chesnay Cedex - France)
- Institut Polytechnique de Grenoble - Grenoble Institute of Technology (France)
- CNRS - Centre National de la Recherche Scientifique : UMR5224 (France)
- UGA - Université Grenoble Alpes (CS 40700 - 38058 Grenoble cedex - France)
- INPG - Institut National Polytechnique de Grenoble (46 avenue Félix Viallet 38031 Grenoble Cedex 1 - France)
5
Vocapia Research [Orsay] (3 rue Jean Rostand Parc Orsay Université 91400 Orsay - France)
- Vocapia (France)
6
GREYC - Groupe de Recherche en Informatique, Image, Automatique et Instrumentation de Caen (Boulevard du Maréchal Juin - 14050 CAEN Cedex - France)
- UNICAEN - Université de Caen Normandie (Esplanade de la Paix - CS 14032 - 14032 CAEN Cedex 5 - France)
- NU - Normandie Université (Esplanade de la Paix - CS 14032 - 14032 Caen Cedex 5 - France)
- ENSICAEN - École Nationale Supérieure d'Ingénieurs de Caen (6, Boulevard du Maréchal Juin CS 45053 14050 CAEN cedex 04 - France)
- NU - Normandie Université (Esplanade de la Paix - CS 14032 - 14032 Caen Cedex 5 - France)
- CNRS - Centre National de la Recherche Scientifique : UMR6072 (France)
7
GETALP - Groupe d’Étude en Traduction Automatique/Traitement Automatisé des Langues et de la Parole (GETALP-LIG - 110 av. de la Chimie - Domaine Universitaire - BP 53 - 38041 Grenoble - cedex 9 - France)
- LIG - Laboratoire d'Informatique de Grenoble (UMR 5217 - Laboratoire LIG - Bâtiment IMAG - 700 avenue Centrale - Domaine Universitaire de Saint-Martin-d’Hères
Adresse postale : CS 40700 - 38058 Grenoble cedex 9 - France
Tél. : 04 57 42 14 00 - France)
- UPMF - Université Pierre Mendès France - Grenoble 2 (BP 47 - 38040 Grenoble Cedex 9 - France)
- UJF - Université Joseph Fourier - Grenoble 1 (BP 53 - 38041 Grenoble Cedex 9 - France)
- Grenoble INP - Institut polytechnique de Grenoble - Grenoble Institute of Technology (46 avenue Félix Viallet 38031 Grenoble Cedex 1 - France)
- INPG - Institut National Polytechnique de Grenoble (46 avenue Félix Viallet 38031 Grenoble Cedex 1 - France)
- CNRS - Centre National de la Recherche Scientifique : UMR5217 (France)
- UGA - Université Grenoble Alpes (CS 40700 - 38058 Grenoble cedex - France)
8
MRIM - Modélisation et Recherche d’Information Multimédia [Grenoble] (110 av. de la Chimie - Domaine Universitaire - BP 53 - 38041 Grenoble - cedex 9 - France)
- LIG - Laboratoire d'Informatique de Grenoble (UMR 5217 - Laboratoire LIG - Bâtiment IMAG - 700 avenue Centrale - Domaine Universitaire de Saint-Martin-d’Hères
Adresse postale : CS 40700 - 38058 Grenoble cedex 9 - France
Tél. : 04 57 42 14 00 - France)
- UPMF - Université Pierre Mendès France - Grenoble 2 (BP 47 - 38040 Grenoble Cedex 9 - France)
- UJF - Université Joseph Fourier - Grenoble 1 (BP 53 - 38041 Grenoble Cedex 9 - France)
- Grenoble INP - Institut polytechnique de Grenoble - Grenoble Institute of Technology (46 avenue Félix Viallet 38031 Grenoble Cedex 1 - France)
- INPG - Institut National Polytechnique de Grenoble (46 avenue Félix Viallet 38031 Grenoble Cedex 1 - France)
- CNRS - Centre National de la Recherche Scientifique : UMR5217 (France)
- UGA - Université Grenoble Alpes (CS 40700 - 38058 Grenoble cedex - France)
- Inria - Institut National de Recherche en Informatique et en Automatique (Domaine de Voluceau Rocquencourt - BP 105 78153 Le Chesnay Cedex - France)
9
Equipe Image - Laboratoire GREYC - UMR6072 (France)
- GREYC - Groupe de Recherche en Informatique, Image, Automatique et Instrumentation de Caen (Boulevard du Maréchal Juin - 14050 CAEN Cedex - France)
- UNICAEN - Université de Caen Normandie (Esplanade de la Paix - CS 14032 - 14032 CAEN Cedex 5 - France)
- NU - Normandie Université (Esplanade de la Paix - CS 14032 - 14032 Caen Cedex 5 - France)
- ENSICAEN - École Nationale Supérieure d'Ingénieurs de Caen (6, Boulevard du Maréchal Juin CS 45053 14050 CAEN cedex 04 - France)
- NU - Normandie Université (Esplanade de la Paix - CS 14032 - 14032 Caen Cedex 5 - France)
- CNRS - Centre National de la Recherche Scientifique : UMR6072 (France)
- UNICAEN - Université de Caen Normandie (Esplanade de la Paix - CS 14032 - 14032 CAEN Cedex 5 - France)
Abstract : The REPERE challenge is a project aiming at the evaluation of systems for supervised and unsupervised multimodal recognition of people in TV broadcast. In this paper, we describe, evaluate and discuss QCompere consortium submissions to the 2012 REPERE evaluation campaign dry-run. Speaker identification (and face recognition) can be greatly improved when combined with name detection through video optical character recognition. Moreover, we show that unsupervised multimodal person recognition systems can achieve performance nearly as good as supervised monomodal ones (with several hundreds of identity models).
Document type :
Conference papers
Complete list of metadatas
https://hal.inria.fr/hal-00722884
Contributor : Thoth Team <>
Submitted on : Monday, August 6, 2012 - 10:34:55 AM
Last modification on : Thursday, March 26, 2020 - 8:49:27 PM
Document(s) archivé(s) le : Friday, December 16, 2016 - 4:23:54 AM
Contributor : Thoth Team <>
Submitted on : Monday, August 6, 2012 - 10:34:55 AM
Last modification on : Thursday, March 26, 2020 - 8:49:27 PM
Document(s) archivé(s) le : Friday, December 16, 2016 - 4:23:54 AM
Files
bredin12eccvws.pdf
Publisher files allowed on an open archive
Identifiers
- HAL Id : hal-00722884, version 1
- DOI : 10.1007/978-3-642-33885-4_39
Collections
CNRS | INRIA | LIG_TDCGE_MRIM | LIG_TDCGE | LIG_TDCGE_GETALP | LIG | LJK_GI_LEAR | LJK_GI | LJK | GREYC-IMAGE | GREYC | UGA | COMUE-NORMANDIE | LIMSI | ENSICAEN | UNICAEN | SORBONNE-UNIVERSITE | POLYTECH-GRENOBLE
Citation
Hervé Bredin, Johann Poignant, Makarand Tapaswi, Guillaume Fortier, Viet Bac Le, et al.. Fusion of Speech, Faces and Text for Person Identification in TV Broadcast. ECCV 2012 - 12th European Conference on Computer Vision, Oct 2012, Firenze, Italy. pp.385-394, ⟨10.1007/978-3-642-33885-4_39⟩. ⟨hal-00722884⟩
Metrics
Record views
1630
Files downloads