210 likes | 336 Views
Jenny Benois-Pineau Philippe Joly http://www.irit.fr/ASSTICIM/. + SAMoVA. Introduction. Indexation basée contenu Contexte international XML, MPEG-7 ESPRIT (PRC 4), IST (PRC 5) IST (PRC 6) : "Technologies de la connaissance appliquées en particulier au traitement des contenus".
E N D
Jenny Benois-Pineau Philippe Joly http://www.irit.fr/ASSTICIM/ + SAMoVA
Introduction • Indexation basée contenu • Contexte international • XML, MPEG-7 • ESPRIT (PRC 4), IST (PRC 5) • IST (PRC 6) : "Technologies de la connaissance appliquées en particulier au traitement des contenus" Journée Scientifique - 7 juillet 2003 - Lyon
Présentation • Contexte • National • GT10 (ISIS) • CBMI • AGIR, Domus Videum, ... Journée Scientifique - 7 juillet 2003 - Lyon
Présentation • Indexation • domaine transdisciplinaire en informatique • traitement du signal • technologies du langage • gestion des connaissances • regroupement des traitements texte, image, vidéo et audio Journée Scientifique - 7 juillet 2003 - Lyon
Présentation • Objectifs • sur le plan méthodologique • Outils intelligents d'analyse et d'interprétation • sur le plan organisationnel • (Re-)Construire un communauté • du point de vue pratique • Intégration, interaction des outils • Tests et valorisation Journée Scientifique - 7 juillet 2003 - Lyon
Présentation • Objectifs • Développement d'outils • Méthodologie pour la mise à disposition d'un corpus étiqueté • Architectures logicielles • Démonstrateurs … très (trop ?) ambitieux Journée Scientifique - 7 juillet 2003 - Lyon
IRIT : UMR CNRS 5505 Equipe ART.PS - Philippe Joly LABRI : UMR CNRS 5800 Equipe Image et Son - Jenny Benois-Pineau IRISA : UMR CNRS 6074 Equipe Texmex - Patrick Gros INRIA : Projet Imedia - Nozha Boujemaa IRCCyN : UMR CNRS 6597 Equipe IVC - Dominique Barba LIP6 : UMR CNRS7606 Equipe APA -Marcin Detyniecki Présentation • Participants Journée Scientifique - 7 juillet 2003 - Lyon
IRIT : UMR CNRS 5505 Equipe ART.PS - Philippe Joly Présentation • Participants • Segmentation et identification Parole, musique, bruits • Description analytique des contenus • Règles et contraintes liées au mécanismes de production • ... Journée Scientifique - 7 juillet 2003 - Lyon
LABRI : UMR CNRS 5800 Equipe Image et Son - Jenny Benois-Pineau Présentation • Participants • Analyse et interprétation des images 2D et 3D • Structures musicales dans les documents sonores • Indexation vidéo basée objets • ... Journée Scientifique - 7 juillet 2003 - Lyon
IRISA : UMR CNRS 6074 Equipe Texmex - Patrick Gros Présentation • Participants • Indexation, recherche de données d'image et de texte, • Exploitation (BD, statistiques), • ... Journée Scientifique - 7 juillet 2003 - Lyon
INRIA : Projet Imedia - Nozha Boujemaa Présentation • Participants • Indexation d'images par le contenu, • Recherche interactive dans de grandes bases d'images • Navigation • Indexation multimédia (Texte/image) Journée Scientifique - 7 juillet 2003 - Lyon
IRCCyN : UMR CNRS 6597 Equipe IVC - Dominique Barba Présentation • Participants • Analyse et indexation par traitements spatio-temporels de la vidéo MPEG-2 ou 4 • Propriétés de perception de scènes du Système Visuel Humain • ... Journée Scientifique - 7 juillet 2003 - Lyon
LIP6 : UMR CNRS7606 Equipe APA -Marcin Detyniecki Présentation • Participants • Apprentissage, représentation des connaissances, … • Exploitation des connaissances imparfaites • Méthodes floues possibilistes, • Aggrégation • Fouille de données, extraction de connaissances, ... Journée Scientifique - 7 juillet 2003 - Lyon
Actions • Corpus • SFRS • 7 documents (2h30) audio + vidéo • images fixes • Outils • 1 outils d'extraction d'image des fichiers MPEG-2 (Labri) Journée Scientifique - 7 juillet 2003 - Lyon
Actions • EOI : Réseau d'Excellence Européen • Knowledge-Based Multimedia • 23 partenaires publics et privés • DK, DE, F, G, I, NL, SP, UK • Extraction d'informations de contenu, gestion des connaissances et de données multimédia, encodage, édition multimédia, recherche d'information, présentation de données, évaluation des impacts sociétaux Journée Scientifique - 7 juillet 2003 - Lyon
Actions • Rencontres • Analyse et Indexation Multimédia • Le 20 juin à Bordeaux (Labri) • Analyse et caractérisation de la vidéo • Indexation automatique de la musique • Reconnaissance et indexation de la parole • Fusion des informations pour l'interprétation des flux multimédia • Perspectives et projets de l’indexation multimédia Journée Scientifique - 7 juillet 2003 - Lyon
Actions • Publications • J. Benois-Pineau, M. De Sainte Catherine, N. Louis “A methode for extraction of audio-visual leitmotif in movies by cross media analysis”, Session spéciale “Content Based Audio and Video Indexing” EUSIPCO’2002, Toulouse, France, September’2002 • S.A. Berrani, L. Amsaleg, P. Gros, "Controlling the Precision of Approximate Fast Nearest-Neighbor Searches", Rapport technique N°1450, Avril 2002 • Mathieu CARNEC, Dominique BARBA. Faces recognition based on both perception and behaviour of the Human Visual System. In Proc. of DSP’2002. Santorin. Grèce. July 2002. • R. Ruiloba, Ph. Joly “Adding the concept of video editing levels in shot segmentation”, Session spéciale “Intelligent Systems for Video Processing”, IPMU’2002, Annecy, France, July’2002 Journée Scientifique - 7 juillet 2003 - Lyon
Actions • Publications • Detyniecki M. and Marsala C., Fuzzy Multimedia Mining Applied to Video News, Proceedings of the International Conference on Information Processing and Management of Uncertainty in Knowledge-Based Systems IPMU'2002, Annecy, France, July 2002. • J. Benois-Pineau, A. Khrennikov, “Image segmentation in compressed domain by clustering methods with euclidean and p-adic metrics”, Session spéciale “Data mining and multimedia systems”, IPMU’2002, Annecy, France, July’2002 • Sessions spéciales • IPMU 2002 • Eusipco 2002 Journée Scientifique - 7 juillet 2003 - Lyon
speech speech music silence French English Speech transcription Speech transcription Actions • Eléments de résultats Journée Scientifique - 7 juillet 2003 - Lyon
Perspectives • Vers une "transmédialité" • Chaînage mono- ou multimédia • Analyse et caractérisation de l’audiovisuel • Aggrégation / fusion • Evaluation des résultats • Interprétation des résultats • Exploitation des résultats Journée Scientifique - 7 juillet 2003 - Lyon
Perspectives • Vers une "transmédialité" • chez SAMoVA ? Journée Scientifique - 7 juillet 2003 - Lyon