MUDIMO

MUDIMO - MUltimodal DIgital MOnitoring

Projet interpôle destiné à soutenir la recherche en PLIN & PCOM

Fonds de financement: IL&C

L'objectif principal du projet MUDIMO est de développer un ensemble d'outils logiciels permettant l'acquisition ponctuelle et/ou continue (collecte et stockage), l'analyse et l'enrichissement, et la navigation (recherche) au sein de grands espaces de données multimodaux. Par données multimodales, on entend tout corpus de données comportant au moins deux des modalités suivantes : texte (multilingue), image, son, vidéo.

Sur la base de l'expertise et des outils développés à IL&C dans le cadre de projets de recherche passés ou en cours, et en fonction des besoins identifiés à ce jour, les principales fonctionnalités spécifiques qui seront mises en œuvre dans le cadre de MUDIMO sont les suivantes :

Acquisition : collecte occasionnelle et/ou continue de données multimodales, à l'aide de techniques de scraping.
Enrichissement : analyse d'images (extraction de texte, identification d'objets, description automatique de scènes) et analyse de texte (extraction de mots-clés, reconnaissance d’entités nommées, modélisation de sujets, analyse de sentiments)
Navigation : recherche par mots-clés dans différentes modalités.