ÉQUIPE DIAMANT

PRÉSENTATION

Responsables d’équipe : Fabrice Maurel et Laure Lejeune

L’équipe DIAMA∩T développe une approche scientifique résolument multimodale à l’intersection du Traitement Automatique des Langues, de la Vision par Ordinateur et de l’Interaction Humain-Machine.

Ses recherches portent sur l’acquisition et l’exploitation de données multimodales complexes, l’apprentissage de modèles hybrides et explicables, ainsi que la conception de dispositifs interactifs adaptés aux usages et aux contextes réels.

Mots-clés : Analyse spécifique à des domaines tels que le sport et la santé, Sciences du web, analyse de documents ou médias, Analyse des signaux faibles, Hybridation (symboliques vs statistiques), Apprentissage (XAI, représentations), Fusion et transfert, Adaptation, autodétermination et autonomie, Humain dans la boucle et IA agentique, Trans-, inter- et cross-modalité.

THÉMATIQUES DE RECHERCHE

S’intéresse à l’acquisition, la structuration, l’annotation et l’analyse de données issues de sources variées telles que le web, les documents, les médias, les capteurs ou les environnements instrumentés. Les travaux portent notamment sur la segmentation de contenus complexes, l’alignement de sources hétérogènes ainsi que l’identification de signaux faibles dans des données bruitées, dynamiques ou peu structurées. Cet axe vise à produire les données, représentations et corpus nécessaires aux activités de recherche et constitue le socle empirique des autres axes de l’équipe.

Vise à concevoir des modèles d’apprentissage capables d’intégrer et d’exploiter conjointement des données textuelles, visuelles, sonores, vidéo, physiologiques ainsi que des traces d’interaction. Les recherches portent notamment sur la fusion cross-modale, le transfert de connaissances et l’hybridation entre approches statistiques et symboliques. Une attention particulière est accordée à la robustesse des modèles, à leur capacité de généralisation sur des corpus spécialisés de faible taille, ainsi qu’à leur explicabilité dans des contextes sensibles.

Porte sur la conception et l’évaluation de systèmes multimodaux déployés en contexte réel. Les recherches portent sur les interactions humain-machine, l’adaptation aux utilisateurs ainsi que les enjeux d’accessibilité, de personnalisation et d’assistance. Cet axe vise à mettre en relation les performances algorithmiques avec les usages effectifs, en prenant en compte l’activité des utilisateurs, leur expérience ainsi que l’efficacité des dispositifs dans des situations réelles.

Développement de solutions multimodales dédiées à la santé, à l’accessibilité et à l’accompagnement des personnes. Les recherches mobilisent les principes de la médecine 6P (Personnalisée, Préventive, Prédictive, Participative, fondée sur les Preuves et centrée sur le Parcours de soin) ainsi que des approches visant à renforcer l’autonomie, l’accès à l’information et l’adaptation des interactions pour les personnes présentant des déficiences sensorielles, cognitives ou des situations de handicap.

Exploitation de données multimodales pour l’analyse des comportements, l’évaluation des performances et l’amélioration de la qualité de vie. Les travaux portent sur la compréhension des activités humaines, l’accompagnement personnalisé et le développement de systèmes capables d’adapter leurs interactions aux usages, aux contextes et aux individus.

Développement de méthodes d’analyse multimodale dédiées à l’étude de l’authenticité, de la traçabilité et de la fiabilité des contenus numériques. Les recherches s’intéressent notamment à la détection de contenus générés par l’intelligence artificielle, à l’analyse de récits de désinformation ainsi qu’à l’évaluation de données synthétiques dans des contextes sensibles.

POUR EN SAVOIR PLUS

TagThunder

Propose une nouvelle manière d’explorer le web en transformant les pages en espaces auditifs interactifs. À la croisée de l’intelligence artificielle, du traitement du web et de l’interaction humain-machine, le projet explore des formes de navigation non visuelle permettant une compréhension globale et structurée des contenus numériques.

TactiNET

Propose une nouvelle manière de percevoir et d’explorer les contenus numériques en transformant la structure visuelle des pages web en paysages tactiles interactifs. À la croisée de l’accessibilité numérique, de l’interaction humain-machine et des technologies haptiques, le projet permet aux personnes déficientes visuelles d’appréhender globalement l’organisation d’un document et d’en faciliter la navigation non visuelle.

Cette base de connaissances lexicale enrichit WordNet d’une dimension temporelle, en associant à chaque concept une orientation temporelle (passé, présent, futur ou atemporel) afin d’améliorer l’analyse et la recherche d’informations temporelles dans les textes.

A2MIMO

Un agent virtuel incarné destiné à accompagner la détection précoce de la schizophrénie à travers l’analyse des interactions verbales et non verbales entre le patient et le système.

ETR-fr

Premier corpus français de simplification de texte conforme aux recommandations européennes.

MONET

Corpus construit à partir de données oculométriques.

PAR-ITA

Corpus trilingue de 1617 titres annotés pour l’étude de la désinformation.

VigilanS

Corpus multimodal anonymisé consacré à la prévention de la récidive suicidaire, regroupant 5954 patients normands.

VIE D’ÉQUIPE

Il n’y a aucun évènements à venir pour le moment.
Il n’y a aucun évènements à venir pour le moment.

2027 : Autonomie budgétaire

À compter du 1er janvier, l'équipe disposera de son propre budget et en assurera la gestion, nouvelle étape de son autonomisation au sein du laboratoire.

Mascotte DIAMANT d'un bébé endormi dans une couverture, avec une girafe en peluche, veillé par une mascotte adulte

2026 : Naissance du premier bébé DIAMA∩T

Le 16 septembre, l'équipe a accueilli son premier bébé. Toutes nos félicitations aux heureux parents !

2026 : Création de l'équipe

Au 1er septembre, DIAMA∩T devient une équipe à part entière du GREYC et fonctionne désormais comme telle. Deux ans après le lancement du groupe de travail, le collectif passe d'une dynamique de projet à une organisation d'équipe.

2025 : Validation institutionnelle

Dès avril, la démarche de création de l'équipe a reçu le soutien officiel de la direction du GREYC ainsi que du Directeur Adjoint Scientifique du CNRS, confirmant sa pertinence scientifique et stratégique.

2024 : Lancement du groupe de travail

En juin, le groupe de travail DIAMA∩T rassemble une trentaine de participants, incluant chercheurs, doctorants, post-doctorants, ingénieurs et collaborateurs issus de plusieurs équipes du GREYC, autour d'une vision commune de la multimodalité.

2020 : Recommandations HCERES

L'évaluation HCERES souligne la qualité des travaux de l'équipe HULTECH tout en identifiant les risques liés à sa dissolution. Ces recommandations constituent l'un des éléments fondateurs ayant conduit à la création de DIAMA∩T et à la structuration d'une nouvelle dynamique de recherche autour de la multimodalité.