Post-doctorant - Collaboration asymétrique en réalité étendue F/H - campus de Cluny

Missions et activités principales L’objectif de ce post-doctorat sera de développer une couche de contextualisation spatiale et de connaissances : une représentation partagée qui relie la géométrie de l'espace de travail capturée, la compréhension sémantique de la scène, les états des objets physiques, les traces d'interaction et les connaissances d'experts contextualisées. La contribution ne réside pas dans un nouveau modèle de perception, mais dans l'intégration et l'évaluation de composants de pointe destinés à la collaboration asymétrique entre différentes réalités. Il s’agira dans un premier temps de déduire un contexte à partir de reconstructions 3D développées par ailleurs et de l’environnement de travail réel. Cela inclut l’enrichissement sémantique des scènes capturées, par exemple en distillant des caractéristiques sémantiques sur le résultat de la reconstruction 3D, la représentation des objets et des états, l’indexation spatiale, ainsi que le cadre technique permettant de stocker et de récupérer le contexte situé (RQ1 ci-dessous). Il s’agira ensuite de réaliser une étude utilisateur évaluant les représentations du contexte et les répliques reflétant l'état par rapport à des références vidéo et statiques (RQ2 ci-dessous). Les questions de recherche associées sont les suivantes : - RQ1 – Ancrage de l’espace de travail : comment extraire le contexte sémantique d’espaces de travail industriels capturés, notamment la segmentation, les instances d’objets, les relations spatiales, les affordances, les contraintes et les changements d’état pertinents pour la tâche ? - RQ2 – Contexte : Quels indices contextuels, quelles représentations et quels niveaux de fidélité améliorent la perception de la situation et la performance des tâches pour les experts à distance et les opérateurs sur site ? Dans le cadre de vos fonctions, vous serez en charge des missions et activités suivantes : - Etat de l’art exhaustif sur la collaboration asymétrique avec cas d’usages dans le milieu industriel - Extraction du contexte sémantique à partir d’une reconstruction 3D et enrichissement sémantique de scènes capturées - Evaluation de représentations du contexte par une étude utilisateur sur cas d’usage industriel - Dissémination par des publications scientifiques dans des conférences de haut rang et revues internationales, mais aussi auprès de potentiels industriels