Aller au contenu principal
Évaluation de l'impact de la réalité étendue adaptative sur l'interaction homme-robot selon le continuum réalité-virtualité
RecherchearXiv cs.RO 

Évaluation de l'impact de la réalité étendue adaptative sur l'interaction homme-robot selon le continuum réalité-virtualité

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Une étude publiée sur arXiv (identifiant 2609.31138) évalue si la modalité de réalité étendue (XR) utilisée pour piloter un robot influence la performance de l'interaction humain-robot, et si une interface adaptative fait mieux qu'une interface figée. Les chercheurs ont développé une application XR sur mesure connectée à un manipulateur mobile, permettant un contrôle immersif et un changement de modalité en temps réel le long du continuum réalité-virtualité (RVC), qui va de la réalité augmentée (AR) à la virtualité augmentée (AV) jusqu'à la réalité virtuelle (VR) pure. Dans une expérience intra-participant de type pick-and-place multi-pièces, ils ont comparé AR fixe, AV fixe et VR fixe à une condition RVC dynamique, en mesurant le débit de tâche, la charge mentale via le NASA-TLX et l'utilisabilité via le System Usability Scale (SUS). Résultat: la modalité AR fixe génère une charge mentale, un effort et une frustration significativement plus faibles qu'AV et VR, mais c'est la condition dynamique, qui bascule de modalité en cours de tâche, qui obtient le meilleur débit et la charge de travail la plus basse. Le code de l'implémentation est publié sur GitHub (CarlTornberg/XR-HRI).

Ce résultat a une portée directe pour les concepteurs d'interfaces de téléopération robotique: le choix de la modalité XR n'est pas un détail d'ergonomie mais un facteur qui pèse mesurablement sur la performance, et aucune modalité fixe unique ne s'avère optimale pour toutes les phases d'une tâche. Pour les intégrateurs travaillant sur des systèmes de téléopération de robots mobiles ou humanoïdes, cela plaide contre le choix par défaut d'une VR ou AR statique et pour des interfaces capables de basculer dynamiquement selon le contexte de la tâche, une piste jusqu'ici peu explorée dans la littérature qui fige généralement la modalité avant de mesurer les résultats.

Le travail s'inscrit dans la réflexion sur les Avatars Cybernétiques (CA), des embodiments robotiques censés pallier le vieillissement démographique et les pénuries de main d'œuvre dans les pays développés en étendant les capacités humaines à distance. L'étude ne mentionne pas de partenaire industriel ni de calendrier de déploiement; il s'agit d'une recherche académique dont le code source ouvert vise à permettre sa reproduction et son extension par d'autres équipes travaillant sur l'interaction humain-robot en téléopération.

Dans nos dossiers

À lire aussi

HRIBench : évaluation de la collaboration homme-robot centrée sur l'interaction
1arXiv cs.RO 

HRIBench : évaluation de la collaboration homme-robot centrée sur l'interaction

Ce papier arXiv (2607.13056v1) présente HRIBench, un benchmark diagnostique conçu pour évaluer la collaboration homme-robot centrée sur l'interaction, plutôt que la seule manipulation isolée. Contrairement aux benchmarks VLA (vision-language-action) existants, qui testent des compétences de manipulation déconnectées de toute interaction humaine, HRIBench modélise les tâches collaboratives sous forme de scénarios structurés intégrant rôles des agents, dépendances temporelles, contraintes de coordination et distributions de comportement humain. Trois rôles sont définis : Instructeur, Collaborateur et Intrus, couvrant respectivement la communication d'intention, la coordination conjointe et la robustesse face à une intervention humaine imprévue. Le benchmark comprend 13 tâches conditionnées par rôle et plus de 650 épisodes d'évaluation générés à partir de trajectoires d'interaction et de variations de scène diverses. Les chercheurs ont testé des politiques adaptées à partir de GR00T, pi0.5 et ACT selon un protocole unifié, avec des métriques allant au-delà du simple taux de réussite : synchronisation, réactivité, respect du protocole et sécurité. Les résultats montrent que les politiques robotiques actuelles, malgré de bonnes capacités de manipulation pure, peinent nettement dès qu'il s'agit de coordination temporelle et de comportement sensible à l'intention humaine, un angle mort largement ignoré par les benchmarks existants. Ce constat vient nuancer l'idée que les modèles VLA généralistes seraient déjà prêts pour une collaboration homme-robot fluide en environnement partagé, un enjeu central pour tout déploiement industriel où humains et robots opèrent côte à côte. Fait notable, un fine-tuning sur les données HRIBench améliore systématiquement les performances collaboratives, et en conditions réelles, les données de simulation générées par le benchmark font passer le taux de réussite de GR00T N1.5 sur une tâche physique de 0,10 à 0,43. HRIBench s'inscrit dans une dynamique de recherche cherchant à combler l'écart entre benchmarks de manipulation pure et exigences réelles de la cohabitation homme-robot, à mesure que des politiques comme GR00T (NVIDIA), pi0.5 (Physical Intelligence) ou ACT gagnent en usage comme bases pour l'apprentissage robotique généraliste. Les auteurs positionnent leur travail comme un outil diagnostique réutilisable, avec des pistes explicites de fine-tuning ciblé pour renforcer la coordination et la sécurité, plutôt qu'un simple classement de performances brutes.

RecherchePaper
1 source
Adaptation de la personnalité par élicitation conversationnelle dans l'interaction humain-robot (PACE)
2arXiv cs.RO 

Adaptation de la personnalité par élicitation conversationnelle dans l'interaction humain-robot (PACE)

PACE (Persona Adaptation through Conversational Elicitation) est un framework présenté par des chercheurs pour équiper le robot humanoïde Ameca, du fabricant britannique Engineered Arts, d'une identité conversationnelle adaptable plutôt que figée. Le système repose sur un pipeline d'élicitation interactive de persona : via une session de questions-réponses avec l'utilisateur, le robot construit dynamiquement un profil psychologique structuré, ensuite compilé en un prompt multi-dimensionnel qui pilote son comportement. Les auteurs détaillent aussi l'intégration embarquée nécessaire pour traduire cette spécification textuelle en comportements multimodaux expressifs (voix, gestuelle, expressions faciales) sur la plateforme Ameca. Le système a été évalué lors d'une étude d'interaction homme-robot comparant les personas générées dynamiquement à une persona générique de référence, sur cinq axes : confiance de l'utilisateur, anthropomorphisme perçu, cohérence de la persona dans le temps, pertinence personnelle et qualité globale de l'interaction. Une démonstration vidéo est disponible en ligne, mais l'article ne publie pas de métriques chiffrées détaillées ni la taille de l'échantillon testé. Cette approche s'attaque à un problème concret du secteur des robots humanoïdes et compagnons conversationnels : la plupart des identités robotiques restent codées en dur par les concepteurs, identiques pour chaque utilisateur, ce qui limite l'engagement et la confiance sur la durée. En générant la persona à la volée à partir d'un échange conversationnel, PACE ouvre une voie vers des assistants humanoïdes personnalisables à l'échelle, un enjeu direct pour les intégrateurs qui déploient des robots d'accueil, d'assistance ou de représentation dans des contextes variés (retail, événementiel, santé). Si les gains mesurés sur la confiance et l'anthropomorphisme perçu se confirment au-delà de cette étude pilote, cela renforcerait l'idée que la personnalisation conversationnelle, plus que le seul réalisme physique, constitue un levier clé de l'acceptabilité des robots sociaux. Le travail s'inscrit dans la lignée des recherches en interaction homme-robot cherchant à dépasser les personas scriptées, une limite documentée depuis plusieurs années sur des plateformes conversationnelles comme Pepper ou Sophia. Ameca, connue pour l'expressivité de son visage animé, sert ici de banc d'essai plutôt que de produit commercial déployé en volume : l'étude reste au stade académique, publiée sur arXiv sans partenaire industriel annoncé. Les auteurs présentent PACE comme une voie scalable vers des identités fiables pour les assistants humanoïdes incarnés, sans préciser de calendrier de transfert vers des déploiements réels ni de suite de publication prévue.

RecherchePaper
1 source
Validation de la réalité virtuelle pour l'étude de l'interaction humain-robot multimodale en navigation sociale de robots
3arXiv cs.RO 

Validation de la réalité virtuelle pour l'étude de l'interaction humain-robot multimodale en navigation sociale de robots

Une équipe de recherche a testé si la réalité virtuelle (VR) permet d'étudier fidèlement les interactions humain-robot dans des scénarios de navigation sociale partagée. L'étude, menée avec 21 participants, a comparé leurs réactions face à un robot mobile manipulateur PR2 dans deux conditions identiques : une arène réelle équipée de capture de mouvement, et sa réplique virtuelle immersive en VR. Deux situations classiques de co-navigation ont été examinées, le croisement orthogonal et le dépassement latéral (pass-by). Les chercheurs ont recueilli à la fois des mesures subjectives, la perception de la conscience sociale du robot et le confort ressenti par les participants, et des données comportementales objectives, trajectoires de déplacement et orientation de la tête, pour comparer précisément les deux environnements. Résultat central : les participants perçoivent la navigation socialement consciente du robot de façon similaire dans les deux conditions, et les comportements observés en VR, trajectoires évitées, orientations du regard, correspondent à ceux mesurés en conditions réelles. Cette validation compte pour tout le secteur de la robotique sociale et des humanoïdes déployés en environnement partagé avec des humains, entrepôts, usines, espaces publics. Concevoir et tester des algorithmes de navigation socialement acceptable exige normalement des essais physiques coûteux, lents et parfois risqués pour les sujets humains. Si la VR reproduit fidèlement les dynamiques d'interaction multimodale, comme le suggèrent ces résultats, elle devient un outil d'itération rapide et sûr pour les équipes qui développent des comportements de navigation robotique, avant tout déploiement réel. C'est aussi une réponse partielle à un scepticisme répandu dans le secteur sur l'écart entre les études HRI menées en environnement contrôlé ou simulé et le comportement humain effectif face à un robot physique. Ce travail s'inscrit dans une lignée de recherches antérieures ayant déjà exploré la VR pour la navigation robotique socialement consciente, mais sans jamais confirmer explicitement que les dynamiques d'interaction multimodale observées en réel s'y retrouvaient. Le protocole within-subjects, chaque participant testant les deux conditions, renforce la robustesse de la comparaison. Les auteurs positionnent leur prototype VR comme une plateforme flexible pour de futures études sur des interactions humain-robot plus riches, ouvrant la voie à des campagnes de test à plus grande échelle sans dépendre systématiquement d'un robot physique et d'une arène de capture de mouvement, deux ressources rares et coûteuses dans les laboratoires de recherche en robotique.

RecherchePaper
1 source
Cadre visuel intégrant indices d'attention et d'action pour l'évaluation interprétable de la charge cognitive en collaboration homme-robot
4arXiv cs.RO 

Cadre visuel intégrant indices d'attention et d'action pour l'évaluation interprétable de la charge cognitive en collaboration homme-robot

Des chercheurs présentent, dans une étude publiée sur arXiv (arXiv:2609.15232v1, soumise le 15 septembre 2026), un système de vision par ordinateur destiné à mesurer la charge cognitive des opérateurs en collaboration homme-robot sans capteurs physiologiques portés sur le corps. Le framework combine des caméras RGB-D, l'état du robot et des zones de tâches calibrées pour construire une représentation temporelle du comportement de l'opérateur, appelée HRC-CWL, qui repère où se concentre la charge de travail et comment elle évolue lorsque l'attention et l'action divergent, que le contexte de tâche change ou que l'opérateur hésite. L'équipe a testé son approche sur un assemblage collaboratif de boîte de vitesses à trois niveaux de difficulté, avec dix participants. Les scores subjectifs NASA-TLX ont confirmé une hausse de la charge perçue selon les conditions, avec des effets significatifs sur la charge globale et ses dimensions mentale et temporelle. La sortie du système vision a été significativement corrélée aux signaux ECG chez sept participants sur neuf disposant de données complètes, et les épisodes d'hésitation détectés par la caméra correspondaient temporellement à l'activité physiologique mesurée. Le système a fonctionné en temps réel sans équipement porté par l'opérateur. Pour l'industrie de l'assemblage collaboratif, ce travail répond à un obstacle pratique connu: les méthodes actuelles d'évaluation de la charge mentale reposent sur des capteurs physiologiques (ECG, EEG, dermographes) jugés trop intrusifs pour un déploiement industriel réel. En démontrant une corrélation partielle mais significative entre un signal purement visuel et des mesures physiologiques de référence, l'étude ouvre la voie à une ergonomie cognitive adaptative, où le robot ajusterait son rythme ou son comportement selon l'état inféré de l'opérateur, sans instrumentation supplémentaire. Les auteurs restent prudents: ils présentent HRC-CWL comme un proxy comportemental interprétable, pas comme une mesure psychophysiologique directe de la charge, ce qui tempère toute promesse de diagnostic médical précis. Ce travail s'inscrit dans la tendance de la robotique collaborative industrielle (cobots) à intégrer des capacités de perception fine des états humains, un axe de recherche actif face à la multiplication des lignes d'assemblage mixtes homme-robot. L'échantillon reste limité à dix participants et un seul scénario de gearbox, ce qui appelle des validations à plus grande échelle avant tout déploiement en usine.

RecherchePaper
1 source