Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
TriPilot-FF : téléopération coordonnée du corps entier avec retour de force
RecherchearXiv cs.RO 

TriPilot-FF : téléopération coordonnée du corps entier avec retour de force

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Des chercheurs publient TriPilot-FF, un système de téléopération open-source pour manipulateurs mobiles bimanuels, décrit dans un article déposé sur arXiv (2602.09888v2). Sur une base mobile à roues équipée de deux bras, une pédale au pied couplée à un lidar embarqué bas coût mesure la proximité des obstacles et renvoie un retour de force résistif qui oriente l'opérateur vers des trajectoires évitant les collisions, sans contrôleur d'évitement dédié ; le haut du corps est piloté par une téléopération bimanuelle "leader-follower" avec retour de force sur les bras et un guidage de la manipulabilité indiquant quand repositionner la base. Les auteurs ont mené des essais réels sur des tâches longues exigeant une coordination fine base-bras, puis intégré ces signaux dans une politique d'imitation Action Chunking with Transformers (ACT), avec des gains de performance mesurés ; pédale et pile logicielle complète sont publiées en open source via une page projet.

Cette contribution cible un angle mort de la téléopération robotique : les interfaces existantes, contrôleurs VR et joysticks, restent centrées sur les mains, laissant le contrôle continu de la base peu instrumenté. En déportant une partie du contrôle vers le pied via un retour haptique dérivé d'un lidar bon marché, TriPilot-FF libère les mains pour la manipulation fine tout en réduisant le risque de collision, un problème récurrent des manipulateurs mobiles bimanuels où l'opérateur doit jongler entre navigation et contact. Pour les équipes qui entraînent des politiques d'imitation ou de type VLA, le résultat le plus notable est méthodologique : coupler les signaux de force et de manipulabilité à une architecture ACT améliore la politique apprise, ce qui suggère que la richesse des démonstrations téléopérées pèse directement sur la robustesse des modèles en aval.

Le travail prolonge les systèmes de téléopération leader-follower popularisés pour la collecte de démonstrations sur bras bimanuels fixes, ici étendus à une base mobile, terrain moins exploré où la coordination base-bras complique la tâche de l'opérateur. Aucun acteur commercial n'est mentionné : il s'agit d'une contribution de recherche publiée sur arXiv en version révisée, code et conception matérielle ouverts à la réplication par d'autres laboratoires. L'article ne précise ni affiliation institutionnelle des auteurs ni feuille de route au-delà de la mise à disposition du dispositif et de la pile logicielle.

Dans nos dossiers

arXiv cs.RO

À lire aussi

Coordination corps-main à résidu contrôlé pour la téléopération humanoïde du corps entier
1arXiv cs.RO 

Coordination corps-main à résidu contrôlé pour la téléopération humanoïde du corps entier

Un article publié sur arXiv (2609.18763v1) décrit une méthode pour corriger un défaut connu des systèmes de téléopération de robots humanoïdes à corps entier : la désynchronisation entre le suivi de mouvement du corps et le repositionnement des mains, deux modules aujourd'hui indépendants qui ne préservent pas la géométrie corps-mains, d'où des décalages de pose au poignet et aux doigts lors d'interactions bimanuelles. La méthode, baptisée "gated residual coordination", laisse ces deux modules gelés et leur ajoute des corrections bornées via une porte d'action conditionnée au mouvement, qui répartit l'autorité de correction entre groupes d'articulations, et des portes de récompense liées à la géométrie de référence pendant l'entraînement. Le contrôleur corporel de référence est calibré sur la plateforme humanoïde Agile One par une calibration morphologique multi-pose, puis entraîné avec un tracker basé sur SONIC et un jeu de données de mouvement construit par étapes. En simulation, les erreurs de géométrie poignet-doigts baissent de 39,2 à 56,3% sur des mouvements bimanuels issus du jeu GRAB, tandis que le taux de succès du suivi corporel global sur AMASS passe de 89,03% à 89,29%. Le problème visé est concret pour les intégrateurs de téléopération humanoïde : la cohérence corps-mains conditionne la fiabilité des tâches bimanuelles comme la saisie ou le transfert d'objet entre les mains, un enjeu direct pour la collecte de démonstrations servant à entraîner des modèles vision-language-action et pour le contrôle téléopéré en environnement industriel. L'atout de la méthode tient à sa modularité : elle évite de réentraîner les politiques de suivi corporel ou de retargeting déjà déployées, ce qui limite le coût d'intégration pour des équipes disposant d'une pile de téléopération existante. Le gain de 39 à 56% sur la précision géométrique est net, mais l'amélioration du taux de succès global du suivi corporel reste marginale, et les résultats ne sont pour l'instant validés qu'en simulation, sans démonstration publiée sur robot physique. Ce travail s'inscrit dans la lignée des pipelines de téléopération combinant un tracker de mouvement corporel et un module de retargeting dextre séparé, architecture répandue dans le secteur mais dépourvue jusqu'ici de coordination explicite entre les deux flux de commandes. Les auteurs s'appuient sur les jeux de capture de mouvement AMASS et GRAB, références classiques pour évaluer respectivement le suivi corporel global et l'interaction main-objet. À la différence d'une approche end-to-end entraînée depuis zéro, cette méthode résiduelle vise la compatibilité avec des modules déjà en production, ce qui pourrait faciliter son adoption par des équipes ayant déjà investi dans une pile de téléopération. Les prochaines étapes attendues sont une validation sur robot réel et une extension à des tâches de manipulation plus variées que celles couvertes par GRAB et AMASS.

RecherchePaper
1 source
NEXUS : contrôle perceptif du corps entier pour une téléopération adaptée au terrain
2arXiv cs.RO 

NEXUS : contrôle perceptif du corps entier pour une téléopération adaptée au terrain

Des chercheurs publient NEXUS, un cadre de contrôle corps entier « perceptif » pour la téléopération de robots humanoïdes sur des terrains différents de celui de l'opérateur (arXiv 2609.39000, première version). Le système combine les commandes de mouvement humain et le retour sensoriel embarqué. Le robot perçoit le terrain local et adapte sa posture et ses points de contact, au lieu de recopier image par image le mouvement de l'opérateur. L'équipe a d'abord conçu un algorithme d'adaptation au terrain, qui génère des paires de mouvements (sol plat et terrain varié) sans réglage manuel par mouvement ni par terrain. Le corpus appariés atteint près de 1 000 heures. Un contrôleur perceptif a ensuite été entraîné par apprentissage enseignant-élève (teacher-student) pour reproduire les comportements commandés. Selon les auteurs, il est déployé sans réentraînement (zero-shot) sur robot réel, pour une téléopération en temps réel sur des terrains variés jamais vus. L'enjeu porte sur un goulot d'étranglement connu de la téléopération humanoïde : l'opérateur évolue presque toujours sur sol plat, alors que le robot doit monter, enjamber ou franchir des obstacles. Les données qui relient un même comportement sur plusieurs terrains sont rares, ce qui limite la supervision. Si la génération automatisée de ces paires tient ses promesses, elle réduit un coût important : la collecte de démonstrations par téléopération sert aussi à nourrir les modèles VLA (vision-langage-action) et les politiques de manipulation mobile. Un téléopérateur qui n'a plus besoin de reproduire la géométrie du site simplifie aussi l'exploitation industrielle, notamment l'intervention à distance sur sites non structurés. Les résultats restent toutefois des benchmarks choisis par les auteurs, face à des contrôleurs corps entier existants que le résumé ne nomme pas. Le résumé ne précise ni la plateforme robotique, ni les types de terrains, ni les temps de latence, ni les taux de réussite. La robustesse hors laboratoire reste donc à démontrer. Ce travail s'inscrit dans la lignée des contrôleurs corps entier par suivi de mouvement humain, qui se sont multipliés avec les humanoïdes commerciaux (Unitree, Figure, Tesla Optimus, Agility). La plupart de ces contrôleurs sont aveugles ou à perception limitée. Ils reproduisent le mouvement de référence sans tenir compte de l'environnement. NEXUS vise cette limite en ajoutant la perception et la correction des contacts. La suite dépendra de la publication du code, des données et de la page projet (nexus-humanoid.github.io), puis d'une validation sur d'autres plateformes. Aucun acteur français ou européen n'est cité dans le résumé. L'approche intéresse pourtant les développeurs d'humanoïdes européens qui s'appuient sur la téléopération pour collecter des données, comme Wandercraft ou Enchanted Tools.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Téléopération bilatérale par ondes entre manipulateurs non linéaires avec retour direct de la force de contact
3arXiv cs.RO 

Téléopération bilatérale par ondes entre manipulateurs non linéaires avec retour direct de la force de contact

Des chercheurs ont publié le 21 août 2026 sur arXiv (référence 2608.20043v1) une étude sur la téléopération bilatérale entre manipulateurs robotiques non linéaires à plusieurs degrés de liberté (DOF), en présence de délais de communication constants. Contrairement aux architectures classiques à transformation d'ondes, qui transmettent une force de coordination entre les sites maître et esclave, les auteurs renvoient directement la force de contact mesurée côté distant vers l'opérateur, pour améliorer la transparence haptique de la téléopération. Ce retour de force direct pouvant déstabiliser la boucle fermée, l'équipe caractérise d'abord le déficit de passivité du système distant, modélisé selon le formalisme Euler-Lagrange, via une approche par inégalité matricielle linéaire (LMI). Une loi de communication sur-strictement passive compense ensuite ce déficit calculé, ce qui garantit, sous conditions appropriées, la stabilité de la boucle sous délai ainsi que la synchronisation en position et en force. La méthode est validée par simulation sur des manipulateurs non linéaires à 2 DOF, dans plusieurs configurations. Ce travail s'attaque à un compromis central en téléopération à distance : la transparence, c'est-à-dire la fidélité du ressenti des forces de l'environnement pour l'opérateur, se dégrade généralement dès que les délais augmentent, sur des liaisons satellite, sous-marines ou intercontinentales. Renvoyer la force de contact brute plutôt qu'une force de coordination indirecte vise un ressenti plus réaliste, un enjeu pour la chirurgie robotique à distance, la maintenance nucléaire, l'exploration spatiale ou sous-marine, et plus largement les bras téléopérés en environnement dangereux. Le résultat va à l'encontre de l'idée répandue selon laquelle le retour de force direct serait trop instable hors de systèmes linéaires simplifiés : la preuve formelle par LMI garantit la stabilité même pour des manipulateurs non linéaires multi-DOF sous délai constant. Pour les chercheurs en contrôle, il s'agit toutefois d'une contribution théorique, validée en simulation sur seulement 2 DOF, loin des bras industriels à 6 ou 7 DOF utilisés en conditions réelles. Les architectures à variables d'onde, conçues historiquement pour garantir la passivité des systèmes téléopérés sous délai, transmettent traditionnellement des combinaisons de vitesse et de force plutôt que la force de contact brute, précisément parce que celle-ci est plus difficile à stabiliser. Cette étude prolonge la recherche en théorie de la passivité et en contrôle par LMI appliquée à la robotique, un champ actif face à la multiplication des usages de téléopération à latence variable. Les auteurs ne mentionnent aucun partenariat industriel ni déploiement pilote : la publication reste une contribution académique, fondée sur une preuve mathématique et des simulations numériques, sans validation sur matériel physique ni comparaison chiffrée avec les architectures à transformation d'ondes existantes. Les prochaines étapes attendues porteraient sur l'extension à des manipulateurs à plus haut nombre de DOF et sur des essais avec du matériel réel et des délais variables, avant toute adoption par des fabricants de bras téléopérés ou d'interfaces haptiques.

RecherchePaper
1 source
Teleopit : un système de téléopération humanoïde à corps entier
4arXiv cs.RO 

Teleopit : un système de téléopération humanoïde à corps entier

Une équipe de recherche présente Teleopit, un système de téléopération complète pour robots humanoïdes, détaillé dans un article déposé sur arXiv (référence 2608.01834v1). Le système capture les signaux corporels, les mouvements des mains et les données de tête depuis un casque VR, puis les retranscrit simultanément sur le corps d'un humanoïde, sur des mains dextres configurables et sur un module de vision active à 2 degrés de liberté. Un encodeur d'historique combiné à un échantillonnage de rattrapage sensible aux échecs améliore le suivi des mouvements, à la fois sur des données de capture de mouvement et en VR en direct. Un module de retargeting des mains, basé sur l'optimisation, combine directions normalisées des doigts, fermeture du bout des doigts et alignement du cadre du pouce, ce qui permet de transposer les gestes humains vers différents types de mains robotiques sans réglage manuel des hyperparamètres. À partir de 96 démonstrations réussies collectées avec Teleopit, des politiques ACT et GR00T N1.7 ont atteint respectivement 90,0% et 95,0% de taux de réussite lors de déploiements réels sur l'humanoïde. Cette approche s'attaque à un goulot d'étranglement bien identifié du secteur robotique: la collecte de démonstrations de haute qualité pour entraîner des politiques de type VLA (vision-language-action). Les systèmes existants simplifient souvent les commandes des mains ou nécessitent des capteurs portables dédiés pour capter la motricité fine, ce qui limite le volume et la richesse des données exploitables. En proposant un pipeline unifié couvrant locomotion, manipulation et contrôle du point de vue, Teleopit vise à réduire le coût et la complexité de la génération de données d'entraînement, un enjeu central pour les laboratoires qui cherchent à faire passer leurs politiques d'apprentissage du stade démonstratif au déploiement réel. Le projet s'inscrit dans la vague de systèmes de téléopération VR pour humanoïdes qui s'est multipliée ces derniers mois, aux côtés d'initiatives comme Helix de Figure ou GR00T N2 de Nvidia, ce dernier étant d'ailleurs directement utilisé comme politique testée dans l'étude. Les auteurs, publiant sous un profil GitHub (botrunner64), mettent à disposition une page projet dédiée mais ne précisent pas de partenariat industriel ni de calendrier de commercialisation, ce qui situe pour l'instant Teleopit au stade de la recherche académique plutôt que du produit prêt à déployer.

RecherchePaper
1 source