Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
TriPilot-FF : téléopération coordonnée du corps entier avec retour de force
RecherchearXiv cs.RO 

TriPilot-FF : téléopération coordonnée du corps entier avec retour de force

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Des chercheurs publient TriPilot-FF, un système de téléopération open-source pour manipulateurs mobiles bimanuels, décrit dans un article déposé sur arXiv (2602.09888v2). Sur une base mobile à roues équipée de deux bras, une pédale au pied couplée à un lidar embarqué bas coût mesure la proximité des obstacles et renvoie un retour de force résistif qui oriente l'opérateur vers des trajectoires évitant les collisions, sans contrôleur d'évitement dédié ; le haut du corps est piloté par une téléopération bimanuelle "leader-follower" avec retour de force sur les bras et un guidage de la manipulabilité indiquant quand repositionner la base. Les auteurs ont mené des essais réels sur des tâches longues exigeant une coordination fine base-bras, puis intégré ces signaux dans une politique d'imitation Action Chunking with Transformers (ACT), avec des gains de performance mesurés ; pédale et pile logicielle complète sont publiées en open source via une page projet.

Cette contribution cible un angle mort de la téléopération robotique : les interfaces existantes, contrôleurs VR et joysticks, restent centrées sur les mains, laissant le contrôle continu de la base peu instrumenté. En déportant une partie du contrôle vers le pied via un retour haptique dérivé d'un lidar bon marché, TriPilot-FF libère les mains pour la manipulation fine tout en réduisant le risque de collision, un problème récurrent des manipulateurs mobiles bimanuels où l'opérateur doit jongler entre navigation et contact. Pour les équipes qui entraînent des politiques d'imitation ou de type VLA, le résultat le plus notable est méthodologique : coupler les signaux de force et de manipulabilité à une architecture ACT améliore la politique apprise, ce qui suggère que la richesse des démonstrations téléopérées pèse directement sur la robustesse des modèles en aval.

Le travail prolonge les systèmes de téléopération leader-follower popularisés pour la collecte de démonstrations sur bras bimanuels fixes, ici étendus à une base mobile, terrain moins exploré où la coordination base-bras complique la tâche de l'opérateur. Aucun acteur commercial n'est mentionné : il s'agit d'une contribution de recherche publiée sur arXiv en version révisée, code et conception matérielle ouverts à la réplication par d'autres laboratoires. L'article ne précise ni affiliation institutionnelle des auteurs ni feuille de route au-delà de la mise à disposition du dispositif et de la pile logicielle.

Dans nos dossiers

arXiv cs.RO

À lire aussi

Téléopération bilatérale par ondes entre manipulateurs non linéaires avec retour direct de la force de contact
1arXiv cs.RO 

Téléopération bilatérale par ondes entre manipulateurs non linéaires avec retour direct de la force de contact

Des chercheurs ont publié le 21 août 2026 sur arXiv (référence 2608.20043v1) une étude sur la téléopération bilatérale entre manipulateurs robotiques non linéaires à plusieurs degrés de liberté (DOF), en présence de délais de communication constants. Contrairement aux architectures classiques à transformation d'ondes, qui transmettent une force de coordination entre les sites maître et esclave, les auteurs renvoient directement la force de contact mesurée côté distant vers l'opérateur, pour améliorer la transparence haptique de la téléopération. Ce retour de force direct pouvant déstabiliser la boucle fermée, l'équipe caractérise d'abord le déficit de passivité du système distant, modélisé selon le formalisme Euler-Lagrange, via une approche par inégalité matricielle linéaire (LMI). Une loi de communication sur-strictement passive compense ensuite ce déficit calculé, ce qui garantit, sous conditions appropriées, la stabilité de la boucle sous délai ainsi que la synchronisation en position et en force. La méthode est validée par simulation sur des manipulateurs non linéaires à 2 DOF, dans plusieurs configurations. Ce travail s'attaque à un compromis central en téléopération à distance : la transparence, c'est-à-dire la fidélité du ressenti des forces de l'environnement pour l'opérateur, se dégrade généralement dès que les délais augmentent, sur des liaisons satellite, sous-marines ou intercontinentales. Renvoyer la force de contact brute plutôt qu'une force de coordination indirecte vise un ressenti plus réaliste, un enjeu pour la chirurgie robotique à distance, la maintenance nucléaire, l'exploration spatiale ou sous-marine, et plus largement les bras téléopérés en environnement dangereux. Le résultat va à l'encontre de l'idée répandue selon laquelle le retour de force direct serait trop instable hors de systèmes linéaires simplifiés : la preuve formelle par LMI garantit la stabilité même pour des manipulateurs non linéaires multi-DOF sous délai constant. Pour les chercheurs en contrôle, il s'agit toutefois d'une contribution théorique, validée en simulation sur seulement 2 DOF, loin des bras industriels à 6 ou 7 DOF utilisés en conditions réelles. Les architectures à variables d'onde, conçues historiquement pour garantir la passivité des systèmes téléopérés sous délai, transmettent traditionnellement des combinaisons de vitesse et de force plutôt que la force de contact brute, précisément parce que celle-ci est plus difficile à stabiliser. Cette étude prolonge la recherche en théorie de la passivité et en contrôle par LMI appliquée à la robotique, un champ actif face à la multiplication des usages de téléopération à latence variable. Les auteurs ne mentionnent aucun partenariat industriel ni déploiement pilote : la publication reste une contribution académique, fondée sur une preuve mathématique et des simulations numériques, sans validation sur matériel physique ni comparaison chiffrée avec les architectures à transformation d'ondes existantes. Les prochaines étapes attendues porteraient sur l'extension à des manipulateurs à plus haut nombre de DOF et sur des essais avec du matériel réel et des délais variables, avant toute adoption par des fabricants de bras téléopérés ou d'interfaces haptiques.

RecherchePaper
1 source
Teleopit : un système de téléopération humanoïde à corps entier
2arXiv cs.RO 

Teleopit : un système de téléopération humanoïde à corps entier

Une équipe de recherche présente Teleopit, un système de téléopération complète pour robots humanoïdes, détaillé dans un article déposé sur arXiv (référence 2608.01834v1). Le système capture les signaux corporels, les mouvements des mains et les données de tête depuis un casque VR, puis les retranscrit simultanément sur le corps d'un humanoïde, sur des mains dextres configurables et sur un module de vision active à 2 degrés de liberté. Un encodeur d'historique combiné à un échantillonnage de rattrapage sensible aux échecs améliore le suivi des mouvements, à la fois sur des données de capture de mouvement et en VR en direct. Un module de retargeting des mains, basé sur l'optimisation, combine directions normalisées des doigts, fermeture du bout des doigts et alignement du cadre du pouce, ce qui permet de transposer les gestes humains vers différents types de mains robotiques sans réglage manuel des hyperparamètres. À partir de 96 démonstrations réussies collectées avec Teleopit, des politiques ACT et GR00T N1.7 ont atteint respectivement 90,0% et 95,0% de taux de réussite lors de déploiements réels sur l'humanoïde. Cette approche s'attaque à un goulot d'étranglement bien identifié du secteur robotique: la collecte de démonstrations de haute qualité pour entraîner des politiques de type VLA (vision-language-action). Les systèmes existants simplifient souvent les commandes des mains ou nécessitent des capteurs portables dédiés pour capter la motricité fine, ce qui limite le volume et la richesse des données exploitables. En proposant un pipeline unifié couvrant locomotion, manipulation et contrôle du point de vue, Teleopit vise à réduire le coût et la complexité de la génération de données d'entraînement, un enjeu central pour les laboratoires qui cherchent à faire passer leurs politiques d'apprentissage du stade démonstratif au déploiement réel. Le projet s'inscrit dans la vague de systèmes de téléopération VR pour humanoïdes qui s'est multipliée ces derniers mois, aux côtés d'initiatives comme Helix de Figure ou GR00T N2 de Nvidia, ce dernier étant d'ailleurs directement utilisé comme politique testée dans l'étude. Les auteurs, publiant sous un profil GitHub (botrunner64), mettent à disposition une page projet dédiée mais ne précisent pas de partenariat industriel ni de calendrier de commercialisation, ce qui situe pour l'instant Teleopit au stade de la recherche académique plutôt que du produit prêt à déployer.

RecherchePaper
1 source
Téléopération bilatérale du corps entier avec estimation multi-étapes des paramètres d'objets pour la locomanipulation humanoïde à roues
3arXiv cs.RO 

Téléopération bilatérale du corps entier avec estimation multi-étapes des paramètres d'objets pour la locomanipulation humanoïde à roues

Un article mis à jour sur arXiv (référence 2508.09846, version 2) décrit un système de téléopération bilatérale corps entier pour un robot humanoïde à roues effectuant des tâches de manipulation en mouvement. L'apport technique central est un module d'estimation en ligne, en plusieurs étapes, des paramètres inertiels de l'objet saisi (masse, centre de masse, inertie). Le pipeline enchaîne un estimateur de taille par vision, une estimation initiale générée par un grand modèle vision-langage (VLM), puis un raffinement par échantillonnage hiérarchique découplé en plusieurs hypothèses, conçu pour limiter l'impact d'une erreur du VLM. Ce module tourne en parallèle d'une simulation haute-fidélité et du matériel réel, avec mise à jour en temps réel du point d'équilibre du robot. Les auteurs valident l'approche sur un prototype maison équipé d'une pince robotique et d'une interface homme-machine, démontrant en temps réel des tâches de levage, transport et dépose d'une charge représentant environ un tiers du poids corporel du robot. Pour l'industrie robotique, ce travail cible un verrou concret de la téléopération à retour haptique : sans connaissance des propriétés physiques de l'objet manipulé, le retour de force transmis à l'opérateur reste imprécis, ce qui brise la dynamique du contrôle corps entier. Combiner vision et VLM pour réduire l'espace de recherche avant d'affiner par échantillonnage accélérerait, selon les auteurs, l'estimation par rapport à des méthodes purement stochastiques ; l'abstract ne fournit toutefois aucun temps de cycle chiffré ni comparaison directe, ce qui invite à la prudence sur l'ampleur réelle du gain. L'intérêt pour les intégrateurs est de voir les VLM utilisés non pas pour générer des politiques d'action autonomes à la manière des approches VLA, mais comme prior physique exploitable en téléopération, une piste intermédiaire entre autonomie complète et contrôle humain pur. Cette publication s'inscrit dans la recherche sur la téléopération bilatérale de robots humanoïdes, où l'estimation dynamique des objets manipulés reste un problème ouvert. Elle se distingue des approches commerciales dominantes de robots humanoïdes bipèdes visant l'autonomie complète via des modèles VLA génératifs, en misant plutôt sur une plateforme à roues pilotée par un opérateur humain en boucle, un choix qui privilégie stabilité et charge utile relative. L'article ne précise ni institution porteuse ni calendrier de commercialisation : il s'agit d'une démonstration de faisabilité en laboratoire, sans pilote industriel ni partenaire annoncé à ce stade.

RecherchePaper
1 source
Let the Body Follow : contrôle égocentrique couplé pour la téléopération d'un robot en corps entier
4arXiv cs.RO 

Let the Body Follow : contrôle égocentrique couplé pour la téléopération d'un robot en corps entier

Une équipe de recherche présente le "coupled egocentric control" (contrôle égocentrique couplé), une nouvelle approche de téléopération pour robots à corps complet, détaillée dans un article publié sur arXiv le 20 juillet 2026 (arXiv:2607.16095v1). Le problème visé : lors d'une téléopération classique d'un robot mobile manipulateur, l'opérateur doit gérer simultanément la tête, les bras, le torse et la base, généralement via des commandes explicites au pavé tactile pour chaque ajustement de posture, ce qui alourdit considérablement la charge cognitive. La solution proposée fait suivre automatiquement le torse et la base aux mouvements de tête et de bras de l'opérateur : le tangage (pitch) de la tête ajuste la hauteur du torse, le lacet (yaw) de la tête pilote la rotation de la base, la hauteur de l'effecteur terminal module le mouvement du torse, et le franchissement des limites de l'espace de travail de l'effecteur déclenche une translation de la base. Les chercheurs ont testé ce système lors d'une étude utilisateur sur un robot mobile manipulateur TIAGo, pour des tâches inspirées de l'assistance à domicile, en le comparant à une interface hybride classique. Cette approche s'attaque à un vrai goulot d'étranglement de la téléopération de robots humanoïdes et mobiles : la coordination motrice entre perception, manipulation et déplacement, souvent citée comme facteur limitant pour des applications comme la téléassistance à domicile ou les interventions à distance en environnement dangereux. Les résultats de l'étude sont positifs sur plusieurs axes mesurables : meilleure efficacité de manipulation d'objets, réduction du recours aux commandes au pavé tactile, moins de singularités cinématiques des bras, charge mentale et effort perçu plus faibles, et préférence utilisateur plus marquée pour le contrôle du torse et de la base. Ces gains, s'ils se confirment à plus grande échelle, pourraient simplifier l'entraînement des opérateurs et réduire la fatigue lors de sessions de téléopération prolongées, un enjeu concret pour les déploiements commerciaux de robots téléopérés en environnement réel plutôt qu'en démonstration contrôlée. Le travail s'inscrit dans la lignée des recherches en interfaces homme-robot visant à réduire la charge de contrôle explicite en exploitant les intentions naturelles de l'opérateur (regard, posture) plutôt que des commandes manuelles dédiées, une direction déjà explorée pour les bras robotiques mais moins pour la coordination corps entier incluant base mobile. Le choix du TIAGo, plateforme de recherche standard de PAL Robotics, en fait une étude de faisabilité plutôt qu'un système prêt à déployer ; les auteurs ne mentionnent pas de suite industrielle ou de partenariat commercial à ce stade. La validation reste limitée à une étude utilisateur en laboratoire sur des tâches inspirées du soin à domicile, sans indication de volumes testés, de durée des sessions ni de profil des participants, ce qui appelle à la prudence avant d'extrapoler ces gains à des contextes de téléopération professionnelle à grande échelle.

UELe robot utilisé pour l'étude, TIAGo, est développé par PAL Robotics, entreprise espagnole, ce qui ancre cette recherche en téléopération dans l'écosystème robotique européen, sans toutefois de suite industrielle ou déploiement commercial annoncé.

RecherchePaper
1 source