Aller au contenu principal
RecherchearXiv cs.RO 

GRASP : échantillonnage guidé par le gradient pour le retargeting de mouvement physique riche en contacts

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Des chercheurs proposent GRASP (Gradient Recovery from Archived Samples for Proposals), une méthode de retargeting physique qui transforme des démonstrations humaines en commandes robot reproduisant le mouvement de référence sous dynamique de contact. Le papier, publié sur arXiv (2611.05754, première version), étend le Sequential Monte Carlo tempéré. Le module GRASP-TO ajuste des modèles de coût quadratiques locaux sur les trajectoires déjà simulées et archivées, puis utilise leurs gradients pour guider l'étape de réjuvénation par MCMC. Une correction de Metropolis-Hastings préserve la distribution cible pour chaque noyau de proposition fixé. Aucun simulateur différentiable n'est requis. GRASP-MPC applique cet optimiseur par planification à horizon glissant, avec démarrage à chaud, pour traiter de longues démonstrations. Les auteurs annoncent 92,8 % de réussite sur 1352 démonstrations bimanuelles OakInk2 (environ 1255 réussies), avec un même objectif de suivi et sans récompense de contact propre à chaque tâche. Les références ainsi affinées améliorent le suivi par PPO en pen spinning et en interaction humanoïde-objet. Des essais sur matériel réel sont montrés en manipulation dextre et en mouvement corps entier de humanoïde.

L'enjeu concerne la qualité des données d'entraînement. Un retargeting purement cinématique produit souvent des interpénétrations ou des contacts irréalisables, que les politiques apprises doivent ensuite compenser. Obtenir des références physiquement cohérentes avec un seul objectif générique, sur mains dextres comme sur humanoïdes, réduit l'ingénierie manuelle de récompenses. Fonctionner avec n'importe quel simulateur en boîte noire est un avantage pratique, car les gradients à travers les contacts sont notoirement instables. Les limites sont à garder en tête. Il s'agit d'un preprint non évalué par des pairs. Le résumé ne précise ni le critère de réussite, ni le coût de calcul par démonstration, ni le nombre ou la sélection des essais sur robot réel, qui semblent qualitatifs.

Ce travail s'inscrit dans la lignée du contrôle prédictif par échantillonnage (MPPI, MuJoCo MPC), qui explore bien mais converge lentement, et des méthodes à simulateur différentiable, plus précises mais fragiles face aux contacts. GRASP cherche à combiner les deux. Le jeu de données OakInk2 et le suivi par PPO servent de bancs d'essai de plus en plus courants pour la manipulation dextre apprise depuis l'humain. Le résumé ne mentionne ni code publié ni calendrier. Les prochaines étapes à surveiller sont une éventuelle ouverture du code, des comparaisons directes avec les approches de retargeting basées sur l'apprentation par renforcement, et la reproduction des résultats sur d'autres mains et humanoïdes.

Impact France/UE

Pas d\'impact direct sur la France/UE

Dans nos dossiers

À lire aussi

SMR : apprentissage du retargeting de mouvement en flux continu pour humanoïdes à partir de la sémantique humaine
1arXiv cs.RO 

SMR : apprentissage du retargeting de mouvement en flux continu pour humanoïdes à partir de la sémantique humaine

Des chercheurs proposent SMR, un système de retargeting de mouvement en flux continu qui convertit les gestes humains en références exécutables par un humanoïde. L'approche repose sur des « experts physiques » qui suivent, en simulation, des cibles dérivées du mouvement humain: positions, orientations et vitesses de repères corporels, exprimées dans l'espace des tâches du robot. Ces experts doivent respecter les contacts, la dynamique et les limites des actionneurs. Seules les trajectoires réellement exécutées qui mènent le mouvement à son terme et passent des contrôles de validité sémantique et physique sont conservées. Elles servent ensuite à entraîner un unique Transformer strictement causal. À chaque image reçue, ce modèle n'utilise que les observations humaines courantes et passées pour produire une référence de mouvement, transmise à un contrôleur de corps entier en aval. L'étude, publiée sur arXiv (v1), ne fournit dans son résumé ni nombre de degrés de liberté, ni robot cible, ni latence chiffrée, ni résultat sur matériel réel. L'enjeu tient à deux limites des pipelines actuels. Les méthodes cinématiques font de la correspondance géométrique sans savoir si la trajectoire est exécutable par le robot. Les méthodes neuronales supervisées par la physique, elles, s'entraînent sur des trajectoires cinématiques raffinées, restent donc liées à ces solutions de départ, et exigent des modèles bidirectionnels sur séquences complètes, incompatibles avec le temps réel. En supprimant ce besoin de contexte futur, SMR vise la téléopération et l'imitation en direct, où le robot doit réagir sans attendre la fin du geste. Les auteurs affirment que les experts conditionnés par la sémantique produisent des mouvements plus fidèles et plus physiquement valides que l'optimisation directe, et que le retargeter obtient de meilleurs résultats en boucle fermée que les références cinématiques et physiquement raffinées, avec un même contrôleur de corps entier. Ces gains restent à vérifier: le résumé ne donne aucun chiffre, et un résultat obtenu en simulation ne garantit pas le transfert sim-to-real. Ce travail s'inscrit dans la vague de contrôle de corps entier pour humanoïdes alimentée par la capture de mouvement humain, où le retargeting sert de brique entre données humaines et politiques robotiques. La chaîne classique de cinématique inverse suivie d'un raffinement physique y est devenue un goulot d'étranglement, en coût de calcul comme en latence. SMR rejoint les approches qui distillent des experts de simulation vers un modèle léger, déployable en ligne. Il faudra attendre le texte complet, le code et d'éventuelles validations sur robot réel pour mesurer l'apport face aux baselines établies.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
CARD : ancrage sur les contacts pour le retargeting en manipulation dextérique
2arXiv cs.RO 

CARD : ancrage sur les contacts pour le retargeting en manipulation dextérique

Des chercheurs proposent CARD (Contact-Anchored Retargeting for Dexterous Manipulation), un cadre logiciel qui transfère des démonstrations humaines vers des mains robotiques en conservant les forces de contact visées, et pas seulement la cinématique des doigts. Le système fonctionne sans simulateur ni modèle d'objet. Il unifie trois sources de données, la vidéo, la capture de mouvement et les gants tactiles, via une représentation commune main-contact, et produit des cibles de force explicites en plus des trajectoires articulaires. Pour rejouer ces forces en boucle ouverte sur du matériel réel, les auteurs ajoutent un contrôleur de suivi tactile. Pour la vidéo, qui ne contient aucune mesure tactile, ils introduisent Vid-HACO, un modèle d'estimation des contacts à partir d'images, présenté comme l'état de l'art. Sur les données vidéo, gants, capture de mouvement et le jeu GRAB, CARD maintient le contact sur 43 à 78 % des images où un contact existe. Les méthodes purement cinématiques tombent sous 10 %, et les méthodes qui exploitent un modèle d'objet atteignent 22,5 %. Intégrée à un retargeting basé sur la physique, la formulation fait passer le taux de réussite strict de 12 % à 32 % sur GRAB. L'enjeu est la qualité des données d'entraînement pour la manipulation dextre. La téléopération, l'enseignement cinesthésique et les exosquelettes obligent l'opérateur à agir à travers le corps du robot, ce qui bride son habileté et plafonne la qualité des démonstrations collectées. Le retargeting depuis des mains nues lève ce goulot, mais les approches actuelles perdent l'information qui décide de la réussite d'une saisie ou d'une insertion, à savoir l'intensité et la localisation des appuis. Si ces résultats se confirment, la vidéo humaine, abondante et peu coûteuse, deviendrait une source exploitable pour des politiques de type VLA (vision-langage-action) sur mains à plusieurs doigts. Les intégrateurs y gagneraient une voie de collecte moins dépendante de parcs de téléopération. Les chiffres appellent toutefois de la prudence. Un contact maintenu sur 43 à 78 % des images reste loin d'une fiabilité industrielle. Un taux de réussite strict de 32 % sur un benchmark académique, même multiplié par plus de deux, ne dit rien d'une cadence de production. La validation matérielle repose sur un rejeu en boucle ouverte de démonstrations, et non sur une politique apprise tournant en autonomie. Ce travail s'inscrit dans la course aux données pour mains dextres, où cohabitent la téléopération à grande échelle, les gants instrumentés et l'apprentissage depuis la vidéo humaine, que poursuivent notamment les équipes humanoïdes et les laboratoires académiques. Le point de départ de CARD est que la plupart des méthodes de retargeting, cinématiques ou guidées par les objets, ignorent la dynamique de contact réelle. Il s'agit d'une prépublication arXiv, sans relecture par les pairs, sans produit ni calendrier de déploiement annoncés, et sans acteur industriel identifié. La suite logique serait de brancher CARD sur l'entraînement de politiques en boucle fermée, de tester des mains et des capteurs tactiles plus variés, et de mesurer la robustesse de Vid-HACO sur des vidéos non contrôlées.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Robot IA : le shooting par contact retargete le mouvement dynamique sans lissage discontinu
3arXiv cs.RO 

Robot IA : le shooting par contact retargete le mouvement dynamique sans lissage discontinu

Publié sur arXiv le 5 août 2026 (référence 2608.03116), un article de recherche présente DSMS (Direct Simulation-based Multiple Shooting), une méthode qui corrige un défaut courant du retargeting de mouvement pour humanoïdes. Les techniques actuelles privilégient la ressemblance cinématique avec le mouvement humain source, au détriment de la dynamique corps entier et de la cohérence des contacts, produisant des références difficiles à reproduire en apprentissage par renforcement, surtout pour des comportements riches en contacts. DSMS intègre un simulateur différentiable dans un programme d'optimisation non linéaire, résolvant en interne contacts, friction, impacts, auto-collisions et limites articulaires, sans calendrier de contact imposé. Les auteurs démontrent un transfert sim-to-real zero-shot sur le Unitree G1 : un rampement pilotable riche en contacts et un saut-pivot dynamique à 180 degrés. Ce travail cible un point de friction central pour l'industrie humanoïde : l'écart entre démonstrations simulées et comportements fiables sur robot réel, frein majeur à une commercialisation crédible au-delà des vidéos promotionnelles. Les pipelines de motion imitation actuels, qu'ils reposent sur du RL ou des architectures VLA, héritent souvent de références physiquement irréalistes, ce qui allonge l'entraînement et fragilise les politiques face aux contacts imprévus. En rendant les références dynamiquement cohérentes en amont, DSMS accélérerait l'entraînement et améliorerait le taux de succès et la précision de suivi par rapport aux méthodes existantes, selon les auteurs. Le résumé ne fournit toutefois aucun chiffre comparatif précis, ce qui invite à la prudence sur l'ampleur réelle du gain avant validation indépendante. La publication s'inscrit dans l'effort de recherche intense sur le sim-to-real pour humanoïdes, qui mobilise aussi bien des laboratoires académiques que Nvidia avec GR00T, Figure avec Helix, ou les équipes internes d'Unitree et de Boston Dynamics. Le G1, plateforme largement utilisée en recherche pour son coût relativement accessible et ses capacités dynamiques, sert de banc d'essai standard pour ce type de démonstration. Publié en preprint, non encore validé par revue par les pairs, l'article ne mentionne ni partenariat industriel ni feuille de route commerciale : il s'agit d'une contribution méthodologique destinée à la communauté du contrôle robotique et du RL, dont l'impact réel dépendra de sa reproductibilité par d'autres équipes.

RecherchePaper
1 source
Planification de mouvement "suivre le chef" par échantillonnage pour robots continus montés sur manipulateur
4arXiv cs.RO 

Planification de mouvement "suivre le chef" par échantillonnage pour robots continus montés sur manipulateur

Des chercheurs du Continuum Robotics Lab (Université de Toronto) ont publié en mai 2025 sur arXiv (arXiv:2605.11618) un planificateur de mouvement par échantillonnage pour robots continuums (CR) montés sur bras manipulateurs. Le principe exploité, dit "follow-the-leader" (FTL), consiste à faire retracer au corps du robot la trajectoire exacte de son extrémité distale, permettant de naviguer dans des espaces confinés sans collision. L'innovation clé est de découpler la recherche de forme globale du calcul de pose de base via une construction géométrique analytique fermée, éliminant toute optimisation itérative en ligne. Validé sur 120 chemins simulés répartis en trois classes de test, le système atteint 0 % d'erreur d'extrémité distale, 1,9 % d'écart de forme moyen (normalisé par la longueur du robot) et 100 % de taux de succès. Une validation matérielle sur un CR à tendons de 6 DOF monté sur manipulateur série confirme la faisabilité pratique. L'apport principal est de lever un verrou structurel : toutes les méthodes FTL antérieures supposaient une base fixe ou un mécanisme d'insertion à un seul DOF. En autorisant une pose de base pleinement actionnée dans SE(3), le problème devient couplé et combinatoirement difficile. En déportant la majorité du calcul hors ligne, l'approche permet une planification en quasi-temps réel sur des plateformes industrielles réelles. Les garanties théoriques formelles (complétude de la recherche de forme, convergence du suivi de waypoints) facilitent la certification de sécurité, ce qui intéresse directement les intégrateurs en robotique chirurgicale ou en inspection d'infrastructures. Bémol notable : les temps de planification effectifs ne sont pas rapportés dans l'abstract, et la généralisation au-delà des trois classes de chemins testés reste à démontrer. Les robots continuums, structures flexibles sans articulations rigides discrètes, sont étudiés depuis les années 2000 pour la chirurgie minimalement invasive, l'inspection de turbines et l'exploration de conduits étroits. Le Continuum Robotics Lab compte parmi les équipes de référence mondiales, aux côtés du groupe Webster III (Vanderbilt) et de l'Université de Leeds. En Europe, des acteurs comme Surgivisio et des projets ANR autour des cathéters robotisés contribuent également au domaine. Ce travail s'inscrit dans la tendance d'intégration des CR sur bras polyarticulés pour dépasser les limitations des plateformes à base fixe. Le code source et les visualisations sont publiés en open source sur la page du laboratoire, facilitant la réplication indépendante.

UELes intégrateurs européens en robotique chirurgicale, dont la startup française Surgivisio et les projets ANR sur cathéters robotisés, pourraient exploiter ce planificateur open source pour franchir le verrou de la base mobile sur leurs plateformes de développement.

RecherchePaper
1 source