Aller au contenu principal
Repérer l'écart de dynamique : adaptation de politique au moment du test par retour action-résultat
RecherchearXiv cs.RO 

Repérer l'écart de dynamique : adaptation de politique au moment du test par retour action-résultat

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Des chercheurs proposent SCOUT, un cadre de méta-apprentissage sensible à la dynamique, destiné à l'adaptation en phase de test de politiques de manipulation robotique. Le travail, publié sur arXiv (2609.36107) avec une page projet, part d'un constat : une politique pré-entraînée performe en environnement contrôlé, mais se heurte en déploiement à des propriétés physiques non observées (friction, masse, jeu mécanique) que ni la simulation ni les données d'entraînement n'ont couvertes. SCOUT couple une politique de prédiction d'action et un modèle de dynamique directe (forward dynamics) via un espace latent de croyance partagé. Pendant le méta-entraînement, une boucle interne met à jour ce latent en minimisant l'erreur de prédiction de dynamique par rapport au résultat réellement observé de l'action, tandis qu'une boucle externe optimise le réseau pour la sélection d'actions. Au déploiement, le robot met à jour sa croyance latente à partir des écarts entre résultat attendu et résultat observé, sans modifier les poids du réseau. Les auteurs affirment que cela évite l'oubli catastrophique. Ils rapportent une accélération significative de l'adaptation en ligne sur plusieurs benchmarks de manipulation simulés, ainsi qu'un transfert sim-to-real robuste sur robot réel. L'extrait disponible ne donne ni chiffres précis, ni taux de succès, ni liste de tâches, ni plateforme matérielle : les résultats restent à vérifier dans le papier complet.

L'enjeu est direct pour les intégrateurs et les responsables d'exploitation : l'écart de dynamique est l'une des causes majeures de l'écart entre démonstration et production. Les méthodes d'adaptation en phase de test se contentent en général de récompenses scalaires éparses (réussite ou échec), une information pauvre au regard de ce que le contact physique fournit. SCOUT exploite le signal géométrique et dynamique de chaque interaction, ce qui suggère une adaptation en quelques essais plutôt qu'un réentraînement ou un fine-tuning coûteux. Le fait de n'agir que sur un latent, et non sur les poids, est aussi un argument de sûreté : le comportement de base validé n'est pas dégradé. Cela dit, il s'agit d'un preprint sans revue par les pairs, et la robustesse hors des benchmarks choisis, sur des dynamiques réellement nouvelles, n'est pas démontrée par le résumé.

Ce travail s'inscrit dans la lignée du méta-apprentissage et de l'estimation implicite de paramètres système, comme les approches de type RMA en locomotion, ou les méthodes de randomisation de domaine et d'adaptation en contexte. Il intervient alors que les modèles vision-langage-action généralistes (Pi-0, GR00T, Helix) sont pré-entraînés à grande échelle mais restent peu adaptables en ligne aux propriétés physiques inconnues. SCOUT se présente comme une couche d'adaptation complémentaire plutôt qu'un modèle fondation concurrent. Reste à savoir s'il se branche sur ces VLA et à quel coût de calcul en temps réel. Aucun pilote industriel ni calendrier de déploiement n'est annoncé : il s'agit à ce stade d'une contribution de recherche, avec code et démonstrations à examiner sur la page projet.

Impact France/UE

Pas d\'impact direct sur la France/UE

À lire aussi

Adaptation efficace au moment du test pour les politiques de robots
1arXiv cs.RO 

Adaptation efficace au moment du test pour les politiques de robots

Des chercheurs proposent TEMPO, une méthode d'adaptation au moment du test (test-time adaptation, TTA) pour les politiques de locomotion issues de l'apprentissage par renforcement. Le principe est d'ajuster une politique déjà entraînée pendant son exécution, de manière auto-supervisée et sans accès à la récompense. Le point de départ est une base légère qui ne met à jour que l'acteur et utilise un critique gelé comme indicateur de performance. TEMPO ajoute deux mécanismes. Un régularisateur d'entropie sur la distribution prédictive du critique limite les extrapolations trop confiantes. Une mémoire à score, inspirée du prioritized replay, retient en priorité les observations de faible valeur, jugées difficiles, et les rééchantillonne par importance pour concentrer le calcul limité sur les conditions les plus informatives. Les tests portent sur trois robots (Go1, Go2 et l'humanoïde G1) dans MuJoCo Playground, avec quatre types de décalage et plusieurs architectures. Les gains sont constants et vont jusqu'à 80 % dans un cadre mono-appareil. Une validation physique a été faite sur un Unitree Go2 muni d'une charge au mollet, avec une adaptation entièrement embarquée. Les politiques de locomotion apprises échouent souvent quand le terrain devient glissant ou accidenté, quand la charge change ou que les capteurs se dégradent. Réentraîner ou recalibrer à la main n'est guère possible sur site, et les contraintes de latence et de mémoire embarquée sont réelles. Ces travaux visent donc un manque pratique : corriger une politique sans récompense ni retour en simulation. Il faut toutefois tempérer. Le chiffre de 80 % est un maximum, et l'article ne donne ni la valeur de la charge ni le nombre d'épisodes réels. Le résultat reste un résultat de laboratoire, pas un déploiement. L'adaptation en ligne est un sujet ancien en robotique, entre randomisation de domaine, identification de système en ligne et méta-apprentissage. TEMPO s'en distingue par son coût réduit et son absence de signal de récompense. Les prochaines étapes naturelles seraient des charges plus lourdes, des terrains variés, des mesures de consommation et de latence sur matériel réel, et l'extension aux humanoïdes, que l'étude n'a validée qu'en simulation.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Adaptation au moment du test des politiques de manipulation face à la dégradation des actionneurs
2arXiv cs.RO 

Adaptation au moment du test des politiques de manipulation face à la dégradation des actionneurs

Des chercheurs proposent TeAR (Telemetry-Aware Action Rectification), une méthode publiée sur arXiv qui corrige à la volée les actions d'une politique de manipulation robotique lorsque les actionneurs se dégradent. Le principe est de ne pas toucher à la politique, qui reste gelée, mais d'intercaler entre elle et le contrôleur bas niveau un petit Transformer léger. Celui-ci reçoit l'action proposée et la télémétrie embarquée (température des articulations, courant moteur, tension d'alimentation), puis amplifie, amortit ou décale chaque composante de l'action. L'évaluation couvre 18 paires politique-tâche, réparties sur 8 familles de politiques et 5 tâches de manipulation. Dans un test apparié où le modèle de dégradation utilisé à l'entraînement ne correspond pas à la réalité, TeAR atteint 31,8 % de réussite, contre 25,6 % pour la politique de base et 30,6 % pour un inverse fondé sur un modèle supposé. Sur un bras physique, le gain atteint 10 à 15 % en situation d'échauffement, sans réglage fin sur le robot. L'intérêt tient à un problème que les démonstrations de laboratoire masquent : les politiques sont entraînées en supposant qu'une commande produit toujours le même mouvement. Or sur du matériel réel, après des heures de service, les moteurs chauffent, le courant sature près du contact et la tension chute sous charge. La même action donne alors un mouvement plus faible, retardé ou bruité. Pour un intégrateur ou un exploitant de site, c'est une source de dérive de performance très concrète, qui se traduit par des taux de réussite en baisse au fil des postes. La méthode est indépendante de la politique, donc applicable à des VLA ou à des politiques de diffusion déjà déployées sans les réentraîner. Elle exploite un signal déjà disponible, aujourd'hui surtout utilisé pour la journalisation et la sécurité. Il faut toutefois relativiser les ordres de grandeur. Le gain de 6 points dans le test avec écart de modèle reste modeste, et la validation physique porte sur un seul bras, avec un gain annoncé sous forme de fourchette et sans détail sur les tâches ni le nombre d'essais. Ce travail s'inscrit dans le champ de l'adaptation au moment du test et de la robustesse sim-to-real, où l'on traite habituellement le décalage visuel ou dynamique par la randomisation de domaine ou l'identification de système. TeAR déplace la question vers l'usure et l'échauffement, qui sont des enjeux de fiabilité longue durée pour les humanoïdes et les bras collaboratifs en production continue. Aucun pilote industriel ni calendrier n'est annoncé. Il s'agit d'un préprint non évalué par des pairs, et les prochaines étapes logiques seraient des tests sur des plateformes variées, avec des cycles de fonctionnement longs et des dégradations réelles plutôt que simulées.

RecherchePaper
1 source
CAR : adaptation cinédynamique inter-véhicules par représentation de la mobilité
3arXiv cs.RO 

CAR : adaptation cinédynamique inter-véhicules par représentation de la mobilité

Des chercheurs proposent sur arXiv (arXiv:2603.06866) un cadre algorithmique baptisé CAR, pour Cross-vehicle kinodynamics Adaptation via mobility Representation, conçu pour transférer rapidement les modèles de comportement dynamique d'un robot mobile à un autre sans recollecte massive de données. Le système exploite un encodeur Transformer avec normalisation de couche adaptative (Adaptive Layer Normalization) pour projeter trajectoires et configurations physiques de véhicules dans un espace latent commun dit "espace de mobilité partagé". CAR identifie ensuite les voisins les plus proches dans cet espace pour extraire les comportements communs et les adapter à une nouvelle plateforme. Évalué sur le simulateur Verti-Bench, construit sur le moteur multi-physique Chrono, et validé sur quatre configurations distinctes de la plateforme Verti-4-Wheeler, le framework atteint une réduction de l'erreur de prédiction de 67,2 % par rapport à un transfert direct entre plateformes similaires, avec seulement une minute de nouvelles données de trajectoire. Ce résultat adresse un verrou opérationnel réel pour les déployeurs de flottes hétérogènes : adapter un système de navigation autonome à un nouveau châssis exige aujourd'hui soit des campagnes d'acquisition de données coûteuses et spécifiques à chaque plateforme, soit des modèles simplifiés (unicycle, bicyclette) qui ignorent la kinodynamique réelle du robot. Ces abstractions montrent rapidement leurs limites sur terrain accidenté ou en conditions industrielles. CAR propose un transfert de connaissances inter-plateformes à faible coût de calibration. Pour un intégrateur déployant des AMR avec plusieurs types de châssis, réduire à une minute la fenêtre d'adaptation représente un levier opérationnel concret, même si ces conditions de benchmark restent à reproduire en environnements de production réels. L'article s'inscrit dans un courant actif de la recherche en robotique de terrain visant à briser la dépendance aux modèles plateforme-spécifiques. La plateforme Verti-4-Wheeler, reconfigurable mécaniquement, et le simulateur Verti-Bench offrent un banc d'essai modulaire bien adapté à ce type d'étude. Les approches concurrentes incluent les méthodes de méta-apprentissage (MAML et dérivés) et les modèles à dynamiques latentes (Dreamer, RSSM) appliqués à la locomotion. Aucun partenariat industriel ni calendrier de déploiement n'est mentionné : il s'agit d'un résultat académique en cours de révision (v3 sur arXiv), dont la validation à grande échelle reste à démontrer.

RecherchePaper
1 source
Même action, résultat différent : la variabilité dans la manipulation dynamique de tissus
4arXiv cs.RO 

Même action, résultat différent : la variabilité dans la manipulation dynamique de tissus

Une équipe de chercheurs publie sur arXiv (2610.10801) la première caractérisation systématique de la variabilité du tissu soumis à des mouvements dynamiques rapides. Le protocole consiste à rejouer dix fois exactement la même trajectoire robot sur quatre tâches dynamiques, dont deux sont nouvelles. Chacune est testée avec trois tissus aux propriétés très différentes et jusqu'à trois vitesses d'exécution, ce qui donne 269 essais enregistrés. Pour chaque essai, de petits marqueurs placés sur le tissu sont suivis par OptiTrack, en parallèle d'une caméra stéréo synchronisée et des logs du robot. Les auteurs définissent ensuite plusieurs métriques de variabilité. Ils rejouent enfin l'ensemble des essais dans quatre simulateurs de tissu récents et calibrés. Le jeu de données complet, avec les « jumeaux » simulés correspondants, est publié. Les résultats sont nets. La variabilité est significative dans toutes les conditions testées, et dans la plupart des cas elle dépasse de un à trois ordres de grandeur la répétabilité propre du robot et le bruit de mesure. Elle ne peut donc pas être attribuée à l'instrumentation. Elle dépend surtout des propriétés physiques du tissu et augmente avec la vitesse. Aucun des quatre simulateurs ne reproduit l'amplitude de la variabilité observée sur le tissu réel, ni l'ordre relatif entre les conditions. Pour les équipes qui développent des politiques d'apprentissage pour la manipulation de textiles (pliage, habillage, linge, textile industriel), ces résultats remettent en cause deux pratiques courantes. D'abord, une politique évaluée sur quelques essais peut afficher un taux de réussite trompeur, puisqu'une même commande produit des résultats différents. Il faut donc davantage de répétitions pour établir une fiabilité statistique. Ensuite, entraîner en simulation puis transférer (sim-to-real) bute sur un obstacle de fond: les simulateurs actuels produisent des résultats trop déterministes pour représenter le comportement réel, quelle que soit la qualité de leur calibration. Pour les intégrateurs qui visent des cadences élevées sur des matières souples, cela plaide pour des mouvements plus lents ou des boucles de rétroaction par la vision. Les trajectoires rapides en boucle ouverte seraient sinon peu fiables. Les auteurs ne proposent toutefois pas de solution: ils diagnostiquent un écart et fournissent un outil de mesure. Le périmètre reste aussi limité à quatre tâches et trois tissus, en laboratoire. Ce travail s'inscrit dans la poussée de la manipulation d'objets déformables, longtemps considérée comme plus difficile que celle des objets rigides, et dans la multiplication des politiques apprises (VLA, diffusion policies) qui promettent le pliage ou le rangement du linge. Les démonstrations publiques de pliage restent en général lentes et sélectionnées, sans mesure de dispersion. Le jeu de données OptiTrack, vision et robot, avec ses jumeaux simulés, offre un banc d'essai commun pour comparer les simulateurs et pour développer des modèles stochastiques de tissu ou un entraînement par randomisation de domaine plus réaliste. La suite logique serait d'intégrer cette variabilité mesurée aux simulateurs, puis de vérifier si elle améliore le transfert vers le réel.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source