RecherchearXiv cs.RO 5 mai 2026

Bonne démonstration dans les mauvaises : filtrer les données d'utilisateurs pour apprendre une politique plus robuste

1 source couvre ce sujet·Source originale ↗·

Résumé IASource uniqueImpact UE

Une équipe de chercheurs a publié en mai 2026 sur arXiv (identifiant 2605.01529) un algorithme baptisé GiB (Good-in-Bad), conçu pour filtrer automatiquement les données d'apprentissage par imitation collectées auprès d'utilisateurs non-experts. Plutôt que de rejeter une démonstration entière ou de l'utiliser telle quelle au risque de générer des comportements dangereux, GiB décompose chaque démonstration en sous-tâches et attribue un poids binaire à chaque segment. Le système entraîne un modèle auto-supervisé pour extraire des caractéristiques latentes, modélise la distribution des segments de qualité élevée, puis utilise la distance de Mahalanobis pour détecter les portions défectueuses. Les données filtrées restent compatibles avec n'importe quel algorithme d'apprentissage de politique. La méthode a été validée sur un bras Franka Robotics en simulation et en conditions réelles, sur des tâches séquentielles multi-étapes.

L'enjeu est concret : dans les déploiements réels, les démonstrateurs sont rarement des experts en robotique. Opérateurs en usine ou techniciens produisent des démonstrations hétérogènes où erreurs et bonnes séquences se mélangent. Jeter des démonstrations entières dans ces contextes à faible volume de données pénalise fortement l'entraînement. GiB préserve les segments exploitables tout en évitant que les erreurs contaminent la politique apprise. Cela adresse un angle mort persistant des méthodes d'imitation comme le behavior cloning ou les Diffusion Policies : ces architectures supposent implicitement des données propres, ce qui limite leur déployabilité hors des laboratoires. La compatibilité avec n'importe quel algorithme aval est un atout pratique pour les équipes disposant déjà d'une stack d'entraînement existante.

L'apprentissage par imitation s'est imposé ces trois dernières années comme une voie majeure pour doter les robots de compétences polyvalentes, avec des architectures comme ACT (Action Chunking with Transformers) popularisé par l'équipe Aloha, ou les Diffusion Policies de Columbia. GiB s'inscrit dans une tendance émergente visant à rendre ces pipelines robustes aux données bruyantes, aux côtés de méthodes comme DART ou les variantes de DAgger. Le bras Franka (Franka Robotics, Munich) est devenu le banc de test standard de la communauté académique en manipulation. Ce travail reste à ce stade un preprint sans déploiement industriel annoncé, et ses performances sur des tâches longues ou sur des manipulateurs mobiles humanoïdes restent à démontrer.

Impact France/UE

Les équipes européennes de recherche en manipulation robotique utilisant des bras Franka (Munich, Allemagne) pourraient intégrer GiB directement dans leurs pipelines d'imitation learning existants pour améliorer la qualité des politiques entraînées sur des données non-expertes.

Dans nos dossiers

arXiv cs.RO

À lire aussi

1arXiv cs.RO

AdaTempo : apprendre à partir de démonstrations un tempo relatif partagé pour accélérer la manipulation robotique

Des chercheurs publient sur arXiv (2610.02706) AdaTempo, une méthode auto-supervisée qui accélère les politiques visuomotrices apprises par imitation. Le point de départ est un défaut connu : les démonstrations téléopérées sont souvent exécutées lentement, et les politiques entraînées dessus (ACT, Diffusion Policy) reproduisent ce rythme. AdaTempo analyse un jeu de démonstrations, établit une correspondance entre les phases de la tâche, agrège le tempo relatif aligné en un consensus, puis le convertit en un profil d'accélération continu. Ce profil sert à rééchantillonner les démonstrations en trajectoires accélérées, sur lesquelles la politique est entraînée de façon standard. Les auteurs annoncent une accélération allant jusqu'à 3,57 fois, avec un meilleur compromis entre taux de réussite et vitesse que les politiques d'origine et que des méthodes d'accélération de référence. Il s'agit d'un préprint, sans indication de déploiement industriel ni de matériel précis dans le résumé. L'intérêt tient au point d'application de la méthode. Accélérer uniformément une politique est peu fiable, car toutes les phases d'une manipulation ne tolèrent pas la même vitesse : un approche en espace libre peut aller vite, une insertion ou une saisie fine exige de la précision. En intégrant le tempo dans les données d'entraînement, AdaTempo évite toute sélection de vitesse à l'exécution et tout retiming en ligne, ce qui ne demande ni module supplémentaire ni changement d'architecture. Pour un intégrateur, la question centrale est le temps de cycle : c'est lui, plus que la démonstration de faisabilité, qui conditionne le retour sur investissement d'un poste robotisé. Il faut toutefois rester prudent. Le chiffre de 3,57 fois est un maximum, probablement obtenu sur les tâches les plus tolérantes, et seul le détail des expériences (tâches, robots, perte de réussite associée) permettrait d'en mesurer la portée réelle. Le résumé ne dit pas non plus si les résultats ont été validés sur robot réel ou en simulation. Ce travail s'inscrit dans un mouvement plus large visant à réduire l'écart de cadence entre robots appris et opérateurs humains. Les politiques ACT et Diffusion Policy sont devenues des références pour l'apprentissage par imitation, mais héritent de la lenteur des opérateurs qui collectent les données. Des approches d'accélération existent déjà, notamment le simple rééchantillonnage temporel uniforme, que les auteurs prennent comme base de comparaison. La force d'AdaTempo est d'exploiter la structure partagée entre démonstrations plutôt qu'un facteur global. Les suites probables sont des tests sur davantage de tâches et de plateformes, ainsi qu'une combinaison avec des modèles vision-langage-action de plus grande taille, que le résumé ne mentionne pas. Aucun acteur français ou européen n'est cité dans cette publication.

UEPas d\'impact direct sur la France/UE

RecherchePaper

1 source

2arXiv cs.RO

SID : glissement dans la distribution pour une manipulation robotique robuste à partir de peu de démonstrations

Des chercheurs ont présenté SID (Sliding into Distribution), un cadre structuré pour la manipulation robotique capable de généraliser à partir de seulement deux démonstrations humaines. Évalué sur six tâches réelles variées (saisies, manipulations d'objets), SID atteint environ 90 % de taux de succès dans des configurations hors-distribution (OOD), c'est-à-dire avec des poses d'objets, des points de vue ou des conditions d'éclairage non vus lors de l'entraînement. La dégradation reste inférieure à 10 % en présence de distracteurs visuels ou de perturbations physiques externes. Le système s'appuie sur deux composants clés : un champ de mouvement centré sur l'objet, appris depuis des démonstrations "canonicalisées" (normalisées en pose), et une politique d'exécution égocentrique légère entraînée par flow matching conditionné, complétée par une augmentation de données par reprojection de nuage de points cinématiquement cohérente. L'intérêt de SID tient à sa frugalité en données : là où les politiques visuomotrices end-to-end standard (type ACT, Diffusion Policy) réclament des dizaines à centaines de démonstrations, SID opère à deux. C'est un signal fort pour les intégrateurs industriels qui peinent à collecter des données en volume sur cellule réelle. Le mécanisme de correction distributional est particulièrement notable : le champ de mouvement génère de larges corrections quand le robot s'écarte de la trajectoire démontrée, puis s'annule naturellement à l'approche de la zone fiable, avant de passer la main à la politique locale. Ce découplage explicite entre récupération hors-distribution et exécution fine constitue une alternative architecturale aux approches purement régressives. Les résultats suggèrent que le "sim-to-real gap" n'est pas le seul problème à résoudre : gérer le glissement distributional en ligne, sans recollecte de données, est un levier sous-exploité. Cette publication s'inscrit dans une vague de travaux sur la manipulation à faible donnée qui cherchent à dépasser les limites des transformeurs d'actions (ACT, π0 de Physical Intelligence, GR00T N2 de NVIDIA) en introduisant des structures géométriques explicites plutôt que de tout apprendre de bout en bout. Le flow matching, popularisé ces deux dernières années comme alternative plus stable à la diffusion pour la génération de trajectoires, est ici combiné à une représentation canonique de l'objet, une approche qui rappelle les travaux sur les réseaux de catégorie neurale (NCF) ou les politiques basées sur des keypoints. Le papier ne mentionne pas de partenaires industriels ni de timeline de déploiement, et reste pour l'instant au stade de preuve de concept académique sur banc réel. Les prochaines étapes naturelles seraient une extension à des objets déformables et une validation sur des bras commerciaux (Franka, xArm) dans des environnements moins contrôlés que le labo.

RecherchePaper

1 source

3arXiv cs.RO

Politique de latence latente : apprendre des politiques visuomotrices robustes en restant dans la distribution

Une équipe de recherche publie sur arXiv (2508.05941v2, version révisée) un nouveau cadre baptisé Latent Policy Barrier, ou LPB, destiné à rendre plus robustes les politiques visuomotrices entraînées par apprentissage par imitation (behavior cloning). Le problème ciblé est bien connu des roboticiens : le covariate shift, c'est à dire le fait qu'un robot qui s'écarte même légèrement des trajectoires démontrées par un expert humain voit cette petite déviation s'amplifier jusqu'à provoquer un échec complet de la tâche. Pour y remédier, LPB s'inspire des fonctions barrières de contrôle (Control Barrier Functions) issues de la théorie du contrôle, et traite les représentations latentes des démonstrations expertes comme une frontière implicite séparant les états "dans la distribution", donc sûrs, des états hors distribution, potentiellement dangereux. Concrètement, l'architecture sépare deux rôles dans deux modules distincts : une politique de diffusion entraînée uniquement sur les données expertes pour l'imitation précise, et un modèle de dynamique entraîné à la fois sur les données expertes et sur des trajectoires sous optimales générées par la politique elle même. Au moment de l'inférence, ce modèle de dynamique prédit les futurs états latents et les optimise pour qu'ils restent dans la distribution experte. Les auteurs valident l'approche par des expériences en simulation et sur robot réel. Cette séparation entre qualité de l'imitation et récupération face aux écarts est significative pour l'industrie de la manipulation robotique, où la collecte de démonstrations reste le goulot d'étranglement principal. Les méthodes existantes pour limiter le covariate shift, correction humaine en boucle (type DAgger) ou augmentation synthétique des données, sont coûteuses en main d'œuvre, reposent sur des hypothèses fortes propres à chaque tâche, ou dégradent la qualité de l'imitation elle même. Si LPB tient ses promesses de robustesse et d'efficacité des données sans annotation supplémentaire, cela réduirait un coût réel pour les intégrateurs qui doivent aujourd'hui multiplier les démonstrations ou les interventions correctives pour fiabiliser un déploiement. Le travail s'inscrit dans la lignée des politiques de diffusion appliquées à la manipulation robotique, popularisées ces dernières années comme alternative aux politiques déterministes classiques, et emprunte au corpus des fonctions barrières utilisé en contrôle de sécurité pour véhicules et robots mobiles. Il se positionne face aux approches par correction humaine en boucle ou par augmentation de données synthétiques, qu'il cherche explicitement à remplacer. S'agissant d'une publication arXiv, il s'agit d'un résultat de recherche à ce stade, sans annonce de déploiement industriel ni de partenaire commercial identifié.

RecherchePaper

1 source

4arXiv cs.RO

KiRoSe : utiliser les données cinématiques pour segmenter efficacement les démonstrations de robots

KiRoSe (Kinematics for Robot Segmentation) est un cadre de recherche décrit dans un preprint arXiv, dont le site de projet est hébergé par le groupe Berkeley Automation. Il vise à découper automatiquement des démonstrations robotiques en sous-segments temporels et sémantiques. Plutôt que de donner au modèle de langage multimodal (MLLM) les flux vidéo multi-caméras bruts, coûteux et rapidement saturants pour la fenêtre de contexte, les auteurs exploitent le flux cinématique qui accompagne la vidéo. Ils proposent des Sparse Motion Tokens (SMT), un vocabulaire discret où les motifs de mouvement récurrents, appelés événements cinématiques, sont codés de façon compacte, sur le principe du codage entropique de Huffman. Les SMT s'obtiennent en encodant les trajectoires avec une supervision par segments temporels, puis en quantifiant les représentations. Un modèle de langage ouvert, supervisé par des annotations de sous-tâches, apprend ensuite à interpréter ces séquences de tokens. Face à une segmentation annotée par des humains, la méthode dépasse nettement les approches de référence en score F1. Elle se transfère aussi sans réentraînement à des robots non vus et à des mouvements humains égocentriques, tout en conservant le vocabulaire ouvert du modèle. Elle suit en outre l'avancement d'une tâche sur un robot inconnu et détecte l'inversion d'une action. L'enjeu est très concret pour quiconque entraîne des politiques par imitation ou des modèles vision-langage-action (VLA). Le nettoyage, l'indexation et le découpage des démonstrations restent largement manuels, et c'est un goulot d'étranglement à mesure que les jeux de données grossissent. Travailler sur la cinématique, bien plus légère que la vidéo, abaisse le coût d'inférence et contourne la limite de contexte. Le transfert zéro-shot entre morphologies suggère aussi que ces tokens capturent des primitives de mouvement indépendantes du robot. Des réserves s'imposent toutefois. Le résumé ne chiffre ni le gain en F1, ni les robots testés, ni les méthodes comparées, et il s'agit d'un preprint non évalué par des pairs, sans déploiement industriel. Le travail s'inscrit dans la recherche sur l'usage des MLLM pour annoter et filtrer les données de manipulation. Il part du constat que les annotations de sous-tâches deviennent plus courantes dans les grands corpus de démonstrations. Ses concurrents implicites sont les pipelines qui segmentent à partir de la vidéo seule, plus coûteux, et les découpages heuristiques à base de seuils sur la vitesse ou l'ouverture de la pince, moins sémantiques. Aucun acteur français ou européen n'est cité. La suite logique serait une validation sur de grands jeux de données multi-robots, puis l'intégration dans des chaînes de collecte où la qualité des données conditionne celle des politiques.

UEPas d\'impact direct sur la France/UE

RecherchePaper

1 source