RecherchearXiv cs.RO 28 octobre 2026

RoboAuto : recherche autonome de programmes robotiques grâce à une compréhension physique multi-niveaux

1 source couvre ce sujet·Source originale ↗·

Résumé IASource uniqueImpact UE

RoboAuto, un framework décrit dans un preprint arXiv (2610.36533), propose de structurer la recherche automatique de programmes robotiques autour de trois niveaux de compréhension physique : l'objet, la scène et l'interaction. Il s'inscrit dans le paradigme Code-as-Policy, où un agent LLM génère, exécute et raffine des programmes modulaires et éditables. Le système repose sur trois briques : une base de connaissances hiérarchique, qui associe compétences exécutables et savoirs centrés sur l'objet (affordances, relations spatiales, effets des actions), apprise à partir de données incarnées et de résolutions de tâches en ligne ; un ancrage de scène, qui identifie les objets pertinents et calcule les grandeurs critiques pour l'action ; et une planification en plusieurs étapes, où l'agent conçoit ses propres expériences pour vérifier que chaque étape produit l'effet attendu et pour départager des hypothèses concurrentes. Les auteurs annoncent 89,1 % de succès sur les tâches courtes de LIBERO-PRO, et plus du double du taux moyen d'ASPIRE sur LIBERO-PRO Long et LIBERO-Plus, sur cinq familles de benchmarks au total. Sur trois tâches longues de précision en conditions réelles, RoboAuto dépasserait aussi ASPIRE et π0.5.

L'intérêt tient au diagnostic : la plupart des méthodes de recherche de programmes affinent leur code à partir du seul retour d'exécution (succès ou échec), sans comprendre pourquoi une interaction échoue. En faisant raisonner l'agent sur la physique et en le laissant tester ses hypothèses, RoboAuto vise des programmes plus robustes aux variations de scène, ce que mesurent justement les variantes PRO et Plus de LIBERO. Autre résultat notable pour les intégrateurs : la base de connaissances se transfère d'un simulateur et d'une plateforme à l'autre, et la performance croît avec sa taille. Cela suggère un actif capitalisable, plutôt qu'une politique à réentraîner pour chaque cellule. Il faut toutefois rester prudent : seules trois tâches réelles sont citées, sans précision sur le nombre d'essais, les temps de cycle ni la plateforme, et LIBERO reste un benchmark de simulation de table.

Ce travail prolonge la ligne Code-as-Policy, concurrente des VLA (vision-langage-action) de bout en bout comme π0.5 de Physical Intelligence, que les auteurs prennent pour référence réelle, et d'ASPIRE, autre méthode de recherche de programmes. Il s'agit d'un preprint v1, non relu par les pairs ; aucun produit, pilote industriel ni calendrier de déploiement n'est annoncé. La page projet (roboauto-ai.github.io) doit permettre de juger la reproductibilité. Les prochaines étapes à surveiller : la publication du code et de la base de connaissances, des tests sur davantage de plateformes réelles, et une comparaison directe avec les VLA récents sur des tâches longues.

Dans nos dossiers

IA physique & VLA Physical Intelligence — π0 arXiv cs.RO

À lire aussi

1arXiv cs.RO

Génie logiciel pour la robotique auto-adaptative : un programme de recherche

Une équipe de chercheurs a soumis sur arXiv (réf. 2505.19629, troisième version) un agenda de recherche structuré pour le génie logiciel appliqué aux systèmes robotiques auto-adaptatifs. Contrairement aux robots industriels classiques dont le comportement est entièrement prédéfini au moment du déploiement, les systèmes auto-adaptatifs sont conçus pour modifier leur propre logique en cours d'exécution, en réponse à des environnements dynamiques et incertains. L'article organise cet agenda autour de deux axes : d'une part, le cycle de vie logiciel complet (spécification des exigences, conception, développement, test, opérations), adapté aux contraintes de l'auto-adaptation ; d'autre part, les technologies habilitantes telles que les jumeaux numériques (digital twins) et les mécanismes d'adaptation pilotés par l'IA, qui assurent la surveillance en temps réel, la détection de pannes et la prise de décision automatisée. L'enjeu central identifié par les auteurs est la vérifiabilité des comportements adaptatifs sous incertitude, un problème ouvert qui conditionne directement l'adoption industrielle. Les robots capables d'apprendre et de se reconfigurer en production posent en effet des questions radicalement différentes de celles que traitent les standards de sécurité fonctionnelle classiques comme l'IEC 61508 ou l'ISO 26262. L'article cible notamment la difficulté à équilibrer trois contraintes contradictoires : adaptabilité, performance et sécurité. Il propose d'intégrer des frameworks formels comme MAPE-K (Monitor, Analyze, Plan, Execute, Knowledge), boucle de contrôle réflexif issue de l'autonomic computing d'IBM, et sa variante étendue MAPLE-K, comme socles architecturaux unifiants pour l'ingénierie de ces systèmes. Ce travail s'inscrit dans une dynamique académique qui s'accélère depuis l'émergence des VLA (Vision-Language-Action models) et des approches sim-to-real à grande échelle. Des communautés concurrentes, notamment autour de ROS 2 Lifecycle, des architectures behavior trees, et du model-driven engineering for robotics (MDE4R), explorent des directions parallèles. Les auteurs formalisent une feuille de route vers 2030, visant des systèmes robotiques dits trustworthy, capables d'opérer sans supervision humaine continue dans des environnements industriels réels. Il convient de situer ce papier pour ce qu'il est : un agenda de recherche, pas un produit livré ni un déploiement annoncé. Il cartographie les problèmes à résoudre, pas les solutions disponibles.

UELes questions de vérifiabilité des comportements adaptatifs sous incertitude sont indirectement pertinentes pour les industries européennes soumises aux normes IEC 61508 et à l'AI Act, mais aucun acteur français ou européen n'est impliqué dans ce travail.

RecherchePaper

1 source

2arXiv cs.RO

Duet : une compréhension entre deux robots grâce à un enseignement efficace

Une équipe de recherche a publié DUET, un framework d'apprentissage pour la coordination de deux robots dans des tâches de manipulation mobile collaborative, comme le transport conjoint d'objets ou les passations coordonnées entre bras. Le système repose sur une plateforme de téléopération synchronisée en réalité virtuelle capable de piloter deux embodiments hétérogènes simultanément pour collecter des données in-domain, complétée par un pipeline de tracking qui enregistre des démonstrations de coordination humain-humain et des priors de manipulation collaborative. L'architecture d'apprentissage s'appuie sur un Action Chunking Transformer, d'abord pré-entraîné sur ces démonstrations humaines puis affiné sur un nombre restreint de trajectoires réelles collectées par téléopération robot. Les auteurs évaluent l'approche sur un benchmark de quatre tâches collaboratives, avec un humanoïde Unitree G1 associé à un manipulateur mobile Dexmate Vega1. Résultat chiffré principal : la collecte de données via démonstrations humaines est 5,4 fois plus rapide en moyenne que la téléopération robot directe, tout en produisant des politiques plus performantes que celles entraînées uniquement sur données robot. Le papier, référencé arXiv 2606.20990, en est à sa deuxième version. L'intérêt principal tient au goulot d'étranglement qu'il attaque : la collecte de données reste le facteur limitant pour entraîner des systèmes multi-robots, un problème encore plus aigu que pour un robot unique puisqu'il faut synchroniser deux embodiments et deux comportements coordonnés. En démontrant qu'un pré-entraînement sur des démonstrations humain-humain se transfère efficacement vers des politiques robot-robot, DUET propose une piste concrète pour réduire le coût de téléopération réelle, un enjeu direct pour les laboratoires et intégrateurs qui cherchent à faire monter en échelle l'apprentissage de comportements coopératifs sans multiplier les heures de pilotage sur du matériel physique coûteux. Ce travail s'inscrit dans le mouvement plus large de l'apprentissage par imitation appliqué aux politiques génériques (VLA), où des systèmes comme GR00T N2, Pi-0 ou Helix explorent des architectures comparables mais restent centrés sur un seul robot ou un humanoïde generalist isolé. DUET se distingue en ciblant spécifiquement la coordination inter-robots. Il s'agit à ce stade d'un résultat de recherche publié en preprint, avec page projet dédiée, sans indication de déploiement industriel ni de partenariat commercial annoncé.

RecherchePaper

1 source

3arXiv cs.RO

AuRA : des atomes aux bits grâce à l'interaction autonome des robots

AuRA, un système présenté sur arXiv (2610.34452), automatise l'interaction robotique et la préparation des données nécessaires à la reconstruction de jumeaux numériques d'objets déformables. Il combine trois éléments : une sélection de prises tenant compte de l'exécution, des mesures de mouvement de la pince dérivées des états du robot, et des priors de géométrie et d'apparence recalés avant l'interaction. Sur 13 objets déformables, les auteurs annoncent une réduction de 88,5 % du travail humain actif et de 55,4 % du temps de collecte par actif reconstruit avec succès. Face à la référence PhysTwin, qui repose sur des données collectées par un humain, AuRA améliore sept des neuf métriques de prédiction future à mouvement de pince connu, dont une baisse de 28,1 % de la distance de Chamfer L1 unidirectionnelle. Sur des interactions inédites, la IoU moyenne de silhouette et la distance de Chamfer restent comparables. Il s'agit de résultats de laboratoire, sans déploiement industriel ni plateforme robotique commerciale précisés. L'intérêt tient au goulot d'étranglement que le travail cible. La simulation permet d'entraîner des politiques robotiques à grande échelle, mais les jumeaux numériques fidèles à la physique, surtout pour les objets déformables comme les tissus, les cordes ou les peluches, exigent encore de la manipulation humaine et de l'annotation manuelle. Réduire cet effort de près de 90 % suggère qu'on peut alimenter des pipelines sim-to-real avec des actifs acquis par le robot lui-même, ce qui intéresse les intégrateurs confrontés au coût de numérisation de références produit variées. Le fait d'éviter le suivi visuel de la pince, en s'appuyant sur les états du robot, limite aussi les erreurs dues aux occlusions. Il faut toutefois rester prudent : 13 objets restent un échantillon étroit, l'article ne détaille pas le taux d'échec de la collecte autonome, et la qualité de reconstruction est jugée « comparable » plutôt que supérieure sur les interactions inédites. Le gain porte surtout sur le coût de collecte, pas sur la précision physique. Ce travail s'inscrit dans la lignée de PhysTwin, qui avait établi la reconstruction de jumeaux physiques d'objets déformables à partir de vidéos d'interaction, mais en dépendant d'un opérateur humain pour manipuler les objets et annoter les enregistrements. AuRA se positionne comme la couche d'automatisation de cette chaîne, dans un contexte où les acteurs des modèles de fondation robotiques (VLA, modèles du monde) cherchent des sources de données plus évolutives que la téléopération. Aucun calendrier de pilote ni de transfert industriel n'est annoncé. Les prochaines étapes naturelles seraient un test sur des catégories d'objets plus variées, une évaluation du transfert vers des politiques de manipulation réelles et une mesure de la robustesse hors laboratoire.

UEPas d\'impact direct sur la France/UE

RecherchePaper

1 source

4arXiv cs.RO

Cycles thermodynamiques autonomes grâce à la mobilité et à la perception robotiques

Des chercheurs décrivent, dans un preprint arXiv (2610.11667), des « cycles thermodynamiques autonomes » réalisés par des robots mobiles capables de percevoir leur environnement. Un cycle thermodynamique classique transforme de la chaleur en travail entre deux réservoirs thermiques fixes, ce qui l'attache à un lieu et à un écart de température donnés. L'équipe renverse ce schéma : le robot se déplace lui-même dans un champ de température qui varie dans l'espace, et c'est son parcours qui referme le cycle. Le dispositif expérimental repose sur des capsules remplies de gaz et multistables, c'est-à-dire capables de basculer entre plusieurs états d'énergie stables. Ces capsules circulent dans le système à travers un gradient thermique. Le modèle des auteurs montre que les transitions rapides de leurs états énergétiques permettent à l'ensemble de fonctionner comme un moteur thermique mobile, qui récolte puis stocke de l'énergie. Le résumé ne donne ni rendement, ni puissance, ni taille de capsule, ni écart de température testé. L'intérêt tient à la manière dont la navigation est traitée. Les auteurs relient la dynamique d'énergie interne à l'échelle de la capsule à la stratégie de déplacement du robot à grande échelle, puis optimisent les trajectoires pour arbitrer entre le coût de la locomotion et l'énergie récoltée. Pour un ingénieur en robotique, cela fait de la planification de trajectoire un levier de conversion d'énergie, et non plus seulement une question de déplacement. La piste concerne surtout des robots autonomes déployés longtemps dans des environnements thermiquement hétérogènes, où il n'existe pas de source de chaleur et de source froide stables à portée. Il faut toutefois rester prudent. Il s'agit d'une preuve de concept de laboratoire, sans chiffre de performance communiqué. Rien ne permet de dire que le bilan énergétique net est favorable une fois le coût de déplacement déduit, ni que l'approche tient hors d'un banc d'essai contrôlé. Aucun produit ni déploiement n'est annoncé. Le travail s'inscrit dans le mouvement qui rapproche robotique molle, matériaux multistables et intelligence incarnée, où une partie du « calcul » ou de la conversion d'énergie est confiée à la structure plutôt qu'à l'électronique. Les auteurs présentent explicitement leur système comme un analogue artificiel des organismes qui cherchent de l'énergie en parcourant des ressources réparties dans l'espace. Cela le distingue des approches habituelles de récupération d'énergie, qui sont fixes (thermoélectricité, par exemple) ou qui reposent sur des batteries et des stations de recharge. Les prochaines étapes probables sont une montée en échelle, une mesure du rendement réel et des essais dans des gradients thermiques non contrôlés. Aucun calendrier ni partenaire industriel n'est cité, et le texte ne mentionne aucun acteur européen.

RecherchePaper

1 source