Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
Arnold : une politique transformer musculaire multitâche et multi-corps
RecherchearXiv cs.RO 

Arnold : une politique transformer musculaire multitâche et multi-corps

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Une équipe de recherche a mis en ligne sur arXiv la version révisée d'Arnold, une politique de contrôle basée sur un transformer capable de piloter des modèles musculosquelettiques humains à haute dimension sur 14 tâches distinctes: manipulation fine d'objets, atteinte de cibles et locomotion. Contrairement aux politiques dites "spécialistes", entraînées séparément pour chaque tâche, Arnold combine clonage comportemental et apprentissage par renforcement pour égaler, voire dépasser, les performances de ces spécialistes avec un seul modèle multi-tâches et multi-corps. L'innovation centrale tient dans un "vocabulaire sensorimoteur", une représentation compositionnelle qui encode la sémantique des différentes modalités sensorielles, objectifs et actionneurs, ce qui permet à l'architecture transformer de gérer des espaces d'observation et d'action de taille variable selon les tâches. Code et données sont publiés sur GitHub (amathislab/arnold), identifiant arXiv 2508.18066.

L'enjeu dépasse la simple prouesse technique: contrôler des systèmes musculosquelettiques, non-linéaires et comptant des dizaines de muscles, reste un problème ouvert en neurosciences computationnelles et en biomécanique, avec des retombées attendues en prothétique et en rééducation motrice. Qu'une seule politique généraliste tienne tête à des spécialistes fait écho à la dynamique observée en robotique avec les modèles VLA (vision-language-action) de type Pi-0 ou GR00T, mais appliquée ici au muscle plutôt qu'au moteur électrique. Les auteurs tempèrent toutefois l'enthousiasme: leur analyse causale du signal moteur montre que les synergies musculaires de faible dimension restent largement spécifiques à chaque tâche, et que les méthodes d'analyse de variance classiques sous-estiment systématiquement la complexité réelle du contrôle. Autrement dit, la généralisation des performances ne s'accompagne pas d'une simplification interne du contrôle, un résultat qui nuance le récit d'une politique unique universelle et qui recoupe des observations déjà faites sur le vivant.

Ce travail s'inscrit dans la lignée des simulateurs musculosquelettiques utilisés pour entraîner des agents en apprentissage par renforcement sur des corps virtuels dotés de dizaines de muscles, à la croisée du machine learning, de la biomécanique et des neurosciences. Il rejoint un mouvement plus large vers des politiques multi-tâches "généralistes", en écho aux approches VLA de la robotique humanoïde. La publication ouverte du code et des données doit permettre à la communauté de reproduire les résultats et d'évaluer la capacité d'Arnold à s'adapter rapidement à des tâches encore inédites.

Dans nos dossiers

NVIDIA GR00TarXiv cs.RO

À lire aussi

TOPS : remodeler la source et le transport du flux pour la manipulation robotique multitâche
1arXiv cs.RO 

TOPS : remodeler la source et le transport du flux pour la manipulation robotique multitâche

TOPS (Task-Oriented Priors and Schedules), publié sur arXiv par une équipe de recherche, propose d'adapter deux composantes des politiques robotiques à base de flow matching sans toucher à l'architecture du réseau: la distribution source du bruit et le calendrier d'interpolation vers les actions expertes. Les politiques actuelles de manipulation multi-tâches conditionnées par le langage partagent en général un prior gaussien unique et un chemin de transport linéaire commun à toutes les tâches. TOPS construit à la place des sources multimodales propres à chaque tâche, issues de séquences d'actions expertes « inversées », ce qui permet à l'instruction en langage naturel de choisir le point de départ de la génération. Guidé par l'écart de covariance entre source et cible, le calendrier ralentit la transition vers les actions expertes au début du débruitage, puis l'accélère plus tard dans les directions qui demandent une expansion. Sous un modèle d'extrémité gaussien, les auteurs montrent que cet ajustement abaisse une borne supérieure du risque de prédiction de vitesse. Sur LIBERO-10, avec une seule étape d'intégration, le taux de succès passe de 53,44 % à 69,67 % face au Flow Matching standard à dix étapes, pour un temps d'inférence réduit à environ un sixième. En conditions réelles, l'ouverture du tiroir supérieur passe de 20 % à 80 % de réussite. Pour les équipes qui déploient des politiques VLA (vision-langage-action), l'intérêt est double: la méthode améliore la fiabilité et divise le coût d'inférence, deux contraintes centrales pour des robots qui doivent tourner en temps réel sur du matériel embarqué. Elle suggère aussi qu'une part des échecs des politiques généralistes vient moins de la capacité du réseau que du choix du point de départ et de la trajectoire de génération, un levier peu coûteux puisqu'il ne demande aucun changement d'architecture. Les gains ont été mesurés sur LIBERO, LIBERO-Plus (perturbations) et CALVIN (changement d'environnement), avec une meilleure efficacité en données, et ils se transfèrent à la politique à grande échelle π0.5 dans les quatre configurations testées. Il faut toutefois rester prudent: ce sont des benchmarks de simulation, le comparatif avec un FM à dix étapes met en regard des budgets de calcul différents, et le test réel, impressionnant en relatif (20 % à 80 %), porte sur une tâche isolée dont le nombre d'essais n'est pas précisé dans le résumé. Il s'agit d'un résultat de recherche, pas d'un produit ni d'un déploiement. Ce travail s'inscrit dans la montée en puissance des politiques génératives à base de flow matching, popularisées par la famille π0 de Physical Intelligence, qui ont remplacé en partie la diffusion pour la commande d'actions. Les benchmarks LIBERO et CALVIN sont devenus des références pour comparer les politiques multi-tâches, au prix d'une saturation progressive qui pousse vers des variantes plus exigeantes comme LIBERO-Plus. TOPS rejoint un courant qui cherche à améliorer ces politiques par des priors et des schedules mieux adaptés plutôt que par davantage de paramètres ou de données. La suite logique serait une validation sur davantage de tâches réelles, des plateformes variées et des modèles plus récents, ainsi qu'une évaluation de la robustesse quand la tâche demandée sort de la distribution d'entraînement.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Transformer des modèles vidéo en politiques robotiques généralistes
2arXiv cs.RO 

Transformer des modèles vidéo en politiques robotiques généralistes

Des chercheurs du MIT CSAIL ont publié fin mai 2026 un preprint (arXiv:2605.27817) présentant VERA, pour Video-to-Embodied Robot Action Model, une architecture qui transforme des modèles vidéo génératifs en politiques robotiques généralisables. L'idée centrale est de découpler deux composants qui, dans les approches récentes, sont souvent entraînés conjointement : un planificateur vidéo, qui prédit des séquences d'images représentant la complétion d'une tâche, et un modèle de dynamique inverse (IDM, Inverse Dynamics Model) spécifique à l'effecteur, qui traduit ces images en commandes motrices concrètes. L'IDM est conçu à partir du Jacobien cinématique du robot, ce qui le rend à la fois efficient en données et extensible aux espaces d'action de haute dimension. L'équipe démontre VERA sur deux configurations : manipulation zero-shot d'un bras Panda 7-DOF et réorientation de cube en dextérité avec une main Allegro à 16 degrés de liberté, sur des benchmarks simulés et réels. Ce découplage constitue une alternative architecturale directe aux fondations robotiques qui co-entraînent prédiction d'observations et prédiction d'actions sur des données étiquetées (action-labeled), comme le proposent Pi-0 de Physical Intelligence ou GR00T N2 de NVIDIA. L'avantage opérationnel est concret : le planificateur vidéo reste agnostique à l'effecteur et peut être partagé entre plusieurs robots en changeant uniquement l'IDM associé, sans réentraîner le backbone vidéo. L'IDM peut lui-même être entraîné sur des données de self-play facilement disponibles, ce qui réduit la dépendance aux démonstrations humaines coûteuses. Les résultats zero-shot sur des tâches de manipulation réelle renforcent la thèse que le gap sim-to-real peut être atténué par une modélisation géométrique rigoureuse de l'effecteur. La course aux VLA (Vision-Language-Action models) et aux politiques cross-embodiment est aujourd'hui dominée par des laboratoires bien capitalisés : Physical Intelligence avec Pi-0 et Pi-0.5, NVIDIA avec GR00T N2, Figure AI avec Helix, et 1X Technologies. VERA positionne le MIT CSAIL dans ce paysage avec une approche plus modulaire que les architectures monolithiques en vogue. Il s'agit pour l'instant d'un preprint de recherche, sans déploiement industriel annoncé ni partenariat hardware mentionné. Les résultats sont disponibles sur vera.csail.mit.edu, et la prochaine étape naturelle serait une évaluation sur des effecteurs plus variés ou des environnements non structurés pour valider la généralisation à plus grande échelle.

RechercheOpinion
1 source
Contrôleur de politique de diffusion unique pour le poussage de blocs multi-tâches avec transfert simulation-réel sans apprentissage préalable
3arXiv cs.RO 

Contrôleur de politique de diffusion unique pour le poussage de blocs multi-tâches avec transfert simulation-réel sans apprentissage préalable

Des chercheurs présentent un contrôleur unique basé sur une politique de diffusion (diffusion policy), entraîné entièrement par apprentissage par renforcement plutôt que par clonage comportemental classique, pour piloter des tâches de poussée de blocs multi-formes en robotique manipulatrice. Contrairement aux approches habituelles qui nécessitent des démonstrations humaines préenregistrées, cette méthode combine une fonction de perte simplifiée (une borne inférieure de vraisemblance repondérée) avec une génération de curriculum inversé et des représentations centrées sur l'objectif pour surmonter la difficulté d'exploration dans un environnement de simulation à récompense éparse. Le système a été testé en transfert zéro-shot vers un dispositif réel de poussée de blocs, en faisant varier les positions cibles, les formes des blocs, leur poids et le frottement de la surface, sans réentraînement spécifique au monde réel. Cette publication s'inscrit dans un débat central du secteur robotique actuel : la capacité réelle des politiques apprises par simulation à franchir le fameux "sim-to-real gap" sans passer par des démonstrations coûteuses à collecter. Alors que des modèles VLA (vision-langage-action) comme Pi-0 de Physical Intelligence, GR00T N2 de NVIDIA ou Helix de Figure AI misent sur d'immenses corpus de démonstrations téléopérées pour généraliser, cette approche RL-from-scratch propose une voie alternative potentiellement moins gourmande en données humaines annotées, mais elle reste circonscrite à une tâche géométriquement simple (pousser des blocs) et ne démontre pas encore de généralisation vers des manipulations plus complexes en préhension ou en dextérité fine. Pour les intégrateurs industriels, l'intérêt réside surtout dans la preuve de concept méthodologique plutôt que dans une application immédiate déployable. Le travail s'inscrit dans la lignée des politiques de diffusion popularisées en 2023-2024 pour le clonage comportemental (notamment par des équipes du MIT et de Columbia), ici détournées vers un cadre purement RL. Les auteurs ne précisent pas d'affiliation industrielle ni de partenaire de déploiement, ce qui situe ce travail du côté recherche académique plutôt que produit commercialisable. Aucun acteur français ou européen n'est mentionné dans cette publication. Les prochaines étapes attendues, non détaillées dans l'abstract, porteraient logiquement sur l'extension à des tâches de manipulation plus riches (préhension, insertion, assemblage) et sur la robustesse face à des perturbations environnementales plus sévères que celles testées ici.

RecherchePaper
1 source
Découpler vision, langage et action pour des politiques robotiques multitâches efficaces
4arXiv cs.RO 

Découpler vision, langage et action pour des politiques robotiques multitâches efficaces

Une équipe de recherche publie sur arXiv (2609.18374v1) une étude qui remet en question l'architecture standard des modèles Vision-Language-Action (VLA), lesquels associent un module d'action à un Vision-Language Model (VLM) de plusieurs milliards de paramètres dont le coût de calcul est payé à chaque pas de contrôle. Les auteurs testent une architecture découplée baptisée Decoupled Embodiment Model (DEM), combinant un encodeur visuel DINOv3 affiné, un encodeur de langage NeoBERT figé, et une tête d'action MeanFlow qui génère chaque segment d'action en un seul passage avant. Dans une expérience contrôlée, à démonstrations, budget d'entraînement, tâches et plateforme de mesure identiques, ce système est comparé à sept modèles VLA de référence, sur 18 tâches de manipulation simulées avec paraphrases linguistiques inédites et scènes randomisées, ainsi que sur trois tâches exécutées avec un robot physique. Résultat: DEM atteint un taux de réussite comparable aux meilleures politiques à backbone VLM, tout en tournant huit à dix-sept fois plus vite en fréquence d'inférence et en consommant six à quinze fois moins d'énergie par inférence. Pour les intégrateurs et les équipes robotique en entreprise, ce résultat pèse directement sur les décisions de déploiement: la latence et la consommation énergétique des VLA massifs limitent leur usage embarqué sur des robots à ressources de calcul contraintes, un frein bien identifié dans l'industrie humanoïde et la manipulation industrielle. En montrant qu'un encodeur vision autonome et un encodeur de langage encoder-only peuvent égaler la compréhension d'un grand VLM sur ces tâches, l'étude questionne l'hypothèse selon laquelle un backbone VLM géant serait indispensable pour obtenir une politique de manipulation multi-tâches performante. Cela ouvre la voie à des politiques moins coûteuses à opérer en production, un argument utile face au décalage régulièrement observé entre démonstrations spectaculaires et robustesse réelle sur le terrain. Les auteurs restent prudents: le gain est mesuré "dans ce périmètre de tâches" et selon leur propre protocole d'évaluation, pas comme une généralisation universelle. Cette publication s'inscrit dans une trajectoire de recherche où la tendance dominante des dernières années consistait à empiler des backbones VLM toujours plus lourds pour gagner en généralisation des politiques robotiques. Le papier renverse partiellement cette logique en s'appuyant sur les progrès récents des encodeurs autonomes, DINOv3 pour la vision et NeoBERT pour le texte, désormais capables de rivaliser avec de grands VLM sur les benchmarks d'embedding visuel et de compréhension du langage. L'étude ne détaille pas précisément l'identité des sept baselines VLA testées ni des tâches réalisées sur robot physique, et ne mentionne aucun calendrier de déploiement industriel: il s'agit à ce stade d'un travail de recherche académique publié en preprint, sans partenaire industriel ni essai pilote annoncés. La suite logique attendue serait une validation sur un plus grand nombre de tâches réelles et une comparaison directe avec les politiques VLA propriétaires déjà déployées commercialement par les acteurs humanoïdes du secteur.

UELes intégrateurs européens de robotique industrielle pourraient s'appuyer sur des politiques VLA moins coûteuses en calcul et en énergie pour des déploiements embarqués, mais aucun acteur ou institution française/européenne n'est cité dans l'étude.

RecherchePaper
1 source