Aller au contenu principal
PredActor : diffusion d'action prédictive pour un contrôle humanoïde embarqué et pilotable
RecherchearXiv cs.RO 

PredActor : diffusion d'action prédictive pour un contrôle humanoïde embarqué et pilotable

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

PredActor, une politique de diffusion d'action prédictive pour le contrôle embarqué d'humanoïdes, est détaillée dans une publication arXiv de septembre 2026 (2609.24840). À la différence des architectures hiérarchiques classiques, qui séparent trajectoire de référence et tracker de suivi, elle s'exécute seule, conditionnée sur l'historique proprioceptif et un contexte de tâche optionnel, sans état corporel complet mesuré en externe, et génère à la fois les actions et une trajectoire d'état futur interne, guidée par classifier-free guidance pour le texte et par guidage de classifieur pour les objectifs de test. En simulation, elle atteint les 15 cibles testées, avec un score de récupération de texte de 0,580 contre 0,373 pour une diffusion d'action classique, et une résistance aux perturbations comparable. Sur une carte Jetson Orin NX, le cycle de calcul tombe à 16,790 ms en médiane et 19,383 ms au 95e percentile, sous les 20 ms requis ; déployée sur un robot Unitree G1, elle a démontré mouvement piloté par texte, réaction aux perturbations, contrôle au joystick et interpolation sémantique.

Ce résultat répond à un point de friction du secteur : les politiques de diffusion pour humanoïdes fonctionnent bien hors ligne mais restent rarement pilotables en temps réel embarqué. En tenant le calcul sous les 20 ms sur du matériel edge accessible, sans tracker séparé ni perception externe de l'état corporel complet, PredActor allège la pile logicielle qu'un intégrateur doit maintenir et contredit l'idée qu'un pilotage sémantique par texte ou joystick exige une architecture hiérarchique lourde. Pour des décideurs industriels évaluant des humanoïdes pour des tâches réelles, la robustesse conservée malgré cette contrainte est encourageante, même si les métriques reposent sur un nombre limité de cibles et un score de récupération de texte propre au papier, peu comparable aux autres benchmarks du secteur.

PredActor s'inscrit dans la lignée des politiques de diffusion pour le contrôle robotique et des modèles vision-langage-action, aux côtés d'approches comme Pi-0 de Physical Intelligence, GR00T N2 de NVIDIA ou Helix de Figure AI, dont il se distingue en évitant tout tracker de mouvement ou état privilégié externe. Classée comme nouvelle soumission sur arXiv, la publication ne précise ni laboratoire porteur ni entreprise associée et ne mentionne aucun calendrier de déploiement commercial : il s'agit d'un travail de recherche validé en simulation et sur un seul robot physique, sans pilote industriel annoncé.

À lire aussi

ADAPT : des amorces de diffusion agiles et pilotables pour un contrôle robuste d'humanoïdes en ligne, guidé par texte
1arXiv cs.RO 

ADAPT : des amorces de diffusion agiles et pilotables pour un contrôle robuste d'humanoïdes en ligne, guidé par texte

Un preprint publié sur arXiv (référence 2609.00677v1) décrit ADAPT (Agile Diffusion Action Priors), un framework de contrôle interactif du corps entier de robots humanoïdes piloté par texte. Contrairement aux pipelines texte-vers-mouvement dominants, qui génèrent une trajectoire suivie ensuite par un contrôleur séparé, ADAPT fonctionne en boucle fermée de bout en bout : le robot répond en continu aux commandes tout en gardant l'équilibre et des transitions fluides. Il apprend un prior d'action par diffusion à partir de trajectoires état-action annotées en texte, complété par une politique résiduelle d'apprentissage par renforcement entraînée sur le contrôleur gelé pour améliorer la robustesse entre consignes. L'abstract ne précise ni plateforme robotique testée, ni charge utile, degrés de liberté ou temps de cycle. L'intérêt tient à la fusion, en une seule boucle, de la génération de mouvement et de son exécution : les systèmes actuels séparent souvent un module texte-vers-mouvement d'un contrôleur bas niveau, ce qui crée latence et ruptures dès qu'une commande change. ADAPT vise des humanoïdes plus réactifs au langage naturel, un enjeu pour les intégrateurs voulant doter leurs robots d'interfaces conversationnelles en entrepôt ou en usine. Il suggère aussi que les priors d'action par diffusion combinés au renforcement, dans la lignée de travaux comme Pi-0 ou GR00T N2, forment une base viable pour du contrôle général, sans toutefois de déploiement physique ni de comparaison chiffrée démontrés : la contribution reste académique, non encore validée par relecture par les pairs. Ce travail s'inscrit dans la course menée par des laboratoires et entreprises comme Figure AI avec Helix, NVIDIA avec GR00T N2 ou Physical Intelligence avec Pi-0, pour doter les humanoïdes de piles vision-langage-action capables de suivre des instructions en langage naturel plutôt que des routines préprogrammées. Là où ces acteurs couplent souvent de grands modèles multimodaux à des primitives de mouvement, ADAPT propose des priors d'action par diffusion entraînés sur des données texte-état-action, complétés par du renforcement, comme alternative plus légère en boucle fermée. Aucun acteur français ou européen du secteur, comme Wandercraft ou Pollen, n'apparaît dans cette publication. Les suites attendues, non détaillées dans l'abstract, sont une réplication indépendante et une validation sur robot physique.

RechercheActu
1 source
DiffWBC : un contrôle du corps entier par diffusion en une étape pour un suivi de mouvement humanoïde général et pilotable
2arXiv cs.RO 

DiffWBC : un contrôle du corps entier par diffusion en une étape pour un suivi de mouvement humanoïde général et pilotable

DiffWBC, un contrôleur de suivi de mouvement pour humanoïdes, déplace le contrôle du corps entier vers un paradigme génératif grâce à un modèle de diffusion en une seule étape. Les trackers généraux actuels reposent sur des politiques déterministes, qui ne peuvent pas s'adapter en ligne sans édition fragile des références ou réentraînement coûteux. Ici, le modèle apprend une distribution sur les trajectoires futures et ne demande qu'une passe avant par pas de contrôle à 50 Hz. Il peut être distillé depuis un enseignant entraîné par apprentissage par renforcement (RL), ou entraîné de zéro par RL basé sur modèle. Sur des benchmarks hors entraînement, il obtient l'erreur de suivi locale la plus faible parmi six trackers généraux comparés (20,1 mm sur BONES) et a été déployé sur un Unitree G1 physique. Les auteurs revendiquent aussi un pilotage au moment du test (test-time steering) et une détection d'échecs sans simulation. Pour les intégrateurs et les équipes de recherche, l'intérêt tient à l'unification de trois fonctions dans un seul contrôleur gelé. Le pilotage s'appuie sur des gradients de coût différentiables et des masques par groupes de membres, qui modulent le contrôleur en ligne sans le réentraîner. Face à l'édition cinématique de la référence, la différence est nette : 0,84 de réussite propre pour franchir un obstacle à 1,25 m de plafond, contre 0,10. La même approche se généralise sans apprentissage supplémentaire aux haies, à l'atteinte spatiale, aux pannes d'actionneurs et à l'équilibrage d'un plateau. Côté fiabilité, la dispersion des plans selon le bruit de génération signale les échecs physiques avec 91 % de précision sur les 2 % de clips les plus suspects, sans lancer de simulation physique. Un réglage fin ciblé sur les clips signalés corrige 50 % des cas d'échec. Il faut toutefois nuancer : il s'agit de résultats de laboratoire, sur un seul robot réel, et les tâches de pilotage restent des scénarios choisis par les auteurs. L'article ne fournit pas de données de déploiement en conditions industrielles. Ce travail s'inscrit dans la course aux contrôleurs corps entier généralistes pour humanoïdes, où dominent les politiques de suivi déterministes entraînées en simulation puis transférées au réel. Leur rigidité oblige à retoucher les mouvements de référence ou à relancer des entraînements dès que la tâche change. DiffWBC reprend l'idée des politiques de diffusion, déjà répandues en manipulation, et la ramène à une seule étape pour tenir les contraintes de temps réel. La prochaine étape logique serait une validation sur d'autres plateformes que le G1 et sur des tâches de longue durée. Des vidéos et des démonstrations interactives sont publiées par les auteurs sur leur site dédié, diffwbc.github.io.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Une politique, plusieurs styles : où agréger les préférences pour un contrôle humanoïde pilotable ?
3arXiv cs.RO 

Une politique, plusieurs styles : où agréger les préférences pour un contrôle humanoïde pilotable ?

Un préprint publié sur arXiv (2610.28925, première version) compare plusieurs façons d'obtenir un contrôle « pilotable » d'humanoïdes. L'idée est qu'une politique unique ajuste son style de comportement à l'exécution selon les préférences de l'utilisateur. L'apprentissage par renforcement conditionné par les préférences offre cette interface. Les auteurs soulignent toutefois que le conditionnement seul ne garantit rien: le changement demandé peut rester faible, déborder sur des comportements sans rapport ou dégrader la tâche. Ils proposent une évaluation qui associe une métrique, la Preference Reward Responsiveness (PRR), à des mesures de couverture et d'utilité. Ils comparent quatre niveaux d'agrégation des objectifs: récompense, avantage, fonction de perte, et PCGrad (une méthode qui projette les gradients conflictuels). Les tests portent sur deux cadres de contrôle d'humanoïde, que le résumé ne nomme pas. Aucun niveau ne s'impose partout. Agréger tôt donne une plus large palette de réponses comportementales, mais davantage de modifications involontaires sur les autres objectifs. Agréger tard améliore la précision du contrôle, au prix d'une réactivité moindre. C'est un travail de méthode, pas une démonstration matérielle. Le résumé ne donne ni robot physique, ni payload, ni résultat de sim-to-real, ni chiffre de déploiement. Il n'indique pas non plus l'ampleur des écarts mesurés. Son intérêt est de fournir une grille de lecture à ceux qui promettent « un robot, plusieurs styles », par exemple prudent ou rapide, sobre ou agressif. Le choix de l'étage d'agrégation devient un arbitrage de conception entre étendue des comportements et fuite vers les autres objectifs, sans recette universelle. Cela tempère l'idée qu'il suffit de conditionner une politique sur un vecteur de préférences pour obtenir un réglage fiable en production. Le sujet relève de l'apprentissage par renforcement multi-objectif, où PCGrad vient de l'apprentissage multitâche. Du côté des politiques généralistes pour humanoïdes (Helix de Figure, GR00T N2 de NVIDIA, Pi-0 de Physical Intelligence), l'accent est surtout mis sur la commande par instructions en langage naturel. Le réglage continu du style par préférences est un axe complémentaire, moins documenté publiquement. Aucun acteur français ou européen n'est cité. Il s'agit d'une v1 sans revue par les pairs. Les suites utiles seraient la publication du code et des benchmarks, des écarts chiffrés entre méthodes et une validation sur matériel réel.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Dédiffusion des WAM : prédiction directe suffisante pour l'action en contrôle de robots
4arXiv cs.RO 

Dédiffusion des WAM : prédiction directe suffisante pour l'action en contrôle de robots

DirectWAM, présenté dans un preprint arXiv (2610.28122v1), vise à supprimer le coût d'inférence itératif des « world-action models » en cascade (WAM). Ces modèles prédisent d'abord un futur visuel, puis s'en servent pour conditionner les actions du robot. Leurs experts vidéo et action, préentraînés par diffusion, imposent plusieurs étapes de débruitage. Les auteurs convertissent ces experts en prédicteurs à une seule étape, sans échantillonnage stochastique, par une distillation dite « suffisante pour l'action ». Une fois le modèle d'action à un pas appris, le prédicteur de futur est entraîné en décodant des actions à partir de ses propres futurs prédits. L'erreur d'action par rapport aux démonstrations est rétropropagée à travers l'expert, avec en option une perte de reconstruction des latents du futur. Résultats annoncés : 97,1 % de succès moyen sur les quatre suites LIBERO et 85,4 % sur RoboTwin 2.0, devant Flash-WAM à budget égal (une évaluation par flux). L'avantage se retrouve sur trois tâches réelles conçues par les auteurs, avec une latence d'inférence réduite d'un facteur 28 par rapport au professeur itératif complet. L'intérêt tient à la latence, goulot d'étranglement connu des politiques VLA et WAM sur robot réel. Un facteur 28 rapproche ce type d'architecture des fréquences de contrôle exigées en manipulation. L'étude apporte aussi un résultat de fond : dans le WAM évalué, rééchantillonner le bruit vidéo change peu les actions, mais tronquer naïvement les deux flux à une étape dégrade nettement le succès. Une analyse de sensibilité locale montre que les erreurs de prédiction visuelle ont des conséquences très inégales sur la précision de l'action. Une supervision dans l'espace vidéo ne comble donc qu'en partie l'écart, et ce qu'il faut préserver dans le futur prédit, c'est l'information utile au contrôle, pas la fidélité visuelle. Il faut cependant rester prudent : LIBERO et RoboTwin sont des benchmarks en simulation, les trois tâches réelles sont choisies par les auteurs, et aucune donnée n'est fournie ici sur le matériel, le taux de succès réel ou la variance. Il s'agit de recherche, pas d'un produit déployé. DirectWAM s'inscrit dans le mouvement de compression des modèles génératifs pour la robotique. Les politiques à diffusion ont gagné en robustesse au prix d'un calcul lourd, et la distillation en un pas, déjà éprouvée en génération d'images, est désormais transposée au contrôle. Le point de comparaison direct est Flash-WAM, autre approche à budget réduit, mais le préprint ne dit pas comment la méthode se situe face aux VLA directs de type Pi-0 ou GR00T, qui n'utilisent pas de futur visuel explicite. Les suites probables sont des validations sur plateformes plus variées, des tâches plus longues et un examen de la généralisation hors distribution. Pour les intégrateurs, le signal à surveiller est la reproduction indépendante des gains de latence sur embarqué, avant tout pilote industriel.

RecherchePaper
1 source