Aller au contenu principal
HoloBoxing : une recette simple pour la boxe humanoïde, avec 7 minutes d'entraînement sur un seul GPU
RecherchearXiv cs.RO 

HoloBoxing : une recette simple pour la boxe humanoïde, avec 7 minutes d'entraînement sur un seul GPU

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

HoloBoxing, publié sur arXiv (2610.32909), propose une méthode pour apprendre la boxe à un robot humanoïde en environ sept minutes d'entraînement supplémentaire sur un seul GPU, en partant d'un contrôleur corps entier déjà pré-entraîné. L'approche sépare les compétences motrices réutilisables des décisions propres à la tâche. Un planificateur compact demande des cibles futures pour des points du corps, tandis que le contrôleur, laissé gelé, assure l'exécution au niveau des articulations. Un décodeur appris traduit des actions de dimension 32 en fenêtres de cibles structurées. Le planificateur est d'abord initialisé par imitation d'états mesurés, puis affiné par apprentissage par renforcement, qui ajuste les comportements d'interaction en réutilisant le décodeur et le contrôleur. Les sept minutes incluent l'ajustement de la représentation réutilisée et un entraînement de la tâche sur un GPU. Elles excluent le pré-entraînement du contrôleur, la préparation des données, l'évaluation et la recherche d'hyperparamètres. Les résultats reposent sur des expériences de boxe en simulation, complétées par des contrôles de composants qui isolent le rôle de l'initialisation par imitation et celui de la représentation des cibles.

L'intérêt tient à la manière dont l'effort est réparti. Le coût de l'apprentissage du contrôle corps entier est payé une fois, puis amorti sur les tâches suivantes, et l'optimisation par récompense ne porte plus que sur une politique supérieure légère. Si cette architecture tient hors du papier, elle réduit le coût marginal de chaque nouvelle compétence d'un humanoïde, ce qui compte pour les intégrateurs qui devraient sinon relancer de longs entraînements pour chaque tâche. Il faut toutefois lire le chiffre de sept minutes avec prudence. Il est mesuré à partir d'un contrôleur déjà disponible, et il omet les étapes les plus coûteuses. Surtout, les résultats sont uniquement en simulation. Rien n'indique de transfert vers un robot réel, ni de comparaison chiffrée avec des méthodes concurrentes dans le résumé, ce qui laisse entière la question du fossé simulation-réel.

Ce travail s'inscrit dans la tendance des architectures hiérarchiques, où un contrôleur de bas niveau généraliste est piloté par une couche de décision plus légère. Cette logique se retrouve dans les modèles fondation pour humanoïdes et dans les contrôleurs de suivi de mouvement. La boxe, avec ses contacts et ses interactions rapides, sert ici de banc d'essai exigeant pour ce découpage. Aucun partenaire industriel, calendrier de déploiement ou matériel cible n'est annoncé. La suite logique serait une validation sur robot physique et une démonstration de la réutilisation du même contrôleur sur d'autres tâches.

Impact France/UE

Pas d\'impact direct sur la France/UE

Dans nos dossiers

À lire aussi

Entraînement en déploiement : post-entraînement en ligne avec humain dans la boucle pour la manipulation robotique
1arXiv cs.RO 

Entraînement en déploiement : post-entraînement en ligne avec humain dans la boucle pour la manipulation robotique

TIDE (Training In DEployment) est un système de post-entraînement en ligne avec humain dans la boucle, décrit dans un preprint arXiv (2610.29264v1) pour adapter de grands modèles de fondation robotiques à des tâches de manipulation cibles. Son principe : mettre à jour la politique pendant le déploiement, à partir des interventions d'un opérateur humain et des trajectoires générées par la politique elle-même, via un cadre d'apprentissage supervisé « conditionné par la provenance » (on indique au modèle si une action vient de l'humain ou de la politique). Il n'utilise ni critique appris, ni modèle de récompense, ni évaluateur d'actions. Les auteurs l'ont testé sur quatre tâches réelles de manipulation bimanuelle. TIDE améliore la progression normalisée par jalons et le taux de réussite complète par rapport à la politique de départ et à une politique entraînée avec un volume équivalent de démonstrations hors ligne supplémentaires. Il fait jeu égal avec la collecte à politique fixe, tout en rendant des checkpoints à jour disponibles en cours de déploiement. Chaque session, du début des essais jusqu'au dernier checkpoint, dure moins d'une heure, l'apprentissage et la gestion des checkpoints tournant en asynchrone. L'enjeu est un goulot d'étranglement bien connu : les démonstrations téléopérées hors ligne couvrent mal les états qui comptent au déploiement, à savoir les contacts riches, les récupérations après erreur et les gestes de précision. Le post-entraînement hors ligne s'adapte lentement, faute d'absorber immédiatement l'expérience du terrain. L'apprentissage par renforcement en ligne, lui, suppose en général des fonctions de valeur ou des architectures acteur-critique, qui alourdissent et fragilisent l'entraînement. Si l'approche tient à plus grande échelle, un intégrateur pourrait spécialiser un modèle généraliste sur un poste précis en moins d'une heure, avec un simple opérateur qui corrige, sans équipe de RL. Il faut toutefois relativiser : le résumé ne chiffre ni les gains ni les modèles de base, la performance n'est qu'équivalente à la collecte à politique fixe, et quatre tâches en laboratoire ne disent rien de la robustesse sur des mois de production. Ce travail s'inscrit dans la montée des modèles vision-langage-action (VLA) préentraînés de type Pi-0 ou GR00T, dont l'adaptation à la tâche reste le point faible. Il prolonge deux lignées : les méthodes avec humain dans la boucle, qui enrichissent les démonstrations par des corrections, et le RL en ligne sur robot réel. TIDE tente de garder la réactivité de la seconde sans sa complexité. Les prochaines étapes à surveiller sont la publication des chiffres détaillés, d'éventuelles réplications indépendantes et un test sur des tâches industrielles plus longues avec plusieurs opérateurs.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Being-M0.7 : un modèle du monde et de l'action latent pour robots humanoïdes
2arXiv cs.RO 

Being-M0.7 : un modèle du monde et de l'action latent pour robots humanoïdes

Being-M0.7 est un modèle monde-action latent pour robots humanoïdes, présenté dans un preprint arXiv (2610.11283v1). Il vise la loco-manipulation, c'est-à-dire la coordination de la marche et de la manipulation en anticipant l'évolution de la scène et les mouvements du corps entier. Ses auteurs s'appuient sur un corpus constitué à partir de plus de 10 000 heures de données brutes centrées sur l'humain. Ce corpus mêle trois types de flux: vidéo seule, mouvement seul, et paires vidéo-mouvement. L'entraînement se fait en trois temps. Un pré-entraînement apprend la dynamique visuelle et la structure cinématique du corps entier. Un « mid-training » robot adapte ensuite ce prior aux points de vue et à la dynamique corporelle des robots. Enfin, un post-entraînement d'action greffe un « action expert » qui combine les représentations prédictives du prior figé avec les images courantes et la proprioception, par attention croisée à portes (gated cross-attention), pour produire des commandes corps entier exécutables. Les auteurs annoncent le meilleur taux de succès agrégé parmi les baselines comparées sur le benchmark SIMPLE. Sur des tâches réelles de loco-manipulation avec un Unitree G1, le modèle égale la meilleure baseline sans la dépasser. Le résumé ne donne ni chiffres de succès, ni liste des tâches, ni nombre d'essais. L'intérêt tient à l'attaque d'un goulot d'étranglement connu: les démonstrations robot sont rares et coûteuses, alors que la vidéo et la capture de mouvement humaines abondent. Leur exploitation se heurte à deux obstacles. Beaucoup de jeux de données n'ont qu'une modalité, et le mouvement humain ne se traduit pas directement en actions robot. Prédire conjointement les états visuels latents futurs et le mouvement pousse les représentations visuelles à encoder la cinématique à venir. L'étape intermédiaire robot et l'action expert servent de pont vers l'exécution. Le résultat réel reste nuancé. L'avantage est net en simulation, mais il disparaît sur le matériel: la parité avec la meilleure baseline sur G1 suggère que l'écart simulation-réel n'est pas résolu et que le gain du pré-entraînement sur données humaines reste à démontrer au-delà de benchmarks maîtrisés. Les intégrateurs doivent y voir une piste de recherche prometteuse pour réduire la dépendance à la téléopération, et non une capacité prête pour le déploiement. Il s'agit d'une publication académique, sans produit, sans pilote industriel ni calendrier de commercialisation. Ce travail s'inscrit dans la vague des modèles monde-action et des VLA (vision-langage-action) appliqués aux humanoïdes, où plusieurs acteurs cherchent à exploiter la vidéo humaine à grande échelle. On y trouve des modèles généralistes de type Pi-0, GR00T ou Helix, et des approches qui prédisent le futur visuel pour guider l'action. Le Unitree G1, humanoïde abordable très répandu dans les laboratoires, sert de plateforme de validation commune, ce qui facilite la comparaison entre équipes. La version «0.7» laisse penser à une série de modèles Being, dont les itérations précédentes ne sont pas détaillées ici. Les suites à surveiller sont la publication du code, des poids et des protocoles d'évaluation, ainsi que des tests sur des plateformes plus variées et des tâches plus longues. Une confirmation indépendante sur matériel réel dira si l'avantage observé en simulation se maintient.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Robot humanoïde marche sur sable, gravier et pentes grâce à un cadre d'entraînement plus rapide
3Interesting Engineering 

Robot humanoïde marche sur sable, gravier et pentes grâce à un cadre d'entraînement plus rapide

Des chercheurs du Georgia Institute of Technology ont mis au point un nouveau cadre d'apprentissage automatique baptisé « Learn to Teach » (L2T), qui permet à un robot humanoïde bipède de marcher sur du sable, du gravier, de l'herbe détrempée, des pentes, des escaliers et des surfaces glissantes, tout en réduisant nettement le temps et la puissance de calcul nécessaires à l'entraînement du contrôleur. Contrairement à l'apprentissage classique par renforcement de type enseignant-élève, où un modèle « professeur » est d'abord entraîné en simulation avant de transmettre ses connaissances à un modèle « élève » qui pilote le robot réel, la méthode de Georgia Tech entraîne les deux agents simultanément. Selon Feiyang Wu, chercheur principal du projet, l'approche séquentielle classique pose deux problèmes : elle prend trop de temps et gaspille une partie des informations collectées par le professeur en cours d'apprentissage. Le contrôleur a été testé sur un robot humanoïde grandeur nature dans le laboratoire du professeur associé Ye Zhao, où l'équipe a aussi poussé et tiré la machine pendant les essais pour observer sa capacité à ajuster sa démarche et rester stable. Les travaux ont été présentés à l'ICRA (IEEE International Conference on Robotics and Automation). Cette avancée s'attaque à un goulot d'étranglement bien identifié dans la robotique humanoïde : l'entraînement de contrôleurs en simulation nécessite souvent des heures de calcul sur du matériel GPU coûteux, un frein direct à l'itération rapide et au déploiement à grande échelle. En faisant apprendre le professeur et l'élève en parallèle, et en permettant au professeur de tirer des enseignements de l'expérience de l'élève, l'équipe réduit ce que les roboticiens appellent le « fossé d'imitation » entre les conditions idéalisées de la simulation et la réalité du terrain, un problème central dans le débat sur le fameux « sim-to-real gap ». Fait notable, le même contrôleur généraliste a surpassé le logiciel fourni par le fabricant du robot sur plusieurs types de terrains, sans nécessiter de contrôleurs distincts par environnement, ce qui illustre la valeur d'une recherche en apprentissage automatique directement confrontée au monde réel plutôt qu'à des démonstrations scénarisées. Wu reconnaît que l'équipe ne s'attendait pas elle-même à une telle polyvalence pour un robot humanoïde aussi volumineux, la locomotion agile sur terrain accidenté n'ayant jusqu'ici jamais été véritablement démontrée pour ce type de machine. Au-delà de la marche, les chercheurs estiment que le cadre « Learn to Teach » pourrait s'appliquer à d'autres architectures de robots et à des tâches variées exigeant un déplacement fiable en environnement imprévisible, ouvrant une piste de recherche transférable bien au-delà du seul cas d'usage testé à Atlanta.

RecherchePaper
1 source
Retargeting de mouvement avec préférences spatio-temporelles pour la loco-manipulation humanoïde
4arXiv cs.RO 

Retargeting de mouvement avec préférences spatio-temporelles pour la loco-manipulation humanoïde

Une équipe de chercheurs propose Spatiotemporal Retargeting (STR), une méthode de retargeting de mouvement humain vers robot humanoïde, publiée sur arXiv (2610.30540). Le retargeting convertit des démonstrations humaines en trajectoires de référence pour le contrôle du corps entier et la loco-manipulation. STR part d'un constat: les budgets d'itérations par image sont uniformes, alors que seuls certains instants exigent une précision élevée sur les relations corps-objet. Un modèle vision-langage (VLM) sélectionne les signaux de mouvement et les parties du corps pertinents. Les images clés sont détectées à partir des variations de ces signaux. Le solveur reçoit alors des itérations supplémentaires sur ces images clés, et les parties sélectionnées reçoivent des poids d'interaction plus élevés. Un module nommé Mechanics-Aware Contact Anchoring (MCA) affine les positions de contact sur la surface de l'objet grâce à un modèle approximatif de torseur d'efforts (wrench), en conservant les directions de surface retenues. Les auteurs y ajoutent Spatiotemporal Reinforcement Learning (STRL), qui combine un échantillonnage adaptatif des étapes clés et une récompense de contact fondée sur la proximité à la cible et sur les forces de contact. Les tests en simulation utilisent un Unitree G1, et les essais réels un Unitree R1. L'intérêt tient à l'efficacité de calcul. Les pipelines de retargeting représentent souvent un coût caché dans la production de données pour humanoïdes, et concentrer l'effort là où la manipulation se joue (saisie, dépose, contact prolongé) est une piste pragmatique. Les auteurs annoncent une meilleure couverture et continuité des contacts à moindre coût, ainsi qu'un meilleur taux de réussite des tâches en aval. Cela va dans le sens d'un contrôle qui exploite des références de meilleure qualité plutôt que de simples trajectoires cinématiquement plausibles. Il faut toutefois rester prudent. Le résumé ne donne ni gain chiffré, ni nombre de tâches, ni durée des essais réels. Il ne précise pas non plus la dépendance au VLM, dont les choix de signaux et de parties du corps pourraient varier d'une requête à l'autre. Les essais sur R1 restent un résultat de laboratoire, sans lien avec un déploiement industriel. Ce travail s'inscrit dans la lignée des méthodes de retargeting par optimisation et des politiques de suivi de mouvement par apprentissage par renforcement, devenues courantes sur les plateformes Unitree à bas coût, très répandues dans la recherche. Il rejoint la tendance qui consiste à utiliser des modèles de fondation pour guider les étapes de la chaîne de données, et pas seulement l'exécution. Les acteurs industriels comme Figure, Tesla ou Agility mènent des efforts comparables, mais en grande partie fermés. Il n'est donc pas possible de comparer directement leurs résultats à cette approche. La suite logique serait une validation sur des objets plus variés, avec des comparaisons chiffrées face aux méthodes de retargeting existantes, puis une démonstration sur des tâches longues, avant tout transfert vers des usages en entrepôt ou en usine.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source