Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
Tutorat bidirectionnel pour l'apprentissage moteur développemental en robotique : dynamiques co-développées et stabilité
RecherchearXiv cs.RO 

Tutorat bidirectionnel pour l'apprentissage moteur développemental en robotique : dynamiques co-développées et stabilité

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Une équipe de chercheurs a publié sur arXiv (référence 2606.19728, juin 2026) une étude portant sur l'apprentissage moteur développemental des robots, inspirée de la manière dont les nourrissons acquièrent leurs compétences motrices via l'interaction avec leurs aidants. L'expérience centrale implique un robot humanoïde physique chargé d'une tâche de manipulation d'objets, soumis à deux protocoles distincts : d'abord une interaction humain-robot en temps réel, puis un tuteur IA doté d'un mécanisme d'intervention adaptatif conçu pour reproduire la même dynamique bidirectionnelle dans des conditions plus contrôlées. Le système d'apprentissage repose sur un réseau de neurones fondé sur le principe de l'énergie libre (free-energy principle, FEP), étendu par un mécanisme de rejeu génératif (générative replay) permettant un apprentissage stable séquence par séquence à partir d'épisodes tutorés uniques.

L'hypothèse centrale, vérifiée dans les deux configurations, est que le tutorat bidirectionnel produit des comportements plus cohérents et une généralisation par étapes (stage-wise generalization), le robot requérant progressivement moins de guidage externe. Cela tranche avec le paradigme dominant de l'apprentissage par démonstration (learning from demonstration, LfD), où le robot reçoit passivement des flux de téléopération sans que ses expériences passées contraignent la dynamique d'interaction. Pour les intégrateurs et ingénieurs roboticiens, l'implication est concrète : les stratégies d'entraînement actuelles, largement fondées sur des démonstrations unidirectionnelles comme celles utilisées par Figure, Tesla Optimus ou Physical Intelligence, pourraient négliger un levier important de cohérence comportementale et de robustesse à la distribution.

Ce travail s'inscrit dans la tradition de la robotique développementale, un champ qui emprunte aux sciences cognitives du développement pour concevoir des agents capables d'apprentissage progressif et socialement ancré. Il faut toutefois nuancer : il s'agit d'un preprint arXiv non encore évalué par les pairs, réalisé sur un robot unique dans des conditions expérimentales contrôlées, sans déploiement industriel ni partenariat commercial annoncé. La prochaine étape naturelle serait de tester la scalabilité du protocole sur plusieurs morphologies de robots et sur des tâches plus complexes, afin d'évaluer si la dynamique bidirectionnelle conserve ses avantages au-delà de la manipulation d'objets simples.

Dans nos dossiers

Tesla OptimusPhysical Intelligence — π0arXiv cs.RO

À lire aussi

Apprentissage orienté contrôle pour le suivi dynamique et l'analyse de stabilité d'actionneurs pneumatiques souples
1arXiv cs.RO 

Apprentissage orienté contrôle pour le suivi dynamique et l'analyse de stabilité d'actionneurs pneumatiques souples

Un preprint publié sur arXiv le 27 août 2026 (référence 2608.25171) présente un cadre de modélisation et de commande pour les actionneurs pneumatiques souples, appréciés pour leur compliance mais difficiles à contrôler en raison de leur dynamique non linéaire et distribuée. La méthode décompose leur comportement en un modèle statique non linéaire d'équilibre et un modèle dynamique résiduel linéaire, identifié via l'EDMDc (Extended Dynamic Mode Decomposition avec commande), permettant compensation en boucle ouverte, asservissement dans l'espace de la tâche et analyse de stabilité en boucle fermée. Les tests rapportent une erreur quadratique moyenne d'environ 1 mm à 10 mm/s et inférieure à 10 mm à 100 mm/s, un suivi stable de trajectoires dynamiques avec des pics d'accélération supérieurs à 25 m/s² couplé à de l'évitement d'obstacles en temps réel, ainsi qu'une prédiction validée expérimentalement des régimes stables, marginaux et instables. Ce travail s'attaque à un frein majeur de la robotique souple : l'absence de modèles de commande précis et exploitables en temps réel, qui confinait ces actionneurs à des tâches lentes. En montrant qu'un modèle hybride, mêlant physique simplifiée et apprentissage par données, atteint une précision millimétrique tout en supportant des dynamiques rapides et de l'évitement d'obstacles, l'étude suggère que ces actionneurs peuvent dépasser la simple préhension délicate pour des tâches exigeant réactivité, comme la manipulation collaborative ou certains gestes chirurgicaux assistés. Pour les intégrateurs, l'apport clé tient à la garantie de stabilité formelle : prédire à l'avance qu'un régime sera stable, marginal ou instable évite des essais empiriques coûteux avant tout déploiement industriel ou médical. La commande des actionneurs pneumatiques souples s'est longtemps heurtée à deux approches concurrentes : une modélisation physique détaillée, coûteuse en calcul, et des méthodes purement data-driven, peu interprétables et sans garanties de stabilité. L'EDMDc s'inscrit dans la lignée des méthodes fondées sur l'opérateur de Koopman, de plus en plus employées en robotique pour linéariser des dynamiques complexes tout en conservant des outils de commande classiques. Le travail reste, à ce stade, un preprint non évalué par des pairs, issu de tests en laboratoire, sans partenariat industriel annoncé ni précision sur la plateforme matérielle ou le nombre de degrés de liberté testé. Les suites attendues consistent généralement à étendre le cadre à des structures souples multi-segments, avant d'envisager une intégration dans des bras collaboratifs ou des dispositifs médicaux.

RecherchePaper
1 source
Apprentissage de représentations de sûreté par atteignabilité pour la navigation robotique en temps réel en environnements inconnus et dynamiques
2arXiv cs.RO 

Apprentissage de représentations de sûreté par atteignabilité pour la navigation robotique en temps réel en environnements inconnus et dynamiques

Des chercheurs ont publié sur arXiv (version 2 de l'article 2610.16522) une thèse de doctorat qui apprend hors ligne des représentations de sécurité fondées sur l'analyse d'accessibilité de Hamilton-Jacobi (HJ), afin de les exploiter en temps réel pour la navigation de robots en environnement inconnu et dynamique. La fonction de valeur HJ sépare les états qui admettent une continuation sûre de ceux où la collision est inévitable, en tenant compte de la vitesse, de l'orientation et du mouvement des obstacles. Son calcul en ligne pour chaque nouvel environnement reste trop coûteux, d'où l'entraînement de réseaux de neurones implicites sur des solutions précalculées. Cinq méthodes sont proposées. Les deux premières emploient la fonction apprise comme contrainte terminale dans une commande prédictive (MPC), pour des environnements locaux statiques puis pour des obstacles au mouvement prédit. Les deux suivantes l'utilisent comme candidate de fonction barrière dans des filtres de sécurité à fonctions barrières de contrôle (CBF), pour des environnements statiques, puis pour un nombre variable d'obstacles mobiles grâce à des barrières par paires en coordonnées relatives. La cinquième méthode remplace le solveur hors ligne sur grille et atteint des systèmes jusqu'à 13 états. L'astuce centrale tient à la structure du problème : la fonction de valeur ne dépasse jamais la contrainte géométrique, elle équivaut donc à une contrainte calculée directement, comme une distance signée, moins une correction de dynamique positive. N'apprendre que cette correction garantit que les obstacles représentés restent hors de l'ensemble sûr prédit, malgré les erreurs d'approximation. Pour la cinquième méthode, avec des dynamiques affines en la commande et des entrées polytopiques, l'hamiltonien HJ est maximisé en un sommet. Une recherche arborescente parallélisable sur les entrées aux sommets génère alors les étiquettes d'entraînement, associées à une perte issue de l'inégalité variationnelle HJ. L'enjeu pour les intégrateurs et ingénieurs est concret : la vérification géométrique de collision ne suffit pas pour des robots rapides ou face à des obstacles mobiles, et les méthodes d'accessibilité classiques butaient sur la malédiction de la dimension, limitant les quatre premières approches à des modèles de faible dimension. Passer à 13 états ouvre la voie à des drones et à des robots plus complexes. Les auteurs rapportent, en simulation et sur matériel terrestre et aérien, une meilleure évitement que des références géométriques ou conçues à la main, surtout à horizon court et face à des obstacles mobiles. Il s'agit toutefois de résultats académiques, sans chiffres publics dans le résumé, ni déploiement industriel ni comparaison chiffrée détaillée. Ce travail s'inscrit dans la convergence entre analyse d'accessibilité HJ, longtemps réservée aux petits systèmes, et apprentissage de certificats de sécurité, aux côtés des CBF neuronales et des approches de filtres de sécurité pour la robotique mobile et aérienne. Les prochaines étapes naturelles sont l'extension à des dynamiques plus riches, la validation sur des plateformes réelles plus variées et l'intégration à des piles de navigation embarquées. Aucune échéance de transfert industriel n'est annoncée.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Contrôle ergodique et diffusion contrôlée pour l'apprentissage en robotique : revue et tutoriel
3arXiv cs.RO 

Contrôle ergodique et diffusion contrôlée pour l'apprentissage en robotique : revue et tutoriel

Un article de synthèse publié sur arXiv sous la référence 2609.13295v1 dresse un état de l'art du contrôle par diffusion appliqué à l'apprentissage robotique. Les auteurs y examinent la convergence entre deux champs nés à peu près à la même période : l'apprentissage par diffusion, qui exploite les processus stochastiques pour modéliser la perception, le contrôle et la prise de décision en robotique, et le contrôle ergodique par diffusion contrôlée, qui façonne l'évolution temporelle de la distribution d'états d'une trajectoire robotique. Le document combine intuitions de base, fondements théoriques et tutoriels numériques pour résoudre des problèmes de diffusion contrôlée et de contrôle ergodique, avant de passer en revue les applications existantes de ce cadre en robotique. Pour l'industrie robotique, l'intérêt de ce travail tient moins à une avancée produit qu'à la clarification conceptuelle qu'il propose, dans un contexte où les modèles vision-langage-action occupent le devant de la scène commerciale. Les auteurs soutiennent que l'ergodicité induite par la diffusion contrôlée apporte des garanties formelles distinctes de la simple application de l'apprentissage par diffusion aux problèmes robotiques : elle impose des propriétés statistiques nécessaires à l'optimalité des politiques apprises, permet une recherche non myope dans des environnements d'information incertains utile pour la collecte de données en exploration, et autorise une spécification des comportements robotiques fondée sur les caractéristiques spatiales des trajectoires plutôt que sur leur seule dimension temporelle. Pour les équipes de recherche qui conçoivent des pipelines d'apprentissage pour la manipulation ou la navigation, ce cadre pourrait fournir des outils pour mieux garantir la couverture et la robustesse statistique des politiques apprises, un enjeu central alors que le secteur cherche à établir si les approches génératives passent réellement à l'échelle au-delà des démonstrations soignées. Le document s'inscrit dans un mouvement de convergence théorique entre contrôle ergodique et apprentissage par diffusion, deux cadres dont les théories et algorithmes se sont progressivement rapprochés selon les auteurs. Contrairement aux annonces qui dominent l'actualité de la robotique humanoïde, il s'agit ici d'un travail académique, au format survey et tutoriel, destiné à outiller la communauté de recherche plutôt qu'à présenter un système commercial ou un déploiement réel. Aucun robot, aucune entreprise ni plateforme spécifique n'y est mis en avant : la contribution porte sur les fondements mathématiques et les méthodes numériques. Les auteurs concluent en identifiant les défis restants et les pistes futures pour exploiter la diffusion contrôlée dans l'apprentissage robotique, sans toutefois annoncer de calendrier ni de prototype associé.

RecherchePaper
1 source
Curriculums de dynamique des actionneurs pour tâches à viabilité étroite dans l'apprentissage des robots à pattes
4arXiv cs.RO 

Curriculums de dynamique des actionneurs pour tâches à viabilité étroite dans l'apprentissage des robots à pattes

Boston Dynamics Spot, le robot quadrupède commercial, a servi de plateforme matérielle à une nouvelle méthode d'apprentissage par renforcement baptisée "Actuator Dynamics Curriculum", décrite dans un article publié sur arXiv (référence 2609.09492v1). La méthode consiste à initialiser la rigidité des articulations à une valeur artificiellement élevée, puis à la réduire progressivement vers la valeur réelle mesurée sur le système à mesure que les épisodes d'entraînement durent plus longtemps. Testée d'abord sur un pendule inversé sur chariot comme cas d'école, elle a ensuite été appliquée à une tâche bien plus exigeante : faire passer Spot d'une position de marche à un appui vertical sur ses seules pattes avant, pattes arrière dressées façon poirier. Avec la rigidité fixée à sa valeur réelle identifiée, l'entraînement standard plafonne sur une politique qui ne termine jamais la transition. Avec le curriculum proposé, la politique entraînée réussit le mouvement en simulation sur 10 graines aléatoires différentes et se transfère avec succès sur le robot physique. Le résultat cible un problème précis et non résolu du RL en robotique : certaines tâches échouent à converger non pas faute de signal de récompense, mais parce que presque toutes les trajectoires explorées se terminent par un échec avant de produire un gradient exploitable. En montrant qu'augmenter la fréquence naturelle des articulations en boucle fermée élargit le "noyau de viabilité" du problème de décision markovien sous-jacent, c'est-à-dire la part des états de départ depuis lesquels la tâche reste faisable, les auteurs ouvrent un axe de curriculum orthogonal aux approches classiques comme le domain randomization ou le reward shaping. Pour les équipes qui entraînent quadrupèdes et humanoïdes à des mouvements dynamiques extrêmes, cela offre un levier supplémentaire sur des tâches jusqu'ici jugées hors de portée du RL standard, sans toucher au matériel ni à la fonction de récompense. Ce travail s'inscrit dans la recherche académique en sim-to-real pour la locomotion, où Spot sert de banc d'essai matériel largement utilisé par les laboratoires, sans qu'il s'agisse d'une annonce produit de Boston Dynamics. La validation reste circonscrite à une seule tâche de transfert matériel et à un nombre limité de graines, sans données publiées sur le taux de réussite en conditions réelles variées. Les auteurs présentent leur méthode comme généralisable à toute tâche où l'exploration est bloquée par des conditions de terminaison précoces plutôt que par un signal de récompense insuffisant, ouvrant la voie à d'autres transitions dynamiques difficiles pour robots à pattes.

RecherchePaper
1 source