Actualités robotique — page 53

7 520 articles au fil, du plus récent au plus ancien.

41

2601arXiv cs.RO 

Cohérence sélective entre points de vue pour les modèles d'action du monde, sans information caméra au test

Des chercheurs publient un article arXiv (2608.21402v1) consacré aux modèles monde-action (World Action Models, WAM), ces architectures qui débruitent conjointement les futures images vidéo et les actions du robot à partir d'un même signal prédictif. Le papier pose une question précise : lors de l'entraînement avec des paires d'images de même état capturées sous des points de vue caméra différents, sur quelles sorties faut-il imposer une contrainte de cohérence entre vues ? Les auteurs montrent que la cible de débruitage d'un WAM mélange des coordonnées covariantes au point de vue (la scène future prédite) et des coordonnées invariantes (le segment d'actions, la proprioception future, la valeur). Appliquer une cohérence sur le bloc covariant s'avère mathématiquement néfaste : elle réduit le contenu spécifique à la vue à une fraction 1/(1+4λ) de sa valeur réelle, un effet vérifié expérimentalement. Leur méthode, la cohérence croisée sélective (SCVC), ne contraint que le bloc invariant, sans nécessiter d'étiquettes caméra, de paramètres extrinsèques, de profondeur ou de synthèse de vue, ni à l'entraînement ni au déploiement. Sur le protocole d'évaluation LIBERO-Plus, avec des points de vue orbitaux tenus à l'écart de l'enveloppe d'entraînement, SCVC améliore le taux de succès en boucle fermée de 12,2 points par rapport à un contrôle apparié (intervalle de confiance à 95 % [7,4 ; 17,0]), et de 15,5 points sur une seconde graine aléatoire indépendante, un gain répliqué sur deux autres axes caméra. Cette avancée cible un point faible connu des modèles vision-langage-action déployés en usine ou en environnement réel : la sensibilité au positionnement exact de la caméra, qui oblige souvent à recalibrer ou réentraîner lorsqu'un intégrateur change de configuration matérielle. En démontrant qu'un simple choix de coordonnées de perte peut faire la différence entre un gain réel d'extrapolation et une simple mémorisation des vues d'entraînement, l'étude questionne aussi la fiabilité de chiffres de robustesse déjà publiés par d'autres équipes, en révélant qu'ils sont souvent biaisés par la stabilité de pose des caméras poignet plutôt que par une réelle généralisation du modèle. Le travail s'inscrit dans la lignée des modèles de fondation robotiques combinant prédiction vidéo et politique d'action, une famille en expansion rapide où la robustesse au changement de point de vue reste un angle mort récurrent entre démonstrations en laboratoire et déploiement terrain. En isolant l'effet de la cohérence croisée de celui de la simple exposition à des paires de vues via un contrôle apparié, et en séparant un plafond intra-distribution d'une véritable extrapolation vers des vues inédites, les auteurs proposent un protocole d'évaluation, le carve-and-hold-out, potentiellement réutilisable par d'autres laboratoires pour auditer leurs propres modèles avant tout déploiement industriel.

Recherche❧Opinion

1 source

40

2602arXiv cs.RO 

GuardianBench : un benchmark contrastif à instructions identiques pour évaluer le risque contextuel latent en IA incarnée

Des chercheurs détaillent dans un article arXiv (2608.21928v1) GuardianBench, un benchmark qui évalue les modèles vision-langage (VLM) sur les risques de sécurité « latents » : ceux qui n'apparaissent que lorsqu'une instruction anodine croise une scène précise. Fondé sur des normes de sécurité internationales, il réunit 3 024 exemples instruction-scène organisés en paires contrastives sûr/dangereux sur un même décor, couvrant plusieurs catégories de dangers. En testant des VLM de pointe, les auteurs mesurent une précision moyenne par paire de seulement 24,1%. Un audit des justifications produites par les modèles montre que l'échec vient d'une incapacité à relier les indices propres à l'instruction aux éléments de la scène qui distinguent une composition sûre d'une composition dangereuse. Ce résultat pèse pour les intégrateurs et décideurs qui envisagent de confier l'évaluation de sécurité de robots humanoïdes ou de bras manipulateurs à un VLM générique : un score de 24,1% signifie que les modèles approuvent quasi systématiquement les deux instructions d'une même paire, sans réellement raisonner sur ce qui rend l'action dangereuse. Malgré de bonnes performances sur des tâches de perception classiques, ces modèles échouent donc sur un angle mort critique du déploiement réel, où une même commande peut être sûre ou dangereuse selon ce que contient la scène. Le résultat nuance l'idée reçue que les architectures VLA (vision-language-action) actuelles auraient déjà résolu le raisonnement de sécurité contextuelle nécessaire à une autonomie fiable. GuardianBench complète les benchmarks antérieurs de sécurité en IA incarnée, qui faisaient varier le décor ou évaluaient la dynamique d'exécution du robot, en isolant pour la première fois l'axe scène fixe et instruction variable. Les auteurs testent aussi une piste de correction, Verdict Log-Odds Supervision (VLOS), un objectif d'entraînement léger au niveau du verdict qui améliore sensiblement les résultats sur des modèles ouverts (open-weight). Cette démonstration ouvre la voie à un post-entraînement ciblé, moins coûteux qu'une refonte complète des architectures VLM, avant tout déploiement de systèmes robotiques capables de refuser une instruction dangereuse selon le contexte plutôt que de l'exécuter aveuglément.

Recherche❧Opinion

1 source

40

2603arXiv cs.RO 

Conception d'une peau biomimétique recouvrant les articulations, à structure tissulaire, pour améliorer la proprioception d'un humanoïde musculosquelettique

Des chercheurs présentent, dans un article publié en août 2026 sur arXiv (2608.23304), la conception d'une peau biomimétique recouvrant les articulations, dotée d'une structure stratifiée imitant les tissus biologiques, pour améliorer la proprioception des humanoïdes musculo-squelettiques. Cette peau intègre des éléments sensibles à la pression et à l'étirement directement dans le tissu artificiel enveloppant l'articulation, et a été testée sur l'humanoïde Musashi-W. Utilisée seule, elle permet d'estimer l'angle de l'articulation avec une erreur moyenne d'environ 3 degrés. Combinée aux capteurs musculaires déjà présents sur le robot, elle améliore encore la précision de cette estimation. Selon les auteurs, sa structure enveloppante pourrait aussi atténuer mécaniquement l'effet de perturbations externes sur les muscles, et la fusion peau-muscle ouvrirait une piste pour identifier des stimuli externes difficiles à interpréter par la seule sensation musculaire. Ce travail s'attaque à un angle mort connu des humanoïdes musculo-squelettiques: la proprioception articulaire, aujourd'hui estimée presque exclusivement à partir des capteurs musculaires, sans exploiter la déformation cutanée que les organismes biologiques utilisent en complément via leurs mécanorécepteurs. En montrant qu'une peau artificielle seule atteint une précision de l'ordre de 3 degrés, et que sa fusion avec la sensation musculaire améliore encore le résultat, l'étude fournit une preuve de concept pour des architectures de perception multimodale au niveau des articulations, plutôt qu'une dépendance à la seule vision ou aux seuls encodeurs moteurs. Pour les concepteurs d'humanoïdes bio-inspirés, cela suggère une voie pour renforcer la robustesse aux chocs et contacts imprévus tout en distinguant mieux le tactile des artefacts de charge musculaire, sans alourdir le traitement visuel. Il s'agit néanmoins d'un résultat de laboratoire sur un unique prototype, loin d'un composant prêt à l'industrialisation. Musashi-W appartient à la lignée des humanoïdes musculo-squelettiques développés au JSK Lab de l'Université de Tokyo, qui cherche depuis plusieurs générations de robots (dont Kengoro et Kenshiro) à reproduire l'anatomie humaine, tendons et muscles artificiels compris, plutôt qu'à empiler des actionneurs rigides classiques. Cette approche tranche avec celle des humanoïdes commerciaux à moteurs électriques comme Figure 03 ou Optimus Gen 3, ou des plateformes pilotées par des modèles vision-langage-action tels que Pi-0 ou GR00T N2, qui misent avant tout sur la perception visuelle et l'apprentissage à grande échelle. Les auteurs présentent leurs travaux comme une méthodologie de conception plutôt qu'un produit abouti, évoquant la possibilité d'étendre cette peau à d'autres articulations et à la détection de contacts externes. Aucun calendrier de commercialisation ni partenariat industriel n'est mentionné, l'étude relevant pour l'instant de la recherche académique en perception robotique.

Recherche❖Paper

1 source

40

2604arXiv cs.RO 

SuperMap : un système SLAM spatio-temporel pour la navigation vision-langage

La recherche présentée sous la référence arXiv:2608.22896v1 introduit SuperMap, un système de cartographie spatio-temporelle en quatre dimensions destiné à la navigation robotique guidée par le langage. Le système combine un module SLAM géométrique à haute fréquence avec une perception asynchrone en vocabulaire ouvert, c'est-à-dire capable de reconnaître des objets sans liste de catégories prédéfinie, grâce aux modèles de fondation actuels. Sa contribution centrale est un moteur de cartographie piloté par la cohérence, qui associe et réactive les instances d'objets en 3D tout en mettant à jour une confiance combinée sur l'existence et l'étiquette de chaque élément, afin de préserver des identités stables et d'élaguer les contenus obsolètes lors d'occlusions ou de changements de scène. Le résultat est un graphe de scène 4D interrogeable, conçu pour s'interfacer avec des modèles vision-langage via des requêtes compositionnelles sur la sémantique des objets et leurs relations. Les auteurs valident l'approche sur des benchmarks et sur des robots réels, dans des scènes dynamiques incluant apparition, disparition et déplacement d'objets, avec des études d'ablation et une analyse des temps d'exécution. Le système est publié en open source, avec un site dédié à l'adresse superodometry.com/supermap. L'enjeu dépasse la simple démonstration technique. Les modèles de fondation offrent une reconnaissance dite « zero-shot » puissante, mais leurs prédictions restent intermittentes et dépendantes du point de vue caméra : intégrées naïvement dans un pipeline de cartographie, elles provoquent une dérive d'identité, où le même objet revu sous un angle différent est traité comme un nouvel élément, et une sémantique qui ne se met plus à jour. Pour les intégrateurs de robots mobiles destinés aux environnements humains, entrepôts, bureaux ou domiciles, ce problème conditionne directement la fiabilité d'une navigation langage-guidée sur la durée, au-delà d'une simple démo ponctuelle. SuperMap déplace ainsi le curseur du secteur : le défi n'est plus seulement de faire fonctionner un modèle vision-langage-action, mais de maintenir une représentation du monde cohérente dans le temps. Le nom du projet, associé au site superodometry.com, suggère une filiation avec des travaux antérieurs en odométrie et SLAM géométrique, ici étendus à une couche sémantique persistante. L'article ne détaille pas de comparatif nommé avec des systèmes concurrents de graphes de scène ouverts, mais la publication complète en open source vise explicitement à fournir à la communauté robotique une base de référence déployable pour la cartographie spatio-temporelle en vocabulaire ouvert, plutôt qu'un simple résultat de recherche isolé.

Recherche❖Paper

1 source

40

2605arXiv cs.RO 

Réfléchir uniquement quand c'est nécessaire : contrôle par autorité de prompt pour une intervention sélective en mode lent dans la manipulation VLA

Un article publié sur arXiv (référence 2608.23224v1) documente un phénomène baptisé effondrement de forme du prompt dans le pilotage de robots par des modèles vision-langage-action (VLA). Ajouter du texte récupéré au prompt d'une politique VLA gelée, sans réentraînement, fait chuter le taux de réussite moyen de 92,47 % à 3,00 % sur 500 états testés, un ajout dénué de sens mais de longueur équivalente échouant tout aussi complètement. Les auteurs introduisent TOWN-VLA, une interface qui sépare la génération de texte candidat de l'autorisation de modifier l'entrée de la politique : une règle fixe n'autorise qu'une instruction compacte canonique, sinon le prompt original est restauré à l'identique, un contrat respecté sur les 900 routes auditées (525 restaurations vérifiées par empreinte, 375 prompts autorisés préservant la tâche). Sur l'évaluation LIBERO-Plus (grille 4x7, 10 030 épisodes par méthode), le taux de réussite passe de 69,5 % à 73,1 %, avec des gains sur les six axes de perturbation et les quatre suites testées. Sur un bras physique PiPER piloté par un checkpoint gelé du modèle π0.5, il grimpe de 52,7 % à 78,7 % sur 150 essais par méthode (p=3,16x10^-6). Ce résultat vise une pratique répandue : l'augmentation par récupération de contexte sur un modèle gelé, sans réentraînement coûteux, est perçue comme un moyen sûr d'enrichir une politique VLA en production. Or un texte sémantiquement vide provoque le même échec total qu'un texte informatif, preuve que c'est la forme de l'instruction, et non son contenu, qui domine l'exécution, un angle mort pour les intégrateurs qui supposent qu'ajouter du contexte ne peut que rester neutre ou aider. Pour les décideurs évaluant des piles VLA prêtes à l'emploi, ce travail plaide pour une couche de contrôle d'autorité sur les prompts, séparée du modèle de génération, avant tout déploiement réel. Le travail s'appuie sur un modèle gelé de la famille pi-zero (π0.5), développée par Physical Intelligence, ce qui positionne TOWN-VLA comme une couche de contrôle générique plutôt qu'un modèle concurrent d'architectures comme GR00T N2 de NVIDIA ou Helix de Figure AI. Les auteurs indiquent que la prochaine étape est une calibration d'admission sans oracle, signe que le système reste, à ce stade, un résultat de recherche audité en simulation et sur un bras robotique isolé, sans déploiement industriel ni pilote commercial annoncé.

Recherche❖Paper

1 source

40

2606arXiv cs.RO 

Entraînement d'un critique privilégié : adaptation à une panne de propulseur sans capteur en RL de bout en bout

Des chercheurs publient sur arXiv (arXiv:2608.22976v1, 25 août 2026) un système baptisé RAFT, pour Recurrent Asymmetric Fault Tolerant, destiné à la navigation tolérante aux pannes de robots actionnés par propulseurs. Le système s'appuie sur un algorithme d'apprentissage par renforcement PPO combiné a une mémoire récurrente et un entrainement par "critique privilégié" : pendant l'entrainement, la fonction de valeur a accès a l'état réel de dégradation des propulseurs, tandis que l'acteur, lui, ne reçoit que les observations standard disponibles au déploiement, sans capteur de panne dédié. Teste sur une plateforme robotique flottante équipée de 8 propulseurs et d'une roue de réaction, soumise a jusqu'a quatre pannes simultanées de propulseurs, RAFT atteint un taux de réussite de 70,2% avec quatre pannes concurrentes. Cela comble 84% de l'écart séparant une politique naïve face aux pannes (4,8% de réussite) d'une politique oracle qui, elle, observe l'état complet de dégradation au moment du déploiement (82,4%). L'ensemble du code, des checkpoints et des données est publie en open-source. L'intérêt pour l'industrie robotique tient au fait que la détection de pannes classique exige des capteurs dédiés souvent absents sur le terrain, tandis que les contrôleurs oracles capables d'observer l'état réel de dégradation restent irréalistes en déploiement. RAFT montre qu'une politique peut apprendre a compenser des dégradations continues, des pannes franches ou des blocages en position ouverte sans aucune instrumentation de détection additionnelle, uniquement grâce a une asymétrie d'information entre acteur et critique pendant l'entrainement. Pour les intégrateurs de robots a propulseurs (véhicules sous-marins, plateformes en vol libre), cela suggère une voie pour renforcer la robustesse opérationnelle sans surcout matériel, même si l'écart de 16 points avec la politique oracle rappelle que la marge de progression reste réelle. Cette approche s'inscrit dans la lignée des techniques d'apprentissage acteur-critique asymétrique déjà exploitées en robotique legged et manipulation dextérité, ou des informations privilégiées en simulation guident l'apprentissage de politiques déployables sans ces mêmes informations. Les auteurs positionnent RAFT comme une alternative aux pipelines de détection de pannes classiques, avec publication complète du code et des données pour permettre reproduction et extension par la communauté, sans toutefois annoncer de calendrier de validation sur matériel réel au-delà des tests en simulation décrits.

Recherche❖Paper

1 source

40

2607arXiv cs.RO 

Modèles vision-langage-action bimanuels robustes grâce au masquage de modalité, une méthode étonnamment simple

Un nouveau papier de recherche publié sur arXiv (arXiv:2608.22419, août 2026) présente une méthode baptisée Modality Masking Mechanism (M3), destinée à rendre plus robustes les politiques de manipulation robotique bimanuelle. Le point de départ est un constat sur les modèles Vision-Language-Action (VLA) de type "query-based", appréciés pour leur faible latence d'inférence : ils produisent encore des actions discontinues et des échecs d'exécution sur des tâches complexes à deux bras, notamment à cause d'une fusion instable entre plusieurs vues caméra et les instructions en langage, l'attention du modèle dérivant vers des zones non pertinentes de la scène. M3 ne modifie ni l'architecture ni ne nécessite de pré-entraînement robotique à grande échelle : c'est une intervention purement liée à l'entraînement, qui masque aléatoirement des sous-ensembles de canaux de modalités pendant l'apprentissage, forçant la politique à s'appuyer sur des signaux fiables plutôt que sur des indices trompeurs. Testée sur dix tâches bimanuelles du benchmark de simulation RoboTwin 2.0 et sur trois tâches réelles à horizon long, M3 améliore le taux de réussite moyen de 21,7 points par rapport à une base "Adapter" en conditions propres (Clean), de 11,4 points quand le modèle est entraîné sur des démonstrations propres mais testé sur des scènes randomisées (Clean2Rand), et de plus de 30 points sur la réussite complète en conditions réelles. Ce travail s'attaque à un problème très concret pour qui cherche à déployer des robots humanoïdes ou bimanuels hors des conditions de démonstration en laboratoire : l'écart entre une politique qui fonctionne en démo et une exécution robuste en conditions réelles. Le fait qu'une régularisation d'entraînement aussi simple qu'un masquage aléatoire produise des gains de robustesse à deux chiffres, sans nouveau matériel, nouvelle architecture ni collecte de données coûteuse, est significatif pour les intégrateurs : une partie de l'écart de robustesse face à la randomisation ou au transfert simulation-réel peut être comblée à moindre coût par une meilleure discipline d'entraînement plutôt que par plus de paramètres ou de pré-entraînement. C'est aussi un rappel que les chiffres de réussite affichés par les papiers VLA peuvent masquer une fragilité au changement de distribution, et que la comparaison entre conditions propres et conditions randomisées devient une manière plus honnête de rapporter la robustesse qu'une démonstration en conditions uniques. Le papier compare M3 à une base "Adapter", une méthode courante pour injecter de nouvelles capacités dans une politique VLA sans réentraînement complet, et l'évalue sur RoboTwin 2.0, un benchmark de simulation pour la manipulation bimanuelle. Il s'agit d'un preprint arXiv tout juste annoncé, non encore relu par les pairs, et aucun pilote commercial, intégration produit ou soutien d'entreprise n'est mentionné dans la publication : ce travail reste donc au stade de la recherche, pas d'un déploiement réel. Sa portée pratique dépendra de la capacité de cette stratégie de masquage à se généraliser au-delà des tâches simulées de RoboTwin 2.0 et des trois tâches réelles testées, et de sa reproduction par d'autres laboratoires sur d'autres architectures VLA et d'autres plateformes robotiques.

Recherche❖Paper

1 source

40

2608arXiv cs.RO 

Au-delà de la généralisation du point de vue : ce qu'apportent les démonstrations multi-vues et comment les synthétiser pour la manipulation robotique

Une étude publiée sur arXiv (2603.26757v2, version révisée) montre par l'expérimentation que les démonstrations multi-vues améliorent réellement les politiques de manipulation robotique, et pas seulement leur robustesse aux changements de caméra. Des essais contrôlés, à arrière-plan fixe puis aléatoire, montrent un gain constant du taux de succès et de la généralisation, mais qui varie de façon non monotone selon le nombre de points de vue : plus de caméras n'est pas toujours mieux. Les données multi-vues repoussent en revanche la limite de mise à l'échelle des jeux mono-vue, en continuant d'élever le plafond de performance après sa saturation, car elles améliorent les représentations visuelles apprises, l'alignement de la tête d'action et réduisent le surapprentissage. Pour pallier leur rareté, les auteurs proposent RoboNVS, un cadre auto-supervisé qui synthétise des vidéos sous de nouveaux angles à partir d'une seule caméra. Ces résultats concernent directement les équipes qui entraînent des politiques de manipulation de type vision-langage-action (VLA), où la collecte de démonstrations reste le principal goulot d'étranglement en coût et en temps d'ingénieur. L'étude suggère qu'ajouter des caméras au-delà d'un certain point n'est pas rentable, et que des vidéos de synthèse générées par un modèle de génération de vues peuvent remplacer une partie de la collecte physique, y compris en environnement réel et pas seulement en simulation. Cela nuance l'idée reçue selon laquelle il suffirait d'accumuler des heures de téléopération pour progresser : la diversité des points de vue, bien dosée, compte davantage que le seul volume de données. Ce travail s'inscrit dans une recherche plus large sur les lois d'échelle des données en apprentissage robotique, où plusieurs axes sont explorés en parallèle : volume de démonstrations, diversité des tâches et des morphologies robotiques, et donc des points de vue caméra, un facteur resté jusqu'ici peu quantifié. En documentant à la fois le phénomène et un outil pour le corriger, la publication ouvre la voie à une intégration de la génération de vues synthétiques dans les pipelines de curation de données à grande échelle, avec des validations montrées en simulation et en environnement réel, mais sans calendrier de déploiement industriel ni partenaire robotique précisé à ce stade.

Recherche❖Paper

1 source

40

2609arXiv cs.RO 

Améliorer le transfert sim-vers-réel des robots à commande de couple via l'estimation dynamique réel-vers-sim et l'apprentissage par renforcement

Une équipe de recherche a publié en août 2026 sur arXiv (2608.22629) un pipeline nommé Real2Sim2Real pour améliorer le transfert simulation-réel de politiques d'apprentissage par renforcement sur des bras robotiques pilotés en couple. Testé sur le Franka Emika Panda, bras à 7 degrés de liberté du fabricant allemand Franka Emika, le système identifie d'abord les paramètres réels de friction, d'inertie et de compensation de gravité en minimisant l'écart entre trajectoires articulaires réelles et simulées, les optimise par algorithme génétique, puis entraîne en simulation un agent TQC (Truncated Quantile Critics) avec randomisation de domaine. La politique est validée dans les simulateurs Gazebo et MuJoCo avant déploiement sur le robot physique pour des tâches d'atteinte de cible. Les auteurs rapportent une nette amélioration de la précision de suivi et de la robustesse une fois les paramètres calibrés, avec un transfert jugé fluide vers le monde réel. Le contrôle en couple reste l'un des points durs du sim-to-real : une erreur de modélisation dynamique, même mineure, peut rendre un bras réel instable ou dangereux, contrairement au contrôle en position. En calibrant le simulateur sur des données physiques mesurées avant l'entraînement, plutôt qu'en misant sur une randomisation aveugle des paramètres, cette approche real2sim intéresse directement les intégrateurs travaillant sur des tâches de préhension fine ou d'assemblage sous contrôle de force, et appuie l'idée que le fossé simulation-réalité se réduit surtout par une modélisation physique rigoureuse. Les résultats portent cependant sur des tâches d'atteinte de cible simples et un seul bras : une preuve de concept académique, pas un déploiement industriel validé. Le Franka Emika Panda, dérivé des travaux du centre aérospatial allemand DLR et commercialisé depuis 2017, s'est imposé en recherche robotique grâce à sa mesure native de couple articulaire, rare à ce niveau de prix. Le pipeline real2sim2real prolonge une lignée de travaux qui, depuis les premières démonstrations de manipulation par randomisation de domaine à la fin des années 2010, cherchent à réduire la dépendance à un volume massif de simulations en misant sur la fidélité du modèle physique. L'article, publié en preprint non relu par les pairs, ne précise ni calendrier de suivi ni extension annoncée à d'autres plateformes.

Recherche❖Paper

1 source

39

2610arXiv cs.RO 

Façonner la dynamique évolutive de la morphologie des robots via l'apprentissage adaptatif du contrôle

Une équipe de recherche publie sur arXiv (arXiv:2608.23100v1, août 2026) une étude sur la co-conception de robots par optimisation bi-niveau, testée sur des robots souples à base de voxels simulés (VSR). Le travail isole deux dimensions distinctes dans la contribution de la morphologie à l'apprentissage du contrôle : la vitesse de convergence, dite intelligence morphologique, et le plafond de performance atteignable, nommé potentiel véritable. Les auteurs montrent qu'une évaluation prématurée de la fitness sous-estime ce potentiel véritable et favorise systématiquement les designs qui apprennent vite, ce qui réduit la diversité morphologique explorée pendant l'évolution. Ils proposent AdaControl, un mécanisme qui détecte ce biais de sélection en cours d'évolution et n'alloue que le temps d'apprentissage minimal nécessaire à une évaluation non biaisée. Associé à un simple algorithme génétique, AdaControl égale des méthodes de co-design basées sur des modèles génératifs réputées à la pointe, tout en réduisant le calcul nécessaire jusqu'à 80 % par rapport à un apprentissage exhaustif du contrôleur. Cette découverte touche un point sensible de la robotique évolutive : le coût de calcul de l'évaluation de fitness, où chaque design candidat nécessite un entraînement de contrôleur complet, reste le principal frein à l'exploration à grande échelle de l'espace des morphologies possibles. En attribuant l'effet Baldwin morphologique, largement cité dans la littérature en co-design corps-cerveau, à un artefact méthodologique plutôt qu'à une propriété fondamentale de l'évolution, l'étude invite les laboratoires à réexaminer des résultats antérieurs bâtis sur des protocoles d'évaluation prématurée. Pour les équipes qui travaillent sur la conception automatisée de robots physiques, bras, quadrupèdes ou plateformes souples, une réduction de calcul de cet ordre rend accessible l'exploration d'espaces de design plus larges sans sacrifier la diversité des morphologies retenues. Le concept d'intelligence morphologique, selon lequel une morphologie bien adaptée accélère l'apprentissage du contrôle, avait déjà été établi par des travaux antérieurs en co-design bi-niveau ; cette étude se présente comme la première à examiner la direction réciproque, à savoir comment l'apprentissage du contrôle influence en retour la sélection morphologique au fil des générations. Les expériences restent cantonnées à la simulation de robots souples voxélisés, plateforme standard du domaine, et la comparaison porte explicitement sur des méthodes de co-design génératives récentes, sans acteur industriel ni déploiement physique mentionné. L'abstract ne fixe aucun calendrier de suite, mais ouvre la voie à une révision des protocoles d'évaluation de fitness dans d'autres pipelines évolutifs, en robotique molle comme rigide.

Recherche❖Paper

1 source

39

2611arXiv cs.RO 

MotionDLO : suivi hybride événement-image des objets linéaires déformables

Publié sur arXiv sous la référence 2608.22398v1, MotionDLO est un framework de suivi en temps réel pour les objets déformables linéaires (câbles, fils, cordes), une catégorie difficile à percevoir en robotique faute de forme rigide. Le système hybride associe des caméras événementielles, à haute résolution temporelle et flux épars, à des caméras classiques à images qui stabilisent la précision spatiale et l'identité de l'objet suivi, via une segmentation couplée à l'algorithme Coherent Point Drift (CPD) selon les principes de la Motion Coherence Theory. Les auteurs rapportent une fréquence de mise à jour de 12 millisecondes et une erreur de suivi de forme, en distance point-à-courbe, allant jusqu'à 0,43 mm ; le code source et les données de démonstration sont publics. Ce résultat s'attaque à un verrou industriel connu : le suivi de câbles et faisceaux électriques reste un point faible de la manipulation robotique, notamment dans l'assemblage automobile et électronique où le câblage manuel reste difficile à automatiser. Les approches existantes forçaient un compromis entre méthodes événementielles, rapides mais moins précises, et méthodes à base d'images, plus fiables mais plus lentes ou contraintes de sacrifier la sparsité des événements. En combinant les deux sans explosion du coût de calcul, MotionDLO apporte une preuve de concept utile aux intégrateurs visant l'adaptation dynamique de trajectoire en temps réel, par exemple pour le routage de câbles pendant une manipulation. Le suivi des DLO reposait jusqu'ici sur deux approches limitées : le suivi par image, pénalisé par le flou de mouvement et la latence lors de déplacements rapides, et le suivi événementiel, réactif mais bruité en l'absence d'image de référence stable. CPD et la Motion Coherence Theory, outils établis en recouvrement de nuages de points, sont ici adaptés au suivi temporel continu. Il s'agit à ce stade d'une publication de recherche fraîchement déposée sur arXiv, sans partenaire industriel ni déploiement réel mentionné : les chiffres proviennent de tests en laboratoire sur des jeux de données publiés par les auteurs eux-mêmes. La mise à disposition du code ouvre la voie à une reproduction indépendante par la communauté robotique, étape préalable à une intégration dans des pipelines industriels pour l'insertion de câbles ou la suture assistée.

Recherche❖Paper

1 source

39

2612arXiv cs.RO 

MorFiC : corriger la mauvaise calibration des valeurs pour le transfert zéro-shot chez les quadrupèdes

Une nouvelle version de l'article MorFiC vient d'être publiée sur arXiv (2603.14554), présentant une méthode d'apprentissage par renforcement qui transfère une politique de marche quadrupède vers des robots de morphologie différente sans réentraînement, un transfert dit zero-shot. Entraînée sur un seul robot source en simulation avec randomisation morphologique, elle atteint ce transfert vers sept robots au total, dont les Unitree Go1 et Go2 déployés sans fine-tuning, et affiche sur AlienGo une vitesse de 1,98 m/s contre moins de 0,65 m/s pour les références PPO à conditionnement additif. L'entraînement complet prend deux heures sur un seul robot, contre des dizaines voire des centaines d'heures pour les méthodes de référence entraînées sur plusieurs corps simultanément. Trois métriques de diagnostic du critique (variance expliquée, taux d'inversion du signe de l'avantage, cosinus du gradient de politique) confirment le rôle déterminant du conditionnement proposé dans la direction des mises à jour de politique. L'enjeu dépasse la performance brute : dans l'apprentissage acteur-critique classique, une fonction de valeur partagée entre morphologies tend à moyenner des cibles incompatibles, ce qui fausse les avantages calculés et dégrade la politique transférée vers un nouveau robot. MorFiC corrige ce biais par un conditionnement multiplicatif du critique sur un latent de morphologie, là où les méthodes existantes utilisent un conditionnement additif. Pour l'industrie robotique, cela ouvre la voie à des politiques de marche déployables sur des flottes hétérogènes sans entraînement massif multi-corps ni architectures généralistes coûteuses, et contredit l'idée reçue selon laquelle seule l'échelle, plus de robots, plus de données, permet la généralisation entre morphologies. Les approches précédentes reposaient soit sur un entraînement à grande échelle multipliant les corps réels ou générés, soit sur de larges architectures transférables mais gourmandes en calcul et en stockage, deux familles que l'étude prend comme références directes de comparaison. La démonstration reste de nature académique, limitée à sept robots dont les références commerciales Unitree Go1, Go2 et AlienGo, sans partenaire industriel ni calendrier de déploiement réel mentionnés dans l'article. La réduction du temps d'entraînement à deux heures avec un seul robot source suggère toutefois une piste pour rendre ce type de généralisation inter-robots accessible à des équipes sans accès à de grandes fermes de simulation multi-embodiment.

Recherche❖Paper

1 source

39

2613arXiv cs.RO 

WorldToken : le temps d'abord dans la modélisation de séquences pour l'apprentissage par imitation robotique

Un article publié sur arXiv (2608.22591v1) présente WorldToken, une architecture "time-first" pour l'apprentissage par imitation en robotique. À chaque pas de décision, le système fusionne images multi-vues, proprioception et consigne de tâche en un "world token" unique, traité par un Transformer temporel causal couplé à une tête d'action par diffusion générant des séquences de mouvements. Sur 23 tâches du benchmark RoboCasa, une politique de 85,3 millions de paramètres, entraînée de zéro hormis un encodeur de texte CLIP pré-entraîné et gelé, atteint 59,45% de réussite moyenne en boucle fermée avec 2900 démonstrations générées par tâche. Une étude factorielle croisant cinq tailles de jeu de données, cinq tailles de modèle et deux graines d'entraînement montre des gains constants avec davantage de données mais des rendements décroissants au-delà d'une taille de modèle modérée. Réduire l'historique temporel visible à un ou deux pas de temps dégrade la réussite en boucle fermée sur les 50 politiques RoboCasa testées. Sur RMBench Blocks Ranking, faire passer l'historique de 146 à 8 secondes fait chuter le taux de réussite évalué de 95% à 28%, tandis qu'un déploiement prolongé exploratoire maintient une séquence d'échange de référence pendant plus de 850 secondes. Pour les équipes développant des politiques VLA, ce résultat quantifie un arbitrage rarement mesuré aussi précisément: la longueur du contexte temporel pèse autant, voire plus, que la taille du modèle sur la réussite d'une tâche de manipulation, ce qui nuance l'idée que scaler les paramètres suffirait à améliorer la généralisation. Les auteurs restent prudents sur la portée de leurs résultats: l'étude établit la faisabilité empirique de WorldToken et caractérise son comportement face au volume de données et au contexte temporel, sans démontrer sa supériorité sur d'autres organisations de séquence ni isoler quel composant précis explique les gains observés. Le travail s'appuie sur les bancs d'essai RoboCasa et RMBench et s'inscrit dans un débat plus large sur l'organisation temporelle des modèles vision-langage-action, aux côtés d'approches comme Pi-0, GR00T N2 ou Helix. Il s'agit d'un preprint de recherche, sans annonce de déploiement industriel ni de calendrier commercial.

Recherche⚡Actu

1 source

39

2614arXiv cs.RO 

Réglage adaptatif de paramètres sans modèle pour des opérations multi-robots efficaces en entrepôt

Le 25 août 2026, une équipe de recherche a publié sur arXiv (référence 2608.21533v1) un article intitulé "Model-Free Adaptive Parameter Tuning for Efficient Multi-Robot Warehouse Operations", consacré à l'optimisation en temps réel des flottes de robots dans les centres de traitement de commandes automatisés. Dans ces entrepôts, les stocks sont rangés sur des étagères mobiles (pods) empilées en blocs denses ; extraire un pod enfoui nécessite un "digout", c'est-à-dire déplacer les pods qui bloquent l'accès. Les planificateurs multi-robots pilotent ce processus via des fonctions de coût paramétrées, qui vont d'une stratégie envoyant les pods gênants vers d'autres blocs (mobilisant plus de robots dans les couloirs) à une stratégie de réarrangement local (limitant la congestion mais allongeant le temps d'extraction). Les auteurs proposent un cadre d'ajustement adaptatif fondé sur l'Extremum Seeking Control (ESC), une méthode d'optimisation sans modèle qui perturbe les paramètres avec des signaux sinusoïdaux et corrèle ces perturbations aux variations de débit pour estimer un gradient de performance, malgré des effets différés de plusieurs minutes. En simulation, cette politique adaptative améliore le débit de 5,0% en moyenne selon la taille de carte et de flotte, et de 8,4% en conditions opérationnelles dynamiques, comparé à des politiques à paramètres fixes. L'intérêt pour les opérateurs de centres logistiques et les intégrateurs de flottes robotiques tient à la suppression du calibrage manuel des paramètres, un exercice coûteux qui doit aujourd'hui être refait à chaque changement de configuration d'entrepôt ou de profil de demande. Un système capable de s'auto-ajuster en continu, sans modèle explicite de l'installation, répond directement à un point de friction opérationnel réel. À noter toutefois que ces résultats reposent uniquement sur des simulations, sans validation en environnement réel ni déploiement industriel annoncé. Ce travail s'inscrit dans la lignée des systèmes de stockage à pods mobiles popularisés par la robotique d'entrepôt à grande échelle, où la coordination de centaines de robots sous contrainte de congestion reste un défi algorithmique majeur. Les auteurs positionnent l'ESC comme une alternative au réglage hors ligne classique, jusqu'ici jugé impraticable face à des conditions changeantes. Aucune date de test en conditions réelles ni partenariat industriel n'est mentionné à ce stade.

Recherche❖Paper

1 source

39

2615arXiv cs.RO 

UniMem : mémoire et contrôle multimodaux unifiés pour les modèles vision-langage-action

UniMem, un framework qui unifie mémoire multimodale de haut niveau et contrôle bas niveau dans une seule architecture pour les modèles Vision-Language-Action (VLA), est décrit dans une preprint arXiv publiée fin aout 2026 (arXiv:2608.22869v1). Le système combine trois composants: un classificateur d'événements qui déclenche les mises a jour mémoire, un encodeur de keyframes pour construire une mémoire spatiale dense, et une technique de mise en cache des keyframes destinée a limiter la surcharge de calcul pendant l'exécution des politiques. Les auteurs ont teste UniMem sur neuf taches au total, cinq en simulation et quatre sur matériel physique, toutes conçues pour solliciter la mémoire séquentielle et spatiale du robot. Les résultats annonces montrent un taux de réussite de 93,4% contre 68,2% pour une base de référence a échantillonnage d'images a intervalles fixes en simulation, et 80,0% contre 43,5% face a une architecture hiérarchique classique sur matériel réel, avec en prime une inférence plus rapide. Ce travail cible un point de friction reconnu dans le déploiement de VLA sur des taches longues et non markoviennes, celles ou l'action a prendre dépend d'événements passes et pas seulement de l'observation courante. Les approches existantes ajoutent généralement un second modèle vision-langage charge de gérer la mémoire long terme en amont du VLA, ce qui créé un goulot d'étranglement et un pipeline d'entrainement fragmente en deux étapes distinctes. Conditionner le modèle sur plusieurs images historiques choisies a intervalles arbitraires dégradé aussi souvent la performance. En proposant un backbone unique entrainable de bout en bout, UniMem promet une adoption plus simple pour les intégrateurs et laboratoires qui construisent des politiques robotiques a long horizon, sans empiler des modules de mémoire externes couteux en latence. Le problème de la mémoire dans les VLA s'inscrit dans la même trajectoire de recherche que des systèmes généralistes comme Pi-0, GR00T N2 ou Helix, qui ont déjà démontre la capacité des architectures VLA a généraliser sur des taches manipulatoires variées mais restent généralement limites a des comportements réactifs de courte durée. UniMem se positionne explicitement contre les architectures hiérarchiques a deux modèles, qu'il compare directement dans ses benchmarks matériels, avec seulement quatre taches physiques testées et des chiffres qui restent auto-rapportes par les auteurs. Le site du projet (losterberg3.github.io/unimem-vla) met a disposition les démonstrations vidéo associées; aucun calendrier de mise en open source du code ni partenariat industriel n'est communique a ce stade, le travail restant au niveau de la publication de recherche.

Recherche⚡Actu

1 source

39

2616arXiv cs.RO 

Inférence de l'action à partir de l'état latent futur pour la manipulation robotique

Une équipe de recherche a publié sur arXiv, le 25 août 2026 (référence 2608.22067v1), un article intitulé « Inferring Action from Future Latent State for Robotic Manipulation », présentant DELE-w0.5, un nouveau modèle de contrôle robotique. Contrairement aux World-Action Models existants, qui s'appuient sur des backbones de génération vidéo pour prédire conjointement les images futures et les actions du robot, DELE-w0.5 se passe de la génération vidéo : il infère directement la séquence d'actions à partir d'un état latent futur compact, qui capture le résultat physique de l'interaction sans reconstruire l'apparence visuelle intermédiaire. Testé sur 480 essais réels couvrant quatre tâches de manipulation à long horizon, le système atteint un taux de réussite complet de 62,5 % et une progression macro par étapes ordonnées de 81,3 %, soit respectivement 47,5 et 30,7 points de pourcentage de mieux que la meilleure baseline comparée. Cette approche remet en question un postulat courant chez les VLA (vision-language-action) et les world models robotiques, celui voulant que prédire l'image future soit nécessaire pour ancrer un modèle de contrôle dans la physique réelle, une logique suivie par des systèmes comme GR00T N2, Pi-0 ou Helix. En supprimant cette étape coûteuse en calcul, DELE-w0.5 promet un entraînement moins cher et une inférence plus rapide, un enjeu concret pour les intégrateurs visant du contrôle temps réel sur du matériel embarqué limité. Si ces gains se confirment au-delà de ce papier, ils pourraient orienter la recherche vers des architectures plus légères fondées sur la prédiction d'états latents plutôt que sur la vidéo dense. Il s'agit d'un travail de recherche en preprint, sans laboratoire ni entreprise nommés dans le résumé, et sans déploiement, partenariat ou pilote commercial annoncé. L'article s'inscrit dans la vague actuelle des World-Action Models combinant génération vidéo et prédiction d'action, un terrain disputé par des acteurs comme Figure (Helix), NVIDIA (GR00T N2) ou Physical Intelligence (Pi-0). Le taux de réussite de 62,5 % reste loin d'un niveau de fiabilité industrielle, même s'il dépasse nettement les références testées, et ces chiffres proviennent des auteurs eux-mêmes, sans validation indépendante ni revue par les pairs à ce jour. Aucune suite, aucun pilote ni intégration produit n'est mentionné dans l'article.

IA physique⚡Actu

1 source

38

2617arXiv cs.RO 

IA à Base d'Agents Physiques : une Architecture pour Orchestrer une Équipe de Robots avec des LLM

Un article publié sur arXiv le 25 août 2026 (arXiv:2608.22657v1) présente Physical Agentic AI, une architecture pour orchestrer des équipes de robots hétérogènes pilotées par des modèles de fondation. Chaque robot y expose une bibliothèque typée de compétences exécutables ; un planificateur découpe une mission en phases et assigne chacune à un couple robot-compétence ; un orchestrateur déterministe valide et autorise ensuite chaque compétence une par une avant actuation, séparant la planification sémantique, non-actuante, de l'exécution physique. L'architecture a été testée sur une mission de recherche et dispatch impliquant un drone et un robot terrestre non habité, entièrement exécutée en simulation Gazebo, ainsi que sur une tâche de transport combinant un humanoïde et un quadrupède, avec deux essais physiques réels sur un Unitree G1 et un Go2. Chiffres clés : l'ajout d'un mécanisme de récupération d'information fait passer le taux d'ancrage correct des compétences de 51% à 96%, mais même un planificateur bien informé envoie encore 23 à 29% des étapes défectueuses vers l'exécution. La vérification systématique à chaque dispatch ramène ce taux de faux positifs à 0%, sans blocage abusif. Sur huit défauts injectés délibérément, les huit ont franchi la barrière d'orchestration sans cette vérification, et six ont déclenché un mouvement réel du robot ; avec elle activée, les huit ont été refusés avant tout mouvement. Ce travail pointe un angle mort des démonstrations de robots pilotés par LLM : un plan sémantiquement riche n'empêche pas des actions physiquement infaisables ou dangereuses. Pour les intégrateurs de flottes multi-robots, le message est net, un planificateur mieux informé réduit les erreurs de raisonnement mais ne sécurise pas l'exécution ; seule une couche de vérification déterministe, indépendante du plan, empêche le passage à l'acte d'une instruction fautive. L'ablation isolant l'effet de cette porte de validation renforce l'idée que le "meilleur prompting" seul ne suffit pas à sécuriser un déploiement physique, un signal utile face à l'écart persistant entre démo et réalité opérationnelle. Le papier s'inscrit dans la recherche reliant grands modèles de langage et orchestration robotique, terrain souvent dominé par des approches de bout en bout type vision-langage-action (Pi-0, GR00T N2) plutôt que par une couche de contrôle explicite. C'est une contribution académique tout juste postée sur arXiv, sans affiliation industrielle ni plan de déploiement commercial précisés, validée en simulation et sur un nombre limité d'essais matériels, à traiter comme une preuve de concept en attente de revue par les pairs plutôt que comme un produit prêt à industrialiser.

Recherche❖Paper

1 source

38

2618arXiv cs.RO 

Suivi humain par nacelle gimbal pour robots compagnons via apprentissage continu

Une équipe de recherche présente, dans un article soumis sur arXiv le 25 aout 2026 (arXiv:2608.21388), un système de suivi humain pour robots compagnons base sur une camera montée sur une nacelle gimbal motorisée, intégrée a un robot mobile. Le gimbal oriente activement son axe de visée pour garder la personne suivie dans le champ de vision, même lors de déplacements relatifs rapides, la ou les cameras fixes ou les tags portables échouent des que la cible sort de la zone de détection. Une stratégie d'apprentissage continu est appliquée a la reidentification de personnes (ReID) pour s'adapter aux changements d'apparence et d'environnement lors d'un suivi de longue durée. Les expériences couvrent des scenarios allant de la marche a la course, avec reidentification en temps réel, et une étude utilisateur a mesure le gain de confort lie a l'absence de tag porte. Pour les intégrateurs de robots de service destines aux domiciles, hôpitaux ou espaces commerciaux, la dépendance aux tags portables ou aux cameras fixes reste un frein a l'adoption, en confort comme en cout de déploiement ; supprimer l'accessoire en élargissant la couverture effective du capteur s'attaque directement a ce point de friction. L'apprentissage continu applique a la ReID vise un problème récurrent des systèmes de vision en conditions réelles : la dégradation de la reconnaissance quand l'éclairage, la tenue ou l'arriere-plan changent, un écart classique entre démonstration en laboratoire et fonctionnement continu sur le terrain. Si les résultats se confirment a plus grande échelle, l'approche pourrait lever un obstacle concret a la commercialisation des robots compagnons grand public. Le suivi de personnes en robotique de service reposait jusqu'ici surtout sur des tags actifs (UWB, RFID) ou sur la détection visuelle via cameras statiques a champ limite, deux approches vulnérables des que la cible sort du cadre ou change d'apparence. L'article ne cite aucun acteur industriel ni déploiement commercial : il s'agit d'un prototype de recherche évalué en conditions contrôlées, avec une étude utilisateur dont l'ampleur n'est pas précisée, ce qui invite a la prudence avant toute extrapolation vers un produit prêt a l'emploi. Aucune suite opérationnelle ni calendrier d'industrialisation n'est annonce ; la contribution se présente comme une brique technique potentiellement reprise par des fabricants de robots d'assistance a la personne.

Recherche❖Paper

1 source

38

2619arXiv cs.RO 

TONAV : navigation orientée tâche et apprentissage de blocs action-vitesse pour la manipulation mobile quadrupède d'objets articulés

Une équipe de recherche a publié en août 2026 sur arXiv un article présentant TONAV, un framework unifié de manipulation mobile quadrupède pour objets articulés comme portes, tiroirs ou vannes. Le système associe une téléopération couplant position et vitesse pour produire des démonstrations lisses et cohérentes, une navigation orientée tâche qui utilise le raisonnement vision-langage pour découper une instruction en sous-objectifs et amener la base du robot en posture prête à manipuler, et un apprentissage de chunks action-vitesse modélisant conjointement positions articulaires et transitions temporelles. Les auteurs rapportent des tests réels avec des taux de réussite supérieurs à l'existant, mais sans chiffres précis ni détails sur la plateforme utilisée. Code et vidéos figurent sur haochen611.github.io/TONAV. Cette publication cible un problème concret de la manipulation mobile : la plupart des systèmes arrêtent la navigation près de la cible sans garantir un positionnement exploitable, et peinent à maintenir un contact stable lors d'interactions prolongées, à cause du jitter, du retard de suivi et de l'instabilité de contact. Pour les intégrateurs envisageant des quadrupèdes en usine ou en logistique pour ouvrir des portes ou actionner des vannes, ces deux failles sont précisément ce qui bloque le passage de la démonstration scriptée au déploiement répété. TONAV illustre aussi l'extension des architectures vision-langage-action, popularisées côté humanoïdes par des modèles comme Pi-0 ou GR00T N2, aux plateformes quadrupèdes. Le travail s'inscrit dans la lignée des recherches sur la manipulation mobile, où les quadrupèdes, chez des acteurs comme Unitree, Boston Dynamics avec Spot ou Deep Robotics, se sont d'abord concentrés sur la locomotion et l'inspection avant d'y ajouter des bras pour l'interaction physique. TONAV se positionne comme une réponse à la fracture entre atteignabilité et disponibilité pour la manipulation identifiée dans des travaux antérieurs. Les auteurs ouvrent une page projet avec du contenu vidéo, mais aucun calendrier de transfert industriel ni pilote commercial n'est mentionné : il s'agit à ce stade d'une contribution de recherche, pas d'un produit ni d'un déploiement.

Recherche❖Paper

1 source

38

2620arXiv cs.RO 

Adaptation continue sans récompense pour des robots spatiaux résilients

Un preprint diffusé sur arXiv fin août 2026 (arXiv:2608.23452v1) présente un cadre d'apprentissage par renforcement continu sans signal de récompense, destiné aux robots spatiaux victimes d'une dégradation matérielle sévère, un contexte où le calcul précis de récompense est impossible faute de systèmes de suivi externes comme le GPS. La méthode pré-entraîne sur des simulations variées un agent doté d'un modèle du monde à état latent qui apprend un prédicteur robuste de récompense, puis, une fois déployé sur un système endommagé, ne réajuste que la dynamique de transition de ce modèle via des trajectoires non supervisées, la politique étant réentraînée uniquement sur des trajectoires imaginées. L'approche est testée en simulation sur trois tâches, traversée planétaire, navigation orbitale et assemblage de précision, sous pannes morphologiques sévères. L'apport principal tient au découplage entre adaptation et supervision externe: la plupart des méthodes d'apprentissage continu embarqué restent bloquées dès qu'il n'existe pas de vérité terrain en environnement extrême, que ce soit dans l'espace profond, en fond marin ou sur un site nucléaire. Si la méthode se confirme hors simulation, elle ouvrirait la voie à des robots capables de retrouver une capacité opérationnelle après un choc matériel sans intervention au sol, un enjeu direct pour les rovers planétaires, les satellites de service en orbite ou les bras d'assemblage orbitaux. Les résultats publiés restent toutefois purement simulés, sans validation sur matériel réel ni en environnement spatial, ce qui limite la démonstration à une preuve de concept algorithmique. Ce travail s'inscrit dans la lignée des modèles du monde à état latent, popularisés par la famille Dreamer, devenus un outil courant de l'apprentissage par renforcement basé modèle en robotique pour entraîner des politiques sur des trajectoires imaginées plutôt que sur des interactions réelles coûteuses. La robotique spatiale attire un nombre croissant d'acteurs publics et privés, de la NASA-JPL à l'ESA en passant par des sociétés de service en orbite comme Astroscale ou Intuitive Machines, tous confrontés au même verrou: maintenir et adapter des systèmes hors de portée d'une intervention humaine directe. Le résumé du preprint ne précise ni laboratoire ni affiliation industrielle; la suite logique resterait une validation sur banc d'essai robotique, puis une démonstration en environnement analogue spatial avant tout transfert vers une mission opérationnelle.

Recherche❖Paper

1 source

38

2621arXiv cs.RO 

Stratégie adaptative de recherche de source à tours alternés, guidée par estimation et direction d'amélioration

Une équipe de recherche propose, dans un article publié le 25 août 2026 sur arXiv (référence 2608.23068v1), une nouvelle méthode de recherche de source pour la robotique mobile, combinant un filtre de Kalman étendu (EKF) et une sélection de direction basée sur la matrice d'information de Fisher (FIM). Le problème visé, dit "source seeking", consiste à localiser l'origine d'un signal inconnu, par exemple une fuite de gaz, une source de radiation ou un point de pollution, à partir de mesures scalaires bruitées collectées pendant le déplacement du robot, sans connaître à l'avance la position de la source. La méthode fonctionne par boucles : le robot met à jour son estimation de la position de la source en continu pendant le mouvement, puis change de cap à chaque frontière de boucle en combinant l'incertitude d'estimation et le gain d'information prédit. Une condition d'arrêt fondée directement sur les mesures permet de détecter la convergence sans connaissance préalable de la localisation réelle. Les auteurs valident l'approche en simulation, sur des scénarios de source fixe et de source mobile, avec des résultats montrant un meilleur suivi et une erreur d'estimation réduite par rapport aux stratégies purement pilotées par l'information ou purement pilotées par l'estimation. Pour les intégrateurs en robotique mobile et drones, l'apport principal est méthodologique plutôt qu'un produit prêt à déployer : il s'agit de coupler explicitement la qualité de l'estimation statistique et la planification de trajectoire, un lien que les stratégies géométriques existantes, dites loop-based, laissaient largement implicite. Ce type d'algorithme intéresse directement les applications d'inspection industrielle, de surveillance environnementale et de radioprotection, où des robots ou drones autonomes doivent localiser une source sans capteur de gradient dédié ni carte préalable. À ce stade, il s'agit toutefois de résultats de simulation, pas d'une démonstration sur robot physique ni d'un déploiement terrain, une distinction que l'article ne dissimule pas. Ce travail s'inscrit dans la lignée des méthodes dites d'extremum seeking et des approches bio-inspirées de chimiotaxie, historiquement utilisées pour la recherche de source robotique, mais qui reposent souvent sur des gradients locaux sensibles au bruit. En combinant estimation bayésienne et théorie de l'information, les auteurs cherchent à combler l'écart entre les approches purement géométriques et les méthodes purement statistiques. L'article ne mentionne pas de partenariat industriel, de pilote annoncé ni de calendrier de transfert vers un robot réel, laissant la validation expérimentale physique comme prochaine étape logique.

Recherche❖Paper

1 source

38

2622arXiv cs.RO 

Plasticité neuronale à seuil d'énergie libre pour l'apprentissage moteur en ligne dans l'interaction physique humain-robot

Un article publié sur arXiv (identifiant 2608.23000v1) présente Free-Energy-Gated Plasticity (FEGP), un mécanisme de plasticité synaptique appliqué au réseau Predictive-Coding-inspired Variational Recurrent Neural Network (PV-RNN), un modèle récurrent variationnel inspiré du codage prédictif. FEGP ajuste en continu le taux d'apprentissage effectif du réseau en fonction de l'énergie libre variationnelle, c'est-à-dire de l'écart entre les prédictions internes du modèle et les observations réelles. Lors d'une interaction physique homme-robot en temps réel, un réseau initialisé aléatoirement, sans pré-entraînement hors ligne, sans mécanisme de rejeu (replay) et sans signal explicite de changement de tâche, a appris trois motifs moteurs cycliques distincts, les trois réapparaissant ensuite de façon autonome lors de restitutions (rollouts) sans intervention humaine. Les auteurs ont conduit des expériences contrôlées sur dix séquences d'enseignement générées aléatoirement, chacune testée avec cinq initialisations différentes du réseau, montrant que FEGP améliore nettement la couverture du répertoire de mouvements appris ainsi que la rétention des motifs acquis après leur sortie de la fenêtre d'observation récente. Ce résultat s'attaque à un problème central pour la robotique collaborative et l'apprentissage embarqué en continu: comment un robot peut-il acquérir de nouveaux comportements moteurs pendant une interaction en direct sans effacer ce qu'il a déjà appris, un phénomène connu sous le nom d'oubli catastrophique. Pour les intégrateurs travaillant sur des cobots ou des interfaces d'enseignement par démonstration, cette approche évite le recours coûteux au pré-entraînement hors ligne ou à des bases de rejeu volumineuses, et suggère qu'un simple signal d'erreur de prédiction, correctement synchronisé dans le temps, suffit à arbitrer entre stabilité et plasticité en ligne. Le travail s'inscrit dans la lignée des réseaux PV-RNN et du cadre théorique de l'énergie libre issu des neurosciences computationnelles. Les auteurs ont testé deux hypothèses alternatives, un taux d'apprentissage constant calibré sur la moyenne temporelle du gâté, et un rejeu des mêmes valeurs de gain mais désynchronisé, aucune ne reproduisant les gains observés. Cela indique que c'est l'allocation temporelle précise de la plasticité, et non sa seule magnitude moyenne, qui conditionne la rétention. L'article ne précise pas d'institution ni de calendrier de suite, mais ouvre la voie à des tests sur des répertoires moteurs plus larges et des interactions humaines plus complexes.

Recherche❖Paper

1 source

38

2623arXiv cs.RO 

Navigation topologique par macro-actions sous localisation bruitée par apprentissage par renforcement

Des chercheurs décrivent dans un article arXiv (2608.23055v1) un agent de navigation capable d'évoluer dans des appartements 3D photoréalistes de grande taille en utilisant uniquement l'apprentissage par renforcement applique aux pixels bruts de la camera, sans accès a la position réelle du robot. L'agent doit atteindre plusieurs objets cibles en séquence, leurs positions changeant a chaque épisode, ce qui l'oblige a explorer l'environnement pour les localiser. Le système s'appuie sur un contrôleur topologique centre sur les objets, développe précédemment par la même équipe, qui utilisait jusqu'ici la position exacte de l'agent et les détections d'objets fournies directement par le simulateur. Dans cette nouvelle version, cette position vérité terrain est remplacée par une estimation embarquée: pour chaque objet, une banque de descripteurs visuels ORB permet, lorsque l'objet est revu, d'obtenir une mesure de position approximative, fusionnée avec un modèle de mouvement via un filtre de Kalman étendu minimal. Les tests sont menés dans le simulateur photoréaliste Habitat, avec des mouvements exécutés bruites pour se rapprocher des conditions d'un robot réel. Ce résultat contredit une hypothèse répandue dans la communauté robotique, selon laquelle la navigation par RL pur, a partir de pixels bruts, dans de grands environnements photoréalistes, serait impraticable. L'astuce technique clé tient au fait que l'estimation de position dérivé avec le temps, mais l'agent et les objets proches dérivent ensemble: une cohérence locale de la position suffit donc pour suivre chaque segment court du graphe topologique puis s'aligner visuellement sur la cible finale. Cette approche permet de remplacer un système SLAM complet, gourmand en calcul, par un modèle beaucoup plus léger, ce qui intéressé directement les intégrateurs et concepteurs de robots mobiles cherchant a réduire le cout de calcul embarque. Elle rappelle aussi, selon les auteurs, le fonctionnement de la navigation biologique, qui repose sur des repères locaux successifs plutôt que sur une carte globale précise, une piste alternative aux pipelines de localisation lourds pour les robots opérant en environnement non structure. Ce travail prolonge directement les recherches antérieures des mêmes auteurs sur un contrôleur de navigation topologique centre sur les objets, qui reposait jusqu'alors sur des informations privilégiées issues du simulateur, position exacte et détections d'objets parfaites. Il s'inscrit dans un courant de recherche en navigation robotique visuelle, en concurrence avec les approches fondées sur le SLAM classique ou sur des modèles vision-langage-action de bout en bout entraines a grande échelle. A ce stade, les expériences restent confinées au simulateur Habitat, sans validation sur robot physique ni chiffres de performance détaillés au-delà de la réussite des taches rapportée par les auteurs. La suite logique, non précisée dans l'article, serait un transfert vers un robot réel pour vérifier si la cohérence locale de la position suffit également face au bruit des capteurs et des actionneurs physiques.

Recherche❖Paper

1 source

38

2624arXiv cs.RO 

Des cliniques de jumeau numérique opérationnel permettent l'évaluation de l'IA incarnée par tâches

Une équipe de recherche présente dans un article publié sur arXiv (référence 2608.21416v1) une méthode pour transformer des photographies ordinaires de cliniques en jumeaux numériques opérationnels testables par des robots. Le travail s'appuie sur 39 scènes de cliniques ophtalmologiques, converties depuis de simples clichés en environnements éditables et prêts pour la simulation. Les chercheurs ont évalué la qualité de reconstruction, la géométrie à l'échelle de la pièce, l'ancrage des maillages (mesh grounding), la faisabilité multi-robots, la sensibilité aux perturbations et la performance de politiques de contrôle en boucle fermée. Les scènes reconstruites conservent la structure de l'espace de travail, tandis qu'un système d'édition locale permet de reconfigurer virtuellement le positionnement des équipements. Des maillages d'appareils, des proxys de collision et des ancrages sémantiques ont été ajoutés pour rendre ces reconstructions visuelles exploitables en simulation avec prise en compte des contacts physiques. Testées sur trois types de corps robotiques différents, les mêmes cibles de tâches ont montré des profils distincts d'accessibilité et de faisabilité de contact. Ce résultat répond à un problème concret pour les industriels de la robotique de santé : construire des bancs d'essai réalistes et physiquement fidèles coûte cher et se généralise mal. En montrant que de simples photos suffisent à générer des environnements simulés fiables pour évaluer des politiques de contrôle, les auteurs proposent une couche intermédiaire entre le développement hors ligne et le déploiement physique réel, réduisant le fossé habituel entre démonstration en simulation et comportement réel. Le constat que de petites translations ou rotations d'appareils modifient les marges de contact de façon non détectable par la seule similarité visuelle est un signal d'alerte pour quiconque valide des politiques d'IA incarnée uniquement sur des rendus visuels. Ce travail s'inscrit dans la recherche plus large sur les jumeaux numériques pour la robotique médicale, où l'accès aux environnements cliniques réels reste restreint pour des raisons réglementaires et opérationnelles. Les auteurs positionnent leur approche comme une étape de validation intermédiaire avant tout déploiement clinique, sans toutefois annoncer de partenariat hospitalier ni de calendrier de pilote.

Recherche❖Paper

1 source

38

2625arXiv cs.RO 

PEAfowl : action vision-langage multi-vue à perception renforcée pour manipulation bimanuelle

Une équipe de recherche a publié sur arXiv, en version 2, un article décrivant PEAfowl, une architecture vision-langage-action (VLA) pour la manipulation bimanuelle en environnement encombré. Le modèle prédit des distributions de profondeur par token, effectue un relèvement 3D différentiable et fusionne les vues caméra par agrégation locale de voisins, au lieu de la simple concaténation de tokens des approches existantes. Pour l'ancrage des instructions, il remplace le conditionnement global du langage par une lecture de type Perceiver appliquée aux features CLIP gelées, avec accumulation itérative des indices visuels pertinents. Une distillation de profondeur, réalisée uniquement à l'entraînement via un modèle enseignant préexistant, affine les priors géométriques sans coût supplémentaire à l'inférence, ce qui compense le bruit et les trous typiques des capteurs RGB-D grand public. Sur le benchmark RoboTwin 2.0, en configuration à randomisation de domaine, PEAfowl améliore le taux de réussite de 23 points de pourcentage par rapport à la meilleure référence testée, un gain que les auteurs disent confirmé par des essais complémentaires sur robot physique. Ce travail cible deux limites connues des modèles VLA actuels: une fusion multi-vue trop grossière, qui fragilise la perception sous occlusion ou changement de point de vue, et un ancrage du langage jugé imprécis quand l'instruction sert de simple conditionnement global. Pour les intégrateurs qui évaluent des politiques VLA face à des références comme Pi-0, GR00T N2 ou Helix, ce résultat montre que la robustesse spatiale et la précision de l'ancrage linguistique restent des axes actifs de progrès plutôt que des problèmes déjà résolus. Il faut toutefois noter que le gain de 23 points est mesuré en simulation randomisée; les résultats sur robot réel, évoqués sans détail chiffré précis, relèvent à ce stade d'une validation qualitative plutôt que d'une preuve de déploiement à l'échelle. PEAfowl s'inscrit dans les travaux cherchant à réduire l'écart entre démonstrations en simulation et exécution fiable en conditions réelles pour la manipulation bimanuelle, un axe également exploré par des laboratoires industriels avec des modèles comme Pi-0 de Physical Intelligence, GR00T N2 de NVIDIA ou Helix de Figure. L'article, classé en catégorie "replace-cross" sur arXiv, ne précise ni affiliation institutionnelle ni partenaire industriel. Un site dédié au projet est en ligne, mais aucun calendrier de publication de code ni de pilote industriel n'est annoncé pour l'instant.

Recherche⚡Actu

1 source

38

2626arXiv cs.RO 

IA à base d'agents pour les systèmes multi-drones critiques : défis et opportunités

Un article de position publié le 25 août 2026 sur arXiv (référence 2608.21444v1) sous le titre "Agentic AI for Safety-critical Multi-drone Systems: Challenges and Opportunities" fait la synthèse de deux programmes de recherche en cours consacrés aux drones autonomes pour missions critiques. Le premier, NAMUR, explore le pilotage de robots assisté par grands modèles de langage (LLM) dans des contextes de recherche et sauvetage (SAR) et de lutte contre les incendies. Le second, PERSIST, porte sur des opérations de drones persistantes pour la surveillance et la sécurisation de sites d'infrastructures critiques. Il ne s'agit ni d'un produit commercialisé ni d'un déploiement opérationnel chiffré, mais d'un article de positionnement académique qui tire les enseignements de ces deux initiatives pour poser un cadre de recherche. L'intérêt pour les intégrateurs et décideurs du secteur tient au diagnostic posé: la limite à l'adoption des systèmes multi-drones pour des missions à haut risque ne serait pas d'abord une question de performance des algorithmes d'autonomie, mais un problème socio-technique. Les opérateurs doivent comprendre, faire confiance et garder le contrôle sur des comportements agentiques sous incertitude, pression temporelle et responsabilité juridique. Cette thèse va à l'encontre d'une lecture purement technique du "sim-to-real" ou des architectures vision-langage-action: même une IA performante en laboratoire reste inutilisable sur le terrain si l'interface, les mécanismes de supervision et les méthodes d'évaluation ne sont pas conçus pour l'humain aux commandes. Les auteurs, sans préciser l'origine institutionnelle des deux programmes dans le résumé disponible, défendent une méthodologie centrée sur l'humain, participative et itérative: identifier les besoins des parties prenantes, faire évoluer les capacités des agents à travers des prototypes successifs, puis produire des preuves de concept et des grilles d'évaluation transférables à d'autres domaines critiques comme le nucléaire, l'énergie ou la logistique portuaire. Le papier ne fixe pas de calendrier de déploiement ni de partenaire industriel nommé, restant à ce stade au niveau du cadrage de recherche plutôt que de la mise en œuvre concrète.

Recherche❖Paper

1 source

37

2627arXiv cs.RO 

DELTA : encodeur d'attention terrain local basé sur l'élévation déformable pour la locomotion quadrupède en terrain épars

Un article publié sur arXiv (référence 2608.22033v1, catégorie "new") présente DELTA (Deformable Elevation-based Local Terrain Attention encoder), un nouvel encodeur de terrain destiné à la locomotion de robots quadrupèdes sur terrain épars et accidenté, comme des pierres espacées ou des marches discontinues. Contrairement aux planificateurs de pose de pied fondés sur des modèles explicites, ou aux méthodes récentes d'encodage de carte par attention (AME) couplées à l'apprentissage par renforcement de bout en bout, DELTA prédit des points d'échantillonnage conditionnés à l'état du robot, construit des jetons de preuve de terrain à partir de patchs d'élévation locaux adaptatifs, puis applique l'attention uniquement sur un ensemble fixe de ces jetons. Résultat concret : le coût de calcul de l'encodeur devient indépendant de la résolution de la carte de terrain, alors que l'AME dense voit son coût croître avec cette résolution. Les auteurs valident l'approche en simulation puis via un transfert sim-to-réel sur le quadrupède RAIBO2. Ce travail répond à un verrou connu du secteur : les méthodes d'attention denses appliquées à la cartographie de terrain deviennent trop coûteuses dès qu'on augmente la finesse de la carte, ce qui limitait jusqu'ici leur usage sur terrain très fragmenté. En gardant un coût d'encodage fixe, DELTA permet d'exploiter des cartes haute résolution sans supervision explicite de la pose de pied ni annotation d'attention, tout en conservant des performances de franchissement comparables à l'AME classique et une meilleure efficacité d'apprentissage. Pour les équipes travaillant sur la locomotion de quadrupèdes en environnements industriels, d'inspection ou d'exploration accidentée, c'est un argument en faveur de la scalabilité des approches par apprentissage plutôt que par modélisation explicite du terrain. RAIBO2, plateforme quadrupède déjà connue dans la recherche en locomotion apprise par renforcement, sert ici de banc d'essai pour la validation réelle. Le papier positionne explicitement DELTA face à deux familles concurrentes : les planificateurs de pose de pied basés modèle, plus précis mais rigides, et les encodeurs AME récents, plus flexibles mais coûteux à l'échelle. Il s'agit à ce stade d'une publication de recherche (preprint arXiv), sans annonce de déploiement industriel ni de calendrier de commercialisation ; les auteurs signalent toutefois une généralisation prometteuse à des parcours mixtes combinant terrain continu et discret, jamais vus à l'entraînement.

Recherche❖Paper

1 source

37

2628arXiv cs.RO 

Ludi₀.₁ : un système à base d'agents pour des robots socialement intelligents

Des chercheurs ont publié le 25 août 2026 sur arXiv (identifiant 2608.22035v1) un article décrivant Ludi 0.1, un système agentique visant à doter les robots d'une intelligence sociale, au-delà de la simple exécution de commandes isolées. Le système combine parole interactive, raisonnement multimodal, mémoire, navigation et manipulation apprise dans une architecture unique. Son cœur décisionnel est un modèle vision-langage affiné sur des traces d'interaction multi-tours : requêtes ambiguës, demandes de clarification, corrections, interruptions, dialogue mêlant social et tâches à plusieurs étapes. Un harnais logiciel dédié orchestre la boucle d'interaction entre ce modèle et ses outils, pendant que des politiques spécialisées de navigation et de manipulation exécutent les compétences physiques sur le robot. Pour les intégrateurs et décideurs de la robotique humanoïde, ce travail marque un déplacement de priorité : après des années focalisées sur les benchmarks de perception et de contrôle bas niveau (préhension, locomotion, déplacement d'objets), l'enjeu se porte désormais sur la robustesse conversationnelle et la capacité à réviser un comportement en cours quand l'intention de l'utilisateur change. L'hypothèse testée est qu'affiner un modèle vision-langage-action sur des traces d'interaction réelles, plutôt que sur des démonstrations de tâches isolées, peut réduire l'écart souvent constaté entre démonstrations impressionnantes et fiabilité en usage réel. Les auteurs présentent Ludi 0.1 comme une étape intermédiaire, non comme un modèle fondation abouti : le système sert avant tout à générer les traces multimodales nécessaires pour entraîner un futur modèle plus intégré. Cette publication s'inscrit dans le sillage des modèles vision-langage-action déjà démontrés pour la manipulation, comme Pi-0 de Physical Intelligence, GR00T N2 de Nvidia ou Helix de Figure, et des plateformes humanoïdes commerciales telles qu'Optimus Gen 3 de Tesla ou Figure 03, dont les démonstrations restent centrées sur l'exécution de tâches plutôt que sur l'interaction sociale prolongée. Ludi 0.1 se distingue en ciblant explicitement la collaboration homme-robot en dialogue continu, un axe encore peu couvert par les annonces commerciales du secteur. L'article ne mentionne aucun déploiement industriel, ni volume de production, ni prix : il s'agit d'une contribution de recherche publiée sur arXiv, dont la suite annoncée est d'exploiter les traces collectées pour entraîner un futur modèle fondation combinant plus étroitement raisonnement social et compétences physiques.

IA physique❧Opinion

1 source

37

2629arXiv cs.RO 

Recomposition robotique continue par modélisation catégorielle persistante : co-conception, vérification et planification unifiées

Fin août 2026, une équipe de recherche publie sur arXiv (référence 2608.21676) un cadre mathématique destiné à reconcevoir un robot en continu, tout au long de sa vie opérationnelle, plutôt qu'une seule fois à la conception. Le robot y est modélisé comme un circuit au sein d'une catégorie monoïdale symétrique stricte, une structure algébrique dans laquelle matériel, logiciel et comportement sont synthétisés simultanément par un solveur SMT (satisfiabilité modulo théories), des variables symboliques libres permettant de résoudre à la fois des paramètres numériques et des choix entiers de composants. Le modèle répond aussi à des questions concrètes pour un système déployé sur la durée : cartographier les compromis entre configurations candidates (front de Pareto), diagnostiquer pourquoi une configuration est devenue infaisable, et calculer la reconfiguration minimale pour restaurer le fonctionnement. Comparée à des planificateurs de référence optimal-numérique, à base de flux et SMT, tous mesurés à bord d'un robot réel, la méthode est démontrée de bout en bout dans un scénario de recherche et sauvetage où le robot détecte lui-même son inaptitude et synthétise une nouvelle configuration globale. Solveur et logiciel associés sont publiés en open source. Ce travail cible un point faible classique de la robotique de terrain et industrielle : la plupart des robots sont conçus puis déployés dans une configuration figée, où chaque hypothèse posée à la conception devient une contrainte immuable en exploitation, ce qui les rend cassants dès qu'une panne, un changement de tâche ou d'environnement survient. Pour les intégrateurs qui exploitent des flottes sur plusieurs années, disposer d'un modèle capable de diagnostiquer automatiquement une défaillance de configuration et de proposer une correction minimale change la logique de maintenance, en la faisant passer du cas par cas manuel à une reconfiguration assistée par solveur. La démonstration reste néanmoins circonscrite à un seul scénario testé en conditions contrôlées, loin d'un déploiement en flotte réelle : il s'agit d'une preuve de concept académique, pas d'un produit commercialisé. Cette approche tranche avec la tendance dominante du secteur, portée par des modèles vision-langage-action comme GR00T N2, Pi-0 ou Helix, qui cherchent à rendre un robot plus adaptable via l'apprentissage de politiques logicielles sans toucher à sa configuration matérielle. Ici, c'est l'inverse : la recomposition conjointe du matériel, du logiciel et du comportement est formalisée mathématiquement plutôt qu'apprise sur des données. Le résumé publié ne cite aucune entreprise ni laboratoire commercial associé au projet, ce qui en fait une contribution de recherche fondamentale, sans pilote industriel ni calendrier de déploiement annoncés au-delà de la publication du code. Sa portée future dépendra de sa reprise par d'autres équipes académiques ou par des industriels cherchant à réduire la fragilité des robots déployés sur le long terme, dans la continuité des travaux existants sur la planification symbolique et la synthèse de systèmes assistée par solveurs.

Recherche❖Paper

1 source

37

2630arXiv cs.RO 

WAM-OPD : distillation on-policy pour les modèles d'action du monde

Des chercheurs publient WAM-OPD (arXiv:2608.22364v1), une méthode de post-entraînement pour les world action models (WAM), qui couplent prédiction vidéo du futur et génération d'actions robotiques. Une fois distillés pour accélérer l'inférence, ces modèles étudiants perdent des capacités et rencontrent des états mal couverts par les données hors ligne d'origine. WAM-OPD y répond par une distillation "on-policy" sans renforcement à récompense éparse : l'agent étudiant agit dans l'environnement, un enseignant figé annote ses historiques avec des cibles vidéo et action cohérentes, et la branche action s'entraîne sous son propre plan vidéo, comme au déploiement, via des adaptateurs légers et un régularisateur flow-matching. Sur le simulateur RoboTwin 2.0, le modèle Flash-WAM voit son taux de réussite passer de 0% à 58,3% sur HANDOVER MIC, et de 16,7% à 33,3% sur PUT OBJECT CABINET. Le résultat vise un compromis bien connu du secteur robotique : les modèles d'action pilotés par vidéo sont souvent trop lourds pour du contrôle temps réel, et leur compression classique dégrade la fiabilité. WAM-OPD montre qu'une supervision dense sur les trajectoires produites par l'étudiant en conditions réelles de déploiement peut restaurer une partie des compétences perdues, sans recourir à un apprentissage par renforcement coûteux. Pour les intégrateurs, c'est un signal à nuancer : les auteurs qualifient eux-mêmes leurs résultats de "preuve de capacité initiale", obtenue sur seulement deux tâches en simulation, loin d'une généralisation démontrée. Cette approche prolonge la lignée des modèles de monde vidéo appliqués à la robotique, où action et prédiction visuelle sont générées conjointement, une piste également suivie par des familles comme GR00T N2, Pi-0 ou Helix. Le défi reste constant : un enseignant volumineux doit être compressé pour tourner en boucle de contrôle rapide, au prix de compétences que la distillation classique ne restitue pas toujours. Seul le modèle ouvert Flash-WAM a été testé ici, sur le banc bimanuel RoboTwin 2.0, sans validation sur robot réel ni comparaison aux modèles commerciaux du marché. Les auteurs présentent ces résultats comme préliminaires et annoncent vouloir étendre l'évaluation avant toute conclusion sur la généralisation de la méthode.

Recherche❖Paper

1 source

37

2631arXiv cs.RO 

ODG-NoMaD : navigation guidée par direction via caméra aérienne

Une équipe de recherche publie ODG-NoMaD (Overhead-camera Direction-Guided NoMaD), une extension de la politique de navigation par diffusion NoMaD, décrite dans un article arXiv (identifiant 2608.21395v1) mis en ligne fin août 2026. NoMaD est une politique de vision-navigation apprise qui unifie exploration et navigation orientée-but dans un unique modèle de diffusion à masquage de but ; son point faible est que, dans un environnement inconnu sans image-but ni carte topologique, elle explore sans direction globale, en errant. ODG-NoMaD corrige ce défaut sans réentraîner le modèle : une caméra de profondeur en vue plongeante est utilisée une seule fois au déploiement pour construire une carte d'occupation et planifier un chemin global, segmenté en une direction cible souhaitée ; une carte de franchissabilité calculée image par image à partir de la caméra de profondeur embarquée du robot affine ensuite cette direction pour éviter les collisions. Le gradient d'un coût de direction cosinus est injecté dans les dernières étapes de débruitage de la diffusion, ce qui fait pivoter les trajectoires échantillonnées vers la direction voulue tout en conservant la multimodalité propre à l'exploration. Testée en simulation dans des environnements de bureau, avec et sans obstacles aléatoires, la méthode réduit la distance résiduelle à la cible jusqu'à un ordre de grandeur par rapport à l'exploration non guidée, surpasse le guidage par coût de point-but de NaviDiffusor, et est la seule configuration testée à rester sans collision sur tous les essais. L'intérêt pour l'industrie de la navigation mobile tient à la méthode plus qu'au résultat brut : ajouter une conscience directionnelle globale à une politique de diffusion figée, uniquement par guidage au moment de l'inférence, sans réentraînement coûteux, est directement transposable à d'autres piles de navigation pour robots mobiles autonomes (AMR) déployées en entrepôt ou en environnement de bureau. Il faut toutefois noter que les résultats restent limités à la simulation, sans validation sur robot réel rapportée dans l'article. ODG-NoMaD s'inscrit dans la lignée de NoMaD, référence de politique de diffusion pour la navigation visuelle, et se compare directement à NaviDiffusor, une autre approche de guidage par coût testée comme base de référence. Aucun acteur industriel ni déploiement commercial n'est associé à ces travaux, qui restent à ce stade une contribution académique ; une validation en conditions réelles constituerait la suite logique.

Recherche❖Paper

1 source

37

2632arXiv cs.RO 

EMPIRE : planification de manipulation, une représentation apprenable pour prédire les mouvements de main égocentriques

Une équipe de recherche publie EMPIRE, un framework en deux étapes pour prédire les mouvements bimanuels futurs des mains à partir de vidéo égocentrique, accompagné d'un nouveau dataset baptisé EMPIRE-651K. La première étape apprend un plan de manipulation explicite par main à partir du contexte multimodal ; la seconde synthétise les trajectoires futures en se conditionnant sur ces représentations gelées, sans les réapprendre. EMPIRE-651K compte 650 910 fenêtres d'entraînement réparties sur 111 tâches, chacune annotée d'un plan de manipulation par main. Sur les protocoles d'évaluation standards, EMPIRE atteint une erreur MPJPE de 84,53 mm et une erreur relative aux doigts de 38,97 mm, présentées comme état de l'art face aux méthodes existantes. Le code et le dataset sont publiés en accès libre sur GitHub (wangwen-banban/EMPIRE) ; le papier, référencé arXiv:2608.22449, reste un preprint de recherche. L'enjeu cible directement les approches VLM actuelles, qui associent généralement l'observation brute à la trajectoire future en une seule passe, sans étape intermédiaire de planification. Ce couplage pose un problème bien identifié : les gradients issus de la génération de mouvement viennent perturber les représentations de manipulation déjà apprises. En séparant explicitement planification et génération, EMPIRE isole ces deux apprentissages, un enjeu qui concerne l'ensemble des architectures vision-langage-action utilisées en robotique de manipulation, dans la lignée de Pi-0 ou GR00T N2. Pour les intégrateurs travaillant sur la téléopération, la capture de mouvement ou l'imitation learning, l'apport reste surtout méthodologique et un outil de benchmark : les gains annoncés sont mesurés sur des métriques de recherche, pas sur des taux de réussite en conditions réelles. La démarche s'inscrit dans la lignée des travaux récents sur la prévision de mouvement égocentrique, nourris par la multiplication des modèles VLA entraînés sur des démonstrations humaines. En découplant planification et synthèse de mouvement plutôt que d'opter pour un apprentissage end-to-end comme la plupart des méthodes existantes, les auteurs positionnent EMPIRE en alternative architecturale à ce courant dominant. La publication conjointe du code et d'un dataset de plus de 650 000 fenêtres annotées vise à en faire une référence réutilisable par d'autres laboratoires travaillant sur la dextérité bimanuelle. Aucune feuille de route de déploiement industriel n'est mentionnée à ce stade : le travail reste un jalon de recherche publié sur arXiv, pas une brique intégrée à un pipeline robotique commercial.

Recherche❖Paper

1 source

37

2633arXiv cs.RO 

Contrôle par vision guidée et cible conditionnée pour l'excavation autonome

L'équipe de recherche à l'origine du preprint arXiv:2608.21778v1, publié en août 2026 et intitulé « Vision Guided Target Conditioned Control for Autonomous Excavation », présente un système de contrôle pour pelles mécaniques autonomes entraîné et testé dans un environnement de simulation physique à sol déformable. Le principe : un masque cible aligné sur l'image sert de commande spatiale visuelle désignant la zone à creuser, tandis qu'un Action Chunking Transformer (ACT) conditionné par ce masque traduit des observations RGB multi-vues, la proprioception du bras et le masque cible en séquences de commandes joystick étendues dans le temps. Pour éviter que le modèle ignore la cible indiquée, les démonstrations d'entraînement associent une même scène à des masques différents et aux séquences d'actions correspondantes. Sur une tâche diagnostique de manipulation, le taux de réussite sur la cible grimpe de 4% pour un ACT sans condition à 63% pour un ACT conditionné par masque non apparié, puis à 96% avec la supervision par paires. Sur un scénario de dégagement séquentiel de tas de terre, la version conditionnée par paires retire 76,8% du volume contre 27,4% et 15,7% pour les deux méthodes de référence, avec une efficacité normalisée à 91% par rapport à un opérateur humain. Ce travail s'adresse à un problème resté largement non résolu dans l'automatisation du BTP et du terrassement : contrairement à la manipulation d'objets rigides, l'excavation implique une interaction sol-outil complexe et changeante, difficile à modéliser et à généraliser par apprentissage par imitation. Les résultats indiquent que le conditionnement visuel par cible et la structuration par paires de démonstrations réduisent significativement un biais connu des architectures type ACT, celui d'ignorer la consigne spatiale fournie. Il s'agit toutefois d'une validation uniquement en simulation, sans transfert vers une machine réelle démontré dans cet article. L'excavation autonome intéresse un écosystème industriel plus large, entre les efforts d'automatisation de flottes minières de Komatsu ou Caterpillar et les startups spécialisées comme Built Robotics ou SafeAI. Ce papier reste une contribution académique isolée, sans annonce de partenaire industriel ni de calendrier de transfert vers le réel, mais il illustre l'extension des architectures de type VLA/ACT, popularisées sur des bras manipulateurs et des humanoïdes, vers les engins de chantier lourds.

Recherche❖Paper

1 source

37

2634arXiv cs.RO 

LaGEA : des agents incarnés guidés par le langage pour la manipulation robotique

Des chercheurs présentent LaGEA (Language Guided Embodied Agents), une architecture combinant un modèle vision-langage (VLM) et l'apprentissage par renforcement (RL) pour la manipulation robotique, décrite dans une version mise a jour (v3) d'un article arXiv (2509.23155). Apres chaque tentative, le système résume l'épisode en langage naturel, localise les instants décisifs de la trajectoire, aligne ce retour avec l'état visuel dans une représentation partagée, puis transforme la progression vers l'objectif en récompenses bornées appliquées pas a pas. Un coefficient adaptatif, sensible aux échecs, rend ce signal dense en début d'exploration puis l'atténué avec la montée en compétence de l'agent. Sur les bancs d'essai simules Meta-World MT10 (dix taches de manipulation) et Robotic Fetch, LaGEA améliore le taux de réussite moyen de 9,0% sur des objectifs aléatoires, 5,3% sur des objectifs fixes et 17% sur les taches Fetch par rapport aux méthodes de référence, avec une convergence plus rapide. Le travail s'attaque a un problème classique du RL, la conception manuelle des fonctions de récompense, souvent couteuse et peu généralisable a de nouvelles taches. En montrant qu'un retour en langage naturel, structure et ancre temporellement, peut remplacer une partie de cette ingénierie, LaGEA nuance le narratif dominant autour des modèles vision-langage-action (VLA) de type Pi-0, GR00T N2 ou Helix, conçus pour piloter directement une politique de bout en bout : ici, le langage sert de superviseur d'apprentissage plutôt que de commande directe. Les gains rapportes restent obtenus en simulation, non sur du matériel réel, et demandent une confirmation sur des taches de manipulation physique. LaGEA prolonge les travaux exploitant les grands modèles vision-langage comme source de récompense ou de critique pour le RL, un axe de recherche actif depuis l'essor des modèles de fondation capables de décrire des objectifs et d'évaluer des trajectoires. Meta-World MT10 et Robotic Fetch sont des bancs d'essai standards de la communauté robotique, ce qui permet une comparaison directe avec l'état de l'art. S'agissant d'une version corrigée d'un article déjà publie, la contribution reste académique : aucun partenaire industriel, date de déploiement ou intégration produit n'est annonce a ce stade, la prochaine étape logique étant une validation sim-to-real sur robot physique.

Recherche❖Paper

1 source

37

2635arXiv cs.RO 

Manipulation robotique riche en contacts dans la construction par apprentissage zero-shot : contrôle adaptatif guidé par politique de diffusion

Une équipe de chercheurs présente un nouveau framework combinant des politiques de diffusion (diffusion policies) entraînées sur des données de pose et de force/couple générées par simulation, couplées à un contrôleur adaptatif inspiré de la méthode L1 qui corrige en ligne les actions prédites par la politique pour compenser les dynamiques de contact non modélisées. Le système a été testé sur trois tâches d'assemblage robotique dans le bâtiment : l'assemblage de charpente bois (timber joinery), le raccordement de tuyauterie (pipe fitting), et l'assemblage séquentiel d'une ferme de toit (truss) à échelle réelle. Les résultats rapportés font état de 100% de réussite sur les tâches d'assemblage isolées et de 90 à 100% de réussite sur les sous-tâches de l'assemblage séquentiel de ferme, avec des forces de contact plus faibles et plus stables que les méthodes de référence. Le papier, publié sur arXiv (2608.22100v1) fin août 2026, revendique un transfert "zero-shot" de la simulation vers le réel, c'est-à-dire sans réentraînement ni collecte de données supplémentaires sur le robot physique. Cette avancée cible un problème central et jusqu'ici mal résolu de la robotique du BTP : l'assemblage riche en contacts, où les tolérances serrées, les imprécisions de fabrication et la dynamique incertaine des contacts rendent les approches classiques peu fiables. Si les chiffres se confirment au-delà du benchmark, la méthode réduirait fortement le coût et le temps de collecte de données réelles nécessaires à l'entraînement des politiques, un frein majeur au déploiement de robots autonomes sur chantier. Elle apporte aussi un indice supplémentaire que les politiques de diffusion, combinées à un contrôle adaptatif classique, peuvent généraliser à des tâches de manipulation physique fine sans long cycle d'essais réels, un argument qui intéresse directement les intégrateurs et décideurs cherchant à automatiser des tâches d'assemblage répétitives et physiquement pénibles. Le travail s'inscrit dans la lignée des recherches en apprentissage par imitation et en contrôle robuste appliquées à la construction, un secteur confronté à une pénurie de main-d'oeuvre et à des cadences de chantier difficiles à automatiser avec des approches purement scriptées. Il se positionne face à des méthodes de référence comparées directement dans ses benchmarks, sans toutefois nommer de plateforme robotique commerciale ni de site de déploiement industriel : il s'agit à ce stade d'une démonstration de recherche en laboratoire et en simulation, pas d'un produit livré ou déployé sur un chantier réel. Les auteurs annoncent vouloir étendre l'approche à un éventail plus large de tâches de manipulation riches en contacts dans la construction, ce qui laisse présager des travaux de suite plutôt qu'un calendrier de commercialisation.

Recherche❖Paper

1 source

36

2636arXiv cs.RO 

Au-delà des emplacements d'instances : des modèles du monde sémantiquement riches pour la planification d'interactions physiques

Des chercheurs présentent SR-WM (Semantically Rich World Model), un modèle du monde conditionné par la tâche pour la planification d'interactions physiques en robotique de manipulation, détaillé dans un article publié sur arXiv sous la référence 2608.22294v1. Plutôt que de se limiter à prédire des observations futures ou des caractéristiques latentes, comme le font les modèles du monde classiques, SR-WM structure sa représentation autour de cinq rôles fonctionnels explicites: gripper, cible, but, relation et phase. Un encodeur d'entités visuelles extrait des hypothèses d'entités à partir de caractéristiques de patchs pré-entraînées, les masques de segmentation servant d'indices optionnels plutôt que d'entrées obligatoires. Un module de liaison de rôles associe ensuite ces hypothèses aux rôles spécifiques à la tâche, tandis qu'un modèle de dynamique conditionné par l'action prédit les transitions de rôles ainsi que des éléments fins: contact, établissement de relations entre objets, préservation de ces relations et changement de phase. L'ensemble est évalué sur les quatre suites de simulation LIBERO, avec des tests de transfert inter-suites, des diagnostics de perception et une analyse de sensibilité aux actions. Pour l'industrie de la manipulation robotique et les équipes travaillant sur des architectures vision-langage-action (VLA), ce travail cible un écart précis: un modèle qui prédit correctement des pixels ou des embeddings futurs ne garantit pas qu'il comprenne si une action préserve les relations nécessaires à la réussite d'une tâche, comme ne pas rompre une prise ou déplacer un objet hors de sa zone cible. En rendant explicites des rôles fonctionnels plutôt que de s'appuyer sur des slots d'objets indifférenciés ou un état monolithique, SR-WM propose une interface sémantique reliant dynamique visuelle et décision de planification, utilisée pour générer plusieurs candidats d'action, les reclasser selon l'étape de la tâche, et rechantillonner en cas de violation détectée. C'est une piste concrète pour fiabiliser la sélection d'actions issues de politiques apprises, plutôt que de juger leur qualité sur des démonstrations sélectionnées ou des taux de réussite bruts en simulation. Ce travail s'inscrit dans la lignée des recherches sur les représentations centrées objets pour les modèles du monde, qui cherchent depuis plusieurs années à dépasser les limites des slots d'instances indifférenciés en robotique par apprentissage. LIBERO, le benchmark utilisé pour l'évaluation, est devenu une référence standard pour tester la généralisation des politiques de manipulation entre familles de tâches. L'article ne fait état d'aucun déploiement matériel, partenariat industriel ou test sur robot réel: il s'agit d'une contribution académique évaluée exclusivement en simulation. Les suites naturelles pour ce type d'approche, transfert sim-to-real et intégration à des pipelines VLA existants, ne sont ni annoncées ni datées dans l'article.

Recherche❖Paper

1 source

36

2637arXiv cs.RO 

Téléopération bilatérale du corps entier avec estimation multi-étapes des paramètres d'objets pour la locomanipulation humanoïde à roues

Un article mis à jour sur arXiv (référence 2508.09846, version 2) décrit un système de téléopération bilatérale corps entier pour un robot humanoïde à roues effectuant des tâches de manipulation en mouvement. L'apport technique central est un module d'estimation en ligne, en plusieurs étapes, des paramètres inertiels de l'objet saisi (masse, centre de masse, inertie). Le pipeline enchaîne un estimateur de taille par vision, une estimation initiale générée par un grand modèle vision-langage (VLM), puis un raffinement par échantillonnage hiérarchique découplé en plusieurs hypothèses, conçu pour limiter l'impact d'une erreur du VLM. Ce module tourne en parallèle d'une simulation haute-fidélité et du matériel réel, avec mise à jour en temps réel du point d'équilibre du robot. Les auteurs valident l'approche sur un prototype maison équipé d'une pince robotique et d'une interface homme-machine, démontrant en temps réel des tâches de levage, transport et dépose d'une charge représentant environ un tiers du poids corporel du robot. Pour l'industrie robotique, ce travail cible un verrou concret de la téléopération à retour haptique : sans connaissance des propriétés physiques de l'objet manipulé, le retour de force transmis à l'opérateur reste imprécis, ce qui brise la dynamique du contrôle corps entier. Combiner vision et VLM pour réduire l'espace de recherche avant d'affiner par échantillonnage accélérerait, selon les auteurs, l'estimation par rapport à des méthodes purement stochastiques ; l'abstract ne fournit toutefois aucun temps de cycle chiffré ni comparaison directe, ce qui invite à la prudence sur l'ampleur réelle du gain. L'intérêt pour les intégrateurs est de voir les VLM utilisés non pas pour générer des politiques d'action autonomes à la manière des approches VLA, mais comme prior physique exploitable en téléopération, une piste intermédiaire entre autonomie complète et contrôle humain pur. Cette publication s'inscrit dans la recherche sur la téléopération bilatérale de robots humanoïdes, où l'estimation dynamique des objets manipulés reste un problème ouvert. Elle se distingue des approches commerciales dominantes de robots humanoïdes bipèdes visant l'autonomie complète via des modèles VLA génératifs, en misant plutôt sur une plateforme à roues pilotée par un opérateur humain en boucle, un choix qui privilégie stabilité et charge utile relative. L'article ne précise ni institution porteuse ni calendrier de commercialisation : il s'agit d'une démonstration de faisabilité en laboratoire, sans pilote industriel ni partenaire annoncé à ce stade.

Recherche❖Paper

1 source

36

2638arXiv cs.RO 

Interaction et compagnonnage pilotés par modèle de langage multimodal pour robots de service en maison de retraite

Des chercheurs présentent un système de robot compagnon destiné aux établissements de soins pour personnes âgées, décrit dans un article publié le 25 août 2026 sur arXiv (arXiv:2608.21387v1). Le système combine trois couches fonctionnelles : une couche de perception assurant le suivi visuel actif de la personne via un gimbal motorisé qui maintient l'utilisateur dans le champ de vision malgré les occlusions ou mouvements brusques, une couche d'interaction pilotée par un grand modèle de langage (LLM) qui interprète les requêtes vocales et les traduit en actions robotiques comme l'escorte ou la navigation sémantique, et un agent de sécurité basé sur un modèle vision-langage (VLM) qui analyse en continu les images pour détecter les chutes et postures anormales et déclencher des alertes d'urgence. Les auteurs rapportent des résultats expérimentaux montrant un suivi et une interaction fiables avec des humains, ainsi qu'une détection efficace des chutes potentielles. L'article ne précise ni le matériel robotique utilisé, ni les modèles LLM/VLM spécifiques déployés, ni de volumes de test chiffrés. Cette publication illustre une tendance de fond dans la robotique de service : l'intégration de plusieurs briques technologiques distinctes, initialement traitées séparément dans la littérature, en un système unifié combinant navigation, dialogue naturel et surveillance de sécurité. Pour les intégrateurs et décideurs du secteur médico-social, cela répond à un besoin concret d'allègement de la charge des aidants tout en maintenant une surveillance continue, un enjeu critique face au vieillissement démographique et à la pénurie de personnel soignant dans les maisons de retraite. L'approche confirme aussi la viabilité croissante des architectures VLA (vision-langage-action) et VLM pour des tâches de sécurité en temps réel, au-delà des simples démonstrations de laboratoire, même si l'absence de détails sur le taux de faux positifs ou la robustesse en conditions réelles d'EHPAD appelle à la prudence. Ce travail s'inscrit dans un courant de recherche plus large sur les robots sociaux d'assistance, où la plupart des systèmes existants se limitent à des fonctions isolées comme la téléprésence ou le rappel de médicaments, sans capacité de compagnonnage continu. Les auteurs positionnent explicitement leur contribution comme comblant ce manque d'intégration entre suivi humain, interaction naturelle et sécurité. L'article ne mentionne pas de partenariat industriel, de nom de plateforme robotique commerciale, ni de calendrier de déploiement pilote en établissement réel, suggérant un stade encore préliminaire, proche de la preuve de concept académique plutôt que d'un produit prêt à être industrialisé.

Recherche❖Paper

1 source

36

2639arXiv cs.RO 

RACO : optimisation de l'objectif grossier tenant compte de la fiabilité pour la navigation vision-langage des drones d'inspection

Un article publié en août 2026 sur arXiv (référence 2608.22678) présente RACO, un framework de navigation pour drones guidés par instructions en langage naturel (UAV-VLN), pensé pour les missions d'inspection plutôt que pour la simple atteinte d'un objectif, et LG-UVI, un protocole d'évaluation associé dérivé des jeux de données CityNav et CityRefer. Les auteurs pointent une faiblesse des architectures existantes en deux temps ("coarse-to-fine"): l'objectif grossier prédit avant le raffinement local est traité comme fiable alors qu'il peut dériver vers une région plausible mais erronée, ce que l'étape de raffinement fine ne parvient ensuite pas à corriger. LG-UVI ajoute à ces scènes urbaines simulées des objets cibles, des distracteurs visuellement ou sémantiquement proches, des zones d'inspection typées, ainsi que des métriques distinctes pour l'arrivée en zone et pour la confirmation de l'objet. RACO traite l'objectif grossier comme une hypothèse à vérifier en temps réel plutôt qu'un point de passage fixe, en s'appuyant sur des ancres candidates au niveau objet pour corriger la localisation avant la première étape de navigation puis à la frontière entre les deux étapes, avant d'appliquer un raffinement terminal adaptatif pour les cas de quasi-échec en fin de trajectoire. Sous un protocole d'évaluation en ligne unifié, il améliore le taux de succès de 9,53 points de pourcentage sur le jeu de validation "unseen" et de 7,98 points sur le jeu de test "unseen", par rapport à une reproduction de la référence antérieure HETT. Ce résultat touche un point sensible pour l'inspection industrielle par drone: dans un scénario réel de contrôle d'infrastructure, un appareil qui s'arrête devant le mauvais objet mais confirme tout de même une anomalie représente un risque opérationnel plus grave qu'un simple échec de navigation. En montrant qu'une part importante des erreurs vient d'une dérive précoce de l'objectif grossier, non rattrapée par le raffinement local classique, les auteurs remettent en cause l'hypothèse implicite de nombreux pipelines coarse-to-fine selon laquelle l'étape fine peut compenser une estimation grossière imparfaite. Pour les équipes travaillant sur la navigation vision-langage appliquée aux drones d'inspection, l'implication pratique est qu'une vérification explicite et intermédiaire de l'objectif doit être budgétisée, plutôt que de tout reposer sur la puissance du modèle de perception final. Un gain de 8 à 10 points de taux de succès mesuré sur un protocole en ligne unifié, et non sur des scénarios sélectionnés, reste notable dans un domaine où les progrès se comptent généralement en unités de pourcentage. RACO s'inscrit dans la lignée des travaux sur la navigation vision-langage pour drones en environnement urbain simulé, qui s'appuient historiquement sur CityNav et CityRefer pour l'entraînement et l'évaluation. La comparaison se fait face à HETT, une architecture coarse-to-fine antérieure que les auteurs ont reproduite faute de protocole standardisé pour les tâches d'inspection, un manque que LG-UVI vise justement à combler en distinguant l'atteinte d'un objectif générique de la confirmation fiable d'un objet précis en présence de distracteurs. L'article ne mentionne ni déploiement sur drone physique ni partenariat industriel: il s'agit d'une contribution de recherche évaluée en simulation, dont la suite logique serait une validation sur plateforme réelle et une extension à d'autres familles de distracteurs et de zones d'inspection.

Recherche❖Paper

1 source

36

2640arXiv cs.RO 

DreamMimic : apprentissage de la loco-manipulation visuomotrice du corps entier via un modèle du monde

Un article publié le 25 août 2026 sur arXiv (référence 2608.22278v1) présente DreamMimic, un framework de recherche pour le contrôle de robots humanoïdes en loco-manipulation à corps entier à partir d'entrées visuelles. La méthode distille une politique "enseignante" disposant d'informations privilégiées (état complet de la simulation) vers une politique "étudiante" qui ne dispose que d'entrées visuelles au moment du déploiement. Plutôt que d'utiliser le modèle du monde de type Dreamer (RSSM, Recurrent State-Space Model) pour de la planification comme c'est l'usage classique, les auteurs le détournent pour apprendre une dynamique latente prédictive servant à la fois d'espace de représentation et de signal de supervision multi-étapes conditionné par l'action. Le système ajoute des têtes de prédiction auxiliaires pour l'état privilégié, le contact, l'état des objets et la récompense, et introduit un mécanisme appelé Performance-Conditioned Guidance (PCG), qui ajuste dynamiquement l'équilibre entre guidage par l'enseignant et exploration autonome. Les expériences ont été menées sur les benchmarks de simulation OMOMO et BEHAVE, deux jeux de données de référence pour le suivi d'interactions humain-objet, sans déploiement sur robot physique ni précision de gabarit, de degrés de liberté ou de charge utile. Pour le secteur de la robotique humanoïde, ce travail s'attaque à un problème central plutôt qu'à une démonstration produit : comment transférer des compétences de manipulation en contact riche, apprises avec des informations privilégiées en simulation, vers des contrôleurs qui ne s'appuient que sur la vision au moment de l'exécution, un enjeu directement lié au fossé entre performances en simulation et robustesse réelle. Les résultats indiqués montrent une amélioration du suivi par rapport à des bases vision-only existantes, suggérant que les modèles du monde peuvent stabiliser la distillation de politiques visuelles dans des tâches de manipulation dynamique. Il s'agit toutefois d'un résultat de simulation, pas d'une validation sur matériel réel. Le travail s'inscrit dans la lignée des modèles du monde façon Dreamer, initialement conçus pour la planification en apprentissage par renforcement, et dans la vague plus large des architectures vision-langage-action (VLA) qui cherchent à faire tenir des comportements complexes à l'échelle, à l'image de Pi-0, GR00T N2 ou Helix. Le code de DreamMimic est publié sur GitHub, et les auteurs mentionnent des tests qualitatifs supplémentaires sur des changements de morphologie et de simulateur, sans annoncer pour l'instant de passage à des essais sur robot physique.

Recherche❖Paper

1 source

36

2641arXiv cs.RO 

Dans quelle mesure le niveau d'obésité perçu des robots humanoïdes influence-t-il la confiance que leur accordent les personnes ?

Une étude publiée sur arXiv (version 2, remplaçant une préversion antérieure) s'attaque à une question inédite en interaction humain-robot: l'influence du niveau d'obésité perçu d'un robot humanoïde sur la confiance qu'on lui accorde. Les chercheurs soulignent d'abord un problème méthodologique: l'indice de masse corporelle (IMC), outil standard pour mesurer l'obésité chez l'humain, n'a aucun sens appliqué à un robot. Ils ont donc conçu une étude intra-sujets où des participants répondaient à un questionnaire en ligne préalablement validé tout en visualisant deux images de robots humanoïdes, l'un présentant une corpulence standard, l'autre une corpulence perçue comme élevée. Résultat principal: les robots perçus comme moins "obèses" recueillent une confiance significativement plus élevée que leurs équivalents à corpulence perçue plus forte. Pour l'industrie robotique, ce travail ajoute une variable de design largement ignorée jusqu'ici. Les travaux antérieurs en HRI avaient déjà établi que la taille ou la hauteur d'un robot modifient la confiance perçue, mais jamais la silhouette ou la corpulence n'avait été isolée comme facteur. Pour les fabricants de robots humanoïdes destinés à l'entrepôt, au domicile ou aux services d'accueil, ce résultat suggère que les choix esthétiques de carrosserie et de proportions corporelles pèsent sur l'acceptation utilisateur au même titre que des spécifications fonctionnelles comme la charge utile ou le nombre de degrés de liberté. Cela invite aussi à développer des échelles perceptuelles spécifiques aux robots, puisque les métriques humaines classiques comme l'IMC ne se transposent pas. Sur le plan méthodologique, l'étude s'appuie sur une comparaison contrôlée de deux images plutôt que sur une interaction avec des robots physiques, une approche peu coûteuse pour un premier tri de morphologies mais qui laisse ouvertes des questions de réplication en conditions réelles, de biais culturels dans la perception de la corpulence, et d'effets à long terme lors d'interactions répétées. Elle s'inscrit dans une littérature HRI encore jeune sur les déterminants visuels de la confiance envers les robots, aux côtés des travaux sur la taille, le genre perçu ou le degré d'anthropomorphisme, et ouvre la voie à des études de suivi sur des prototypes physiques plutôt que des images statiques.

Recherche❖Paper

1 source

36

2642arXiv cs.RO 

MDCPP : planification dynamique de trajectoires de couverture multi-robots pour l'adaptation de la charge de travail

Une équipe de recherche publie sur arXiv (arXiv:2509.23705v2, version révisée) un article intitulé « MDCPP: Multi-Robot Dynamic Coverage Path Planning for Workload Adaptation », qui propose une méthode de planification de couverture pour flottes de robots mobiles capable de s'adapter aux vitesses de déplacement variables qu'imposent des tâches de détection ou d'interaction. Le système apprend un champ de charge de travail modélisé par un mélange de gaussiennes à partir d'observations partielles, prédit le temps de service cellule par cellule, puis répartit en continu les zones non couvertes via une allocation distribuée sous contrainte de capacité. Les auteurs démontrent la terminaison finie et l'optimalité locale par paires de chaque cycle d'allocation synchronisé, bornent la dégradation du temps de complétion (makespan) due aux erreurs d'estimation, et posent des conditions suffisantes de couverture complète. Un banc d'essai de 600 simulations compare MDCPP à quatre approches, le balayage classique, LS-MCPP, la réaffectation réactive et un oracle de référence, avant une validation matérielle limitée à trois robots terrestres sans pilote (UGV) soumis à des effets réels de localisation, de motorisation et de contrôle sans fil. L'enjeu dépasse l'exercice académique: la quasi-totalité des algorithmes de couverture multi-robots suppose une vitesse constante, hypothèse qui s'effondre dès qu'un robot doit ralentir pour scanner, pulvériser ou inspecter certaines zones plus densément que d'autres, un cas fréquent en agriculture de précision, nettoyage industriel ou inspection d'entrepôts. Le benchmark montre que le gain de la prédiction de charge de travail est surtout significatif dans les scénarios fortement hétérogènes, où MDCPP améliore le makespan agrégé par rapport aux méthodes non prédictives, un signal utile pour les intégrateurs arbitrant entre planification statique et adaptation dynamique. Le passage du simulateur à trois UGV physiques constitue une validation partielle mais concrète au-delà de la simulation, même si l'échelle testée reste très en deçà d'un déploiement industriel et ne permet pas d'extrapoler directement les gains à des flottes de plusieurs dizaines d'unités. Le papier s'inscrit dans la lignée des travaux sur le coverage path planning multi-robots, champ de recherche mature dont les références incluent le balayage géométrique et des variantes récentes comme LS-MCPP, auxquelles MDCPP ajoute une couche prédictive fondée sur l'apprentissage du champ de charge plutôt qu'une simple réaction à la charge observée. La mention « replace » sur arXiv indique une version révisée d'un préprint déjà soumis, sans qu'aucun laboratoire, financement ou calendrier de commercialisation ne soit précisé dans le résumé. Aucune suite n'est annoncée, mais la limitation assumée du banc d'essai matériel à trois véhicules laisse présager, comme étape logique suivante, un passage à l'échelle vers des flottes plus larges et des environnements extérieurs moins contrôlés avant toute application industrielle réelle.

Recherche❖Paper

1 source

36

2643arXiv cs.RO 

CIDER : distillation interactive continue pour l'apprentissage par renforcement incarné

Des chercheurs en robotique ont publié en août 2026 sur arXiv (référence 2608.21899v1) un article décrivant CIDER (Continual Interactive Distillation for Embodied Reinforcement Learning), un cadre d'apprentissage par renforcement continu pour bras manipulateurs. Le système part d'un constat pratique : l'apprentissage par renforcement interactif en boucle humaine sur robot réel permet déjà d'acquérir une politique de manipulation efficace pour une tâche donnée en quelques dizaines de minutes, mais aucune méthode existante ne parvenait à enchaîner plusieurs tâches sans oubli catastrophique des compétences précédentes. CIDER gèle la politique historique cumulée pour en faire un modèle "professeur" avant chaque nouvel apprentissage, puis alterne apprentissage de la nouvelle tâche et distillation de rétention, avec un mécanisme de séparation des gradients ("gradient routing") qui distingue ceux dédiés à l'acquisition de la nouvelle tâche de ceux dédiés à la préservation des comportements acquis. L'équipe a testé un unique acteur partagé sur six tâches de manipulation réelles, domestiques et industrielles, chaque nouvelle tâche étant apprise en 10 à 20 minutes tout en conservant un taux de succès mesuré élevé sur les tâches précédentes, alors que toutes les méthodes de référence comparées oublient au moins une compétence en cours de séquence. Ce résultat compte dans un secteur où l'apprentissage continu reste l'un des principaux verrous pour des robots véritablement polyvalents. La plupart des politiques de manipulation actuelles, qu'elles reposent sur des modèles vision-langage-action comme Pi-0, GR00T N2 ou Helix, sont entraînées hors ligne sur de larges jeux de données agrégés plutôt que mises à jour en continu sur le terrain ; ajouter une tâche implique généralement un nouveau cycle d'entraînement et une revalidation complète des compétences existantes. En montrant qu'un seul acteur peut apprendre séquentiellement six tâches réelles sans réentraînement complet ni dégradation mesurée des tâches antérieures, CIDER ouvre une piste pour des intégrateurs qui voudraient faire évoluer un robot déployé en usine ou en environnement domestique en lui ajoutant des tâches au fil de l'eau, sans immobiliser la ligne pour une campagne de réentraînement globale. Il s'agit néanmoins d'un résultat de recherche obtenu en laboratoire sur six tâches et un seul bras robotique, pas d'un produit commercialisé ni d'un déploiement en flotte. CIDER s'inscrit dans la lignée des travaux récents sur l'apprentissage par renforcement interactif en boucle humaine, qui ont déjà montré qu'un robot pouvait acquérir une tâche de manipulation en quelques dizaines de minutes avec une supervision humaine ponctuelle ; la contribution ici est d'étendre ce paradigme à l'apprentissage continu, un problème jusque-là traité surtout via l'apprentissage par imitation à grande échelle sur des modèles fondation de type VLA plutôt que par du renforcement en ligne. Les auteurs positionnent explicitement leur approche face aux méthodes existantes de renforcement continu en conditions réelles, qui ne contraignent pas le comportement antérieur et souffrent donc d'un oubli sévère. Des études d'ablation accompagnent l'article pour isoler les choix de conception qui gouvernent l'arbitrage entre stabilité, soit la conservation des acquis, et plasticité, soit la capacité à apprendre du nouveau, un compromis classique en apprentissage continu. L'article ne mentionne ni partenariat industriel, ni feuille de route de déploiement au-delà du laboratoire, ni calendrier de suite annoncé.

Recherche❖Paper

1 source

36

2644arXiv cs.RO 

Triplet2Track : un système hiérarchique à représentations centrées objets pour une manipulation fiable à long horizon

Des chercheurs publient le Triplet-to-Track System (TTS), décrit dans un article déposé sur arXiv sous la référence 2608.22800v1 fin août 2026. Il s'agit d'un système hiérarchique en boucle fermée pour l'apprentissage par imitation appliqué à la manipulation robotique à long horizon, conçu pour s'appuyer sur des vidéos humaines plutôt que sur des données collectées directement par des robots. TTS représente les sous-objectifs de haut niveau sous forme de triplets ancrés dans les instances d'objets présents dans la scène, les traduit en « track priors », des trajectoires de référence continues guidant l'exécution bas niveau, puis surveille en permanence la progression de la tâche à partir des observations pour déclencher une replanification en ligne si nécessaire. Sur un ensemble diversifié de tâches réelles à long horizon, le système atteint un taux de réussite moyen de 74,8 % et démontre une capacité de généralisation à la fois au niveau des objets et de manière compositionnelle, c'est-à-dire sur des combinaisons de sous-tâches non vues à l'entraînement. Ce résultat s'attaque à une fracture bien connue du secteur robotique entre la démonstration impressionnante et la fiabilité réelle en usage prolongé. Les modèles VLA (vision-language-action) end-to-end restent gourmands en données et largement opaques, rendant le diagnostic d'échec quasi impossible, tandis que les pipelines hiérarchiques classiques, plus interprétables, produisent souvent des plans mal ancrés dans les observations et déconnectés des actions bas niveau, ce qui provoque des comportements en boucle ouverte et des erreurs de planification proches de l'hallucination. En combinant représentation orientée objet, trajectoires continues et boucle de feedback en ligne, TTS cherche à réconcilier interprétabilité et robustesse. Pour les intégrateurs et décideurs industriels, l'apport le plus concret est la réduction de la dépendance à des flottes de téléopération coûteuses au profit de vidéos humaines, une source de données bien plus facile à faire monter en échelle. TTS s'inscrit dans un débat de recherche non tranché entre modèles VLA généralistes et architectures hiérarchiques à base de plans, sans qu'aucune des deux écoles n'ait résolu seule le compromis entre lisibilité des décisions et fiabilité en boucle fermée. L'article ne précise ni le laboratoire d'origine ni une intégration prévue sur une plateforme commerciale existante ; il s'agit à ce stade d'une contribution académique, et le taux de 74,8 %, mesuré sur des tâches choisies par les auteurs, reste à confirmer sur des benchmarks indépendants avant toute extrapolation à des déploiements industriels réels.

Recherche❖Paper

1 source

36

2645arXiv cs.RO 

RPL : un apprentissage robuste de la locomotion perceptive humanoïde sur terrains difficiles

Des chercheurs présentent RPL (Robust Perceptive Locomotion), un cadre d'entraînement en deux étapes pour la locomotion multidirectionnelle de robots humanoïdes sur terrains difficiles, décrit dans une version révisée (v2) d'un article déposé sur arXiv (2602.03002). La méthode entraîne d'abord des politiques expertes spécifiques à chaque type de terrain, à partir d'observations privilégiées de cartes de hauteur, pour maîtriser séparément locomotion et manipulation. Ces experts sont ensuite distillés dans une politique unique basée sur un transformer, alimentée par plusieurs caméras de profondeur couvrant un large champ de vue. Deux techniques rendent cette distillation robuste en conditions multidirectionnelles : une mise à l'échelle des caractéristiques de profondeur pilotée par les commandes de vitesse, et un masquage aléatoire latéral pour gérer les observations de profondeur asymétriques et les largeurs de terrain inédites. Pour entraîner ce système à grande échelle, les auteurs ont développé un moteur de simulation multi-profondeur qui projette des rayons sur les maillages dynamiques du robot et les maillages statiques du terrain en environnements massivement parallèles, avec un gain de vitesse de 5 fois par rapport aux pipelines de rendu de profondeur des simulateurs existants, tout en modélisant latence, bruit et pertes de capteur réalistes. En conditions réelles, le robot a porté une charge de 2 kg tout en franchissant des pentes de 20 degrés, des escaliers aux marches de 22, 25 et 30 cm, ainsi que des pierres de gué de 25 cm sur 25 cm séparées par des espaces de 60 cm. Cette démonstration s'attaque directement à un angle mort du secteur : la plupart des vidéos promotionnelles de robots humanoïdes montrent une marche avant sur sol plat, alors que la robustesse multidirectionnelle sur terrain irrégulier, avec charge utile, reste rarement documentée en conditions réelles et non scénarisées. Pour les intégrateurs industriels envisageant des humanoïdes en logistique ou en inspection de sites, la capacité à transporter 2 kg sur escaliers et pierres de gué constitue un signal plus parlant que des mesures de vitesse ou de temps de cycle en environnement contrôlé. RPL s'inscrit dans la lignée des approches d'apprentissage par distillation enseignant-élève, déjà utilisées pour la locomotion quadrupède et bipède, mais appliquées ici spécifiquement au défi de la vision par profondeur multidirectionnelle chez l'humanoïde. L'accent mis sur un simulateur maison optimisé pour le rendu de profondeur souligne à quel point le goulot d'étranglement actuel du secteur reste moins l'algorithme de contrôle que l'infrastructure de simulation capable de générer des données réalistes à l'échelle. L'article ne précise pas de plateforme robotique commerciale ni de calendrier de déploiement, s'agissant d'une contribution de recherche plutôt que d'une annonce produit.

Recherche❖Paper

1 source

36

2646arXiv cs.RO 

Un cadre sensible à la latence pour l'apprentissage de politiques visuomotrices sur robots industriels

Un article publié sur arXiv (identifiant 2602.14255, version 2) présente un cadre logiciel pour déployer des politiques visuomotrices de bout en bout sur des bras robotiques industriels, où le décalage entre observation et exécution, causé par les latences d'observation, d'inférence et d'exécution, est amplifié par les interfaces de contrôle haut niveau et la dynamique de boucle fermée plus lente de ce matériel. Le système combine perception multimodale calibrée en latence, synchronisation des données, pipeline de communication unifié et interface de téléopération pour collecter des démonstrations expertes. Son mécanisme central horodate chaque séquence d'actions prédite et n'exécute que celles encore réalisables au moment prévu, permettant une inférence et une exécution asynchrones sans modifier l'architecture ni l'entraînement de la politique. Sur une tâche d'assemblage à contacts riches, avec une latence d'inférence variant de 100 à 500 millisecondes, cette approche maintient la durée de tâche et la fluidité du mouvement à 13% et 9% près de la référence de démonstration humaine, tout en évitant le ralentissement progressif du mode bloquant et les dépassements de force de contact importants de l'exécution asynchrone naïve. Ce travail vise un angle mort du déploiement industriel des politiques vision-langage-action (VLA) : les démonstrations de manipulation les plus spectaculaires sont réalisées sur des bras de recherche rapides, alors que les bras industriels, aux boucles de contrôle nettement plus lentes, exposent frontalement le problème de latence que les vitrines commerciales masquent souvent. Pour les intégrateurs et décideurs industriels, la leçon pratique est qu'une politique validée en laboratoire peut se dégrader, voire devenir dangereuse en contexte de contact riche, une fois transposée sur un robot industriel réel sans traitement explicite du délai d'inférence, et qu'un simple étage d'ordonnancement temporel des actions, sans retouche de l'architecture ni ré-entraînement, suffit à corriger ce comportement. L'étude part du constat que les robots industriels sont de plus en plus utilisés en construction et en fabrication avec des politiques apprises par imitation, généralement testées sur du matériel de laboratoire aux dynamiques plus rapides que les bras industriels réels. Contrairement aux annonces produit très médiatisées dans l'humanoïde, il s'agit ici d'une contribution de recherche méthodologique publiée en preprint, sans partenaire industriel ni calendrier de déploiement commercial mentionnés. La suite logique serait d'étendre ce cadre à d'autres tâches de manipulation à contacts riches et à des politiques VLA plus larges, afin de vérifier si la stratégie d'ordonnancement temporel se généralise au-delà du cas d'assemblage testé.

IA physique❧Opinion

1 source

36

2647arXiv cs.RO 

CounterAlign : supervision contrefactuelle pour les modèles vision-langage-action

Publié le 25 août 2026 sur arXiv sous la référence 2608.21740, l'article intitulé "CounterAlign: Counterfactual Supervision for Vision-Language-Action Models" propose une nouvelle méthode d'entraînement pour les modèles vision-langage-action (VLA), la brique logicielle qui traduit instructions textuelles et images en commandes motrices pour les robots. Le constat de départ est que l'apprentissage par clonage comportemental (behavior cloning), standard du secteur, n'expose le modèle qu'à des démonstrations d'expert réussies, sans jamais lui montrer quelles actions seraient incorrectes ou hors instruction. Les auteurs contournent le coût de collecte de trajectoires négatives ou de récompenses annotées en générant des tuples contrefactuels: chaque action d'expert est associée à une instruction différente et volontairement incompatible, puis un discriminateur adversarial apprend à partir de ces paires un modèle de récompense ancré dans l'instruction, utilisable pour du RL hors ligne, sans rollouts ni annotations supplémentaires. Testée sur le benchmark LIBERO-PRO, conçu pour mesurer la robustesse face aux changements de position d'objets et de tâches, la méthode améliore les performances par rapport à une référence récente jugée état de l'art. Des essais sur robot réel, menés sur la plateforme TX-G2 compatible AGIBot G2, confirment l'avantage face à d'autres approches concurrentes, sans que l'article ne publie de chiffres précis de taux de réussite. L'enjeu dépasse le simple gain de benchmark: il touche au goulot d'étranglement central de l'apprentissage VLA, la rareté des données négatives ou des récompenses annotées, coûteuses à produire en robotique réelle. En montrant qu'une supervision plus dense peut être extraite des démonstrations déjà collectées plutôt que d'exiger une collecte additionnelle, les auteurs offrent une piste concrète aux équipes qui entraînent des modèles VLA à grande échelle, dans la lignée de Pi-0 chez Physical Intelligence, GR00T N2 chez Nvidia ou Helix chez Figure. La méthode s'attaque à un défaut connu des politiques entraînées par simple clonage: leur fragilité face à de petites perturbations, comme un objet déplacé, un écart fréquemment cité entre démonstrations filmées et comportement réel sur le terrain. Il s'agit néanmoins d'un résultat de recherche en préprint, validé sur un benchmark et un nombre limité d'essais réels, et non d'un produit déployé en production. Le clonage comportemental s'est imposé comme paradigme dominant à mesure que les VLA passaient à l'échelle, mais ses limites en matière de supervision négative sont documentées depuis plusieurs années, tandis que le renforcement classique bute sur le coût de l'ingénierie de récompense ou de la collecte de données non expertes. CounterAlign s'inscrit dans une famille de techniques d'alignement par modélisation de récompense et discrimination adversariale, proches par l'esprit des méthodes de RLHF développées pour les grands modèles de langage, mais adaptées ici aux contraintes de la robotique physique. Le résumé ne détaille ni les baselines concurrentes précises ni de calendrier de déploiement industriel, et aucun acteur français ou européen n'apparaît dans les expériences décrites. La suite logique, non confirmée par les auteurs, serait une extension à davantage de plateformes robotiques et une comparaison plus large face aux modèles VLA commercialisés.

Recherche⚡Actu

1 source

36

2648arXiv cs.RO 

Le filtrage physique favorise la généralisation de l'apprentissage robotique

Des chercheurs publient un article intitulé « Physics Filtering Favors the Generalization of Robot Learning » (arXiv:2608.22701v1, fin août 2026). Ils présentent PhyFilter, un module de rétroaction léger et agnostique au modèle qui corrige les sorties d'un système d'apprentissage grâce à des résidus filtrés par la physique. Ses paramètres s'optimisent automatiquement via un algorithme d'auto-apprentissage, sans réglage manuel, ce qui permet une intégration directe avec des politiques robotiques variées. L'équipe valide PhyFilter sur quatre systèmes robotiques : des robots quadrupèdes, qui généralisent à des terrains inconnus, des variations de charge utile et des plages de vitesse inédites ; des drones, capables de voler sous des perturbations de vent jamais rencontrées ; des manipulateurs aériens, atteignant une précision de capture en vol de l'ordre du centimètre malgré des incertitudes de vent et de masse ; et des différentiateurs d'accélération, robustes face aux changements de distribution des données. L'apport principal tient au contraste affiché avec la stratégie dominante du secteur, celle qui améliore la généralisation en multipliant les données d'entraînement, approche jugée coûteuse et lente en robotique où collecter des démonstrations réelles à l'échelle des grands modèles de langage reste prohibitif. Les auteurs montrent qu'un robot peut généraliser efficacement face aux incertitudes dynamiques même avec un jeu de données limité, dès lors qu'une couche de correction physique compense le manque de volume. Pour les intégrateurs et décideurs du secteur, ce résultat interroge l'hypothèse selon laquelle la performance des politiques VLA (vision langage action) dépendrait avant tout du volume de données collectées, à la manière des approches type GR00T N2 ou Pi-0, et suggère une voie moins capitalistique pour déployer des robots robustes sans multiplier les flottes de collecte. L'article s'inscrit dans le débat opposant deux écoles de la robotique d'apprentissage : le scaling massif de données façon modèles de fondation (Pi-0 de Physical Intelligence, GR00T N2 de NVIDIA, Helix de Figure) et les approches hybrides combinant modèles physiques et apprentissage, dont PhyFilter est un représentant. En le présentant comme « model-agnostic », l'équipe vise une intégration dans des piles logicielles existantes plutôt qu'un remplacement des politiques déjà déployées. À ce stade, la contribution reste une publication de recherche testée en environnements contrôlés sur quatre plateformes matérielles, sans partenariat industriel, déploiement commercial ni pilote annoncé, ce qui la distingue nettement des annonces produits qui rythment habituellement l'actualité de l'humanoïde.

Recherche❖Paper

1 source

35

2649arXiv cs.RO 

OptiSight : relier le raisonnement sémantique au contrôle géométrique pour la navigation incarnée

Une prépublication arXiv (2608.23354v1, signée par le développeur avanalperen) présente OptiSight, un framework hybride de navigation autonome en intérieur qui associe raisonnement par modèle vision-langage (VLM) et asservissement visuel déterministe, via une architecture en chaîne de pensée organisée comme un automate à états finis. Grounded-SAM se charge de localiser des cibles en vocabulaire ouvert, tandis que la géométrie de projection caméra traduit directement les observations visuelles en commandes de navigation, sans nécessiter de cartographie dense de l'environnement. Le VLM n'est interrogé qu'aux points de décision clés du parcours, le contrôle géométrique prenant le relais en continu entre deux requêtes pour limiter la charge de calcul. Testé dans le simulateur AI Habitat, le système assure une navigation en zero-shot fiable face à l'évitement d'obstacles et à l'ambiguïté sémantique, dans un budget de seulement 8 Go de VRAM, avec un code source publié en open source sur GitHub. Cette architecture tranche avec la tendance dominante des modèles vision-langage-action (VLA) entraînés de bout en bout, à l'image de Pi-0, GR00T N2 ou Helix, gourmands en données et en puissance de calcul. En limitant les appels au VLM aux seuls moments de décision et en confiant la navigation continue à un contrôle géométrique classique, OptiSight vise une solution plus légère et plus interprétable, potentiellement adaptée à des plateformes mobiles disposant de ressources embarquées modestes. Pour les intégrateurs d'AMR et de robots de service en intérieur, cela illustre une piste alternative pour relier compréhension sémantique de haut niveau et contrôle géométrique bas niveau sans dépendre d'un unique modèle massif ni d'un SLAM dense. Les résultats restent toutefois cantonnés à la simulation, sans validation rapportée sur robot physique, laissant ouverte la question du transfert vers le monde réel. OptiSight s'inscrit dans une lignée de travaux combinant segmentation en vocabulaire ouvert, héritée de Grounding DINO et Segment Anything via Grounded-SAM, et raisonnement multimodal appliqué à la navigation robotique, plutôt que dans la vague des modèles VLA propriétaires développés par les grands acteurs de la robotique humanoïde et de manipulation. Publié comme simple prépublication académique, sans affiliation industrielle mise en avant, le projet se distingue par la mise à disposition immédiate de son code sur GitHub, une pratique courante en recherche mais plus rare chez les acteurs commerciaux. Les suites habituelles pour ce type de travaux, tests sur plateformes physiques et comparaison chiffrée avec les architectures VLA de référence, restent pour l'instant absentes de cette première publication.

Recherche❖Paper

1 source

35

2650arXiv cs.RO 

LD4WAM : apprendre les dynamiques latentes à partir de vidéos humaines pour des modèles d'action du monde

Des chercheurs ont publié en août 2026 sur arXiv un article présentant LD4WAM, une méthode pour entraîner des World Action Models à partir de vidéos humaines plutôt que de données de téléopération, coûteuses à collecter. Le système associe un Latent Dynamics Model, entraîné par reconstruction sémantique et alignement sur le mouvement réel, à un World Dynamics Action Model en mixture-of-transformers, qui génère des vidéos futures puis en extrait, via des requêtes apprenables, une dynamique latente conditionnant les actions du robot. Pré-entraîné sur un jeu de données unifié de plus de 5 000 heures de vidéos humaines et robotiques, le modèle affiche de bons résultats dans le simulateur RoboTwin et sur des robots réels équipés de pinces et de mains dexterisées, avec une généralisation à des objets et arrière-plans inédits. L'enjeu dépasse la prouesse technique. La vidéo humaine est bien plus abondante et moins chère à collecter que les démonstrations téléopérées, mais son exploitation butait sur un dilemme entre prédiction vidéo pixel par pixel, riche mais non actionnable, et retargeting du mouvement vers le squelette du robot, actionnable mais marqué par un fossé visuel entre corps humain et robot. En proposant une dynamique latente alignée sur le mouvement, agnostique à l'embodiment, LD4WAM cherche à combler ce fossé, ce qui pourrait réduire la dépendance des laboratoires aux campagnes de téléopération pour entraîner des politiques de manipulation, un des principaux goulots d'étranglement du passage à l'échelle des modèles vision-langage-action. Ce travail s'inscrit dans une vague de recherche plus large sur les modèles de monde en robotique, aux côtés d'efforts comme GR00T de NVIDIA, pi-0 de Physical Intelligence ou Helix de Figure, qui explorent aussi l'exploitation de données hétérogènes pour des politiques généralistes. LD4WAM se positionne explicitement contre les deux paradigmes qui l'ont précédé, prédiction vidéo pure et retargeting de mouvement. Il s'agit pour l'instant d'un article déposé sur arXiv, non encore relu par les pairs, sans code publié ni partenariat industriel annoncé, et les démonstrations réelles restent limitées au laboratoire, sans détail sur le taux de réussite.

Recherche❖Paper

1 source