Actualités robotique — page 10

7 422 articles au fil, du plus récent au plus ancien.

34

451arXiv cs.RO 

Évaluation du transfert de la communication co-évoluée de la simulation 2D à la simulation 3D

Une étude publiée sur arXiv (2610.09280) teste si un mécanisme de communication co-évolué entre deux agents robotiques, d'abord entraîné dans un simulateur 2D discret, conserve sa fonction une fois transféré dans un simulateur 3D à physique réelle. Les auteurs ont fait varier trois facteurs: le budget de temps par épisode, le signal social échangé entre agents et l'asymétrie entre les deux rôles co-évolués. Le taux de réussite augmente de façon à peu près linéaire avec le budget de temps, sans plateau entre 2 000 et 6 000 pas de simulation physique. Huit runs évolutionnaires indépendants ont été analysés, et un contrôle de l'ordre de traitement des agents a été appliqué pour écarter un artefact du moteur physique. Dans les deux simulateurs, le signal social sert surtout d'aide au désenclavement (« jam-assistance »), c'est-à-dire qu'il aide les agents à se débloquer quand ils se gênent mutuellement. Il ne sert pas de guide de navigation, et cet effet est plus marqué en 2D. L'asymétrie entre rôles va dans la même direction dans les huit runs, mais son ampleur varie fortement d'un run à l'autre. Les auteurs reconnaissent qu'un écart de performance subsiste après le transfert et en discutent les causes possibles sans le résoudre. Pour la recherche en robotique multi-agents et en robotique évolutionnaire, le résultat le plus utile est méthodologique. L'absence de plateau jusqu'à 6 000 pas indique que les évaluations sur épisodes courts, courantes en simulation, sous-estiment probablement les contrôleurs entraînés, ce qui peut fausser les comparaisons entre approches. Le contrôle de l'ordre de traitement est aussi une bonne pratique à retenir: il montre qu'un comportement observé en 3D peut venir du moteur physique et non du contrôleur. Le travail nuance enfin l'idée d'un transfert simple du 2D vers le 3D. La communication garde un rôle fonctionnel, mais plus faible, et le sim-to-real reste donc ouvert, même entre deux simulateurs. Pour un intégrateur ou un décideur industriel, il s'agit de recherche fondamentale. Elle ne donne aucun produit, aucun pilote ni aucune métrique de déploiement, et elle ne concerne que des simulations. Le travail s'inscrit dans la lignée de la robotique évolutionnaire et de l'émergence de communication entre agents, qui utilise d'ordinaire des environnements 2D peu coûteux avant de passer à des simulateurs plus réalistes. Le résumé ne cite ni plateforme, ni robot physique, ni travaux concurrents, et la comparaison avec d'autres méthodes (apprentissage par renforcement multi-agents, modèles VLA) n'est donc pas possible à partir de ce texte. L'étape logique suivante serait de combler l'écart de performance en 3D, puis de tester le transfert sur des robots réels. Aucun calendrier n'est annoncé.

Recherche❖Paper

1 source

33

452arXiv cs.RO 

De la vidéo au modèle : modélisation automatique des objets linéaires déformables

Une équipe de chercheurs publie sur arXiv (octobre 2026) un cadre « vidéo-to-model » qui génère automatiquement le modèle de mouvement d'un fil de suture déformable à partir d'une simple vidéo. Le pipeline comporte trois étages. Un module de perception localise et suit le fil dans l'image, et produit une séquence ordonnée de nœuds le long du fil. Un réseau de neurones convolutif spatio-temporel analyse ensuite ce mouvement observé et estime les paramètres effectifs d'un modèle structuré de type CBF-CLF-QP. Ce modèle repose sur des fonctions de barrière de contrôle (CBF) et de Lyapunov (CLF), résolues sous forme de programme quadratique (QP). Il décrit le comportement d'une corde avec un nombre réduit de paramètres. Ces paramètres servent enfin à simuler le fil sous une vitesse d'aiguille choisie par l'utilisateur. Les auteurs affirment avoir testé le système sur des configurations de fil et des mouvements jamais vus à l'entraînement. Ils rapportent une reconstruction fiable du comportement et une erreur de suivi faible. L'abstract ne chiffre ni cette erreur, ni le nombre de fils testés, ni la nature des vidéos, simulées ou réelles. L'intérêt tient à un goulot d'étranglement bien connu de la manipulation d'objets linéaires déformables (câbles, fils, sutures). Leur simulation exige en général un réglage manuel de paramètres physiques (raideur, amortissement, frottement), long et peu transposable d'un matériau à l'autre. Estimer ces paramètres directement depuis la vidéo ouvre la voie à des jumeaux numériques calibrés automatiquement, utiles pour la chirurgie robotisée, la planification de suture et la génération de données de simulation. Cela concerne aussi le câblage industriel, où les harnais et câbles restent un cas difficile d'automatisation. Le choix d'un modèle structuré à peu de paramètres, plutôt que d'un réseau de bout en bout, va dans le sens d'une approche plus interprétable et plus contrôlable, qui limite l'écart sim-to-real. Les limites sont réelles : le résultat est présenté comme « un pas » vers la modélisation automatique, sans comparaison annoncée avec des méthodes de référence ni validation sur un robot en boucle fermée. Ces travaux s'inscrivent dans la robotique chirurgicale autonome, où la suture est une tâche emblématique (sur la lignée des démonstrations de type STAR) et où la dynamique du fil reste mal modélisée. Ils prolongent le modèle CBF-CLF-QP développé récemment, qui visait à simplifier la caractérisation du mouvement de cordes. Ils croisent aussi la recherche sur la simulation différentiable de matériaux déformables et l'identification de paramètres par apprentissage. Les prochaines étapes naturelles seraient une validation sur vidéos réelles de suture avec occlusions et reflets, une généralisation à d'autres matériaux et la fermeture de la boucle avec un contrôleur robotique. Aucun calendrier de déploiement ou partenaire industriel n'est mentionné à ce stade.

Recherche❖Paper

1 source

33

453arXiv cs.RO 

IHM sensible aux WSM : cadre amélioré par l'IoT pour la détection précoce et la réparation guidée par les normes des défaillances, avec l'aide d'un LLM

Les défaillances d'interaction homme-robot restent l'un des principaux freins au déploiement de robots en environnement réel. Un article de recherche publié sur arXiv (version 2 du document 2609.32336) propose un cadre modulaire baptisé WSM-Aware HRI, renforcé par des capteurs IoT, qui ramène des pannes très diverses à une seule catégorie : le décalage d'état du monde (World-State Mismatch, WSM). Il s'agit de l'écart entre les hypothèses implicites contenues dans l'instruction d'un humain et le modèle du monde du robot, construit à partir de la perception multimodale et d'un enrichissement numérique. Un grand modèle de langage (LLM) explicite ces hypothèses, les classe dans un petit nombre de types de décalage et précise les preuves à réunir pour les vérifier. Les auteurs l'ont testé sur dix cas du quotidien, qui couvrent des décalages visuels et des décalages d'état latent, c'est-à-dire non visibles par la caméra. Le système produit les sorties attendues. Les ablations montrent que la fiabilité dépend de représentations d'ancrage adaptées et d'une étape de raffinement orientée vérification. L'intérêt tient au déplacement du moment où l'on traite l'échec. Aujourd'hui, la plupart des travaux traitent les pannes comme des défauts techniques isolés ou conçoivent des comportements de récupération après coup. Ici, la détection se fait pendant la formation de l'intention, avant l'exécution. Le robot peut alors intervenir en tenant compte de la sécurité, du respect des normes et de la coordination entre plusieurs utilisateurs, avec des explications transparentes. Pour un intégrateur ou un responsable d'exploitation, l'idée est pertinente : beaucoup d'arrêts en production ne viennent pas d'un défaut de préhension ou de navigation, mais d'une consigne qui ne correspond pas à l'état réel de l'environnement. Les capteurs déjà présents sur site, comme les capteurs de porte, de stock ou d'occupation, servent de source d'évidence externe pour trancher. Il faut toutefois relativiser la portée de ces résultats. L'évaluation porte sur dix scénarios seulement. Elle mesure l'identification du décalage, pas le taux de réussite d'une tâche sur un robot physique, ni la latence ou le coût d'un appel LLM au moment de l'intention. Le texte ne cite aucune plateforme robotique, aucun site de déploiement et aucun calendrier de pilote. Il s'agit de recherche académique, sans produit ni déploiement réel. Il s'inscrit dans le courant des modèles vision-langage-action et des planificateurs à base de LLM, qui traitent surtout l'échec en aval, par réessai ou replanification. Le choix de la prévention par vérification des hypothèses en est une alternative. Les prochaines étapes naturelles sont des essais sur robot réel, des environnements multi-utilisateurs plus bruités et une comparaison chiffrée avec les méthodes de récupération existantes.

Recherche❖Paper

1 source

43

454Pandaily 

UBTECH et FAW-Volkswagen font passer des robots humanoïdes du contrôle qualité à la logistique d'usine

UBTECH Robotics a annoncé le 8 octobre un accord de coopération stratégique avec FAW-Volkswagen pour développer et tester conjointement des scénarios d'application de robots d'IA incarnée en logistique, puis construire des sites de démonstration. L'accord s'appuie sur un déploiement déjà en cours : le humanoïde Walker S Lite de UBTECH effectue des travaux de formation à l'inspection qualité des véhicules à l'usine FAW-Volkswagen de Qingdao, classée usine de démonstration de fabrication intelligente de niveau national. Selon des informations antérieures, le robot est intégré au système de contrôle d'automatisation du site. Le partenariat remonte à juillet 2024, lorsque FAW-Volkswagen avait ouvert des lignes de production de Qingdao au Walker S pour du vissage de boulons, de la pose de pièces et de la manutention, tout en évoquant déjà des robots logistiques industriels et une coopération sur la chaîne d'approvisionnement. Le nouvel accord fait de la logistique un axe formel, avec des scénarios de démonstration construits en commun plutôt que des pilotes ponctuels. Aucun chiffre de payload, de nombre d'unités ni de calendrier de déploiement n'est communiqué. Pour les intégrateurs et les directeurs d'exploitation, le signal tient moins à la technologie qu'au périmètre : un même humanoïde passe de l'inspection à la manutention de pièces, deux fonctions aux contraintes très différentes (précision et perception d'un côté, endurance, charge et cadence de l'autre). La logistique interne est l'une des activités les plus répétitives et les plus consommatrices de main-d'œuvre d'une usine automobile, ce qui en fait un terrain d'essai logique. Il faut toutefois rester prudent : l'annonce est un accord-cadre, pas un déploiement logistique mesuré. Aucune métrique de productivité, de taux de réussite ou de coût n'a été publiée, et la formation à l'inspection reste, par nature, un stade pilote. La question décisive, celle de savoir combien de tâches une seule plateforme humanoïde peut couvrir de façon rentable dans une usine réelle, reste donc ouverte, même si Qingdao devient l'un des bancs d'essai les plus lisibles du secteur. Côté industriel, UBTECH met en avant quatre briques technologiques : un cerveau incarné, un « cervelet » humanoïde pour le contrôle du mouvement, des corps robotiques performants et une intelligence en essaim permettant la coordination de plusieurs robots. Pour le cerveau, l'entreprise revendique une pile entièrement maison combinant modèle de fondation, modèle du monde et modèle d'action, afin que le robot comprenne son environnement, anticipe son évolution et décide de ses actions. La capacité de production monte en parallèle : l'usine « super intelligente » de Liuzhou (Guangxi), ouverte le 12 septembre, occupe 14 000 m², fabrique les séries Walker S et Cruzr et, selon le gouvernement régional, peut sortir un robot toutes les 10 minutes, en s'appuyant sur des robots pour en construire d'autres. Ce chiffre de cadence théorique ne dit rien du volume réellement livré. UBTECH multiplie par ailleurs les partenariats, notamment avec Honda Trading, et a lancé des livraisons en série de son humanoïde de compagnie UWorld U1, face à des concurrents chinois et occidentaux qui visent aussi l'automobile.

Chine/Asie⚡Actu

1 source

39

455Interesting Engineering 

Premier robot de perçage déployable en flotte : 10 fois plus rapide, avec 99 % de précision

DEWALT, la marque d'outillage de Stanley Black & Decker, présente DALE, un robot de perçage du béton conçu pour les chantiers de centres de données et développé avec la société de robotique mobile August Robotics. La machine a déjà percé plus de 385 000 trous, avec une précision annoncée supérieure à 99 %, et peut forer jusqu'à dix fois plus vite que les méthodes conventionnelles. Elle cible les perçages répétitifs nécessaires à l'installation des baies de serveurs et des réseaux mécaniques, électriques et de plomberie (MEP). DALE se déplace dans la zone de travail, se positionne et perce selon le plan de calepinage. Les opérateurs la supervisent à distance, l'aspiration des poussières est automatique, les batteries sont à échange rapide, et un contrôle qualité par IA vérifie le résultat avant les installations suivantes. Selon DEWALT, les déploiements pilotes ont permis de retirer plus de 300 semaines du calendrier de 44 phases de construction de centres de données. Le robot a fait ses débuts publics au salon World of Concrete en début d'année et a été désigné lauréat de la catégorie « Enduring Impact » des Next Big Things in Tech Awards 2026 de Fast Company. L'intérêt tient à l'approche en flotte. Les grands chantiers de centres de données comptent plusieurs fronts de travail simultanés sur des milliers de mètres carrés, et le perçage est une tâche à forte intensité de main-d'œuvre qui conditionne tout ce qui suit. Disposer de plusieurs machines autonomes permet d'augmenter la capacité sans ajouter d'ouvriers sur une tâche répétitive, tout en livrant des trous déjà vérifiés qui débloquent plus tôt l'installation MEP. Le cas d'usage est étroit, structuré et fortement répétitif, ce qui correspond au profil où la robotique de construction a le plus de chances de passer de la démonstration au déploiement réel. Il faut toutefois lire les chiffres avec prudence : ils proviennent uniquement de DEWALT. Le facteur « dix fois » n'est pas rapporté à une méthode de référence précise (perçage manuel, gabarit, ou autre). Les 300 semaines économisées sont un cumul sur 44 phases, et non un gain de délai sur un projet donné, puisque ces phases peuvent se chevaucher. La définition de la « précision de 99 % » (tolérance, méthode de mesure) n'est pas précisée. Par ailleurs, la mention d'une « première flotte capable » relève du marketing plus que d'une preuve de nouveauté. Ce lancement s'inscrit dans la demande de construction de centres de données portée par l'IA, où la vitesse d'exécution est devenue un critère majeur et où la main-d'œuvre qualifiée manque. Pour Stanley Black & Decker, DALE marque une avancée de l'outil à main vers la robotique de chantier. Bill Beck, président de Tools & Outdoor, affirme que l'objectif est d'aller plus vite sans sacrifier la constance, la sécurité ni le contrôle. August Robotics fournit la plateforme mobile autonome, que DEWALT a adaptée au perçage du béton. Le robot est désormais commercialisé après la phase pilote, mais aucun prix, aucune taille de flotte ni liste de clients n'a été communiqué. Ces informations permettront de juger si l'adoption va au-delà des chantiers pilotes. Il faudra aussi voir comment la machine se compare à d'autres solutions de perçage et de marquage de plafond automatisés, que d'autres acteurs de la construction développent déjà.

Industriel⚡Actu

1 source

41

456Robotics Business Review 

Teradyne Robotics et Elite Robots règlent leur litige sur les cobots

Teradyne Robotics et Elite Robots ont mis fin, le 1er octobre, au litige qui les opposait sur des robots et des logiciels, sans en divulguer les termes. Teradyne Robotics, filiale de Teradyne Inc. et maison mère de Universal Robots (Odense, Danemark), avait assigné en début d'année Elite Robots Deutschland GmbH pour violation de droits d'auteur portant sur des logiciels d'Universal Robots. En avril, le tribunal régional de Hambourg avait rendu une injonction préliminaire restreignant en Allemagne l'activité d'Elite Robots autour des logiciels litigieux et des produits qui les embarquent. Dans un communiqué commun, Jette Withers (directrice juridique de Teradyne Robotics) et Charles Xie (directeur des ventes à l'international d'Elite Robots) indiquent que le différend est réglé d'un commun accord, sans que ce règlement vaille reconnaissance de responsabilité, de contrefaçon ou de validité des droits de propriété intellectuelle par Elite Robots. On ignore s'il comporte un paiement, des modifications logicielles ou produit, ou une licence. Pour les intégrateurs et les acheteurs de cobots, l'enseignement est surtout une absence d'information. Une injonction préliminaire n'est pas un constat final de contrefaçon, et l'issue du dossier ne tranche donc ni la question de la copie ni celle de la protection du logiciel de cobot. Un avocat en propriété intellectuelle, sans lien avec l'affaire, rappelle qu'un litige ouvert par une injonction en urgence se termine souvent tôt: le défendeur cesse d'utiliser le code contesté et verse une indemnité, mais rien ne prouve que ce schéma s'applique ici. Le signal pour le marché est que Teradyne, qui revendique plus de 100 000 cobots vendus depuis 2005, défend activement sa couche logicielle face aux concurrents chinois à bas coût. Les clients d'Elite Robots en Europe, en particulier en Allemagne, restent sans visibilité sur d'éventuelles conséquences pour leurs produits. Le règlement intervient peu après le lancement par Universal Robots de sa plateforme de septième génération, dite Gen 7. Elle comprend de nouveaux bras de la série g, le contrôleur CB7 Core, la console de programmation TP7 Core et le SP7 Smart Panel. Elle repose sur PolyScope X, présenté comme la base logicielle de la nouvelle génération, avec des API ouvertes et un SDK destinés aux applications d'IA, ainsi qu'une connectivité et des capacités de programmation étendues. Ce lancement prend un relief particulier puisque le litige portait justement sur des logiciels d'Universal Robots. Ce n'est pas le seul front judiciaire: en août, Teradyne Robotics a attaqué la filiale allemande du fabricant chinois JAKA Robotics pour atteinte à trois brevets, tous attribués à Universal Robots et dotés d'une date de priorité de mars 2006. Cette procédure est toujours en cours. Elle montre que Teradyne combine droit d'auteur et brevets pour protéger sa position sur le segment des cobots face à une concurrence asiatique de plus en plus présente en Europe.

Industriel⚡Actu

1 source

42

457Interesting Engineering 

L'armée américaine teste des mulets robotiques autonomes pour le ravitaillement et l'évacuation en première ligne

L'US Army a retenu six entreprises pour développer des véhicules robotisés prêts à la production dans le cadre de l'Infantry Last Tactical Mile (ILTM), un programme visant à automatiser le transport de munitions et de matériel et l'évacuation de blessés près de la ligne de front. Les six participants, sélectionnés par des Other Transaction Agreements de prototypage, sont BLADE (ex-HDT), Maren-Go, Overland AI, Forterra, Hendrick's Motorsports et American Rheinmetall. BLADE présente le Hunter WOLF, un UGV (véhicule terrestre sans pilote) à six roues et motorisation hybride diesel-électrique, conçu pour l'infanterie légère et débarquée. Selon l'entreprise, il emporte de façon autonome jusqu'à 2 800 livres (1 270 kg), franchit des pentes de 60 % et des dévers de 40 %, alimente d'autres équipements en électricité et accepte différentes charges utiles, ce qui permet de le configurer pour le ravitaillement ou l'évacuation sanitaire. Les prototypes doivent être livrés pour des démonstrations, puis pour une évaluation opérationnelle avec une unité de l'Army début 2027. Cette sélection ne désigne pas un véhicule unique pour l'ensemble de l'Army. Il s'agit d'une compétition de prototypes dont les résultats serviront à fixer les exigences et à éclairer une éventuelle décision de production. Pour les intégrateurs et les décideurs, le signal est la priorité donnée à la logistique de dernier kilomètre, le segment entre les unités logistiques arrière et la ligne avancée des troupes amies (FLOT), où les soldats sont le plus exposés. Le vrai test sera la fiabilité de l'autonomie en terrain difficile et sous contrainte adverse, pas la démonstration en conditions favorables. BLADE qualifie le Hunter WOLF de système TRL 9, le niveau maximal de l'échelle de maturité technologique militaire, qui correspond à un système éprouvé en environnement opérationnel. C'est un argument commercial à nuancer, puisque l'Army évalue encore précisément si ces systèmes tiennent les missions de ravitaillement et d'évacuation. Le panel mêle un acteur historique de la robotique militaire, des spécialistes de l'autonomie off-road comme Overland AI et Forterra, un constructeur de défense (American Rheinmetall) et un nouvel entrant venu du sport automobile (Hendrick's Motorsports). BLADE aborde la compétition avec un avantage de maturité. Le Hunter WOLF est en service depuis 2017, a reçu des mises à jour en 2025 et a participé à plus de 60 exercices de terrain, avec des forces américaines (Marine Corps), australiennes et ukrainiennes, d'après l'entreprise. En mai, BLADE a livré des véhicules à la 10th Mountain Division à Fort Polk dans le cadre de l'effort Ground Optionally Autonomous Transport, où les soldats ont été formés à leur utilisation et à leur maintenance. L'entreprise fait aussi état d'évaluations en 2026 avec les 10th Mountain et 101st Airborne Divisions, ainsi que d'un événement en août avec la 82nd Airborne Division à Fort Polk, en Louisiane. Ces chiffres proviennent de BLADE et n'ont pas été vérifiés de façon indépendante. L'article ne mentionne aucun acteur français ou européen autre que la filiale américaine de Rheinmetall, ni de budget ni de volume de production. La suite dépendra de l'évaluation opérationnelle de 2027 et d'une éventuelle décision de production.

Industriel⚡Actu

1 source

36

458Interesting Engineering 

Vidéo : une main robotique chinoise maîtrise la broderie de soie délicate grâce à un contrôle précis des doigts

AGILINK, spin-off de l'entreprise chinoise AgiBot, a publié une vidéo où sa main dexterous OmniHand 3 Ultra réalise des gestes de broderie Suzhou sur fil de soie. La démonstration enchaîne la séparation d'un fil en 16 brins plus fins, l'enfilage d'une aiguille, la tension du tissu sur un tambour, la torsion du fil et les premiers points. La maître brodeuse Fu Xianghong a guidé l'apprentissage. Un doigt isole les brins pendant que les autres maintiennent la tension, et les bouts de doigts restent en contact avec la soie tout en laissant le fil tourner. Sur la tâche finale, le fil retombe à une position différente à chaque essai, ce qui oblige le robot à s'adapter plutôt qu'à rejouer une séquence fixe. L'entraînement combine données de téléopération et apprentissage par renforcement. La main, de la taille d'une main humaine, pèse 630 g, utilise une transmission directe (moteurs couplés aux articulations, sans tendons) et offre 21 degrés de liberté actifs. AGILINK annonce 3 kg en maintien, 8 kg en levage, une ouverture-fermeture en environ 0,3 s et une répétabilité de 0,2 mm. Chaque bout de doigt embarque un capteur visuo-tactile mesurant la force en trois dimensions et des déformations de 0,08 mm, et la paume compte un capteur de contact de 300 points. Pour l'industrie, la soie est un cas d'école difficile : le matériau n'a pas de forme propre, et c'est la force des doigts qui la détermine. Réussir ce type de tâche suppose un couplage serré entre matériel, retour tactile et contrôle, ce qui sert de banc d'essai pour la manipulation d'objets déformables (câbles, fils, textiles, nappes de connectique), un point de blocage connu de l'assemblage électronique et de la confection. Il faut toutefois rester prudent. Il s'agit d'une vidéo de démonstration publiée par le fabricant, sans taux de réussite, sans durée de cycle, sans nombre d'essais ni indication sur la part de téléopération. Les « premiers points » ne constituent pas une broderie achevée, et rien n'indique une fiabilité sur des milliers de cycles. Il s'agit d'une démonstration de capacité, pas d'un produit validé en production ni d'un déploiement client. Côté contexte, la main dexterous est devenue l'un des enjeux majeurs de la course humanoïde, car elle limite la valeur utile des robots bien plus que la locomotion. Les approches divergent. LinkerBot propose sa Linker Hand L30 Pro, à cinq doigts à tendons, pensée pour la vitesse et la répétabilité. Boston Dynamics a retenu pour son dernier Atlas une main à quatre doigts, orientée vers des usages industriels comme la manipulation d'outils. AGILINK mise sur l'entraînement direct et un toucher intégré à chaque doigt, au prix d'un coût et d'une robustesse qui restent à démontrer. Aucun prix, calendrier de commercialisation ni pilote industriel n'a été annoncé dans les éléments disponibles. La suite logique serait des tests sur des tâches industrielles mesurables, avec des indicateurs publiés, pour confirmer que la dextérité observée en démonstration survit hors du cadre contrôlé du laboratoire.

Chine/Asie⚡Actu

1 source

36

459Robotics & Automation News 

Entretien avec le PDG de Minerva Humanoids : « Roger est conçu pour être le meilleur avatar possible

Minerva Humanoids, société basée à San Francisco, développe Roger, un humanoïde semi-autonome que son PDG décrit comme « le meilleur avatar possible ». Le robot est conçu pour que l'opérateur humain puisse se substituer physiquement à lui là où la présence d'un corps humain est coûteuse ou dangereuse. L'entreprise vise des tâches où ce remplacement a un intérêt immédiat, parfois vital. Le matériel disponible ne détaille ni charge utile, ni nombre de degrés de liberté, ni prix, ni volumes ou sites de déploiement. Roger relève donc pour l'instant de l'annonce de positionnement, pas d'un produit dont les performances en conditions réelles seraient documentées. Ce choix tranche avec la course au robot généraliste menée par Figure (Figure 03), Tesla (Optimus Gen 3) ou Agility Robotics, qui misent sur des modèles VLA (vision-langage-action) capables d'enchaîner des tâches sans supervision. Minerva part de l'hypothèse inverse : l'autonomie complète reste incertaine, et un humain dans la boucle apporte une valeur commerciale dès maintenant. Pour un intégrateur ou un responsable d'exploitation, c'est une proposition plus facile à valider, car la fiabilité repose sur la téléopération et l'autonomie ne s'ajoute que progressivement. La question à surveiller est la part réelle d'autonomie, qui détermine si un opérateur peut superviser plusieurs robots ou doit en piloter un seul. Minerva s'inscrit dans une lignée de robots téléopérés, qui ont longtemps servi de source de données d'entraînement pour les modèles d'imitation. Le positionnement « avatar » les place face aux généralistes, mais aussi face aux acteurs européens comme Enchanted Tools, qui développe son humanoïde Mirokaï. Les prochaines étapes à suivre sont les pilotes clients, les spécifications techniques publiées et la démonstration d'un fonctionnement hors vidéo choisie.

Humanoïdes❧Opinion

1 source

31

460Robotics & Automation News 

Avride et Sodexo étendent leurs robots de livraison aux campus universitaires américains

Avride, entreprise de mobilité autonome, et Sodexo Campus ont annoncé un accord pour accélérer la livraison par robots autonomes dans les universités et collèges américains partenaires de Sodexo Campus. Le texte décrit un cadre contractuel prêt à l'emploi, censé permettre aux campus intéressés de passer plus vite de l'intention au déploiement. Le communiqué ne chiffre ni le nombre de campus visés, ni la taille de la flotte, ni le calendrier, ni la tarification. Il s'agit donc d'une annonce de partenariat commercial, pas d'un déploiement constaté. L'enjeu est surtout commercial et opérationnel. La livraison par robots de trottoir bute rarement sur la technologie seule : chaque campus exige des négociations sur l'accès, l'assurance, l'intégration aux plateformes de commande et la gestion des opérations. En passant par un prestataire de restauration déjà implanté dans l'enseignement supérieur, Avride cherche à standardiser ces démarches et à raccourcir les cycles de vente. Le campus reste un terrain favorable, avec un périmètre fermé, une forte densité d'usagers et des trajets courts. La vraie question est de savoir si ce modèle produit des volumes de livraisons et une économie unitaire soutenables, ce que l'annonce ne documente pas. Avride, issue de l'écosystème Yandex et adossée à Nebius, exploite déjà des robots de livraison et des véhicules autonomes aux États-Unis, notamment avec des partenaires de livraison de repas. Le marché des campus est disputé : Starship Technologies y est très présente depuis des années, tandis que Serve Robotics et Coco visent surtout la livraison urbaine. La suite dépendra des campus qui signeront effectivement et de la rentrée universitaire concernée, deux informations pour l'instant absentes.

Industriel⚡Actu

1 source

30

461Robohub 

Ce que trois jours de construction d'un robot m'ont appris

Du 25 au 27 août, l'Institute for Safe Autonomy de l'université de York (Royaume-Uni) a accueilli le MicroMaze Robot Hackathon, organisé dans le cadre du programme UK RAS STEPS. Ce programme s'adresse aux Research Technical Professionals, les ingénieurs et techniciens qui font tourner les infrastructures et les logiciels de la recherche académique. Le défi consistait à construire un petit robot autonome, puis à lui faire franchir des labyrinthes de difficulté croissante. Une participante, qui en fait le récit dans un billet de blog, formait une équipe avec deux collègues, Emily et Joolz. En trois jours, le trio est parti d'une boîte de composants et d'un châssis découpé au laser pour arriver à un robot capable de traverser un labyrinthe. La plateforme associait capteurs, moteurs et carte Raspberry Pi Pico W programmée en MicroPython. L'événement était organisé par Rob Woolley. Le texte ne donne ni classement, ni temps de parcours, ni nombre d'équipes, ni budget matériel. C'est un témoignage personnel, pas un compte rendu de compétition. Il n'y a ici aucune avancée technologique, et il serait trompeur d'en présenter une. L'intérêt est ailleurs. L'autrice décrit la boucle classique du développement robotique : intégrer capteurs et actionneurs, déboguer, essuyer des essais ratés, puis se demander pourquoi le robot fait autre chose que ce qui était prévu. À l'échelle d'un micro-robot, on retrouve l'écart entre le comportement attendu et le comportement réel qui pèse sur toute la robotique, des humanoïdes aux AMR d'entrepôt. Pour un décideur ou un intégrateur, le signal concerne surtout les compétences. Les Research Technical Professionals sont ceux qui déploient et maintiennent les robots dans les laboratoires. Un format court, sur matériel grand public et en langage accessible, leur permet de gagner en pratique matérielle et de se constituer un réseau. L'autrice dit d'ailleurs en retenir avant tout les amitiés nouées, ce qui rappelle que ces événements servent d'abord à créer des communautés. Le contexte est celui d'un écosystème académique britannique qui structure le métier de technicien de recherche en robotique et systèmes autonomes. Le choix du lieu est cohérent : l'Institute for Safe Autonomy de York travaille sur la sûreté des systèmes autonomes, une question centrale pour tout déploiement industriel à grande échelle. Le labyrinthe est un exercice ancien de la robotique, popularisé par les concours de type micromouse. C'est un banc d'essai pédagogique commode, car il impose de percevoir, de décider et d'agir sans intervention humaine. Aucun acteur français ou européen n'est cité, et aucune suite formelle n'est annoncée. Les participants évoquent seulement l'envie de se revoir. Reste à voir si le programme UK RAS STEPS reconduira ce format, mais rien dans le récit ne permet de l'affirmer.

Autre❧Opinion

1 source

48

462Robot Magazine FR 

Premier robot : les révélations du Baromètre Robot Magazine

Le Baromètre Robot Magazine 2026, réalisé en ligne du 13 au 26 septembre auprès de 300 dirigeants et décideurs, détaille ce que les entreprises attendent de leur premier robot. La production et la manutention arrivent en tête des missions envisagées (38 %), devant la logistique (21 %), soit 59 % pour ces deux catégories. Le contrôle qualité recueille 15 % des réponses, le nettoyage 11 %, la maintenance 6 % et les autres usages 9 %. Côté budget, 58 % des répondants prévoient moins de 50 000 euros (31 % sous 25 000 euros, 27 % entre 25 000 et 50 000 euros), tandis que 8 % envisagent plus de 100 000 euros et 18 % ne savent pas encore. Pour le retour sur investissement, 48 % visent moins de 24 mois (14 % sous un an, 34 % entre un et deux ans), et 20 % n'ont pas de cible. Les deux principaux freins sont économiques : le prix (27 %) et l'incertitude sur le ROI (19 %), soit 46 % à eux deux, devant la complexité d'intégration (17 %) et le manque de compétences internes (12 %). Ces chiffres dessinent un acheteur pragmatique, éloigné de l'enthousiasme suscité par les démonstrations d'humanoïdes. Le premier projet type est une tâche physique et répétitive (déplacer des marchandises, alimenter un poste), financée sous 50 000 euros et amortie en moins de deux ans. Cette enveloppe correspond davantage aux cobots, aux robots mobiles autonomes (AMR) d'entrée de gamme ou aux offres en Robot as a Service (RaaS, abonnement ou paiement à l'usage) qu'aux plateformes généralistes, dont le coût total reste mal documenté. Pour les intégrateurs, le message est clair : il faut chiffrer le coût complet (intégration, formation, maintenance, exploitation) et documenter des cas clients avec une méthode de calcul du ROI accessible. Le fait qu'un cinquième des sondés ignore le délai de retour visé, et près d'un cinquième son budget, montre aussi que le besoin d'information précède l'achat. Il faut toutefois lire ces résultats avec prudence. L'échantillon est volontaire et composé de lecteurs et d'abonnés à la newsletter du magazine, un public déjà sensibilisé à la robotique. L'étude décrit donc des intentions, pas des achats, et ne représente pas l'ensemble des entreprises françaises. Elle n'indique pas non plus la taille ou le secteur des répondants, ni la nature des robots envisagés, ce qui limite la comparaison avec les offres du marché. Elle complète néanmoins les signaux venus des fournisseurs de cobots, d'AMR et de solutions RaaS, qui ciblent déjà les PME avec des offres modulaires. Elle suggère que la bataille commerciale se jouera moins sur les performances brutes que sur la lisibilité du prix, de l'intégration et du gain mesurable.

FR/EU ecosysteme❧Opinion

1 source

55

463arXiv cs.RO 

Les politiques robotiques compactes exigent des représentations visuelles fines

Des chercheurs proposent CoRP (Compressed Representation Policy), une politique de manipulation multi-tâches volontairement compacte: 48,9 millions de paramètres, sans modèle vision-langage ni prior génératif vidéo. Elle sépare un extracteur de représentation d'un générateur d'actions par flow matching. Elle atteint 97,0 % de réussite sur LIBERO et 75,78 % (Clean) et 73,36 % (Randomized) sur RoboTwin 2.0, soit des scores comparables à ceux de systèmes 40,9 à 163,6 fois plus gros. Il s'agit de résultats de benchmarks en simulation, publiés sous forme de préprint arXiv, sans déploiement réel annoncé. Les auteurs fixent ensuite le générateur d'actions et font varier une seule propriété de l'extracteur à la fois. Un ViT-S/14 initialisé aléatoirement tombe à 78,1 % sur LIBERO, un ResNet-34 pré-entraîné sur ImageNet à 74,5 %, et geler l'encodeur coûte 19,8 points. Rééchantillonner chaque vue à 48 tokens bat le passage de tous les tokens de patchs (97,0 % contre 83,2 %). Le résultat remet en cause une lecture courante du secteur: les gains des VLA (vision-language-action) viendraient surtout de l'échelle ou des priors génératifs. Faute de comparaisons contrôlées, les publications mélangent architecture, taille et pré-entraînement, et ne permettent pas d'isoler ce qui compte. Ici, la représentation visuelle serait le facteur dominant: pré-entraînée, adaptée à la tâche et compressée. Pour un intégrateur ou un décideur, la portée est pratique: une politique de moins de 50 M de paramètres peut tourner sur du matériel embarqué modeste, avec une latence et un coût d'inférence bien plus faibles que des modèles de plusieurs milliards de paramètres. Deux résultats nuancent toutefois cette idée. Un goulot d'information variationnel est pire qu'un budget dur de tokens: il fait chuter LIBERO-Goal de 95,8 % à 33,0 %, car il supprime la sélection de tokens dépendante de l'instruction. Le langage n'aide que si l'observation laisse le but ambigu (LIBERO-Goal passe de 9,2 % à 95,8 %), alors que sur RoboTwin 2.0 sa suppression améliore légèrement le succès. Ce travail s'inscrit dans la course aux grands VLA (Pi-0, GR00T, Helix, entre autres), qui misent sur des backbones vision-langage massifs ou des priors vidéo. CoRP défend la voie inverse, celle de la politique frugale, et ajoute un argument d'ablation à un débat encore ouvert. Les limites sont claires: LIBERO est déjà proche de la saturation, RoboTwin 2.0 reste simulé, et rien ne dit que ces conclusions tiennent sur des tâches longues, du matériel varié ou des environnements industriels non structurés. La suite logique est une validation sur robots réels et la comparaison avec des modèles de grande taille dans les mêmes conditions. Une page projet est disponible à l'adresse corp-policy.github.io.

Recherche❖Paper

1 source

47

464arXiv cs.RO 

Un correcteur appris fait-il mieux qu'un simple repli ? Résultats avec un VLA gelé

Une étude publiée sur arXiv (2610.06921) examine si un correcteur appris, déployé à l'exécution sur une politique vision-langage-action (VLA) gelée, apporte réellement plus qu'une simple action de repli. Les auteurs testent π0.5, le modèle de Physical Intelligence, laissé inchangé, sur quatre tâches du benchmark de simulation RoboTwin. Pour chaque graine de test, ils apparient un rollout sans correction et un rollout avec correction. Ils ajoutent un témoin placebo: une seconde exécution de la politique de base avec la même graine. Sur 3 888 épisodes appariés, le pipeline complet augmente le taux de succès de 13,5 points de pourcentage sur la tâche « beat block hammer » (intervalle à 95 % de +9,4 à +17,7). Les trois autres tâches ne montrent aucun gain détectable au poids de correction déployé. Parmi les épisodes de base en échec sur la tâche réactive, 43,2 % réussissent à la simple relance, contre 63,5 % après correction. Ces chiffres relativisent la notion de « sauvetage ». Près de la moitié des échecs récupérés par le correcteur auraient été récupérés par la seule variabilité stochastique de la politique. Un intégrateur qui mesure un correcteur contre une exécution unique surestime donc son apport. L'efficacité dépend aussi fortement de la tâche: un mécanisme de récupération qui améliore nettement un cas peut être neutre sur les autres. La décision d'intervenir ne peut pas être fixée une fois pour toutes. Le protocole (placebo apparié, intervalles par grappes de graines, règles de comparaison prédéfinies) est lui-même réutilisable pour évaluer les couches de sécurité et de récupération autour des VLA. Sur le plan comparatif, un déclencheur à instant fixe, associé à un retour scripté vers une configuration articulaire antérieure, produit un gain net sur deux séries d'essais. Aucune différence n'est détectée avec le pipeline appris, même si le critère d'équivalence prédéfini n'est pas respecté de façon constante. Une simple pause et un contrôle à action constante n'apportent pas de gains comparables. Le résultat ne démontre donc pas que la complexité apprise est inutile, mais qu'elle n'est pas prouvée. Les limites sont nettes: l'étude est menée en simulation, sur quatre tâches et une seule politique. Elle s'inscrit dans la course aux VLA généralistes (π0.5, Helix, GR00T), où la fiabilité à l'exécution, plutôt que le réentraînement, devient un enjeu de déploiement. Un retrait simple et un placebo apparié devraient servir de référence minimale avant d'investir dans des correcteurs appris.

Recherche❖Paper

1 source

45

465MIT News Robotics 

Un système de planification garantit que la trajectoire de vol d'un robot restera sans collision

Des chercheurs du MIT ont mis au point SANDO (Safe AutoNomous trajectory planning for Dynamic unknOwn environments), un planificateur de trajectoire pour drones (UAV) qui calcule des vols dont l'absence de collision est prouvée mathématiquement, y compris dans un environnement inconnu, sans carte préalable, avec des obstacles mobiles aux mouvements imprévisibles. Les travaux, publiés dans IEEE Transactions on Robotics, sont signés de Kota Kondo (SM 2023, doctorat 2026, auteur principal), Jesús Tordesillas (désormais professeur assistant à l'université pontificale Comillas de Madrid), Juan Rached, Lili Sun, Yixuan Jia, et de Jonathan P. How, professeur au MIT et responsable de l'Aerospace Controls Laboratory. Le système construit d'abord un « couloir de sécurité » : une suite de régions 3D connectées, garanties sans obstacle. Contrairement aux approches classiques, ce couloir tient compte du temps. Un module dédié détecte, regroupe et suit les obstacles dynamiques pour estimer leurs positions futures possibles. La seule donnée que le planificateur doit recevoir est la vitesse maximale que les obstacles peuvent atteindre. Le texte source étant tronqué, les détails de la méthode au-delà de cette étape et les résultats expérimentaux (vols réels, taux de succès, temps de calcul) ne sont pas connus ici. L'enjeu est la nature de la garantie. La plupart des planificateurs existants n'offrent une sécurité formelle que si l'environnement est statique ou si les obstacles sont connus à l'avance. Pour les obstacles mobiles, ils se contentent en général de les éviter « au mieux », sans preuve. Or énumérer tous les scénarios de collision possibles dans un environnement dynamique prend trop de temps pour un usage embarqué. SANDO déplace donc le problème : au lieu de prédire les trajectoires, il raisonne sur l'enveloppe de ce qui est physiquement atteignable, d'où l'unique hypothèse de vitesse maximale. Pour un intégrateur ou un décideur B2B, c'est un argument de certification potentiel dans les missions à haut risque : recherche et secours dans des bâtiments effondrés ou des feux de forêt, exploration de mines, livraison en zone dense, notamment de matériel médical. Une réserve s'impose : une preuve formelle vaut sous ses hypothèses (capteurs fiables, borne de vitesse correcte, dynamique du drone respectée), et l'écart entre garantie théorique et robustesse en conditions réelles reste à documenter. Il s'agit aussi d'un résultat académique, pas d'un produit livré ni d'un déploiement. Ce travail s'inscrit dans la lignée de l'Aerospace Controls Laboratory du MIT, historiquement actif sur la planification de trajectoires pour drones, et prolonge des recherches antérieures de Tordesillas, docteur du MIT en 2022, sur l'évitement d'obstacles. Il se positionne face à deux familles de méthodes : les planificateurs pour environnements statiques inconnus, et ceux qui gèrent le dynamique sans garantie formelle. Aucun calendrier de pilote, partenaire industriel ni commercialisation n'est mentionné dans la partie disponible. La suite logique sera de voir la méthode confrontée à des essais en conditions sévères (fumée, débris, vent) et intégrée à des piles de navigation existantes, ainsi que la manière dont elle s'accommode du bruit de perception, point faible habituel des garanties formelles.

Recherche❖Paper

1 source

45

466arXiv cs.RO 

BiGym 2.0 : évaluation de politiques apprises et développées par des agents pour la manipulation domestique humanoïde

BiGym 2.0, publié sur arXiv (2610.07594) par l'équipe derrière le dépôt swirl-uk/BiGym2, adapte le benchmark de manipulation bimanuelle BiGym au robot humanoïde Unitree G1. La suite couvre 20 tâches domestiques, toutes pilotées par un contrôleur whole-body unifié, utilisé aussi bien pour la collecte de démonstrations que pour l'évaluation. Chaque tâche fournit 60 démonstrations humaines natives, enregistrées en réalité virtuelle, avec vues multi-caméras synchronisées et traces d'exécution du corps entier. Quatre familles de méthodes sont comparées, avec les mêmes vues embarquées, la même proprioception et le même contrôleur : fine-tuning de modèles vision-langage-action (VLA), apprentissage par imitation, apprentissage par renforcement guidé par démonstrations, et agents de codage partant de zéro, auxquels on accorde le budget d'interactions d'un apprentissage par renforcement en ligne. Environnements, démonstrations et traces d'évaluation sont publiés en open source. Sur la moyenne de neuf tâches retenues pour la comparaison, le fine-tuning de VLA obtient le meilleur score. Les programmes écrits par des agents de codage dépassent toutefois toutes les bases de référence d'apprentissage par renforcement guidé par démonstrations sur cette même moyenne, et dominent sur l'atteinte bimanuelle. Les limites restent nettes : l'empilement entre espaces de travail distincts n'est pas résolu, π0.5 reste faible sur la tâche pick-box, et le transport multi-objets pénalise l'imitation, le renforcement guidé et les agents de codage. L'intérêt est double pour les intégrateurs et les équipes de recherche. D'une part, le résultat tempère l'idée d'une manipulation domestique humanoïde déjà acquise : quand le bras doit agir pendant que le corps s'équilibre, fait un pas ou change de posture, les tâches longues et à plusieurs objets restent hors de portée des méthodes actuelles, y compris des VLA. D'autre part, la performance des programmes générés par agents, sans démonstrations, suggère une voie concurrente de l'apprentissage de politiques, à surveiller. Le fait que toutes les méthodes partagent observations et contrôleur rend la comparaison plus lisible que les démonstrations isolées, mais il s'agit de simulation : le transfert vers le matériel réel n'est pas évalué ici, et les scores détaillés ne figurent pas dans le résumé. BiGym, introduit initialement pour la manipulation mobile bimanuelle sur un robot à base roulante, sert de référence aux travaux sur les VLA et l'imitation. Le passage au G1, plateforme humanoïde accessible largement diffusée en recherche, rapproche le benchmark des modèles de la famille π0.5 de Physical Intelligence, déjà évalués ici. Les suites possibles tiennent à l'ouverture des données : d'autres laboratoires pourront y confronter leurs VLA ou leurs agents de codage, et l'écart sur l'empilement et le transport multi-objets servira de cible aux prochains travaux.

Recherche❖Paper

1 source

45

467arXiv cs.RO 

TAPDreamer : des patchs adversariaux transférables contre les modèles d'action du monde

Des chercheurs ont mis au point TAPDreamer, une attaque par patch adversarial qui vise les « world action models » (WAM), ces modèles qui prédisent l'évolution de leur environnement pour piloter un robot. Le patch est construit à partir d'un seul encodeur visuel public, sans aucune requête vers la politique cible. Il suffit de six images d'une tâche source pour optimiser la distance L1 globale entre les représentations de l'encodeur sur image propre et sur image patchée. Un patch figé par benchmark, couvrant environ 6,5 % de l'image, fait chuter FastWAM de 97,7 % à 0,0 % de réussite sur 40 tâches LIBERO, et de 90,86 % à 0,0 % sur 50 tâches RoboTwin, en boucle fermée. Des patchs aléatoires de même taille laissent 81,5 % et 79,2 % de réussite. Le patch transféré fait tomber deux configurations de DreamWAM à 1,45 % et 1,00 %, et Motus à 10,60 %. Ces résultats viennent d'une étude académique en simulation, sans test sur robot physique. L'enjeu tient au mécanisme. Selon les auteurs, les interactions entre les poids d'attention et les vecteurs de valeur propagent un décalage de représentation quasi identique bien au-delà de la zone masquée, et ce décalage reste stable d'une tâche à l'autre. Un attaquant n'a donc besoin ni de la politique, ni de ses sorties, ni de ses futurs prédits, contrairement aux attaques existantes. Pour les intégrateurs et les responsables de sécurité industrielle, cela déplace le risque. Durcir uniquement la génération d'actions ne suffit pas, car l'encodeur visuel partagé devient un point de défaillance commun à plusieurs architectures. Ce travail relativise aussi la robustesse affichée par les modèles du monde sur les benchmarks propres. Un score de 97,7 % sur LIBERO ne dit rien de la tenue face à une perturbation locale persistante, par exemple un autocollant ou une étiquette dans le champ de la caméra. Une réserve s'impose : la portée physique reste à démontrer, car les patchs sont appliqués numériquement sur les images. Le contexte est celui d'une adoption rapide des modèles du monde comme socle du contrôle robotique généraliste, avec des encodeurs pré-entraînés réutilisés d'un modèle à l'autre. Cette mutualisation facilite le développement, mais elle crée la surface d'attaque exploitée ici. Les travaux antérieurs sur les politiques vision-langage-action (VLA) avaient déjà montré une vulnérabilité aux perturbations visuelles, en général avec accès aux sorties du modèle. TAPDreamer abaisse ce seuil d'accès. La conclusion des auteurs est que les défenses devront protéger les encodeurs visuels partagés contre les perturbations locales persistantes. La suite logique serait une validation sur matériel réel, avec des patchs imprimés et des conditions d'éclairage variables, puis l'évaluation de contre-mesures comme l'entraînement adversarial de l'encodeur ou la détection de patchs avant l'inférence.

Recherche❖Paper

1 source

45

468arXiv cs.RO 

OpenWAM : un cadre ouvert pour des modèles monde-action composables

OpenWAM est un cadre open source de modèles monde-action (WAM, world-action models), ces systèmes qui couplent la prédiction vidéo du futur au contrôle d'un robot. Les auteurs partent de Wan2.2-5B, un modèle de génération vidéo de 5 milliards de paramètres, qu'ils pré-entraînent de façon causale sur plus de 10 000 heures de vidéo robotique. Ils y greffent un « expert d'action » via une architecture Mixture-of-Transformers partagée. Celle-ci permet quatre modes de génération : conjointe, vidéo puis action, action puis vidéo, et découplée. Sur les quatre suites du benchmark de simulation LIBERO, le système obtient des taux de réussite élevés, de même que sur des tâches bimanuelles réelles dont l'abstract ne détaille ni le nombre ni les conditions. L'adaptation causale conjuguée à l'entraînement sur vidéo robotique fait passer le taux de réussite en mode vidéo puis action sur LIBERO-Long de 68,4 % à 97,8 %. L'apport principal tient à la méthode plus qu'à un score. Les WAM existants changent simultanément de backbone vidéo, de structure d'interaction, de supervision et de procédure d'inférence, ce qui empêche d'attribuer un gain à un choix de conception précis. OpenWAM fournit un banc d'essai commun où l'on ne modifie qu'un paramètre à la fois. Les résultats sur la dynamique sont les plus intéressants pour les équipes qui cherchent à réduire leur dépendance aux démonstrations coûteuses. Quand seul le prédicteur vidéo est adapté à une nouvelle tâche, un modèle de dynamique inverse gelé, à contexte local, entraîné sur des transitions contrefactuelles et des démonstrations, atteint 84,0 % de réussite moyenne sur quatre tâches LIBERO-90 jamais vues. Le même modèle entraîné sur les seules démonstrations plafonne à 21,5 %, et une version à contexte complet atteint 47,0 %. En dynamique directe, la supervision contrefactuelle réduit l'erreur de prédiction RGB de 34,5 % et fait passer l'identification du bon résultat de 21,1 % à 71,3 % parmi 16 issues partant du même état. Ces chiffres viennent de LIBERO, un benchmark simulé et saturé, et d'un article non encore évalué par des pairs : ils ne disent rien du fossé entre démonstration et déploiement industriel. Ce travail s'inscrit dans la montée des politiques fondées sur la vidéo, qui font concurrence aux modèles vision-langage-action (VLA) classiques comme Pi-0 ou GR00T. Leur promesse est de tirer parti de la grande quantité de vidéo disponible, au-delà des seules démonstrations réussies. Wan2.2 sert ici de socle, ce qui illustre la réutilisation des modèles vidéo génératifs ouverts en robotique. Le cadre est publié sous le numéro arXiv 2610.07922, en version 1, et l'abstract ne mentionne aucun pilote industriel ni calendrier de déploiement. La suite logique serait une validation sur davantage de tâches réelles, avec des comparaisons à poids de calcul équivalent contre les VLA établis.

Recherche❖Paper

1 source

44

469arXiv cs.RO 

VLA-ACL : élagage de jetons visuels cohérent avec les actions pour des modèles vision-langage-action (VLA) efficaces

Des chercheurs publient sur arXiv VLA-ACL (Action Consistency Learning), une méthode d'élagage de tokens visuels pour les modèles Vision-Language-Action (VLA), dont le code est disponible sur GitHub. Le système apprend une politique d'élagage légère tout en laissant le modèle VLA de base entièrement gelé. L'entraînement vise à ce que les actions produites à partir d'un contexte visuel élagué restent cohérentes avec celles d'un modèle enseignant qui voit le contexte complet. Les actions de référence (ground truth) ne servent que de supervision auxiliaire. Les tests portent sur le benchmark de simulation LIBERO et sur des tâches de manipulation en conditions réelles. La méthode élimine jusqu'à 87,5 % des tokens visuels tout en gardant des performances jugées compétitives. Elle réduit le calcul jusqu'à 75 % et accélère l'inférence d'un facteur 1,5. Ces chiffres comptent pour le déploiement. Un VLA doit traiter de longues séquences de tokens à chaque pas de contrôle, et les patchs visuels dominent cette séquence. Cette charge limite le temps réel sur le matériel embarqué. Le gain d'inférence de 1,5x reste nettement inférieur à la réduction de calcul de 75 %. Cet écart suggère que les coûts hors visuel, comme le décodage des actions, plafonnent l'accélération réelle. Les résultats viennent de l'article seul, sans reproduction indépendante. La notion de « performance compétitive » n'est pas chiffrée dans le résumé, et on ignore sur quels modèles de base et quels robots les tests réels ont été faits. La méthode gèle le modèle de base, donc un intégrateur peut l'ajouter à un VLA existant sans le réentraîner. Elle illustre aussi un changement d'approche : choisir les tokens selon leur effet sur la commande finale plutôt que selon des scores d'attention. Les travaux antérieurs d'élagage pour VLA se répartissent en deux familles. La première regroupe des heuristiques sans entraînement, fondées sur les scores d'attention ou des seuils de mouvement, jugées indirectes par les auteurs. La seconde exige un réglage fin coûteux du modèle de base. VLA-ACL se place entre les deux : une supervision au niveau de l'action, sans toucher aux poids du VLA. Les auteurs affirment un meilleur compromis performance-efficacité que les méthodes d'élagage existantes pour VLA gelés. La suite dépendra de la généralisation à d'autres architectures (Pi-0, GR00T, Helix et leurs équivalents) et de tests sur plus de tâches réelles. Le code étant public, la communauté pourra vérifier ces résultats rapidement.

Recherche❖Paper

1 source

44

470arXiv cs.RO 

Démo : calibration en ligne d'un jumeau numérique électromagnétique guidée par un modèle vision-langage

Un jumeau numérique électromagnétique (EM) donne aux robots mobiles une conscience situationnelle du réseau sans fil, mais il dépend des conductivités des matériaux, qui varient selon l'environnement. Une démonstration publiée sur arXiv (2610.07081) présente un cadre de calibration en ligne guidé par un modèle vision-langage (VLM). Il combine un robot humanoïde Unitree G1 et le simulateur de propagation radio NVIDIA Sionna. Le VLM est appelé deux fois. Une première fois, il classe les matériaux visibles dans l'image (béton, verre, bois, etc.). Cette classification est convertie via la recommandation ITU-R P.2040 en valeurs a priori de conductivité. Sionna s'en sert pour initialiser une descente de gradient sur les mesures de puissance reçue (RSS) accumulées par le robot. Une seconde fois, le VLM choisit le prochain point de mesure en fonction de l'erreur résiduelle de calibration RSS et de la couverture d'image déjà obtenue. Dans un scénario intérieur réel, le système atteint une erreur absolue moyenne normalisée de conductivité de 1,74×10⁻⁴ en moins de 20 m de déplacement. Une initialisation aléatoire ne converge jamais. Des points de passage aléatoires exigent plus du double de distance parcourue. Pour les intégrateurs et les responsables de sites, ce travail s'attaque à un obstacle concret de la robotique mobile connectée : les modèles de propagation radio calibrés à la main ne suivent pas les changements d'un entrepôt ou d'un bâtiment (réaménagement, nouvelles cloisons, rayonnages). Un robot qui recalibre lui-même son jumeau numérique pourrait cartographier la couverture Wi-Fi ou 5G privée, anticiper les zones d'ombre et adapter ses trajets. Le résultat montre aussi un usage utile des VLM hors de la manipulation ou de la navigation : fournir un a priori sémantique qui rend l'optimisation physique convergente, là où une initialisation naïve échoue. Les limites sont nettes. Il s'agit d'une démonstration sur un seul environnement intérieur, sans comparaison publiée avec des méthodes classiques d'estimation de paramètres ni mesure de robustesse face aux erreurs de classification du VLM. L'erreur de conductivité, très faible, est aussi normalisée selon une convention que le résumé ne détaille pas. Cette approche s'inscrit dans la montée des jumeaux numériques radio, portée notamment par la bibliothèque Sionna de NVIDIA, qui offre un lancer de rayons différentiable permettant l'optimisation par gradient des paramètres de scène. Le Unitree G1, humanoïde abordable largement utilisé en recherche, sert ici de plateforme mobile de mesure. Le travail rejoint l'effort plus large visant à utiliser les modèles de fondation multimodaux comme couche de raisonnement dans des boucles de perception et de planification, plutôt que comme simples interfaces. Les suites logiques seraient des essais sur des sites plus vastes et plus hétérogènes, une validation sur plusieurs robots et une intégration à des flottes d'AMR. Aucun calendrier de déploiement ni partenaire industriel n'est annoncé à ce stade.

Recherche❖Paper

1 source

44

471arXiv cs.RO 

EgoLAP : apprendre à partir de données humaines égocentriques grâce au raisonnement langage-action

EgoLAP, un cadre de pré-entraînement pour modèles VLA (vision-langage-action) décrit dans une prépublication arXiv (2610.08726), vise à exploiter des données égocentriques humaines, c'est-à-dire filmées du point de vue d'une personne qui accomplit une tâche, pour entraîner des robots. Le système apprend conjointement à partir de trajectoires humaines et robotiques via une chaîne de raisonnement par le langage partagée. L'intention de mouvement y est exprimée sous forme d'« actions langagières » structurées et abstraites dans le temps. Chacune est associée à un raisonnement au niveau du mouvement, fondé sur la géométrie de la scène, la physique et les affordances des objets. Les auteurs annoncent 80,1 % de progression moyenne des tâches en conditions réelles, soit un gain de 2,3 fois par rapport aux autres représentations d'action testées. Les expériences couvrent des tâches réelles et simulées. Le résumé ne précise ni la plateforme robotique, ni le nombre de tâches, ni le volume de données humaines utilisé. L'enjeu est celui du coût des démonstrations robotiques. La téléopération reste lente, chère et difficile à passer à l'échelle, alors que les vidéos égocentriques humaines peuvent être collectées en grande quantité. Le verrou est l'écart d'embodiment : les actions bas niveau d'un humain (articulations d'une main, trajectoires du poignet) ne se transposent pas telles quelles à un bras ou une pince. L'idée centrale est de n'utiliser comme cible de supervision que l'intention de mouvement, jugée transférable entre humains et robots. Si ce résultat se confirme, il renforcerait la thèse d'un passage à l'échelle des VLA par les données humaines plutôt que par les seules démonstrations robot. Les auteurs affirment aussi que le raisonnement au niveau du mouvement fait mieux qu'un format composite combinant sous-tâches, boîtes d'objets et traces visuelles, ce qui interroge les choix de raisonnement intermédiaire adoptés par plusieurs modèles actuels. Il faut toutefois rester prudent. Le chiffre de 80,1 % mesure une progression de tâche, pas un taux de réussite complet. Le gain de 2,3 fois dépend du choix des représentations comparées, et ces résultats n'ont pas encore été relus par des pairs. L'approche s'inscrit dans un courant plus large : des modèles comme Pi-0, GR00T ou Helix cherchent aussi à combiner vidéo humaine, simulation et données robot, et plusieurs équipes explorent les représentations d'action partagées entre morphologies. EgoLAP se distingue en choisissant le langage comme pivot. Reste à voir si le code, les poids et les jeux de données seront publiés, et si la méthode tient sur des tâches de longue durée, des mains dextres ou des environnements industriels, seuls cas qui intéresseraient vraiment les intégrateurs.

IA physique❖Paper

1 source

44

472arXiv cs.RO 

EmbodiedSmith : passer à l'échelle les données d'IA incarnée grâce à un cycle d'auto-amélioration récursive en simulation

Des chercheurs publient sur arXiv (2610.07969) EmbodiedSmith, un cadre de génération de données d'entraînement robotiques en simulation, fondé sur une boucle de « récursive self-improvement » (RSI). Le système unifie trois étapes habituellement séparées : la création d'assets 3D, la génération de scènes et la génération de tâches. Il fonctionne de façon autonome ou sur instructions en langage naturel. Au centre du dispositif, une boucle de raffinement pilotée par des agents : la génération de scène anticipe les besoins des tâches à venir, et la génération de tâche déclenche en retour des modifications ciblées de la scène. Le cadre prend en charge des manipulateurs mobiles, des humanoïdes et des mains dextres, ainsi que des interactions avec des objets déformables et des fluides. Les auteurs affirment que ce raffinement conjoint améliore le taux de réussite de la génération de tâches, y compris pour les tâches longues, et que des politiques entraînées sur des données plus diversifiées généralisent mieux. Le résumé ne donne ni chiffres, ni noms de robots, ni noms de modèles de politique testés. L'intérêt tient à deux verrous connus des modèles de fondation robotiques : le manque de données variées et le manque d'environnements d'évaluation fiables. Les pipelines de simulation actuels dépendent de bibliothèques d'assets et de compétences prédéfinies, et traitent la scène et la tâche comme deux problèmes disjoints, ce qui produit des tâches irréalisables ou répétitives. Si la boucle scène-tâche tient ses promesses, elle réduirait le travail manuel de conception d'environnements, poste coûteux pour les équipes qui entraînent des VLA (vision-language-action). L'extension aux mains dextres, aux fluides et aux objets déformables vise des cas où la simulation reste la plus fragile. Il faut toutefois rester prudent : il s'agit d'un préprint non évalué par des pairs, et le résumé ne dit rien de l'écart sim-to-real. Un gain de généralisation mesuré en simulation ne prouve pas un transfert sur robot physique, qui est le test décisif pour les décideurs industriels. Le travail s'inscrit dans la course à la donnée synthétique pour la robotique, où coexistent les générateurs de scènes pilotés par LLM, les environnements procéduraux et les plateformes de simulation des grands acteurs, comme Isaac Sim chez NVIDIA, qui alimente la famille GR00T. Face à la téléopération, coûteuse et lente à passer à l'échelle, la simulation générative promet de produire des volumes bien supérieurs à moindre coût. Les prochaines étapes à surveiller sont la publication du code et des benchmarks, des validations sur robots réels et une comparaison directe avec les pipelines existants. Aucun acteur européen ni calendrier de déploiement n'est mentionné dans l'annonce.

IA physique❖Paper

1 source

44

473arXiv cs.RO 

Navigation par indices RF : perception et action incarnées sous incertitude de trajets multiples

Des chercheurs publient sur arXiv (v1, octobre 2026) une méthode de navigation pour robots d'inspection en usine connectée. Le robot doit atteindre un équipement sans carte préalable et sans connaître les coordonnées de la cible. Les signaux radiofréquence (RF) émis par l'équipement servent d'indice directionnel. Ils complètent la vision quand l'occlusion ou un mauvais éclairage empêchent de détecter la cible. Le problème est la propagation par trajets multiples (multipath). Les réflexions déforment le signal, et une mesure RF instantanée ne donne donc pas la vraie direction de la source. Les auteurs construisent d'abord un benchmark, Habitat Sionna RT. Il combine la géométrie détaillée des scènes et des propriétés de matériaux assignées pour produire des observations visuelles et RF alignées, en réponse aux actions du robot. Ils proposent ensuite un cadre multimodal sensible à l'incertitude. Il estime conjointement la direction de la cible et son incertitude à partir d'un historique d'observations RF, visuelles et de pose. Ces estimations alimentent la sélection d'actions, avec le contexte visuel. Dans des scènes jamais vues, le gain relatif atteint 18,2 % en taux de succès (SR) et 11,5 % en SPL (succès pondéré par la longueur du chemin) face à la meilleure référence évaluée. L'apport tient moins à la RF elle-même qu'à la façon de la traiter. Le signal n'est plus lu comme une flèche fiable : c'est une observation bruitée dont la confiance est modélisée et accumulée dans le temps. Pour un intégrateur, l'intérêt potentiel est d'exploiter la radio déjà présente sur site (équipements connectés, réseaux sans fil) plutôt que de déployer des balises dédiées. Cette lecture reste une inférence, que l'étude ne démontre pas. Les résultats viennent uniquement de simulation. Ce sont des gains relatifs, et le résumé ne donne ni valeurs absolues ni identité de la référence la plus forte. L'écart simulation-réel reste entier : un lancer de rayons avec matériaux assignés ne reproduit qu'approximativement les réflexions d'un atelier réel. Ce travail s'inscrit dans la navigation vers un objectif, dominée par des approches purement visuelles évaluées sur des simulateurs comme Habitat. Sionna RT est la bibliothèque de lancer de rayons radio d'NVIDIA. Les alternatives sont la localisation RF sur infrastructure fixe, ou le SLAM (cartographie et localisation simultanées) avec carte préalable. Le présent cadre vise justement l'absence de carte et de coordonnées. Aucun déploiement ni pilote industriel n'est annoncé. La suite logique est une validation sur robot physique dans un environnement industriel réel, avec mesures RF en conditions de multipath dense. C'est ce test qui dira si le gain observé en simulation survit à la réalité.

Recherche❖Paper

1 source

44

474arXiv cs.RO 

HARL-A : un cadre de référence extensible pour l'apprentissage par renforcement adverse multi-agents hétérogènes dans IsaacLab

Des chercheurs du laboratoire DIRECTLab ont publié HARL-A, un framework open source maintenu activement et construit sur IsaacLab, le simulateur robotique de NVIDIA. Il sert à entraîner et à évaluer des politiques adversariales multi-agents (MARL) sur des équipes de robots aux morphologies variées. Le nombre d'équipes est libre, tout comme le mélange de morphologies dans chaque équipe. HARL-A étend la bibliothèque d'algorithmes HARL et IsaacLab avec un support adversarial. Il apporte trois composants : une architecture logicielle modulaire qui réduit le travail d'ingénierie pour définir de nouveaux environnements hétérogènes, trois environnements de référence (Sumo, Soccer et 3D Galaga) et plus de dix politiques pré-entraînées, publiées sur Hugging Face. Sumo porte sur la poussée avec beaucoup de contacts, Soccer sur la maîtrise du ballon en compétition, et 3D Galaga sur la poursuite et l'évasion. Le code, les environnements et la documentation sont disponibles sur GitHub, dans le dépôt DIRECTLab/IsaacLab-HARL. Les auteurs indiquent que le framework produit de façon fiable des politiques adversariales et une spécialisation émergente des rôles. Ces résultats sont démontrés en simulation seulement, et l'abstract ne donne aucun chiffre de performance. Pour la recherche, l'intérêt est surtout d'infrastructure. Les travaux sur le MARL adversarial en robotique sont freinés par des outils éparpillés. Les frameworks existants se concentrent sur la coopération, s'appuient sur des moteurs physiques simplifiés ou restent des implémentations isolées, difficiles à étendre. Un socle commun avec une physique de haute fidélité et des politiques déjà entraînées permet de comparer des méthodes sans repartir de zéro. Le support de morphologies mixtes compte aussi, car les flottes réelles combinent déjà quadrupèdes, humanoïdes et bras. Pour un industriel ou un intégrateur, ce n'est pas un produit déployable. Les tâches de sumo, de foot et de jeu d'arcade en 3D sont des bancs d'essai académiques, et rien n'est dit sur le transfert sim-to-real ni sur des robots physiques. Ces résultats ne disent donc rien du fossé entre démonstration et réalité. Ce travail s'inscrit dans l'écosystème IsaacLab, devenu le standard de fait pour l'apprentissage par renforcement massivement parallèle sur GPU. Il prolonge HARL, bibliothèque d'algorithmes MARL hétérogènes, que HARL-A rend utilisable en contexte compétitif. La version 2 de l'article, signalée comme remplacement croisé sur arXiv, montre un projet encore en évolution. Les comparaisons les plus naturelles sont les plateformes MARL généralistes, mais leur physique est plus simple, et les suites d'apprentissage de NVIDIA, centrées sur un seul robot. Aucun acteur européen n'est cité. Les prochaines étapes probables sont l'ajout d'environnements, l'évaluation de la robustesse des politiques face à des adversaires inédits et, à terme, un test sur du matériel réel. Aucun calendrier n'est annoncé.

Recherche❖Paper

1 source

44

475arXiv cs.RO 

Des jambes aux roues : retargeting de mouvement humain adapté à l'embodiment pour humanoïdes à base mobile

Des chercheurs publient sur arXiv (2610.08381v1) un cadre de retargeting de mouvement humain conçu pour les humanoïdes à base mobile, c'est-à-dire des robots dotés d'une base à roues, d'un axe de levage vertical et de deux bras, sans jambes. Le système prend en entrée un mouvement humain reconstruit à partir de vidéo et le répartit entre trois responsabilités, la base, le lift et les bras, avant toute adaptation propre à un robot donné. Un module d'allocation conserve le chemin issu de l'humain, stabilise le cap, sépare rotation et translation quand c'est nécessaire, recadre temporellement les commandes pour respecter les limites de la base, puis répare les trajectoires du lift et des bras. Un adaptateur de déploiement convertit ensuite la référence en commandes à 50 Hz, grâce à la détection de base immobile, à un filtrage par zone morte et limitation de pente (slew-rate), à une mise à l'échelle de lecture cohérente dans le temps et à des gains linéaire et angulaire distincts. L'évaluation combine des comparaisons dans l'espace de la tâche par rapport à l'humain, un rejeu en simulation sans politique apprise et une exécution qualitative sur un robot physique. L'abstract ne fournit ni payload, ni DOF, ni taux de réussite chiffré, ni nom de plateforme. L'enjeu est pratique. La vidéo humaine est l'une des rares sources de démonstrations réellement extensibles, mais la plupart des méthodes de retargeting supposent un robot à jambes à cinématique proche de l'humain. Or une grande partie des humanoïdes commercialisés pour la logistique et l'industrie sont des manipulateurs mobiles bimanuels sur roues, plus simples à stabiliser et à déployer que la marche bipède. Pour eux, marcher devient un mouvement de base et se pencher devient une coordination entre lift et bras. Combler ce fossé élargit la quantité de données exploitable par ces plateformes. Il faut toutefois relativiser. L'évaluation reste modeste : une exécution physique seulement qualitative, pas d'entraînement de politique, pas de comparaison chiffrée avec des méthodes concurrentes. Le travail démontre la faisabilité d'une référence cinématique propre, pas encore la rentabilité de cette voie par rapport à la téléopération. Ce travail s'inscrit dans le mouvement qui cherche à apprendre à partir de vidéo humaine, dans le prolongement des méthodes de retargeting conçues pour des humanoïdes bipèdes. La contribution est ici l'adaptation à une morphologie différente, plus proche des architectures hybrides roues et bras que privilégient plusieurs acteurs industriels. La suite logique serait une validation quantitative sur des tâches réelles et le couplage de ces références avec l'apprentissage de politiques de type VLA ou par imitation, afin de mesurer le gain réel en volume de données exploitables et en taux de réussite. Aucun pilote, partenaire industriel ni calendrier n'est annoncé à ce stade.

Recherche❖Paper

1 source

44

476arXiv cs.RO 

Langage Silicon : un cadre d'échange de connaissances natif pour robots hétérogènes

Des chercheurs chinois publient sur arXiv (2610.07650) « Silicon Language », un cadre d'échange de connaissances conçu pour que des robots hétérogènes se transmettent des capacités sans réingénierie humaine. Le principe : un robot qui veut une compétence encode sa propre expérience en « paquets de connaissances », les publie, récupère ceux de ses pairs, les traduit pour ses propres capteurs et actionneurs, puis les valide par un essai local indépendant. L'architecture repose sur trois couches : un agent embarqué (edge), un protocole baptisé Silicon Transfer Protocol (STP) et un hub de connaissances, le tout organisé selon une pile de capacités inspirée du système de publication scientifique humain. Un procédé d'évaluation côté récepteur permet à chaque robot de juger l'utilité d'un paquet externe, avec un mélange progressif et un retour arrière automatique pour limiter le transfert négatif. Le déploiement de preuve de concept a duré 30 jours dans un laboratoire de mine simulée en surface à Yulin, avec des essais de suivi sur une route de sable en extérieur et dans une usine en intérieur. Deux robots hétérogènes ont encodé et traduit trois capacités d'un support à l'autre. Les essais côté source du comportement de suivi « dust-locked » ont été enregistrés sur le robot Taurus. Pour les intégrateurs, le coût caché de la robotique reste l'adaptation : chaque transfert de compétence d'une plateforme à une autre implique de refaire les interfaces, de réajuster les paramètres et de revalider la sécurité. Les auteurs indiquent que le temps d'adaptation par capacité serait passé de plusieurs jours à quelques heures. Ce chiffre vient des relevés du projet et non d'une mesure contrôlée, et les auteurs le précisent eux-mêmes. Il n'existe pas de comparaison avec/sans paquet, et le nombre de capacités (trois) et de robots (deux) est très faible. Surtout, les échanges se sont faits par copies de fichiers assistées par un opérateur, ce qui veut dire que la boucle autonome décrite n'a pas été démontrée. Le travail est donc une preuve initiale de faisabilité pour le transfert inter-embodiment, pas une validation à l'échelle d'une flotte. Il vaut surtout pour la question qu'il pose : la validation locale côté récepteur, plutôt que la certification centralisée, comme garde-fou du partage de compétences. Ce travail s'inscrit dans la recherche sur la généralisation entre morphologies, où les modèles VLA (vision-langage-action) généralistes comme Pi-0 ou GR00T misent sur de grands jeux de données pour couvrir plusieurs robots. Silicon Language prend une voie différente, plus proche d'un registre de paquets pour robots, où chaque machine reste responsable de ce qu'elle adopte. Le contexte minier de Yulin reflète aussi l'intérêt chinois pour l'automatisation des environnements poussiéreux et dangereux. Les auteurs renvoient à des travaux futurs l'évolution autonome à l'échelle d'une flotte et les comparaisons contrôlées. Aucun calendrier de pilote industriel n'est annoncé.

Recherche❖Paper

1 source

44

477arXiv cs.RO 

Valider quand les futurs concordent : découpage adaptatif des actions tenant compte des conséquences pour la manipulation robotique

Une équipe de chercheurs propose CA³C (Consequence-Aware Adaptive Action Chunking), un cadre d'inférence qui décide dynamiquement quelle portion d'une séquence d'actions prédite par une politique robotique doit être exécutée avant de replanifier. Les politiques à « action chunking » prédisent des séquences de commandes sur plusieurs pas de temps, mais la plupart des systèmes exécutent un préfixe de longueur fixe, en supposant que le même horizon reste fiable dans tous les états. CA³C s'appuie sur un modèle du monde conditionné par les actions, qui simule les conséquences de plusieurs séquences candidates générées avec le même bruit d'échantillonnage. Le problème de l'horizon d'exécution est formulé comme une inférence bayésienne de point de rupture, puis la séquence retenue est choisie par consensus entre futurs imaginés. Le principe tient en une phrase : s'engager tant que les futurs simulés concordent, replanifier dès qu'ils divergent. La politique de base n'est ni modifiée ni réentraînée. Testée sur plusieurs benchmarks en simulation et sur des tâches de manipulation avec de vrais robots, la méthode améliore diverses politiques à action chunking, avec une réduction relative du taux d'échec allant jusqu'à 71,8 % par rapport aux politiques d'origine. L'intérêt tient au critère de décision. Les méthodes adaptatives existantes estiment l'horizon à partir de la similarité ou de la stabilité des actions prédites. Or des actions différentes peuvent mener au même résultat, tandis que des actions proches peuvent produire des futurs distincts. Juger la confiance dans l'espace des conséquences plutôt que dans l'espace des actions est donc plus cohérent avec ce qui compte pour la tâche. Pour les intégrateurs et les équipes qui déploient des politiques VLA ou de diffusion, l'approche est un module greffé à l'inférence, sans nouvelle collecte de données ni réentraînement, ce qui abaisse le coût d'adoption. Deux réserves : le chiffre de 71,8 % est un maximum, pas une moyenne, et le coût de calcul additionnel n'est pas précisé dans le résumé. Faire tourner un modèle du monde sur plusieurs candidats a un prix en latence, qui compte pour des cycles de contrôle rapides. La qualité du modèle du monde conditionne aussi la fiabilité du consensus. Ce travail, publié sur arXiv (2610.07949, première version), s'inscrit dans l'évolution de l'action chunking popularisé par des politiques comme ACT et Diffusion Policy, puis repris par les modèles VLA tels que Pi-0. Le compromis est connu : des horizons longs donnent des mouvements fluides mais réagissent mal aux perturbations, des horizons courts sont plus réactifs mais plus coûteux et saccadés. Parallèlement, les modèles du monde conditionnés par l'action gagnent du terrain comme outils de planification et d'évaluation. La suite logique serait de mesurer la surcharge de calcul, de tester la méthode sur des politiques de grande taille et en conditions industrielles. Il s'agit à ce stade d'un résultat de recherche, sans déploiement commercial annoncé.

Recherche❖Paper

1 source

44

478arXiv cs.RO 

QF3 : apprentissage par renforcement à base de flux rapide avec gradients Q filtrés

Des chercheurs publient QF3 (Fast Flow RL with Filtered Q-Gradients), un algorithme d'apprentissage par renforcement (RL) off-policy et online qui entraîne des politiques de type « flow » (génératives, basées sur le flow matching). L'entraînement combine la perte de flow matching et le gradient d'action du critique Q, rétropropagé à travers une prédiction en un seul pas de la sortie du flow. Un filtre limite l'application de ce gradient aux seules dimensions d'action restées proches de l'action stockée dans le replay buffer, là où le critique et la prédiction à un pas sont jugés fiables. Les auteurs affirment que QF3 est la première méthode de RL off-policy à base de flow qui entraîne des politiques de locomotion humanoïde from scratch et les transfère en zero-shot sur le robot réel. Associé à une recette d'entraînement off-policy à haut débit, il apprend des politiques de locomotion et de motion tracking humanoïdes avec une accélération de 10x en temps réel (wall-clock) par rapport à FPO++, une méthode récente de RL on-policy pour politiques flow. Les auteurs l'appliquent aussi au fine-tuning de politiques de manipulation pré-entraînées sur les benchmarks ABC-Sim et Robomimic. Il s'agit d'un preprint arXiv (v1), non relu par les pairs, accompagné d'un site de projet. L'intérêt tient à la jonction de deux tendances. Les politiques flow (et diffusion) sont devenues la classe standard pour apprendre des comportements par imitation, notamment dans les VLA (vision-language-action), mais leur amélioration par RL reste difficile : rétropropager à travers un échantillonnage multi-étapes est instable et coûteux, ce qui a poussé vers des méthodes on-policy comme FPO++, gourmandes en échantillons. Si le gain de 10x se confirme hors du cadre des auteurs, il réduirait le coût de la locomotion humanoïde apprise en simulation, puis transférée au réel (sim-to-real). Il suggérerait aussi qu'un seul algorithme peut servir à la fois à l'entraînement from scratch et au raffinement de politiques issues de démonstrations. Pour les intégrateurs, cela ouvre la voie à un affinage par interaction de politiques pré-entraînées, sans repartir de zéro. Il faut toutefois rester prudent : la revendication de « première » est auto-déclarée, et le résumé ne donne ni plateforme humanoïde, ni nombre d'essais matériels, ni taux de succès chiffrés en manipulation. Le « 10x » est mesuré face à une seule méthode de référence, sur des tâches choisies par les auteurs. Ces travaux s'inscrivent dans la montée des politiques génératives en robotique, popularisées par Diffusion Policy puis par des modèles flow comme Pi-0, et dans l'effort pour combiner imitation et RL. Les concurrents directs sont les méthodes de RL pour politiques flow ou diffusion, dont FPO++ est la référence citée, ainsi que les approches de fine-tuning de VLA par RL. Les prochaines étapes à surveiller sont la publication du code et des détails matériels sur le site du projet, des réplications indépendantes et une éventuelle application à des VLA de grande taille ou à des tâches de loco-manipulation, où le coût d'entraînement reste le principal verrou.

Recherche❖Paper

1 source

44

479arXiv cs.RO 

WAMJET : un cadre pour accélérer les modèles d'action du monde

WAMJET, présenté sur arXiv (2610.03797, version 2), est un « harness » agentique qui accélère l'inférence des World Action Models (WAM). Ces modèles réutilisent des modèles de fondation vidéo pré-entraînés pour la manipulation robotique, en prédisant conjointement la vidéo future et les actions. Ce couplage et la taille des backbones rendent l'inférence coûteuse. Le harness dote des agents de code de consignes d'optimisation réutilisables et d'outils de mesure et de validation. L'agent suit un flux piloté par les goulots d'étranglement : il profile l'inférence, modifie le code ciblé, valide les effets, puis affine la pile d'accélération à mesure que les goulots se déplacent, sans dégrader la qualité des actions. Les expériences couvrent six WAM, trois agents de code et deux architectures de GPU. WAMJET atteint jusqu'à 9,95x d'accélération sans perte par rapport aux implémentations amont. Des optimisations par approximation et adaptées au matériel réduisent encore la latence, avec des taux de succès comparables. Ce travail s'attaque à un frein concret du déploiement des WAM : leurs latences d'inférence. Les techniques d'accélération existent déjà (quantification, distillation, réduction du nombre de pas de diffusion, optimisation des noyaux), mais choisir et composer celles qui conviennent à chaque modèle et à chaque plateforme matérielle demande un travail d'ingénierie lourd et répété. En automatisant cette étape avec des agents de code, les auteurs proposent de la traiter comme un problème d'optimisation outillé plutôt que comme du sur-mesure. Pour un intégrateur ou une équipe qui porte un WAM sur un robot réel, le gain de latence conditionne la fréquence de contrôle atteignable. Le résultat suggère aussi que les implémentations amont des WAM laissent beaucoup de performance inexploitée. Le chiffre de 9,95x est un maximum, obtenu sur le meilleur cas, et non une moyenne. L'extrait disponible ne détaille ni les latences absolues ni la liste des six modèles, ce qui limite la lecture de ce chiffre. La mention de taux de succès « comparables » pour les variantes approximatives demande à être vérifiée sur des tâches physiques variées, et pas seulement sur des benchmarks. Cette approche s'inscrit dans deux tendances. La première est la montée des modèles d'action fondés sur la vidéo, qui héritent de la qualité des modèles vidéo génératifs, mais aussi de leur coût de calcul, par opposition aux VLA classiques, plus légers. La seconde est l'usage d'agents de code pour optimiser des systèmes, sur le modèle de l'ingénierie assistée de noyaux GPU. Les travaux concurrents sur l'accélération des VLA, comme les politiques à flow matching ou à diffusion réduite en pas, visent le même objectif de contrôle temps réel, mais sans automatiser la composition des techniques. La suite logique est une validation sur robots physiques et sur davantage de plateformes, notamment embarquées, où les contraintes de calcul sont les plus fortes.

Recherche❖Paper

1 source

44

480arXiv cs.RO 

BAT : concilier agilité et stabilité par commutation de politiques en ligne pour le contrôle du corps entier d'un robot humanoïde sur de longs horizons

Des chercheurs proposent BAT, un cadre de commutation de politiques en ligne pour le contrôle du corps entier d'humanoïdes sur de longs enchaînements de mouvements. Le travail, publié sur arXiv (2604.01064, version 2), part d'un constat : les approches existantes suivent deux paradigmes. Les politiques couplées coordonnent tout le corps de façon globale, tandis que les politiques découplées traitent chaque module séparément pour gagner en précision. BAT choisit dynamiquement entre deux contrôleurs généralistes entraînés par apprentissage par renforcement, l'un couplé et l'autre découplé, selon le contexte du mouvement en cours. Deux prédicteurs de commutation travaillent en parallèle. OpVQ-VAE s'appuie sur des « tokens » de mouvement et généralise bien. OpHRL est un prédicteur en boucle fermée qui tient compte de l'état du robot. Un routeur de familiarité des tokens (Token-Familiarity Router) arbitre lorsque les deux divergent : il privilégie OpHRL pour les séquences de tokens connues et OpVQ-VAE pour les séquences inédites. Les auteurs annoncent 85,2 % de réussite sur des combinaisons de mouvements longues déjà vues à l'entraînement, et 71,3 % sur des mouvements jamais rencontrés. Ils rapportent aussi de meilleurs résultats que les contrôleurs corps entier existants sur les mouvements pris isolément, ainsi qu'un déploiement zéro-shot sur le Unitree G1. L'intérêt pratique tient au compromis que les équipes rencontrent sans cesse. Une politique couplée donne des gestes dynamiques et agiles, comme des sauts ou des mouvements amples, mais elle perd en précision. Une politique découplée manipule ou positionne mieux, mais elle devient moins robuste quand le mouvement exige une coordination globale. Plutôt que de chercher un contrôleur unique qui concilie tout, BAT montre qu'on peut combiner des spécialistes et basculer entre eux à l'exécution. Le point à surveiller est l'écart entre mouvements vus et inédits : 85,2 % contre 71,3 %, soit près de 14 points perdus, ce qui reste loin de la fiabilité attendue en production. Ces chiffres viennent de benchmarks de recherche, sans durée de tâche, nombre d'essais ni conditions détaillés dans le résumé. Le transfert zéro-shot sur G1 est encourageant, mais rien ne dit qu'il couvre toute la distribution de mouvements testée en simulation. Ce travail s'inscrit dans la vague des contrôleurs généralistes corps entier pour humanoïdes, nourrie par l'apprentissage par renforcement en simulation et l'imitation de mouvements humains. Le Unitree G1, peu coûteux et très répandu dans les laboratoires, sert désormais de plateforme de référence pour valider ces méthodes. Les auteurs ne se positionnent pas ici face aux modèles VLA commerciaux (Figure, Tesla, NVIDIA), car BAT agit à la couche basse de contrôle, pas au niveau du raisonnement ou de la planification. Cette couche reste pourtant un goulot d'étranglement pour passer des démonstrations à des tâches longues et enchaînées. La version 2 laisse penser que l'article a été révisé après relecture. Les suites logiques seraient des tests sur d'autres plateformes, des tâches de manipulation plus longues et une mesure de la robustesse hors laboratoire. Aucun calendrier de déploiement industriel n'est annoncé.

Recherche❖Paper

1 source

44

481arXiv cs.RO 

Démo : cadre de co-simulation en boucle fermée Sionna-Isaac Sim pour une navigation robotique sensible au réseau sans fil via ROS 2

Des chercheurs de la Singapore University of Technology and Design (SUTD) présentent, dans une démonstration publiée sur arXiv, un cadre de co-simulation en temps réel qui couple NVIDIA Isaac Sim (moteur physique et de perception robotique) et NVIDIA Sionna (simulateur de liaisons radio) via ROS 2. Sionna calcule par lancer de rayons sur GPU le canal entre la station de base et le robot, sur la géométrie exacte que simule Isaac Sim, au lieu d'un modèle stochastique. Les états du canal reviennent dans la boucle de commande en temps réel : la carte de couverture est rafraîchie en environ 16 ms (environ 60 Hz). Pour la démonstration, l'équipe a construit un jumeau numérique du campus SUTD à partir d'OpenStreetMap, avec deux robots Nova Carter. Le planificateur en boucle fermée supprime les coupures de communication pour un surcoût de seulement 7,4 % sur le temps de parcours. Le trajet le plus court, pris comme référence, reste déconnecté 7,9 s sur un parcours de 81,2 s, soit environ 10 % du temps. L'enjeu concerne les robots dont la boucle de contrôle est déportée sur le réseau, en 5G privée ou en edge computing. Comme le récepteur se déplace avec le robot, la qualité de la liaison dépend de sa trajectoire. Jusqu'ici, les simulateurs traitaient l'un ou l'autre aspect. Les auteurs affirment, à leur connaissance, qu'aucun outil n'unifie nativement moteur physique et propagation spécifique au site, et que les couplages existants se limitaient à des analyses hors ligne. Pour un intégrateur de flottes d'AMR en entrepôt ou en usine, l'intérêt est de tester avant déploiement les zones d'ombre radio, au lieu de les découvrir sur site. Les chiffres demandent toutefois de la prudence : ils proviennent d'un seul scénario simulé, sur un campus, sans mesure sur du matériel réel. Un jumeau fidèle en simulation ne garantit pas la même précision face aux réflexions, aux obstacles mobiles et à la variabilité d'un site industriel. Il s'agit d'une démo de recherche, pas d'un produit livré ni d'un déploiement. Cette approche prolonge la convergence des outils NVIDIA, avec Isaac Sim pour la robotique, Omniverse pour les jumeaux numériques et Sionna pour la recherche en communications, dans la perspective de la 6G et du « network-aware robotics ». Elle s'inscrit dans le courant de la simulation avant le sim-to-real, déjà adoptée pour la perception et la manipulation, mais encore peu appliquée à la connectivité. Le sujet touche aussi les humanoïdes et les robots mobiles qui déportent une partie de l'inférence, par exemple pour les modèles VLA, vers des serveurs distants. Les prochaines étapes naturelles seraient une validation sur un banc réel, des scénarios multi-cellules et multi-robots, et une intégration avec des planificateurs plus complexes. Aucun calendrier n'est annoncé.

Recherche❖Paper

1 source

43

482arXiv cs.RO 

Adaptation des modèles vision-langage-action (VLA) à des perturbations visuelles inconnues pendant l'exécution

Des chercheurs proposent SALT (Self-supervised Adaptation from Leftover Trajectories), une méthode d'adaptation au moment du test pour les modèles vision-langage-action (VLA), publiée sur arXiv (2610.07946). Elle cible un problème précis : une perturbation visuelle (corruption d'image, obstruction physique de la caméra) survient en cours d'exécution, sans que la politique connaisse son type ni son moment d'apparition. SALT exploite la « trajectoire résiduelle », c'est-à-dire la partie non exécutée du chunk d'actions précédent. Les chunks consécutifs se recouvrant dans le temps, ce résidu fournit une cible alignée sur le même intervalle de contrôle que la prédiction courante. Aucune annotation de perturbation, aucune action d'expert et aucune démonstration du domaine cible ne sont requises. Une porte d'adaptation légère, calibrée uniquement sur des trajectoires nominales, déclenche les mises à jour. Sur LIBERO-10, le taux de succès moyen sur cinq corruptions visuelles persistantes passe de 43,9 % à 53,2 % avec SmolVLA, et de 58,7 % à 66,0 % avec GR00T N1.7, avec une performance nominale largement préservée. Sur robot réel, la progression de tâche moyenne, perturbations numériques et physiques confondues, passe de 0,49 à 0,61. L'intérêt tient à la nature du problème traité. La plupart des travaux de robustesse des VLA supposent un entraînement avec augmentation de données ou une connaissance du décalage de domaine. Or en production, caméras salies, éclairage changeant ou occultations partielles arrivent sans préavis. SALT suggère qu'on peut gagner entre 7 et 9 points de succès sans données supplémentaires, en recyclant les prédictions déjà produites par le modèle. Deux mécanismes expliquent l'effet : à l'apparition du décalage, le résidu garde un plan formé avant la corruption et sert d'ancre (Transition Anchoring), puis la correction se propage d'un replanning à l'autre (Sequential Correction Propagation). Les limites sont nettes : le gain reste modeste en valeur absolue, les taux de succès restent sous les 70 %, et le test sur robot réel, mesuré par un score de progression et non un taux de réussite, offre peu de détails sur le nombre d'essais ou les tâches. Le benchmark LIBERO reste de plus de la simulation. Ce travail s'inscrit dans l'effort de fiabilisation des VLA après la vague de modèles généralistes comme Pi-0, GR00T ou SmolVLA, dont l'écart entre démonstration et déploiement tient souvent à la sensibilité aux conditions visuelles. L'approche rejoint l'adaptation au moment du test, déjà explorée en vision par ordinateur, mais l'applique ici à la structure par chunks d'actions propre aux politiques modernes. Elle reste un résultat de recherche, sans produit ni déploiement annoncé. Les prochaines étapes probables sont des validations sur d'autres architectures, des perturbations plus variées et des tâches longues, ainsi qu'une évaluation du coût de calcul des mises à jour en ligne sur du matériel embarqué, point que le résumé ne chiffre pas.

Recherche❖Paper

1 source

43

483arXiv cs.RO 

WareFly-VLA : un cadre vision-langage-action pour la navigation de drones et le suivi de personnes en entrepôt intelligent

Des chercheurs publient WareFly-VLA, un cadre et un jeu de données destinés à la navigation de drones pilotée par le langage dans les entrepôts intelligents (arXiv 2610.08526). Le corpus rassemble 507 épisodes de vol téléopérés par des humains et 8 504 transitions RGB haute résolution, collectés dans NVIDIA Isaac Sim. Chaque transition est associée à une description écrite par un humain de l'apparence du travailleur ciblé et à une commande de contrôle synchronisée à 4 degrés de liberté. Deux tâches sont couvertes, l'approche d'une cible et le suivi d'une personne, avec occlusions, recherche longue portée, variations d'altitude et encombrement. Quatre architectures VLA open source (SmolVLA, GR00T N1.7, pi0 et OpenVLA) sont comparées sur un protocole sans fuite de données au niveau de l'épisode, à deux fréquences de contrôle. Le jeu de données, les modèles de référence et le protocole d'évaluation sont publiés. Les résultats tempèrent l'enthousiasme autour des modèles vision-langage-action. Les performances chutent nettement dès que la généralisation est évaluée strictement, c'est-à-dire sur des épisodes réellement inédits. La modélisation continue des actions bat systématiquement la tokenisation discrète, ce qui va contre le choix d'OpenVLA et conforte l'approche de pi0. Sur une seule image, seul le canal avant (avancer) est appris de façon fiable, alors que latéral, altitude et rotation restent hors de portée. Enfin, les interfaces des modèles de fondation actuels, conçues pour la manipulation, la navigation au sol et les humanoïdes, se transfèrent mal aux plateformes aériennes. Pour un intégrateur qui envisage des drones d'inventaire ou d'assistance en entrepôt, le message est clair: le contrôle aérien guidé par le langage n'est pas résolu, et un VLA généraliste ne peut pas encore être déployé tel quel. Ce travail comble un vide. Les VLA ont brillé en manipulation et en navigation de robots mobiles au sol, mais aucun benchmark ne combinait actions de vol continues bas niveau, descriptions fines de cibles en langage naturel et environnements industriels réalistes. Il faut toutefois rester prudent: le jeu de données est modeste (507 épisodes), entièrement simulé, et les résultats viennent de baselines affinées sur une seule image, sans validation sur drone réel. Les annotations de pose et de difficulté, synchronisées avec la vidéo, le langage et les actions, visent aussi la recherche sur les modèles du monde. Aucun acteur français ou européen n'est cité dans l'étude. La suite logique passera par des modèles à mémoire temporelle ou multi-images, puis par des tests sim-to-real. Les équipes derrière SmolVLA, GR00T et pi_0 pourraient s'appuyer sur ce banc d'essai pour adapter leurs architectures à l'aérien.

Recherche❖Paper

1 source

43

484arXiv cs.RO 

VOMMI : collecte et exploitation de démonstrations portables pour la manipulation mobile

Des chercheurs présentent VOMMI (Visual-Odometry-Conditioned Mobile Manipulation Interface), un cadre de collecte de démonstrations portables et d'apprentissage pour la manipulation mobile, publié sur arXiv. Le système synchronise une vue « corps » et une vue « main » en RGB pour capturer à la fois le contexte de navigation et les interactions locales avec les objets, sans calibration de correspondance cinématique entre humain et robot. Deux briques techniques le composent. R2-VO affine hors ligne les trajectoires de démonstration à partir d'ancres géométriques parcimonieuses, puis produit des tokens de mouvement local causaux sur plusieurs horizons de prédiction. Un adaptateur résiduel par groupes d'actions injecte ces tokens uniquement dans la branche de base mobile du modèle vision-langage-action (VLA). Les expériences reposent sur 500 trajectoires portables par tâche, dont 75 réservées à l'évaluation RGB-VO, et sur 200 démonstrations robot servant de référence. La politique post-entraînée uniquement sur données portables affiche une erreur de vitesse de base inférieure de 18,2 % à celle d'une politique entraînée sur démonstrations robot, avec une précision de translation de l'effecteur comparable. La reconstruction hors ligne réduit l'erreur de trajectoire absolue de 24,6 % en moyenne pour les flux corps et main, par rapport au meilleur point de comparaison évalué pour chaque flux. Sur trois tâches réelles, le système complet gagne 8,3 points de succès moyen face à OpenPI 0.5. Pour les intégrateurs et les équipes data, l'enjeu est le coût de collecte. La téléopération et les dispositifs spécialisés bardés de capteurs restent le goulot d'étranglement des politiques de manipulation mobile, et une capture portable, sans robot et avec une simple caméra RGB, élargirait fortement le volume de démonstrations accessible. Le résultat le plus parlant est l'erreur de vitesse de base : la navigation est précisément la dimension où l'odométrie visuelle brute dérive et où l'on pouvait craindre que des données humaines transfèrent mal. Ici, elles font mieux que les données robot sur cette métrique, ce qui suggère que le conditionnement par mouvement visuel compense le défaut de supervision. Il faut toutefois rester prudent : le gain de 8,3 points sur OpenPI 0.5 est modeste, mesuré sur seulement trois tâches, et les travaux ne précisent pas la nature des tâches ni les intervalles de confiance dans ce résumé. Il s'agit d'un résultat de laboratoire, sans déploiement industriel. Le contexte est celui de la pénurie de données pour l'intelligence incarnée. Des interfaces portables comme UMI ont montré qu'on pouvait collecter des démonstrations de manipulation sans robot, mais elles se limitent surtout à la manipulation de table, sans la composante de déplacement de la base. VOMMI étend cette logique à la manipulation mobile, en s'appuyant sur la famille de politiques OpenPI (basée sur Pi-0) comme référence. Les acteurs concurrents du côté des VLA, dont Physical Intelligence, Figure avec Helix ou Nvidia avec GR00T, misent eux aussi sur des corpus massifs mêlant vidéo humaine et données robot. Les suites logiques seraient une validation sur davantage de tâches et de morphologies de robots, ainsi qu'une mesure du compromis entre volume de données portables et qualité de reconstruction hors ligne.

Recherche❖Paper

1 source

43

485arXiv cs.RO 

BRACE : adapter les références corporelles pour un suivi de mouvement humanoïde sensible aux forces et au terrain

Des chercheurs présentent BRACE, un contrôleur de suivi de mouvement du corps entier testé sur le Unitree G1 (humanoïde) en simulation et sur robot réel. Il est décrit dans un preprint arXiv (2610.07052v1) et vise un défaut des trackers actuels. Les trajectoires de référence qu'ils consomment sont enregistrées sur sol plat et sans charge, si bien que le contrôleur ignore à la fois les forces à échanger avec les objets et la pente du terrain. BRACE permet au robot d'exercer ou de compenser une force de main commandée depuis des poses variées, tout en suivant une référence plate sur terrain incliné. Le système repose sur deux enseignants spécialisés, l'un pour l'exertion de force, l'autre pour sa compensation. Ils sont distillés par DAgger dans un unique modèle élève de type flow-matching. Ce modèle fonctionne sur la seule proprioception, sans carte de hauteur ni mesure de torseur d'effort. Les auteurs n'indiquent ni charge maximale ni amplitude de pente dans le résumé. L'intérêt tient à la manière de répartir le problème. Les contrôleurs existants n'en traitent qu'un côté. Les politiques capables de force commandent un effort à l'effecteur sans prescrire de pose du corps entier. Les trackers adaptatifs au terrain traitent la charge comme une perturbation à rejeter, non comme un effort à commander. BRACE intègre la charge et la pente dans la référence elle-même, au lieu de laisser le tracker les absorber. Pour la téléopération, c'est un gain pratique. Un opérateur, même distant, fournit une trajectoire conçue pour le sol plat, et le robot résout pente et charge à bord. Cela réduit la dépendance à des capteurs coûteux ou fragiles, et ouvre la voie à des tâches de manipulation avec contact, comme pousser, tirer ou porter, sur sol irrégulier. Les résultats restent cependant ceux d'un preprint académique sur une seule plateforme. Aucun déploiement industriel n'est évoqué, et les performances chiffrées sont à vérifier dans l'article complet. Techniquement, deux mécanismes modifient la référence. La conformité au terrain relève les points d'appui et la racine du robot sur la surface locale. Une transformation de torseur calcule le déplacement de main qui produit la force voulue, avec les décalages induits du centre de masse et du centre de pression. Les limites d'effort des bras, propres à chaque enseignant, bornent cette transformation. Le travail s'inscrit dans la lignée des trackers de mouvement humanoïdes, de plus en plus utilisés comme interface de téléopération et de collecte de données, et il utilise le G1 d'Unitree, plateforme de recherche répandue. La suite logique serait une validation sur des tâches plus longues, des charges plus lourdes et d'autres morphologies.

Recherche❖Paper

1 source

43

486arXiv cs.RO 

Le robot n'est pas sa description : GaugeBench pour la robustesse de la représentation dans les politiques sensibles à la morphologie

Des chercheurs publient sur arXiv (2610.07597) GaugeBench, un banc d'essai qui teste une question laissée de côté par l'évaluation cross-embodiment : un contrôleur survit-il quand le robot reste identique mais que sa description change ? Une description de robot (URDF ou équivalent) encode en effet, en plus du mécanisme physique, des conventions arbitraires : sens des axes d'articulation, zéro angulaire des joints, ordre et noms des liens et des articulations. GaugeBench réécrit un même mécanisme selon des conventions physiquement équivalentes, vérifie que la physique et l'interface de la politique sont préservées, puis évalue les mêmes poids. Trois politiques MetaMorph obtiennent un score de 4030,6 sur 80 robots connus, mais seulement 51,6 quand ces mêmes robots sont simplement re-décrits. Sur 98 robots réellement inédits, le score reste à 1489,6. Le phénomène se retrouve avec ModuMorph et avec un framework PyBullet indépendant. L'enjeu est direct pour quiconque vise des politiques « morphology-aware » généralistes. Une nouvelle description s'avère plus destructrice qu'un nouveau robot : la généralisation mesurée jusqu'ici reflète en partie une mémorisation de conventions, pas une compréhension de la mécanique. Pour un intégrateur, cela signifie qu'un changement d'export CAO, de chaîne d'outils ou de fournisseur d'URDF peut ruiner un contrôleur sans toucher au matériel. L'analyse causale est utile : l'inversion d'axe seule reproduit l'effondrement, les changements de zéro angulaire sont quasi inoffensifs, le réordonnancement est intermédiaire. Modifier uniquement les coordonnées d'état et de couple des articulations suffit à casser la politique, alors que modifier seules les caractéristiques dérivées de la description ne le fait pas. Le défaut est réparable : un transport exact entre deux descriptions restitue le contrôleur d'origine, et un entraînement sur des conventions d'axes équivalentes fait passer le retour conservé sous inversion d'axe de 3,6 % à 80,6 %. Ces résultats s'inscrivent dans la course aux politiques cross-embodiment, de MetaMorph à ModuMorph, évaluées jusqu'ici en changeant de robot tout en figeant les conventions de description. Les auteurs distinguent la robustesse du mécanisme de la robustesse de la représentation et recommandent de tester les deux. Il s'agit d'une préimpression, évaluée en simulation, sans validation sur matériel réel ni revue par les pairs. Ses conclusions devraient toutefois peser sur les protocoles d'évaluation des futurs modèles généralistes, VLA inclus, dès lors qu'ils consomment des descriptions de robot comme entrée.

Recherche❖Paper

1 source

43

487arXiv cs.RO 

Vers un banc d'essai extensible pour le dialogue oral avec les robots sociaux

Des chercheurs proposent un banc d'essai ouvert, destiné à toute la communauté, pour évaluer le dialogue oral entre humains et robots sociaux. Publié sur arXiv (2610.08733, première version), le travail part d'un constat : les modèles de langage offrent une interface « plug-and-play » entre l'humain et la machine, mais les difficultés réapparaissent dès que la parole, le rythme de l'échange et la collaboration entrent en jeu. Le benchmark cible quatre familles d'artefacts typiques de la conversation orale : les demandes de clarification, les interruptions, les signaux incarnés (hochements de tête, expressions faciales) et les contraintes de temps. Les auteurs décrivent aussi leur intention de l'étendre à d'autres dimensions de l'interaction homme-robot. Pour le rendre praticable, ils recommandent Retico, un framework de communication en temps réel censé répondre aux exigences techniques d'un dialogue oral robotisé. Le résumé ne donne ni scores, ni plateformes testées, ni jeu de données chiffré : il s'agit d'une proposition de cadre, pas d'une évaluation de systèmes existants. L'enjeu pour l'industrie est surtout méthodologique. Les démonstrations de robots conversationnels reposent souvent sur des scénarios choisis, avec des tours de parole bien séparés et une latence rarement documentée. Or, dans un accueil, un service ou un atelier, un robot doit savoir demander de repréciser, accepter d'être coupé et répondre dans un délai tenable, tout en coordonnant sa gestuelle avec sa voix. Aujourd'hui, ces comportements sont jugés au cas par cas, ce qui rend les comparaisons entre fournisseurs peu fiables pour un intégrateur ou un décideur B2B. Un banc d'essai commun, s'il est adopté, permettrait de mesurer ces écarts entre démonstration et usage réel. Il reste toutefois à voir quelles métriques seront retenues et si les pratiques de production, notamment la qualité perçue de l'échange, s'y retrouveront. Ce travail s'inscrit dans le déploiement rapide des LLM et des modèles voix-langage-action sur des robots d'interaction, alors que les évaluations existantes se concentrent surtout sur le texte, la manipulation ou la navigation, rarement sur la dynamique conversationnelle incarnée. Les acteurs de la robotique sociale, dont les européens comme Enchanted Tools avec son robot Mirokaï, auraient un intérêt direct à disposer d'une référence partagée, mais l'article ne cite aucun partenaire industriel. La suite dépendra de l'ouverture effective du code et des scénarios, de l'adhésion de laboratoires tiers et de l'intégration de Retico dans des piles logicielles déjà en place. À ce stade, il s'agit d'un projet de recherche annoncé, sans produit livré ni déploiement.

Recherche❖Paper

1 source

43

488arXiv cs.RO 

UWB et Crazyflow : simuler à grande échelle un retour d'information dégradé pour la robotique aérienne

Crazyflow est un simulateur de drones différentiable, construit sur JAX et présenté dans un preprint arXiv (2610.08225). Grâce à la compilation JIT via XLA, la physique et le contrôle sont fusionnés dans un unique graphe de calcul différentiable. Les simulations peuvent ainsi être massivement parallélisées sur accélérateurs (GPU), sans simplifier la modélisation. Les auteurs revendiquent des gains d'un ordre de grandeur par rapport aux simulateurs de référence, et un entraînement en quelques secondes d'agents d'apprentissage par renforcement déployables. Pour montrer la modularité de l'outil, ils y ajoutent un pipeline complet de simulation Ultra-Wideband (UWB, localisation radio par mesure de distance) et de centrale inertielle (IMU), couplé à un filtre de Kalman étendu (EKF) à état complet. Selon eux, l'évaluation parallèle de contrôleurs sous retour d'état dégradé n'affecte presque pas le débit GPU. Le résumé ne donne ni facteur d'accélération chiffré ni nombre d'environnements simultanés, et les gains annoncés n'ont pas encore été vérifiés de façon indépendante. L'intérêt tient à ce que la plupart des simulateurs de drones entraînent des politiques sur un état parfaitement connu, alors que les vols réels, en intérieur notamment, reposent sur des mesures bruitées, retardées ou intermittentes. Cet écart de fidélité est une cause classique d'échec du transfert sim-to-real. Si le modèle de capteurs et l'estimateur tournent dans le même graphe compilé que la dynamique, les équipes pourront tester la robustesse d'un contrôleur à grande échelle avant tout vol, ce qui réduit les cycles d'essais sur matériel. Pour les intégrateurs de flottes en entrepôt ou en inspection de sites sans GPS, c'est un outil de validation plausible. Reste à confirmer que la fidélité du modèle UWB colle aux mesures réelles, point que le résumé n'établit pas. Le projet s'inscrit dans la vague des simulateurs accélérés écrits en JAX ou sur GPU, comme MuJoCo MJX, Brax ou Isaac Sim. Ces outils ont rendu l'apprentissage par renforcement massif accessible en robotique, notamment pour les robots à pattes. Le nom évoque la plateforme Crazyflie, nano-quadricoptère très répandu dans la recherche, ce qui suggère un public académique. Les prochaines étapes à surveiller sont la publication du code, des comparaisons chiffrées avec les simulateurs existants et surtout des essais de transfert sur drones réels sous localisation UWB. Ces éléments diront si l'outil dépasse le statut de preprint.

Recherche❖Paper

1 source

42

489arXiv cs.RO 

MIM-VLA : apprentissage de représentations d'interaction physique à partir du retour moteur de la pince

MIM-VLA est un preprint (arXiv 2610.08425, v1) qui ajoute à une politique vision-langage-action (VLA) une représentation de la réponse physique au contact, tirée uniquement du moteur de la pince. Un Motor Interaction Module (MIM) encode le courant, la position, la vitesse et la validité du signal du gripper récents sous la forme d'un « token d'interaction » de 128 dimensions. Le module est préentraîné sur des étiquettes de contact et de phase d'interaction relues par des humains. Il conditionne ensuite uniquement la voie d'action de la pince de SmolVLA, le petit VLA open source de Hugging Face. Les actions du bras et l'interface en contrôle de position restent inchangées. Le même token alimente MEM, un VLM « sélecteur » qui compare des interactions candidates et produit des choix accompagnés d'explications. Trois tests réels sont décrits : comparer la résistance d'objets visuellement différents, distinguer un objet réel de sa réplique par sondage actif, et saisir délicatement des objets fragiles, y compris des instances jamais vues. Sur 13 paires d'objets, MIM-VLA choisit l'objet le plus résistant dans 75,0 % des essais, contre 48,8 % pour SmolVLA, soit un niveau proche du hasard. L'intérêt est pratique. Les VLA actuels décident surtout à partir de l'image et de l'état du robot, et ne « sentent » pas ce qui se passe après le contact. Les approches tactiles classiques demandent des capteurs supplémentaires, comme des matrices tactiles ou des capteurs force-couple, qui alourdissent la pince, le coût et la maintenance. Ici, les auteurs affirment n'utiliser que le retour moteur déjà disponible, sans estimation de force calibrée ni contrôle direct du courant. Pour un intégrateur, cela rend la piste réaliste sur des pinces existantes, notamment pour manipuler des objets fragiles ou contrôler la qualité par palpation. Les limites sont claires. Il s'agit d'un résultat de laboratoire, sans nombre d'essais détaillé dans le résumé. Les tâches sont choisies par les auteurs, et 75 % de réussite signifie encore une erreur sur quatre, loin d'un niveau industriel. Ce travail s'inscrit dans la poussée vers des VLA « physiquement ancrés » face à la limite de la vision seule. La concurrence passe par les capteurs tactiles dédiés, les capteurs force-couple et les grands modèles généralistes de type Pi-0, qui restent essentiellement visuels. La proposition MIM-VLA est plus légère, mais sa validité hors du couple pince-SmolVLA testé reste à démontrer. La suite logique serait de valider sur d'autres pinces et d'autres VLA, avec des comparaisons directes face à des capteurs tactiles.

Recherche❖Paper

1 source

42

490arXiv cs.RO 

Ce que la carte d'élévation ne voit pas : locomotion sémantique et navigation tenant compte de l'exécution pour robot humanoïde

Des chercheurs proposent un nouveau benchmark de simulation pour la navigation des robots humanoïdes, accompagné d'un cadre de contrôle en boucle fermée associant navigation visuelle guidée par le langage (VLN) et politique de locomotion. Le travail, publié sur arXiv (2610.07396), part d'un constat : les benchmarks VLN existants produisent certes des déplacements physiquement exécutables, mais reposent sur deux hypothèses jugées irréalistes. La première est que tous les dangers sont visibles dans une carte d'élévation. La seconde est que les mouvements réalisés correspondent fidèlement aux mouvements commandés. Le nouveau benchmark modélise à la fois des obstacles « subtils en élévation » (une bouteille tombée, ambiguë sur une carte de hauteur, ou la difficulté de distinguer un téléphone d'une flaque d'eau) et des écarts d'exécution. Le cadre proposé réaligne en continu la navigation de haut niveau sur l'état réel du robot. L'évaluation est menée en simulation, et la politique de locomotion est validée sur un humanoïde Unitree G1 réel. Les résultats indiquent que l'entrée sémantique réduit les contacts avec les dangers mal représentés par les cartes d'élévation, et que le mécanisme anti-déviation améliore le taux de réussite de navigation. L'extrait disponible ne fournit ni taux de réussite chiffrés, ni taille du benchmark, ni nombre d'essais sur le matériel. L'intérêt tient à ce que ce travail s'attaque à un angle mort des évaluations actuelles. Quand la locomotion esquive un danger, le robot s'écarte du chemin voulu par la politique de navigation, et cet écart se cumule jusqu'à conduire la machine vers un endroit non prévu. Pour les intégrateurs et les responsables d'exploitation qui envisagent des humanoïdes dans des environnements encombrés (entrepôts, ateliers, commerces), le message est clair : mesurer seulement l'achèvement du trajet, ou seulement l'évitement d'obstacles, donne une image trompeuse. Les auteurs plaident pour une évaluation conjointe des deux. Cela relativise aussi les démonstrations où la carte d'élévation suffit à tout : un liquide au sol ou un objet plat échappe à la géométrie pure, et la perception sémantique devient nécessaire. Il faut toutefois rester prudent : il s'agit d'un benchmark simulé, et la validation physique porte sur la locomotion, pas sur la chaîne complète de navigation. Ce travail s'inscrit dans la montée en puissance des approches VLN et des politiques de locomotion apprises pour humanoïdes, où le G1 d'Unitree est devenu une plateforme de recherche courante grâce à son coût relativement abordable. Les évaluations sur matériel à grande échelle restent coûteuses et risquées, ce qui explique le recours aux benchmarks de simulation, au prix d'un écart sim-to-real que ce papier ne referme pas entièrement. La suite logique serait une validation de bout en bout sur robot physique, avec davantage de scénarios et de types de dangers. Aucun calendrier ni partenaire industriel n'est annoncé.

Recherche❖Paper

1 source

42

491arXiv cs.RO 

Apprentissage de la manipulation robotique à force régulée avec une pince tactile à contrôle de force à faible coût

Des chercheurs présentent TF-Gripper, une pince parallèle à force contrôlée dont le coût avoisine 150 dollars. Elle intègre un retour tactile et couvre une plage de force effective de 0,45 à 45 N. Elle se monte sur différents bras robotiques. Les auteurs l'associent à un dispositif de téléopération qui enregistre les forces de préhension appliquées par un opérateur humain. Ils proposent aussi RETAF (REactive Tactile Adaptation of Force), un cadre logiciel qui sépare le contrôle de la force de serrage de la prédiction de pose de l'effecteur. RETAF régule la force à haute fréquence à partir d'images de poignet et du retour tactile. Une politique de base prédit, elle, la pose de l'effecteur et l'ordre d'ouverture ou de fermeture. Les expériences portent sur six tâches réelles. Le contrôle direct de la force y améliore la stabilité de la prise et la performance globale par rapport au contrôle en position. Selon les auteurs, RETAF surpasse systématiquement les références testées et s'intègre à plusieurs politiques de base. Le travail est publié sur arXiv (version 2), avec une page de projet associée. Il s'agit d'un résultat de laboratoire, sans déploiement industriel ni produit commercialisé. L'enjeu tient à un angle mort de l'apprentissage par imitation et des modèles vision-langage-action (VLA). La plupart des pinces du marché sont soit chères, soit limitées par une force minimale trop élevée. Elles sont donc inadaptées aux objets fragiles du quotidien, comme les chips, qui se brisent si la force n'est pas modulée. Une pince à 150 dollars capable de descendre sous 0,5 N abaisse nettement le coût d'entrée pour les laboratoires qui étudient la manipulation sensible à la force. Pour les intégrateurs, le résultat suggère que le contrôle en force doit tourner sur une boucle rapide et dédiée. Les politiques génériques à basse fréquence peuvent être entraînées sur des données de force, mais les auteurs reconnaissent que leur fiabilité reste difficile à obtenir, car la tâche est réactive et dépend du contact. Il faut toutefois rester prudent. Six tâches en laboratoire ne disent rien de la durabilité de la pince, de la dérive des capteurs tactiles ni de la répétabilité en cadence industrielle. Le résumé ne donne pas non plus les taux de réussite chiffrés. Ce travail s'inscrit dans le déplacement de la recherche en manipulation, de la seule géométrie vers le contact. Les pinces tactiles et les mains dextres sont aujourd'hui souvent coûteuses ou propriétaires. Les politiques de type Pi-0 ou les VLA actuels se concentrent surtout sur la pose de l'effecteur et sur un état binaire de la pince. La séparation entre politique de base et régulation de force de RETAF est modulaire, ce qui la rend compatible avec ces architectures. Les auteurs affichent l'ambition de faire passer à l'échelle l'apprentissage de politiques à force contrôlée. Pour cela, il faudrait des jeux de données de force plus larges, collectés avec leur dispositif de téléopération, et des validations sur des objets plus variés. Aucun calendrier de commercialisation n'est annoncé.

Recherche❖Paper

1 source

42

492arXiv cs.RO 

CUSP : alarmes de risque de survie pilotées par CUSUM dès l'apparition de la perception, pour la navigation tout-terrain

Des chercheurs publient sur arXiv (2610.07882) CUSP, une alarme de danger en temps réel pour la navigation tout-terrain, conçue pour fonctionner avec n'importe quel modèle de navigation. Le système apprend à partir de journaux de terrain où un humain a interrompu le robot avant l'échec, de sorte que la défaillance elle-même n'est jamais observée. Les auteurs ajoutent une annotation séparée de ce qu'ils appellent le « perception onset » : l'instant où l'opérateur juge la conduite dangereuse, généralement bien avant d'intervenir. Une tête visuelle est entraînée sur cet instant avec un objectif de survie en temps discret, qui exploite aussi bien les trajets avec que sans onset. Un CUSUM, outil statistique de détection de rupture, cumule le risque prédit et déclenche l'alarme. Les tests couvrent cinq sites inédits (deux autonomes, trois téléopérés) et 142 événements, chaque méthode étant réglée sur dix fausses alarmes par heure. CUSP détecte 85 événements, contre 26 pour la meilleure de neuf approches de référence adaptées. L'enjeu est la sécurité de l'autonomie hors route, un point faible des déploiements en mines, agriculture, chantiers ou inspection. Les modèles de navigation apprenants choisissent un chemin à partir d'une supervision de sécurité, mais ne disent pas si le robot qui le suit se dirige vers un danger. Un taux de détection de 85 sur 142, soit environ 60 %, contre 18 % pour la meilleure référence, à taux de fausses alarmes égal, est un écart notable. Selon les auteurs, il vient de dangers auxquels aucun signal interne du modèle de navigation n'est sensible : les incertitudes ou coûts du planificateur ne suffisent donc pas comme alarme. Autre intérêt pratique : les journaux d'intervention humaine existent déjà en grande quantité, et l'approche les valorise sans exiger de collecter des échecs réels, coûteux et risqués. Deux réserves : ces résultats viennent d'un seul article, sans validation externe, et les référence sont des adaptations réalisées par les auteurs eux-mêmes. Le taux de fausses alarmes de dix par heure reste aussi élevé pour une exploitation sans surveillance. Ce travail s'inscrit dans la lignée des méthodes de navigation tout-terrain apprise, qui utilisent l'intervention humaine comme signal de supervision implicite, mais qui ciblaient jusqu'ici le choix du chemin plutôt que l'alarme en cours d'exécution. Les auteurs affirment qu'aucune méthode supervisée par intervention n'avait visé cet instant de bascule perçu par l'humain. L'article ne précise ni le matériel, ni les noms de plateformes, ni les latences ou délais d'anticipation, des éléments décisifs pour juger de l'utilité opérationnelle. Il s'agit d'un résultat de recherche, non d'un produit ni d'un déploiement commercial. La suite logique serait une validation sur davantage de plateformes et de terrains, ainsi qu'une intégration à des piles de navigation industrielles.

Recherche❖Paper

1 source

42

493arXiv cs.RO 

Au-delà du retargeting : téléopération humanoïde du corps entier, à faible latence et robuste, grâce à des primitives de mouvement atomiques apprises

Des chercheurs proposent une politique de téléopération du corps entier pour humanoïde qui supprime l'étape de retargeting en ligne, jusqu'ici standard dans ce type de système. Détaillée dans un preprint arXiv (2610.07891v1), l'approche mappe le mouvement humain brut directement vers les commandes articulaires du robot, en une seule passe avant du réseau de neurones. Elle a été testée sur un Unitree G1, en simulation puis sur matériel réel, avec quatre sources d'entrée : casque de réalité virtuelle, capture optique de mouvement, génération de mouvement à partir de texte et vidéo monoculaire. Selon les auteurs, la méthode surpasse les approches de référence en latence et en robustesse. L'abstract ne fournit toutefois ni valeur de latence en millisecondes, ni taux de réussite, ni détail sur les baselines retenues. L'enjeu est double. Le retargeting en ligne, qui adapte la cinématique humaine à la morphologie du robot, ajoute du délai et peut produire des cibles physiquement infaisables, source d'instabilité. Le deuxième problème est la fragilité face aux données hors distribution : les entrées réelles sont bruitées, partielles ou inhabituelles, et les politiques apprises sur des mouvements propres se dégradent alors. Pour y répondre, les auteurs apprennent un codebook de primitives de mouvement du corps entier. Il projette les observations atypiques sur des prototypes de mouvement plausibles et reconstruit un mouvement complet à partir d'entrées incomplètes, par exemple une vidéo qui ne montre qu'une partie du corps. Si les résultats se confirment, cela rapproche la téléopération de la collecte de données à grande échelle, où un opérateur avec un simple casque VR ou une caméra pourrait piloter un humanoïde sans pipeline de calibration lourd. Reste à vérifier la tenue sur des tâches longues, avec contacts et manipulation, qu'un travail de ce type ne démontre pas forcément. Ce travail s'inscrit dans la lignée des politiques de suivi de mouvement pour humanoïdes entraînées en simulation puis transférées au réel, où le G1 de Unitree est devenu la plateforme académique par défaut grâce à son prix relativement bas. Les systèmes de téléopération du corps entier existants reposent généralement sur une chaîne en deux temps, retargeting puis contrôleur de suivi, que cette étude fusionne en une seule politique. Les travaux concurrents poursuivent des objectifs voisins, notamment les modèles de contrôle généralistes comme GR00T chez NVIDIA, qui visent aussi une interface unifiée pour piloter les humanoïdes. Il s'agit ici d'une publication de recherche, pas d'un produit : aucun déploiement industriel ni calendrier commercial n'est annoncé. La prochaine étape logique serait une validation sur d'autres morphologies que le G1 et sur des tâches de manipulation, ainsi que la publication du code et des mesures de latence détaillées.

Recherche❖Paper

1 source

42

494arXiv cs.RO 

ReDex : réparer les politiques dextérité sim-vers-réel par une interaction compliante au niveau des doigts

Des chercheurs publient sur arXiv ReDex, un cadre pour corriger sur matériel réel des politiques de manipulation dextre entraînées en simulation. Le point de départ est une politique de base qui n'utilise que la proprioception. Pendant des déploiements réels, un opérateur humain corrige physiquement les échecs de contact sur certains doigts, sous contrôle en compliance, tandis que la politique de base, gelée, continue de piloter les autres doigts. Chaque essai enregistre trois choses : l'exécution de la politique, les mouvements corrigés par l'humain et les forces mesurées aux bouts des doigts. Les auteurs reconstruisent à partir de ces données des cibles tenant compte des forces. Ils entraînent ensuite par clonage comportemental une politique autonome conditionnée par la force. Les tests portent sur deux tâches riches en contacts, sur matériel réel. Le retournement d'objet passe de 14 % à 86 % de réussite sur deux objets. La rotation de tournevis passe de 26,0 % à 95,3 % de progression moyenne sur trois objets. L'intérêt tient à la méthode. Le transfert simulation-réalité reste fragile pour la dextérité, surtout à cause du timing des contacts et de la régulation des forces, que les simulateurs modélisent mal. ReDex part du constat que ces politiques gardent une coordination multi-doigts utile et qu'il suffit de réparer localement les contacts défaillants. L'approche évite aussi deux coûts habituels. Elle n'exige pas de simulation tactile, difficile à calibrer. Elle n'exige pas non plus de téléopération complète de la main, lourde et chère en temps opérateur. La correction ciblée d'un ou deux doigts réduit l'effort humain, et la politique finale ajoute un retour de force à un système initialement aveugle au toucher. Pour les équipes qui développent des mains dextres, c'est une piste réaliste pour combler l'écart entre démonstration et fiabilité réelle. Les réserves sont claires. Le résultat repose sur deux tâches, quelques objets, et un seul article non encore évalué par les pairs. Le nombre d'essais et la charge réelle de correction ne sont pas détaillés dans le résumé, et rien n'indique un test hors de ces objets. Ce travail s'inscrit dans une tendance de fond : la dextérité des mains robotiques progresse surtout par apprentissage en simulation, puis par adaptation au réel. Le retournement d'objet et la rotation de tournevis comptent parmi les benchmarks classiques de la manipulation en main. L'autre voie, concurrente, mise sur l'apprentissage direct à partir de démonstrations téléopérées et sur des capteurs tactiles. Elle demande plus de données humaines et du matériel plus complexe. ReDex se place entre les deux, avec une supervision humaine légère et des mesures de force utilisées seulement en phase de réparation. Les prochaines étapes probables sont des tests sur davantage de tâches et d'objets, puis sur d'autres mains. Il faudra aussi voir si la méthode tient sur des séquences longues. L'article ne mentionne ni partenaire industriel, ni calendrier de déploiement, ni acteur français ou européen.

Recherche❖Paper

1 source

42

495arXiv cs.RO 

Test de robustesse généralisable des systèmes de navigation robotique basés sur des DNN, guidé par l'IA explicable (XAI)

Des chercheurs proposent une méthode de test de robustesse pour les robots de navigation pilotés par réseaux de neurones profonds (DNN), publiée sur arXiv en octobre 2026. L'approche combine un algorithme évolutionnaire multi-objectif avec des techniques d'explicabilité (XAI). Elle génère des perturbations « éparses », c'est-à-dire limitées à quelques zones de l'image, appliquées à des images représentatives des observations opérationnelles du robot. Ces images sont sélectionnées par un regroupement visuel et comportemental. Les gradients intégrés agrégés (Aggregated Integrated Gradients) orientent les mutations vers les régions les plus influentes pour la décision du réseau. Les tests ont été menés sur un LeoRover piloté par DNN dans le simulateur Gazebo. Une étude d'ablation a complété l'évaluation, et un sous-ensemble stratifié de perturbations a été rejoué sur le robot physique. Le taux de succès médian atteint 70,0 %, contre 53,85 % pour une recherche non guidée, et l'hypervolume médian passe de 0,65 à 0,73. L'optimisation sur plusieurs images fait passer le taux de succès de 50,0 % à 57,5 %, et le guidage XAI le porte ensuite à 70,0 %. Ces résultats visent un problème connu : de petites variations d'entrée peuvent provoquer un comportement dangereux au niveau du système entier. La plupart des méthodes existantes optimisent une perturbation pour une seule image et ne la valident qu'en simulation, ce qui limite leur portée pratique. Ici, les tests restent efficaces sur l'ensemble des observations typiques. Le volet sim-to-real est le plus utile pour les intégrateurs et les responsables qualité. La simulation obtient une précision de 0,95 et un rappel de 0,67. Autrement dit, presque tous les échecs détectés en simulation se reproduisent sur le robot réel, mais un tiers des échecs réels n'apparaît pas en simulation. Les temps d'échec simulés et physiques sont corrélés positivement (0,617), ce qui permet de hiérarchiser les cas à vérifier. Gazebo reste donc un filtre fiable, mais pas un substitut à la validation physique. Il faut néanmoins noter que la validation porte sur un seul robot de recherche, de petite taille, et sur un sous-ensemble de perturbations. Ces chiffres ne se transposent pas directement à des humanoïdes ou à des AMR industriels. Ce travail s'inscrit dans la montée des politiques apprises de bout en bout, des contrôleurs de navigation aux modèles vision-langage-action (VLA), qui posent la question de la certification des systèmes cyber-physiques. Les approches adverses classiques, souvent pensées pour la classification d'images, restent peu représentatives des défaillances au niveau du système. Le LeoRover est une plateforme mobile courante en recherche, ce qui facilite la reproduction. Les auteurs ne donnent pas de calendrier de déploiement industriel. Les prochaines étapes logiques sont l'extension à d'autres robots, d'autres architectures de contrôle et des environnements plus variés. Elles pourraient aussi porter sur l'intégration de ces tests dans les chaînes de validation avant mise en service.

Recherche❖Paper

1 source

42

496arXiv cs.RO 

DepthWorld : un modèle du monde 3D pour la manipulation robotique

Des chercheurs publient sur arXiv (2610.08780) DepthWorld, un modèle du monde 3D destiné à la manipulation robotique, accompagné d'un jeu de données calibré, DROID-3D. Le point de départ est un constat : les modèles du monde vidéo actuels, entraînés uniquement sur du RGB, produisent des séquences plausibles image par image, mais qui ne forment pas un monde 3D cohérent. Pour y remédier, l'équipe a conçu un pipeline de calibration qui combine une estimation de profondeur stéréo apprise et un graphe de facteurs joint. Il regroupe tous les épisodes enregistrés avec un même robot physique afin de retrouver ses paramètres cinématiques partagés, en plus des extrinsèques propres à chaque scène. Appliqué à DROID, il produit DROID-3D : une profondeur métrique dense et des extrinsèques multi-vues recalibrées, avec une erreur de reprojection inférieure à 0,7 pixel sur 90 % des épisodes pour les caméras externes. Le modèle DepthWorld, bâti sur Stable Video Diffusion, prédit conjointement le RGB et la profondeur sur plusieurs vues grâce à un « tuilage latent spatial » (spatial latent tiling), qui laisse intact l'autoencodeur variationnel (VAE) pré-entraîné. À budget d'entraînement égal, la supervision par la profondeur améliore la prédiction RGB de 1,48 dB de PSNR par rapport à une base identique entraînée sur RGB seul, tout en fournissant une profondeur métrique exploitable. Ces résultats comptent pour les équipes qui voient dans les modèles du monde une alternative pilotée par les données aux simulateurs classiques, pour l'évaluation, l'amélioration et la planification de politiques. Toutes ces utilisations supposent une géométrie fidèle. Un rollout visuellement convaincant mais géométriquement incohérent peut fausser l'évaluation d'une politique de préhension ou une planification de trajectoire. L'apport de la profondeur à la qualité du RGB lui-même suggère que la supervision 3D ne se limite pas à ajouter une sortie : elle renforce la prédiction visuelle. Le choix de ne pas toucher au VAE préserve les connaissances a priori des modèles vidéo pré-entraînés, ce qui évite de ré-entraîner à grande échelle. Pour les intégrateurs, l'enjeu à terme est de disposer d'un banc d'essai virtuel plus fiable avant de passer sur matériel réel. Il faut toutefois rester prudent : il s'agit d'un préprint, sans évaluation en boucle fermée sur des robots réels dans les éléments communiqués, et un gain de 1,48 dB de PSNR ne prouve pas à lui seul une meilleure réussite des tâches. Le contexte est celui d'une course pour remplacer ou compléter la simulation physique par des modèles génératifs, nourrie par de grands jeux de données de téléopération comme DROID. Ces corpus sont riches en vidéo, mais leur calibration de caméras est souvent approximative et la profondeur métrique y est absente, ce qui a limité jusqu'ici la supervision 3D à grande échelle en manipulation. DROID-3D comble en partie ce manque. L'approche s'inscrit dans le courant des modèles du monde vidéo adaptés à la robotique, qui s'appuient sur des modèles de diffusion vidéo généralistes. La suite logique serait de tester si ces rollouts géométriquement cohérents améliorent réellement l'évaluation et l'amélioration de politiques VLA, puis de les valider sur des plateformes variées.

Recherche❖Paper

1 source

42

497arXiv cs.RO 

Commande de robots à pattes tenant compte des aimants

Des chercheurs proposent un cadre de commande pour robots quadrupèdes capable de compenser les forces et couples magnétiques qui s'exercent sur eux près d'aimants puissants. La publication, parue sur arXiv (2610.08653), vise les installations de « Big Science » comme les accélérateurs de particules, où des robots autonomes pourraient accroître la disponibilité des machines et limiter l'exposition du personnel. Le problème est double : les champs intenses faussent les capteurs et génèrent sur les éléments métalliques des efforts qui dépendent de la pose du robot, ce qui déstabilise la marche. L'équipe a développé un plugin physique sur mesure pour le simulateur MuJoCo, qui modélise les forces magnétiques sur des corps rigides. Elle y ajoute une méthode d'estimation inverse qui reconstruit le champ magnétique latent à partir de la réponse dynamique du quadrupède et d'un nombre quelconque de lectures de capteurs. Enfin, une architecture combinant commande prédictive (MPC) et commande du corps entier (WBC) prédit les perturbations magnétiques et les contre pendant la locomotion. Les essais ont été menés en simulation et sur matériel réel. Les perturbations maximales rejetables passent à 2,5 fois leur valeur initiale dans l'espace des forces, et à 1,6 à 2 fois dans l'espace des couples, par rapport à un système non compensé. Pour les exploitants d'installations scientifiques et industrielles, l'enjeu est concret : les robots à pattes déployés pour l'inspection ou la maintenance échouent précisément là où leur valeur est la plus forte, près des aimants supraconducteurs ou des zones à fort champ. Les contrôleurs réactifs classiques traitent la perturbation magnétique comme un bruit à rejeter après coup, alors que ce travail la modélise et l'anticipe. Le gain annoncé s'exprime en surface opérable : le robot peut évoluer dans une zone 29,34 % plus étendue du champ étudié, dont 10,84 % auraient provoqué un effondrement immédiat avec un contrôleur non compensé. Il faut toutefois relativiser. Il s'agit d'un résultat académique, mesuré sur un champ défini par les auteurs, sans indication dans le résumé sur la plateforme employée ni sur l'intensité des champs testés. Ces chiffres ne se transposent donc pas directement à un site réel. Ce travail s'inscrit dans la montée en puissance des quadrupèdes d'inspection dans les sites sensibles, déjà testés dans des environnements radioactifs ou dangereux, où le magnétisme reste un angle mort peu étudié. Les approches MPC et WBC sont devenues la base de la locomotion robuste des robots à pattes, et l'article les étend à une classe de perturbations jusque-là ignorée. Aucun partenariat industriel, calendrier de déploiement ni pilote sur un site de type CERN n'est mentionné. La suite logique serait de valider l'approche sur des installations réelles, avec des champs plus intenses et variables dans le temps, puis de l'intégrer aux piles logicielles des fabricants de robots d'inspection. En l'état, il s'agit d'une preuve de concept de recherche, et non d'un produit ni d'un déploiement.

Recherche❖Paper

1 source

42

498arXiv cs.RO 

Contrôle de corps entier des manipulateurs mobiles avec prise en compte de la reconstruction des objets

Des chercheurs proposent une méthode de reconstruction d'objets 3D par manipulateur mobile qui supprime le planificateur de trajectoire dédié, pour un coût de calcul nettement réduit. Le travail, publié sur arXiv (troisième version, septembre 2025 pour la première), part d'un constat: pour reconstruire ou inspecter un objet, il faut choisir des trajectoires qui révèlent le plus de zones encore inconnues. Les approches actuelles échantillonnent des trajectoires candidates et évaluent de nombreuses vues le long de chacune, ce qui coûte cher en calcul. La nouvelle méthode calcule un point de focalisation dans la région la plus informative, puis impose au robot de le garder dans le champ de vision de la caméra pendant son déplacement. Cette contrainte de visibilité est intégrée directement dans le contrôle du corps entier (whole-body control) du manipulateur mobile. L'évaluation repose sur des simulations réalistes avec 114 objets de tailles variées, issus de 57 catégories, et sur une analyse statistique bayésienne. Trois stratégies sont comparées: la méthode proposée, une planification par échantillonnage, et une approche sans trajectoires informatives. Face à l'échantillonnage, aucune différence statistiquement significative n'apparaît sur l'entropie de reconstruction, et la probabilité que les deux soient pratiquement équivalentes en couverture est de 52,3 %. Le calcul est 6,2 à 19,36 fois plus rapide, et le temps passé par le robot entre deux vues baisse de 13,76 % à 27,9 %, selon le champ de vision de la caméra et la résolution du modèle. Des essais réels ont été menés avec un manipulateur mobile omnidirectionnel à 8 DoF et un manipulateur à pattes. L'intérêt pour les intégrateurs est concret: l'inspection, le contrôle qualité et la numérisation d'objets par robot mobile sont limités par la latence de décision entre deux vues, et pas seulement par la qualité de la reconstruction. Ici, la qualité reste proche de l'état de l'art tout en réduisant le calcul embarqué, ce qui compte sur des plateformes à ressources limitées. Il faut toutefois nuancer: l'équivalence de couverture n'est établie qu'à 52,3 %, donc non démontrée. Il s'agit en outre d'un résultat académique, validé en simulation et sur deux plateformes de laboratoire, sans déploiement industriel ni mesure en environnement de production. Ce travail s'inscrit dans la lignée de la planification de la « prochaine meilleure vue » (next-best-view), dominante depuis des années en reconstruction active, et du contrôle de corps entier des manipulateurs mobiles, qui coordonne base et bras comme un seul système. La démarche rejoint ainsi la tendance à fusionner perception active et commande, plutôt que de les chaîner. Les suites probables concernent des tests sur des scènes plus complexes, avec occlusions et objets déformables, et une intégration dans des chaînes d'inspection. Aucun partenaire industriel ni calendrier de transfert n'est annoncé.

Recherche❖Paper

1 source

42

499arXiv cs.RO 

Exploration réactive d'environnements inconnus pour robots redondants par contrôle par modèle virtuel

Des chercheurs publient sur arXiv (2610.08110) une méthode d'exploration active pour bras robotiques redondants, c'est-à-dire dotés de plus de degrés de liberté que nécessaire pour atteindre une pose donnée, équipés d'une caméra embarquée au poignet (configuration « eye-in-hand »). L'approche cible les espaces confinés, occultés et partiellement connus. Elle repose sur un score original qui sélectionne directement un voxel cible dans l'espace non exploré, en combinant l'état courant du robot et le gain d'information attendu. Pour rejoindre ce voxel, le système recourt au Virtual Model Control, une technique qui simule des éléments mécaniques virtuels (ressorts, amortisseurs) pour garantir une conduite compliante. Elle permet un évitement d'obstacles réactif sur l'ensemble du bras, sans replanification de trajectoire. Les essais, menés en simulation et sur robot réel, en environnements confinés comme ouverts, atteignent plus de 90 % de couverture cartographique en moins de 120 secondes, sans aucune collision. Pour l'industrie, l'intérêt est de traiter conjointement perception active et contrôle du corps entier. Les tâches d'inspection ou de maintenance dans des zones étroites (intérieur de machines, baies, cuves, armoires techniques) exigent que le bras découvre son environnement tout en le traversant. Remplacer la replanification par un contrôle réactif réduit la latence et la charge de calcul, deux points critiques pour des applications embarquées. Le résultat est toutefois à nuancer : il s'agit d'une prépublication non évaluée par les pairs, et le résumé ne précise ni le nombre d'environnements, ni le robot utilisé, ni la comparaison avec des méthodes de référence. Le seuil de 90 % de couverture et la limite de 120 secondes ne disent rien de la répétabilité sur des scènes plus encombrées, ni de la robustesse face aux obstacles mobiles ou aux erreurs de perception. Ces travaux s'inscrivent dans la lignée de la planification de « next-best-view » et de la reconstruction active, dominées par des approches qui calculent des vues candidates puis planifient un chemin, souvent au prix d'un temps de calcul élevé. Le Virtual Model Control, issu de la commande de robots marcheurs et de manipulateurs compliants, offre ici une alternative plus légère. Face à elles, les approches d'apprentissage de bout en bout, comme les politiques VLA, restent peu orientées vers l'exploration géométrique garantie en espace confiné. La suite logique serait une validation sur des bras industriels ou collaboratifs, des scènes dynamiques et des benchmarks publics. Aucun partenaire industriel ni calendrier de transfert n'est annoncé à ce stade.

Recherche❖Paper

1 source

42

500arXiv cs.RO 

Préserver les modes instables grâce à la dynamique inverse dans les modèles du monde JEPA

Une équipe de chercheurs publie sur arXiv (2610.07540) une étude sur un défaut discret des modèles du monde de type JEPA (Joint-Embedding Predictive Architecture) utilisés pour piloter des robots à partir d'images. Les systèmes robotiques présentent souvent des modes instables, c'est-à-dire des directions de l'état le long desquelles une petite perturbation croît sans limite si aucun retour d'état ne la corrige. Les auteurs montrent qu'un entraînement fondé sur la prédiction de l'étape suivante, associé à une régularisation anti-effondrement, ne garantit pas la conservation de ces modes contrôlables : la fonction de perte peut être minimisée alors que ces directions sont écrasées dans la représentation, ce qui rend toute stabilisation impossible. Le remède proposé ajoute un objectif de reconstruction de l'action (une perte de dynamique inverse). Les auteurs démontrent qu'une reconstruction exacte rend l'encodeur injectif sur le sous-espace atteignable en H pas, et que, lorsque H augmente, l'espace propre dominant du gramien de contrôlabilité à horizon fini converge vers le sous-espace instable contrôlable. Les preuves portent sur des systèmes linéaires. Les tests empiriques, sur CartPole, Walker2D et PointMaze, visent à montrer que le résultat se prolonge au cas non linéaire visuel. L'intérêt est surtout diagnostique. Il met en évidence un mode de défaillance silencieux : une perte d'entraînement basse ne prouve pas que la représentation soit exploitable pour le contrôle. Pour les équipes qui construisent des politiques ou des planificateurs sur des modèles du monde latents, c'est un argument pour ajouter des signaux sensibles à l'action plutôt que de se fier à la seule qualité de prédiction. Ce travail ne contredit pas les approches existantes, il en précise une limite théorique. Il faut toutefois rester prudent : il s'agit d'un préprint non évalué par les pairs, sans déploiement ni robot physique. Les benchmarks sont des environnements simulés simples, loin de la manipulation à grand nombre de degrés de liberté. Le résultat s'inscrit dans la lignée des JEPA, popularisées par l'équipe de Yann LeCun, et des modèles du monde appris pour le contrôle, face à des approches de type VLA qui apprennent directement les actions. Aucune suite ni calendrier n'est annoncé. L'étape suivante logique serait un passage à l'échelle sur des tâches visuelles plus riches, puis sur du matériel réel.

Recherche❖Paper

1 source