RecherchearXiv cs.RO 19 octobre 2026

HydroShear : simulation hydroélastique du cisaillement pour le transfert sim-vers-réel tactile par apprentissage par renforcement

1 source couvre ce sujet·Source originale ↗·

Résumé IASource uniqueImpact UE

Des chercheurs présentent HydroShear, un simulateur tactile hydroélastique non holonome destiné au transfert sim-to-real de politiques d'apprentissage par renforcement sur des tâches riches en contacts. Le simulateur modélise trois phénomènes que les approches existantes traitent mal : les transitions entre adhérence et glissement (stick-slip), l'accumulation de force et de cisaillement dépendante de la trajectoire, et les interactions complètes objet-capteur en SE(3), c'est-à-dire avec les six degrés de liberté de position et d'orientation. Il étend les modèles de contact hydroélastiques en s'appuyant sur des fonctions de distance signée (SDF) pour suivre le déplacement des points de surface d'un indenteur au contact de la membrane du capteur. Il produit des champs de force issus de la physique, peu coûteux en calcul, pour toute géométrie étanche (watertight), et reste indépendant du moteur physique employé. Les tests ont été menés avec des capteurs GelSight Mini. Quatre tâches ont été transférées sans réentraînement (zero-shot) : insertion de cheville, rangement en bac, mise en place d'un livre sur une étagère et ouverture de tiroir, cette dernière exigeant un contrôle fin de la pince en situation de glissement. Le taux de réussite moyen atteint 93 %, contre 34 % pour des politiques entraînées sur images tactiles et 58 à 61 % pour d'autres méthodes de simulation du cisaillement.

L'enjeu dépasse le gain chiffré. La plupart des simulateurs tactiles se sont concentrés sur la qualité du rendu d'image des capteurs optiques, au détriment d'un modèle réaliste des forces et du cisaillement. Or ce sont ces grandeurs qui déterminent la réussite des tâches d'insertion ou de manipulation sous glissement. L'écart de 34 % à 93 % suggère que, pour les mains dextres, fidélité physique et fidélité visuelle ne se valent pas, ce qui oriente les équipes vers la modélisation des forces plutôt que vers le rendu photoréaliste. Le fait que la méthode soit indépendante du moteur physique facilite son adoption dans des chaînes de simulation existantes. Les intégrateurs et responsables industriels doivent toutefois rester prudents : il s'agit d'un résultat de laboratoire, sur quatre tâches et un seul modèle de capteur. Aucune donnée n'est fournie sur la robustesse à long terme, l'usure du gel ou les cadences en production, et le nombre d'essais par tâche n'est pas précisé dans ce résumé.

Ce travail s'inscrit dans la montée de la dextérité tactile, où le sim-to-real reste l'un des principaux verrous face à l'apprentissage par démonstrations réelles, plus coûteux et plus lent à passer à l'échelle. Les capteurs GelSight, devenus une référence en recherche, ont surtout bénéficié de simulateurs centrés sur l'image, ce que HydroShear cherche à dépasser. Il s'agit de la version 2 d'un article déposé sur arXiv (2603.00446), donc d'un travail encore en évolution et non d'un produit disponible. Les suites logiques sont une validation sur d'autres capteurs et d'autres tâches, puis une intégration dans des pipelines de politiques généralistes de type VLA, qui exploitent encore peu le toucher.

Dans nos dossiers

arXiv cs.RO

À lire aussi

1arXiv cs.RO

Ce qui compte pour le transfert de l'apprentissage par renforcement en simulation vers l'apprentissage en ligne sur des robots réels

Une étude empirique menée sur trois plateformes robotiques distinctes a testé l'apprentissage par renforcement (RL) en ligne directement sur des robots physiques, à travers 100 sessions d'entraînement réelles. Les chercheurs ont systématiquement isolé les choix de conception algorithmiques, matériels et expérimentaux habituellement laissés implicites dans les travaux précédents sur le sujet. Résultat principal : certains réglages par défaut largement utilisés dans la pratique du RL se révèlent contre-productifs sur du matériel réel, tandis qu'un ensemble restreint de choix de conception robustes, faciles à adopter dans le cadre standard du RL, permet d'obtenir un apprentissage stable sur différentes tâches et différents types de robots. Il s'agit, selon les auteurs, de la première étude empirique à grande échelle de ce type portant sur ces choix de conception. Cette cartographie répond à un point de friction bien identifié chez les intégrateurs et équipes de recherche robotique : le RL en ligne sur robot réel reste réputé fragile, coûteux en ingénierie et peu reproductible d'une plateforme à l'autre, ce qui pousse la majorité des équipes vers l'apprentissage en simulation (sim-to-real) ou l'imitation à partir de démonstrations. En identifiant quels réglages par défaut nuisent réellement à l'apprentissage et lesquels le stabilisent, ce travail réduit potentiellement l'effort d'ingénierie nécessaire pour déployer du RL en ligne directement sur du hardware, sans passer par un simulateur intermédiaire. C'est un signal utile pour évaluer si le RL en ligne peut devenir une option pratique face aux architectures VLA (vision-langage-action) qui dominent actuellement la communication du secteur, en offrant une alternative plus frugale en données de démonstration. Le papier s'inscrit dans une lignée de travaux cherchant à combler l'écart entre les promesses du RL en robotique, démontrées depuis longtemps en simulation, et sa fiabilité en conditions réelles, où le coût d'échantillonnage et les risques matériels limitent les expérimentations à grande échelle. Contrairement aux annonces de plateformes humanoïdes commerciales, ce travail relève de la recherche fondamentale reproductible, avec des ablations systématiques plutôt qu'une démonstration ponctuelle. Publié sur arXiv en tant que version révisée ("replace"), il ouvre la voie à des protocoles standardisés que d'autres laboratoires pourront reprendre et à des comparaisons futures avec des approches sim-to-real ou par imitation sur les mêmes tâches.

RecherchePaper

1 source

2arXiv cs.RO

Fusion multimodale pour le transfert simulation-réel en apprentissage par renforcement visuel

Une équipe de recherche a soumis sur arXiv (identifiant 2507.09180, actuellement à la version 4) une architecture de fusion multimodale pour améliorer le transfert sim-to-real en apprentissage par renforcement visuel appliqué à la manipulation robotique. L'approche combine deux flux d'entrée, RGB et profondeur (depth), traités en parallèle par des réseaux convolutifs séparés (CNN stems), dont les représentations fusionnées sont transmises à un vision transformer (ViT) scalable. L'information de profondeur, naturellement robuste aux variations d'apparence de scène, fournit des détails spatiaux 3D absents des images RGB seules. Le pipeline intègre un schéma d'apprentissage contrastif à tokens masqués et non masqués pour améliorer l'efficacité d'échantillonnage, combiné à une randomisation de domaine progressive (curriculum-based domain randomization) pour stabiliser l'entraînement. En simulation, la méthode surpasse les baselines comparées. La validation clé se fait en transfert zéro-shot : sans ré-entraînement sur données réelles, le modèle réalise des tâches de manipulation physique. Le sim-to-real gap reste l'obstacle central en robotique d'apprentissage : les politiques entraînées en simulation échouent fréquemment face à la variabilité visuelle du monde réel. La fusion RGB + depth attaque directement ce problème en réduisant la dépendance aux indices visuels fragiles comme l'éclairage ou les textures. L'apprentissage contrastif à tokens partiels suggère une meilleure invariance aux perturbations apparentes sans nécessiter de volumes massifs de données réelles. Pour les intégrateurs industriels et les équipes de développement en manipulation, le transfert zéro-shot validé expérimentalement est un signal concret : la politique capture des abstractions géométriques suffisamment générales pour opérer hors simulation, ce qui est précisément la promesse que le secteur cherche à tenir depuis des années. Ce travail s'inscrit dans une compétition de représentations visuelles pour la robotique qui inclut la randomisation de domaine agressive popularisée par OpenAI dès 2017, les encodeurs préentraînés par masquage (MAE, R3M, DINOv2), et les politiques vision-langage-action (VLA) comme pi0 de Physical Intelligence ou OpenVLA. L'originalité revendiquée est la fusion RGB + depth au niveau du transformer plutôt qu'en aval, couplée au curriculum adaptatif. Le passage à la version 4 sur arXiv signale un travail en révision active, probablement vers une conférence type ICRA ou IROS. Les prochaines étapes attendues incluent une validation sur benchmarks standardisés (RLBench, MetaWorld) et des tests sur plateformes physiques plus complexes.

RecherchePaper

1 source

3arXiv cs.RO

NavRL++ : un cadre système pour améliorer le transfert simulation-réel dans la navigation robotique par apprentissage par renforcement

Une équipe de chercheurs a publié NavRL++, un cadre de navigation autonome par apprentissage par renforcement (RL) conçu spécifiquement pour réduire l'écart entre simulation et déploiement réel. Présenté sur arXiv (2605.15559), le système propose à la fois un nouveau pipeline d'entraînement et de déploiement et une étude empirique systématique qui isole les facteurs dégradant les performances en conditions réelles : bruit de capteurs, échecs de perception, latence système et réponse du contrôleur. Les auteurs ont validé leur approche sur plusieurs plateformes physiques, dont des robots aériens et quadrupèdes, sur des tâches de navigation comme l'exploration et l'inspection, en obtenant un transfert zéro-shot depuis la simulation. Le problème que NavRL++ cherche à résoudre est structurel : la quasi-totalité des travaux récents en navigation par RL se concentre sur la conception du framework d'apprentissage (représentations d'entrée, espaces d'actions, fonctions de récompense), sans analyser rigoureusement pourquoi les politiques entraînées en sim échouent en réel. NavRL++ répond à cela avec deux contributions techniques. La première est le perturbation-aware fine-tuning, une stratégie post-entraînement qui injecte explicitement les perturbations identifiées lors de l'étude empirique pour rendre la politique plus robuste. La seconde est une politique à raisonnement temporel basée sur un Transformer, qui exploite une fenêtre d'observation courte pour lisser le contrôle et compenser la dégradation perceptuelle typique du monde réel. Les résultats quantitatifs montrent des performances supérieures aux baselines RL dans des environnements statiques et dynamiques, et comparables aux planificateurs classiques à optimisation en contexte statique. Le défi du sim-to-real reste l'un des verrous majeurs à la commercialisation de la navigation autonome par RL, notamment pour les robots mobiles en environnements industriels non structurés. La plupart des approches existantes, comme les travaux issus de Berkeley (BADGR, RECON) ou les pipelines de navigation d'Agility Robotics et Boston Dynamics, contournent partiellement le problème via de la simulation photo-réaliste ou du domain randomization intensif. NavRL++ adopte une approche complémentaire : diagnostiquer empiriquement les sources d'écart plutôt que de les masquer. La prochaine étape naturelle sera de tester cette méthodologie sur des flottes de robots en déploiement continu, notamment dans des scénarios entrepôt ou inspection d'infrastructures où la latence et la fiabilité des capteurs sont des contraintes opérationnelles dures.

RecherchePaper

1 source

4arXiv cs.RO

Améliorer le transfert sim-vers-réel des robots à commande de couple via l'estimation dynamique réel-vers-sim et l'apprentissage par renforcement

Une équipe de recherche a publié en août 2026 sur arXiv (2608.22629) un pipeline nommé Real2Sim2Real pour améliorer le transfert simulation-réel de politiques d'apprentissage par renforcement sur des bras robotiques pilotés en couple. Testé sur le Franka Emika Panda, bras à 7 degrés de liberté du fabricant allemand Franka Emika, le système identifie d'abord les paramètres réels de friction, d'inertie et de compensation de gravité en minimisant l'écart entre trajectoires articulaires réelles et simulées, les optimise par algorithme génétique, puis entraîne en simulation un agent TQC (Truncated Quantile Critics) avec randomisation de domaine. La politique est validée dans les simulateurs Gazebo et MuJoCo avant déploiement sur le robot physique pour des tâches d'atteinte de cible. Les auteurs rapportent une nette amélioration de la précision de suivi et de la robustesse une fois les paramètres calibrés, avec un transfert jugé fluide vers le monde réel. Le contrôle en couple reste l'un des points durs du sim-to-real : une erreur de modélisation dynamique, même mineure, peut rendre un bras réel instable ou dangereux, contrairement au contrôle en position. En calibrant le simulateur sur des données physiques mesurées avant l'entraînement, plutôt qu'en misant sur une randomisation aveugle des paramètres, cette approche real2sim intéresse directement les intégrateurs travaillant sur des tâches de préhension fine ou d'assemblage sous contrôle de force, et appuie l'idée que le fossé simulation-réalité se réduit surtout par une modélisation physique rigoureuse. Les résultats portent cependant sur des tâches d'atteinte de cible simples et un seul bras : une preuve de concept académique, pas un déploiement industriel validé. Le Franka Emika Panda, dérivé des travaux du centre aérospatial allemand DLR et commercialisé depuis 2017, s'est imposé en recherche robotique grâce à sa mesure native de couple articulaire, rare à ce niveau de prix. Le pipeline real2sim2real prolonge une lignée de travaux qui, depuis les premières démonstrations de manipulation par randomisation de domaine à la fin des années 2010, cherchent à réduire la dépendance à un volume massif de simulations en misant sur la fidélité du modèle physique. L'article, publié en preprint non relu par les pairs, ne précise ni calendrier de suivi ni extension annoncée à d'autres plateformes.

UELe bras utilisé, le Franka Emika Panda, est fabriqué par l'allemand Franka Emika et largement déployé dans les laboratoires de robotique européens, ce qui rend ce pipeline directement testable par les équipes de recherche et d'intégration en France et en UE.

RecherchePaper

1 source