Aller au contenu principal
Représentation tactile factorisée et contrôle pour la manipulation en transfert simulation-réelIllustration générée par IA
RecherchearXiv cs.RO 

Représentation tactile factorisée et contrôle pour la manipulation en transfert simulation-réel

1 source couvre ce sujet·Source originale ↗·

Compilé et résumé par IA · sources vérifiables en un clic · publié sans lecture humaine préalable · méthodologie

Résumé IASource unique

Des chercheurs proposent, dans un preprint arXiv (2610.10510v1), un cadre de représentation tactile « factorisée » et de contrôle destiné au transfert sim-to-real en manipulation. L'idée est de projeter la force normale et la zone de contact vers une « réponse de contact effective », récupérable à partir des lectures du capteur, plutôt que de tenter de reproduire fidèlement la physique propre à chaque capteur. Cette réponse est ensuite scindée en trois composantes: la géométrie du contact, la distribution des forces et la variation temporelle du contact. Chacune dispose de son propre encodage et de sa propre randomisation de domaine. Le contrôleur, baptisé Tactile Gated Policy, conserve ces trois représentations séparées tout au long de la chaîne de contrôle. Il fonctionne sur toutes les configurations de masques, c'est-à-dire toutes les combinaisons de composantes activées, sans réentraînement. L'évaluation porte sur la reconstruction de la réponse, l'alignement spatial, la régulation de force et l'insertion de cheville adversariale riche en contacts, en simulation comme sur robot réel. Les auteurs annoncent une localisation du contact inférieure à 1 mm, une erreur de suivi de force de 1,69 N sur des géométries inédites et un gain de 35 % en insertion réelle par rapport à la réponse non factorisée.

L'intérêt dépasse le seul benchmark. Le tactile reste le maillon faible du sim-to-real: la vision et la proprioception se transfèrent de mieux en mieux, mais les signaux de contact dépendent fortement du capteur, ce qui limite la réutilisation des politiques d'un dispositif à l'autre. En séparant géométrie, force et dynamique, le travail permet d'évaluer indépendamment l'utilité et la fiabilité de transfert de chaque représentation. Il montre aussi que ces représentations n'aident pas toutes les mêmes interactions, ce qui nuance l'idée d'un signal tactile unique et générique. Pour un intégrateur, la conséquence pratique est qu'un choix de capteur pourrait compter moins que la manière d'exposer l'information de contact à la politique. Quelques réserves s'imposent. Il s'agit d'un preprint non évalué par les pairs. Le gain de 35 % est mesuré contre une base de référence interne, et non contre des méthodes concurrentes. Le résumé ne précise ni le matériel, ni le nombre d'essais, ni les tolérances d'insertion. Rien ne permet d'extrapoler à des cadences industrielles ou à des pièces variées.

Ce travail s'inscrit dans l'effort général pour donner un toucher exploitable aux politiques apprises, alors que les modèles généralistes (VLA) restent surtout visuels. Les capteurs tactiles optiques de type GelSight et leurs dérivés ont popularisé les approches de simulation tactile, mais chaque équipe doit en général recalibrer son pipeline pour son capteur. L'approche factorisée vise à contourner ce verrou en s'appuyant sur une couche intermédiaire commune. Les suites logiques seraient une validation sur plusieurs capteurs et plusieurs plateformes, des tâches plus longues que l'insertion de cheville et une intégration dans des politiques généralistes. Aucun calendrier, code ni partenaire industriel n'est annoncé à ce stade.

Dans nos dossiers

À lire aussi

WiTac : représentations tactiles guidées par le poignet pour la manipulation riche en contacts
Illustration générée par IA
1arXiv cs.RO 

WiTac : représentations tactiles guidées par le poignet pour la manipulation riche en contacts

Des chercheurs proposent WiTac (Wrist-Informed Tactile Representations), un encodeur pré-entraîné qui fusionne en amont trois flux : les signaux tactiles, le mouvement de la main et les images d'une caméra montée au poignet. Il a été pré-entraîné sur près de 300 heures de données collectées avec la plateforme SharpaDex. L'objectif est de produire une représentation de contact unique, avant toute génération d'action. Les auteurs l'ont ensuite utilisé pour conditionner deux politiques VLA (vision-langage-action) : GR00T N1.7 et π0.5. Sur quatre tâches de manipulation riches en contacts, le taux de réussite progresse en moyenne de 28,8 points pour GR00T N1.7 et de 15,0 points pour π0.5 par rapport aux politiques de base utilisant la vision seule.

RecherchePaper
1 source
Imp-ACT : contrôle d'impédance adaptatif et segmentation d'action par transformers pour la manipulation en contact
Illustration générée par IA
2arXiv cs.RO 

Imp-ACT : contrôle d'impédance adaptatif et segmentation d'action par transformers pour la manipulation en contact

Des chercheurs présentent Imp-ACT, une méthode de contrôle robotique pour la manipulation en contact riche, décrite dans une prépublication arXiv (2609.31225v1, non encore relue par les pairs). Le principe consiste à intégrer la modulation de rigidité cartésienne directement dans la phase de collecte de démonstrations par téléopération, plutôt que de fixer cette rigidité au niveau du contrôleur comme le font la plupart des politiques vision-action actuelles. Un contrôleur d'impédance auto-ajustable adapte la rigidité selon la direction instantanée du mouvement tout en conservant de la souplesse dans les directions orthogonales, sans sélection manuelle ni reconstruction de cible hors ligne.

RecherchePaper
1 source
TMA : manipulation humanoïde en force par transfert simulation-réel grâce à l'adaptation motrice guidée par le tactile
Illustration générée par IA
3arXiv cs.RO 

TMA : manipulation humanoïde en force par transfert simulation-réel grâce à l'adaptation motrice guidée par le tactile

Des chercheurs publient sur arXiv (2611.18976v1) un système baptisé Tactile-Driven Motor Adaptation (TMA), qui vise la manipulation humanoïde « forceful », c'est-à-dire exigeant des efforts de contact maîtrisés plutôt qu'un simple placement géométrique. Le benchmark retenu est l'ouverture d'une poignée de porte ronde, une tâche qui impose une prise frictionnelle stable à plusieurs doigts, un couple suffisant sans glissement, une poussée régulée en force et une stabilité du corps entier. La politique de manipulation du haut du corps est entraînée entièrement en simulation, en parallèle d'un contrôleur de locomotion générale préentraîné, pour coordonner dextérité et stabilisation. Elle est ensuite transférée en zero-shot sur un Unitree G1 équipé de mains multi-doigts BrainCo Revo2.

RecherchePaper
1 source
Représentation Alignée pour l'Ancrage Tactile en Manipulation Robotique à Contact Riche
Illustration générée par IA
4arXiv cs.RO 

Représentation Alignée pour l'Ancrage Tactile en Manipulation Robotique à Contact Riche

Le capteur tactile reste le parent pauvre des politiques vision-langage-action (VLA) pour la manipulation robotique, alors que les phases de contact critiques (préhension, insertion, glissement) échappent souvent à la caméra. Une équipe de recherche propose dans un article publié sur arXiv (2607.14609) une méthode pour mieux exploiter le toucher: au lieu de prédire directement le signal tactile brut, souvent bruité, le système apprend à anticiper de futurs états tactiles à partir des représentations internes du modèle. Par une analyse en sonde linéaire (linear probe), les chercheurs montrent que ce sont les caractéristiques intermédiaires de l'expert en action, la partie du réseau qui traduit une décision en mouvement, qui prédisent le mieux l'état tactile futur, bien mieux que les couches de…

RechercheActu
1 source