Aller au contenu principal
TacRefineNet : affinage de la préhension tactile guidé par objectif pour objets à arêtes saillantes
RecherchearXiv cs.RO 

TacRefineNet : affinage de la préhension tactile guidé par objectif pour objets à arêtes saillantes

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Une équipe de recherche présente TacRefineNet, un système d'affinage tactile de prise pour objets à géométrie fine comme les plaques, disques et tiges, dont les contacts épars sont difficiles à capter par la vision en profondeur. Le framework utilise un réseau siamois entraîné à comparer les images tactiles multi-doigts actuelles et cibles, ainsi que les configurations articulaires de la main, pour prédire directement des corrections incrémentales de la pose du poignet. La main ouvre, déplace et resaisit l'objet de façon itérative, formant une boucle de servocontrôle tactile à dextérité externe. Les chercheurs ont collecté 156 007 échantillons simulés à partir de 15 objets (plaques, disques, tiges) et entraîné la politique entièrement dans MuJoCo avant un déploiement zero-shot sur une main à cinq doigts et 11 degrés de liberté équipée de capteurs piézorésistifs. Sur des objets déjà vus, le système réel atteint un taux de réussite de 80,7% pour les cibles fixes et 59,3% pour les cibles aléatoires selon le critère de 10 degrés et 10 mm, avec des erreurs moyennes d'environ 5,2 mm et 3,5 degrés après cinq étapes de correction.

Ce résultat s'attaque à un angle mort précis de la manipulation robotique: les objets fins et symétriques restent un point faible pour les capteurs de profondeur classiques, car leurs surfaces de contact sont trop réduites ou occultées pour une estimation de pose fiable par vision seule. En démontrant qu'un asservissement purement tactile peut corriger l'alignement final avec une précision millimétrique, l'étude conforte l'idée que la fusion vision-tactile, plutôt que la vision seule, sera nécessaire pour les tâches d'assemblage fin en usine ou en logistique. Le transfert zero-shot simulation-vers-réel, sans réentraînement sur le système physique, est aussi un signal encourageant pour réduire le coût de déploiement de ce type de politique sur du nouveau matériel.

Le travail s'inscrit dans la lignée des approches de manipulation dextre pilotées par retour tactile, un domaine où la rareté des données réelles pousse les équipes à s'appuyer sur la simulation pour l'entraînement. Les auteurs reconnaissent des limites: le transfert reste restreint à des objets non vus mais proches en catégorie, et la performance chute nettement pour les objets symétriques ou aux contacts peu discriminants, un écueil classique pour toute méthode fondée sur la comparaison d'images de contact. Le système montre en revanche une capacité de correction continue face à des perturbations prolongées, ce qui ouvre la voie à des essais sur des tâches d'assemblage réel où la précision fine de prise est critique, sans qu'aucun calendrier de déploiement industriel ne soit pour l'instant annoncé.

Dans nos dossiers

À lire aussi

TouchDrive : interface tactile sans électronique pour l'aide à la préhension
1arXiv cs.RO 

TouchDrive : interface tactile sans électronique pour l'aide à la préhension

Des chercheurs ont publié sur arXiv (réf. 2605.06432) TouchDrive, une interface de retour tactile entièrement passive destinée à la préhension robotique assistive. Le système repose sur un clapet pneumatique normalement fermé, un réservoir d'air comprimé, un élément de captation mécanique et un actionneur haptique, sans aucun composant électronique. Le principe est direct : les forces de contact générées lors de la saisie sont converties en pression pneumatique qui actionne le retour haptique vers l'opérateur dans une boucle mécanique unique, sans microcontrôleur, sans firmware, sans couche logicielle intermédiaire. Le système a été validé sur plusieurs plateformes robotiques et testé sur un panel de 20 objets représentatifs, dont des fruits et des articles du quotidien, couvrant à la fois des objets compliants et des objets fragiles. L'intérêt industriel et médical de TouchDrive tient à sa rupture architecturale : là où les interfaces tactiles concurrentes empilent capteurs à résistance variable ou piézoélectriques, unités de traitement embarquées et buses d'actuation pilotées par microcontrôleur, TouchDrive condense sensing, génération de signal et retour haptique dans un seul circuit pneumatique passif. Cette compression de la chaîne de traitement réduit directement le coût de fabrication, la surface de défaillance et les contraintes réglementaires liées aux dispositifs électroniques en milieu médical. Pour un COO qui intègre des bras robotiques dans des environnements sensibles ou à budget contraint, l'absence d'électronique signifie aussi une maintenance simplifiée et une certification potentiellement plus rapide. La capacité à moduler la force de préhension en temps réel via retour tactile est ce qui permet la manipulation précise d'objets déformables, un problème non résolu par les systèmes de contrôle en position pure. Le champ de la manipulation assistive est actuellement dominé par des capteurs tactiles électroniques comme GelSight (MIT), DIGIT (Meta AI) ou les solutions embarquées de Touchlab et Contactile, tous dépendants de GPU ou de microcontrôleurs pour le traitement. TouchDrive se positionne explicitement à contre-courant, en ciblant l'accessibilité et la robustesse plutôt que la densité d'information. Il s'agit pour l'heure d'un prototype de laboratoire publié sous forme de preprint, sans partenaire industriel ni calendrier de commercialisation annoncé. La prochaine étape logique serait une validation sur des tâches à contraintes de force plus strictes et un test en conditions d'usage réelles avec des utilisateurs en situation de handicap moteur.

RecherchePaper
1 source
Filtrage particulaire par fenêtre glissante informé par la physique pour l'affinement de pose 6-DoF d'objet en main, uniquement tactile
2arXiv cs.RO 

Filtrage particulaire par fenêtre glissante informé par la physique pour l'affinement de pose 6-DoF d'objet en main, uniquement tactile

Des chercheurs proposent, dans un article publié sur arXiv (arXiv:2608.17601v1, prépublication), une méthode de suivi de pose en 6 degrés de liberté (6-DoF) pour des objets saisis en main, reposant uniquement sur le toucher, sans aucune caméra. Le système utilise un filtre particulaire physiquement informé sur le groupe SE(3), qui met à jour la croyance sur la pose de l'objet à partir de mesures tactiles denses couvrant toute la main. La fonction de vraisemblance combine cinq éléments : la cohérence de distance signée aux points de contact actifs, l'alignement force-normale, la faisabilité du cône de friction, l'évidence négative des zones sans force, et des contraintes de faisabilité optionnelles. Une fenêtre glissante de log-vraisemblance fusionne plusieurs images tactiles successives pour réduire l'ambiguïté d'une seule mesure, tandis qu'un guidage par champ de potentiel évite la pénétration virtuelle entre la main et l'objet. Un rééchantillonnage tenant compte des symétries de l'objet permet de conserver plusieurs hypothèses de pose plausibles simultanément. Les tests, menés sur une main robotique Allegro Hand V5 avec cinq objets différents, montrent une erreur ADD-S normalisée inférieure à celle des méthodes géométriques tactiles seules, des filtres particulaires classiques et des approches par apprentissage. Le résultat cible un point aveugle réel de la manipulation robotique : dès que la vision est masquée, par exemple lorsqu'un objet est enveloppé par les doigts ou en environnement encombré, la plupart des systèmes perdent la trace précise de sa position, ce qui limite les tâches d'assemblage fin, de préhension dextre ou de contrôle qualité en usine. Une estimation fiable par le seul toucher intéresserait directement les concepteurs de mains robotiques dextres et de robots humanoïdes cherchant à manipuler sans dépendre en permanence d'une ligne de vue caméra. Il faut toutefois noter les limites : validation sur cinq objets seulement, en configuration statique ou quasi-statique, sur une plateforme de recherche spécifique, donc encore loin d'un déploiement industriel. Ce travail s'inscrit dans la lignée des recherches sur la perception tactile pour la manipulation dextre, domaine où la main Allegro Hand sert de banc d'essai académique courant. Les auteurs comparent explicitement leur approche aux méthodes géométriques tactiles existantes, aux filtres particulaires standards et aux baselines par apprentissage, qu'ils surpassent selon leurs métriques. Aucun partenaire industriel ni calendrier de déploiement n'est mentionné ; il s'agit d'une contribution de recherche fondamentale, dont l'étape suivante logique serait l'extension à des objets en mouvement dynamique et une intégration sur des systèmes robotiques complets.

RecherchePaper
1 source
Guidage par potentiel de particules pour la préhension dextérique sous contraintes de négation
3arXiv cs.RO 

Guidage par potentiel de particules pour la préhension dextérique sous contraintes de négation

Des chercheurs publient sur arXiv (papier 2609.00555, type "new", déposé début septembre 2026) une méthode appelée Potential-Guided Particle Steering, conçue pour corriger un défaut des modèles de préhension dextre pilotés par le langage, comme DextER. Ces modèles réussissent bien quand une instruction précise où saisir un objet, mais échouent systématiquement quand elle précise aussi où ne pas saisir, par exemple "attrape la poignée mais évite le corps de l'objet". La raison identifiée : les corpus d'entraînement existants, dont DexGYSNet, ne contiennent quasiment aucune instruction d'évitement, et chaque partie mentionnée pendant l'entraînement est interprétée comme une cible de contact plutôt qu'une zone à exclure. La méthode proposée agit uniquement au moment de l'inférence, sans exemple de négation dans l'entraînement : elle combine du Sequential Monte Carlo avec du classifier-free guidance pour orienter l'échantillonnage vers la partie visée tout en éliminant les candidats de prise dirigés vers la zone interdite, celle-ci étant localisée par un modèle figé de "part-grounding" 3D. Un nouveau benchmark, NegGrasp, associe des instructions positives et négatives appariées avec des métriques tenant compte de la contrainte. Résultat : le taux de violation de la contrainte tombe de 57,9 % pour la meilleure référence à 17,2 % avec la nouvelle méthode, tout en améliorant aussi le taux de réussite physique. Le résultat ne provient pas d'un déploiement robotique réel mais d'expériences sur benchmark, ce qui mérite d'être signalé. Son intérêt pour les intégrateurs et les équipes robotique tient au problème qu'il révèle : des instructions de sécurité banales ("ne touche pas au câble", "évite la lame") peuvent faire échouer des modèles de préhension par ailleurs performants, un angle mort typique du décalage entre démonstration et usage industriel réel. L'approche séduit aussi parce qu'elle ne nécessite ni réentraînement ni collecte de données supplémentaires, contrainte pourtant impossible à satisfaire pour tout cas d'usage imaginable. Un taux de violation résiduel de 17,2 % reste toutefois loin d'une garantie de sécurité exploitable en production. Le travail s'inscrit dans la suite directe de DextER et du corpus DexGYSNet, et emprunte des techniques de guidage habituellement utilisées dans les modèles génératifs de diffusion. Il ne compare pas directement sa méthode aux modèles génération action-langage-vision plus larges comme GR00T N2, Pi-0 ou Helix, laissant ouverte la question de l'intégration à ces pipelines. Les auteurs publient NegGrasp comme benchmark public, ce qui devrait permettre des comparaisons futures, la prochaine étape logique étant une validation sur mains robotiques physiques.

RecherchePaper
1 source
Pince hybride à galets-coinceurs pour la préhension et la rétention d'objets sous incertitude de pose
4arXiv cs.RO 

Pince hybride à galets-coinceurs pour la préhension et la rétention d'objets sous incertitude de pose

Un article publié sur arXiv (arXiv:2608.20962v1) décrit un préhenseur hybride combinant rouleaux motorisés et blocage granulaire (jamming) pour saisir des objets malgré une incertitude de position initiale, un problème courant en manipulation domestique lorsque le contact de départ est décentré ou partiel. Le mécanisme fait d'abord tourner des rouleaux vers l'intérieur pour accrocher l'objet et le centrer, puis applique un vide qui rigidifie un matériau granulaire autour des rouleaux pour stabiliser la prise. Les chercheurs ont monté un prototype sur un bras robotique à 7 degrés de liberté (DOF) et testé huit objets sur 840 essais de préhension au total, dont 216 avec décalage de position planaire et 624 avec décalage d'orientation, chaque condition répétée trois fois. Le taux de réussite global atteint 812 sur 840 essais, soit 215/216 pour les décalages de position et 597/624 pour les décalages d'orientation. Une étude d'ablation sur trois objets (162 essais) compare les deux mécanismes isolés: rouleaux seuls, 54 réussites sur 81; blocage granulaire seul, 24 sur 81. Ce résultat cible un goulot d'étranglement bien identifié en manipulation robotique: la plupart des préhenseurs à rouleaux excellent à capturer un objet mal positionné mais tiennent mal la prise une fois saisi, tandis que les préhenseurs à blocage granulaire assurent une bonne rétention mais nécessitent déjà un contact suffisant pour se refermer efficacement, ce qui les rend peu fiables sur un premier contact imparfait. En combinant les deux principes dans un même outil terminal, l'étude montre par ablation que ni l'un ni l'autre mécanisme pris isolément n'approche la performance du système hybride, une preuve de concept utile pour les intégrateurs travaillant sur la logistique du dernier mètre, le tri d'objets domestiques ou les bras collaboratifs confrontés à des positions d'objets non calibrées. Le papier reste néanmoins une démonstration de mécanisme en environnement contrôlé: pas de comparaison directe à d'autres préhenseurs hybrides publiés, et l'échantillon d'ablation limité à trois objets sur 162 essais appelle à la prudence avant toute généralisation. La recherche en préhension robotique explore depuis plusieurs années deux familles distinctes de réponses à l'incertitude de pose: les préhenseurs actifs à rouleaux ou courroies, utilisés notamment en logistique d'entrepôt pour leur capacité à réajuster un objet en cours de saisie, et les préhenseurs à blocage granulaire, popularisés par des travaux universitaires puis commercialisés pour leur aptitude à épouser des formes irrégulières sans planification de prise complexe. L'article, publié comme prépublication arXiv sans affiliation industrielle mentionnée dans le résumé, se positionne comme une validation de principe combinant ces deux approches plutôt qu'une percée produit: le prototype n'est décrit qu'au banc d'essai, sans indication de déploiement, de partenariat industriel ou de calendrier de commercialisation. Les auteurs annoncent vouloir approfondir l'analyse géométrique du mécanisme et la caractérisation des forces de préhension, ce qui suggère que les prochaines étapes viseront l'intégration à des tâches de manipulation plus complexes plutôt qu'une mise sur le marché à court terme.

RecherchePaper
1 source