Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
RecherchearXiv cs.RO 

GlowTact : un capteur tactile visuel simple et compact, à haute sensibilité et haute résolution spatiale

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

GlowTact, un capteur tactile à base de vision (VBTS) décrit dans un preprint arXiv (v2), vise explicitement les bouts de doigts de robots humanoïdes. Son principe repose sur une membrane en nitrile durable qui visualise directement la pression de contact. Là où de nombreux VBTS exigent un éclairage multicolore ou directionnel et une reconstruction géométrique explicite, GlowTact se contente d'une illumination monochrome non directionnelle. L'image brute de la caméra représente directement la distribution de pression, sans étape de reconstruction intermédiaire. Les auteurs affirment une détection de contact à l'échelle du gramme, une estimation précise de la force normale et la restitution de géométries fines, jusqu'aux filets d'une vis M1 (environ 1 mm de diamètre). Le résumé ne donne ni dimensions du capteur, ni erreur chiffrée sur la force, ni résolution spatiale en millimètres, ni nombre d'essais.

L'intérêt tient à la simplification. Les VBTS, dans la lignée de GelSight, fournissent une information de contact très riche, mais leur optique (LED de plusieurs couleurs, gel épais, miroirs, calibration photométrique) les rend difficiles à miniaturiser et à adapter à des doigts de la taille d'une main humaine. Une architecture à lumière unique et à lecture directe de la pression réduit le nombre de pièces, le coût potentiel et la charge de calcul, trois points décisifs pour un intégrateur qui doit équiper dix à vingt doigts par robot. Le choix du nitrile, matériau courant et résistant à l'usure, répond aussi à la question de la durabilité, souvent éludée dans les démonstrations de laboratoire. Reste à vérifier ces promesses : il s'agit de résultats de laboratoire, sans test de longévité, de reproductibilité entre capteurs ni de comparaison quantitative publiée avec des références comme GelSight Mini ou DIGIT.

Ce travail s'inscrit dans la course à la dextérité des humanoïdes, où le toucher est devenu le chaînon manquant des politiques de manipulation de type VLA, majoritairement guidées par la seule vision. Les mains de Tesla (Optimus), Figure ou Sharpa misent sur des capteurs tactiles plus ou moins intégrés, tandis que Meta (DIGIT), GelSight ou la recherche académique poussent le tactile optique. Il s'agit ici d'un composant de recherche, sans produit commercial, client ni calendrier annoncé. Les prochaines étapes à surveiller sont une intégration sur une main dextre complète, des tests de manipulation en boucle fermée et une éventuelle disponibilité en open source.

Dans nos dossiers

arXiv cs.RO

À lire aussi

1arXiv cs.RO 

Cadre de caractérisation sans apprentissage de la résilience et de la sensibilité des capteurs tactiles visuels en polyuréthane

Des chercheurs proposent un cadre de caractérisation pour comparer le matériel des capteurs tactiles à base de vision (VBTS, pour vision-based tactile sensors) et testent le polyuréthane comme alternative aux gels de silicone qui équipent aujourd'hui ces capteurs. L'étude, publiée sur arXiv (2511.07797, troisième version), part d'un constat : les surfaces tactiles en silicone offrent une grande sensibilité, mais se dégradent vite sous charge et sous l'effet de l'usure. Le polyuréthane est un matériau plus dur, utilisé pour les semelles de chaussures, les roues en caoutchouc et les joints industriels. Les auteurs l'ont soumis à trois tests de résilience : charge normale, charge en cisaillement et abrasion. Pour la sensibilité, ils ont conçu des mesures « sans apprentissage » de la sensibilité en force et de la sensibilité spatiale. Le résumé ne donne aucun chiffre précis. Une tâche de dévissage et de revissage de bouchon de bouteille sert de validation au niveau système. Selon les résultats, le polyuréthane améliore nettement la résilience. Il perd en sensibilité aux faibles forces, mais sa plage de force utile s'élargit largement. Ces travaux touchent un point faible rarement mesuré de la manipulation dextre : la durabilité du toucher. Les démonstrations de mains robotiques et de modèles de manipulation (VLA) s'appuient de plus en plus sur des signaux tactiles denses. Pourtant, la littérature évalue peu la tenue des capteurs sur la durée, et leur performance intrinsèque se confond souvent avec les choix de jeu de données et d'architecture de réseau. L'approche sans apprentissage isole la qualité du capteur de ces effets, ce qui permet de comparer des matériaux et des designs sur une base commune. Pour un intégrateur, le compromis est net : le silicone convient aux tâches de précision à faible effort, le polyuréthane aux environnements rugueux et à forte charge, plus proches d'un atelier ou d'une logistique réelle. Le gel est une pièce d'usure, donc un coût de maintenance. Ce n'est toutefois pas encore une preuve de déploiement industriel. La validation repose sur une seule tâche de laboratoire, et le résumé ne donne ni cycles d'usure ni seuils de force chiffrés. Les capteurs VBTS, dont la famille GelSight est la référence historique, filment la déformation d'un gel par une caméra interne pour reconstruire la géométrie et les forces de contact. Ils sont devenus un standard de recherche, mais leurs gels souples restent fragiles. D'autres équipes cherchent à durcir les capteurs tactiles par d'autres voies, notamment des peaux électroniques et des architectures magnétiques. Le texte ne mentionne aucun acteur français ou européen, et les auteurs ne sont pas nommés dans le résumé. La suite logique serait de publier des seuils de force, des durées de vie en cycles et des tests sur davantage de tâches. Une adoption dans des mains dextres commerciales supposerait des essais de longue durée en conditions réelles.

RecherchePaper
1 source
LightTact : un capteur tactile-visuel de bout de doigt pour la détection de contact sans déformation
2arXiv cs.RO 

LightTact : un capteur tactile-visuel de bout de doigt pour la détection de contact sans déformation

LightTact est un capteur tactile-visuel de bout de doigt conçu pour détecter les contacts sans déformation mécanique de surface. Là où les capteurs conventionnels (GelSight du MIT, DIGIT de Meta, Tactip) s'appuient sur la déformation d'un élastomère pour inférer un contact, LightTact exploite une configuration optique à blocage de lumière ambiante: seule la lumière diffusée aux points de véritables contacts traverse le système, laissant les pixels non-contactés à une valeur de gris moyenne inférieure à 3 sur 255. Les images brutes produites sont à fort contraste, chaque zone de contact préservant l'apparence naturelle de la surface touchée. La robustesse annoncée couvre les variations de propriétés matérielles, de force de contact, d'apparence de surface et d'éclairage ambiant, sans calibration spécifique au matériau. Ce verrou adresse un angle mort structurant de la manipulation robotique fine: les contacts dits "légers" avec des liquides, semi-liquides ou matériaux ultra-mous ne génèrent pas de déformation macroscopique et restent donc invisibles pour la plupart des capteurs actuels. LightTact démontre des comportements jusque-là difficiles à automatiser: étalement d'eau sur une surface, prélèvement de crème cosmétique, interaction avec des films minces souples. Pour les intégrateurs ciblant la cosmétique, l'agroalimentaire ou la manutention de produits fragiles, c'est un point de blocage technique levé. Fait significatif: les images visuelles et tactiles, spatialement alignées, sont directement interprétables par des vision-language models (VLMs), ce qui abaisse la barrière d'intégration avec les pipelines d'IA multimodaux sans couche de traitement intermédiaire dédiée. Le travail est publié en préprint sur arXiv (référence 2512.20591, troisième version), ce qui le situe au stade de la recherche académique: aucun produit commercial ni déploiement industriel n'est annoncé. Dans le panorama des capteurs tactiles visuels, LightTact occupe une niche distincte de celle de GelSight et ses dérivés, ou des solutions capacitives comme Xela Robotics, qui ciblent des régimes de contact avec déformation mesurable. Du côté européen, Pollen Robotics ou Wandercraft ne proposent pas de capteur tactile propre à ce niveau de spécificité. Les prochaines étapes logiques incluent une validation en boucle fermée sur plateforme robotique réelle et un test de durabilité de la surface optique face à des matériaux agressifs en usage répété.

UEAucun impact direct documenté à ce stade de préprint, mais les acteurs FR/EU ciblant la manipulation fine (Pollen Robotics, intégrateurs agroalimentaire/cosmétique) pourraient bénéficier de cette approche pour des contacts légers avec matériaux mous ou liquides.

RecherchePaper
1 source
Manipulation Tactile et Visuelle Centrée sur le Contact pour la Manipulation du Bras Complet
3arXiv cs.RO 

Manipulation Tactile et Visuelle Centrée sur le Contact pour la Manipulation du Bras Complet

Des chercheurs du laboratoire EMPRISE de l'université Cornell présentent TACTIC (Tactile and Vision Conditioned Contact-Centric Control), un contrôleur pour la manipulation "bras entier", où le robot touche l'environnement avec plusieurs segments de son bras et non plus seulement sa pince. Décrit dans un preprint arXiv (2607.09218), le système combine images RGB-D, capteurs tactiles distribués et une carte de proximité 2D compacte pour prédire comment les contacts se forment, glissent ou se rompent au fil du mouvement. Un modèle de dynamique appris est couplé aux jacobiennes de contact pour simuler à l'avance forces d'interaction et configurations futures, et alimente un planificateur prédictif (MPC) à échantillonnage dont les trajectoires candidates sont orientées vers des directions qui modulent les forces plutôt que de les subir. En simulation, TACTIC dépasse les méthodes de référence à base de modèle et les approches purement apprises. Sur un bras réel équipé de peau tactile, l'équipe démontre trois tâches multi-contacts : retourner et repositionner un mannequin, et atteindre un objectif dans un labyrinthe 3D dynamique. La manipulation bras entier est un angle mort des pipelines d'apprentissage actuels, taillés pour un contact unique au niveau de la pince. Dès que plusieurs segments touchent l'environnement simultanément, mouvement et forces de contact deviennent étroitement couplés, l'état de contact reste partiellement caché sous occlusion, et les politiques purement apprises se désynchronisent physiquement hors distribution, faute de données sur les configurations multi-contacts. En hybridant apprentissage et modèle physique explicite, TACTIC illustre une tendance de fond en robotique de manipulation : combiner du model-based pour la garantie physique et de l'apprenant pour la perception, plutôt que tout confier à un modèle de bout en bout type VLA. Pour les intégrateurs visant des bras opérant en espace encombré (tri, logistique, désassemblage), c'est un manque réel comblé, la plupart des démonstrateurs actuels évitant soigneusement tout contact hors pince. Le travail émane du laboratoire EMPRISE de Cornell, spécialisé en manipulation riche en contact et perception tactile, et s'inscrit dans une littérature plus large sur le contrôle prédictif informé par le contact, aux côtés de recherches comparables au MIT ou à CMU. Contrairement aux annonces commerciales de robots humanoïdes comme Figure, Optimus ou les modèles VLA de Physical Intelligence et NVIDIA, il s'agit ici d'un résultat académique validé en simulation puis sur un unique bras de laboratoire, pas d'un produit commercialisé. Aucun acteur français ou européen n'est associé à cette publication. Les auteurs mettent en ligne une page projet (emprise.cs.cornell.edu/tactic) sans calendrier annoncé de transfert vers des plateformes commerciales.

RecherchePaper
1 source
FasTac : un capteur tactile courbe multispectral basé sur la vision pour la perception 3D de forme et de force à haute vitesse et haute précision
4arXiv cs.RO 

FasTac : un capteur tactile courbe multispectral basé sur la vision pour la perception 3D de forme et de force à haute vitesse et haute précision

Le laboratoire à l'origine de FasTac présente un capteur tactile visuel courbe conçu pour les doigts de préhenseurs dextres, combinant imagerie photométrique multispectrale et estimation de force par convolution dynamique, le tout embarqué sur un FPGA. Le système capture simultanément plusieurs longueurs d'onde via un seul capteur image pour reconstruire la normale de surface, puis applique une reconstruction de profondeur par équation de Poisson accélérée grâce à un a priori sur les contours de contact. Le module HyperForce, basé sur une convolution dynamique sensible à la position, estime les forces selon trois axes en tenant compte de la réponse mécanique non uniforme des élastomères courbes. Les résultats publiés montrent que l'éclairage proche infrarouge combiné à cet a priori de contour réduit l'erreur moyenne absolue de profondeur de 0,2730 mm à 0,0415 mm. HyperForce atteint des erreurs normalisées de 2,74% pour les forces normales et 2,39% pour les forces de cisaillement. Le portage sur FPGA fait chuter la latence de traitement de bout en bout de 3,26 ms sur GPU à 1,09 ms. Ce résultat s'attaque à un compromis persistant dans les capteurs tactiles à vision : les systèmes existants doivent généralement sacrifier soit la précision de reconstruction 3D, soit la vitesse de traitement, soit l'estimation fiable des forces tangentielles. Une latence sous la milliseconde ouvre la voie à des boucles de rétroaction tactile en temps réel pour la préhension dextre, un enjeu central pour les mains robotiques et les préhenseurs de précision utilisés en assemblage industriel ou en manipulation d'objets fragiles. Pour les intégrateurs, cela représente une brique potentielle pour rapprocher les capteurs tactiles vision des exigences de contrôle en boucle fermée à haute fréquence, jusqu'ici dominées par les capteurs de force résistifs ou capacitifs plus rapides mais moins riches en information géométrique. FasTac s'inscrit dans la lignée des capteurs tactiles à vision de type GelSight ou DIGIT, tout en cherchant à corriger leurs limites de vitesse et de précision combinées sur des surfaces courbes plutôt que planes. Il s'agit à ce stade d'un article de recherche déposé sur arXiv, validé par des expériences de reconstruction multi-objets, de préhension asservie et de mesure vibratoire, sans indication de déploiement industriel ou de partenariat commercial annoncé.

RecherchePaper
1 source