RecherchearXiv cs.RO 30 juin 2026

Détection multi-classe d'humains et d'objets sur des bras robotiques par capteurs proprioceptifs

1 source couvre ce sujet·Source originale ↗·

Résumé IASource uniqueImpact UE

Une équipe de recherche a publié sur arXiv (référence 2508.02425) une étude portant sur la détection multi-classe de contacts en collaboration physique humain-robot (pHRC), testée sur le manipulateur Franka Emika Panda, l'un des cobots de référence pour la recherche académique. L'objectif : identifier en temps réel si le robot entre en contact avec un humain, un objet mou ou un objet dur, en utilisant uniquement la perception proprioceptive (couples articulaires, positions, vitesses) sans aucun capteur visuel externe. Un dataset dédié a été constitué sur ce bras à 7 degrés de liberté, puis trois architectures de réseaux de neurones ont été entraînées et comparées : LSTM, GRU et Transformers. Le meilleur modèle atteint 91,11 % de précision en test temps réel, avec une approche de prétraitement par fenêtre glissante identifiée comme optimale pour cette analyse de séries temporelles.

Ce résultat marque une progression significative par rapport aux classifieurs binaires (humain/non-humain ou mou/dur) qui constituaient jusqu'ici l'état de l'art dans ce domaine. Passer à trois classes augmente la granularité de l'analyse de contact, ce qui est directement utile pour des applications industrielles : un robot qui distingue un opérateur d'un outil ou d'une pièce peut adapter sa réponse (arrêt d'urgence, réduction de vitesse, reconfiguration de trajectoire) de façon bien plus fine. L'approche purement proprioceptive est également un avantage pratique majeur : elle ne nécessite ni caméra supplémentaire ni calibration visuelle, ce qui simplifie l'intégration sur des cellules robotisées existantes. La précision de 91 % en conditions temps réel reste toutefois à valider sur des scénarios industriels variés au-delà du protocole de collecte de données décrit.

Le Franka Emika Panda, désormais commercialisé sous la marque Franka Robotics après le rachat par Agile Robots, est une plateforme quasi-standard pour la recherche en pHRC grâce à son contrôle en couple natif. Ce travail s'inscrit dans un axe de recherche actif qui cherche à rivaliser avec les approches par vision (détection de contact par caméra RGB-D ou tactile) en misant sur la richesse des signaux internes du robot. Les concurrents directs incluent des travaux utilisant des peaux tactiles (BioTac, iCub) ou des réseaux de neurones appliqués aux données de force/couple de robots Universal Robots ou Kuka. La prochaine étape naturelle serait l'extension à des environnements moins contrôlés et à des robots à payload plus élevé pour valider le transfert sim-to-real de ces modèles.

Impact France/UE

Franka Robotics, entreprise européenne éditrice du Panda (plateforme quasi-standard des labos EU), est l'hôte direct de ces travaux, ce qui facilite un transfert technologique vers les intégrateurs et chercheurs européens en sécurité cobot sans capteurs additionnels.

Dans nos dossiers

arXiv cs.RO

À lire aussi

1arXiv cs.RO

CoPRE : améliorer la sensibilité de détection proprioceptive des contacts pour bras robotiques à faible coût

Une équipe de recherche présente CoPRE (Contact-free Proprioceptive Response Estimation), une méthode qui améliore la détection de contacts faibles sur des bras robotiques bon marché dépourvus de capteurs de force ou tactiles dédiés, en s'appuyant uniquement sur la proprioception. L'approche estime les couples articulaires attendus en mouvement libre de contact à partir de l'historique d'état proprioceptif et de la commande de mouvement, écarte les observations récentes susceptibles de déjà refléter un contact, puis calcule le résidu entre couples attendus et observés avant de le convertir en score de contact via un jacobien pondéré par le bruit. Testée sur un bras ARX Arm et sur l'humanoïde Unitree G1, la méthode atteint 74,1% et 82,2% de rappel sur les essais de contact, contre 0%/0% sur ARX et 16,3%/42,2% sur G1 pour les méthodes de référence (prédiction de couple apprise et dynamique inverse analytique). Elle détecte 90% des poussées à partir de 3,5 N sur ARX et 5,5 N sur G1. Les auteurs l'intègrent aussi dans une planification de manipulation en espace de croyance pour du placement d'objets et de l'insertion de livres avec évitement d'obstacles, où le contact détecté met à jour la croyance spatiale du robot et lui permet de se rétracter, ajuster sa pose et réessayer. L'enjeu est concret pour les intégrateurs qui déploient des bras à bas coût sans instrumentation force/tactile: ces plateformes ne peuvent aujourd'hui détecter que des contacts francs, faute de signal exploitable dans le bruit proprioceptif. L'écart de performance avec les méthodes existantes, quasi nulles sur ARX, montre que les approches classiques ne se transposent pas au matériel économique, contrairement à ce que suggéraient leurs résultats sur bras industriels instrumentés. Si les chiffres se confirment au-delà des essais contrôlés du papier, cela ouvrirait la voie à une manipulation plus sûre et plus adaptative sans surcoût matériel, un argument direct pour la robotique de manipulation low-cost et les humanoïdes commerciaux comme le G1 de Unitree. Le travail reste un article de recherche déposé sur arXiv (2609.27381, catégorie "new"), sans annonce de produit ni de déploiement industriel. Il se positionne explicitement contre deux familles de méthodes existantes, la prédiction de couple apprise et la dynamique inverse analytique, dont il documente l'échec quasi total sur matériel bon marché. Aucun partenaire ni pilote industriel n'est mentionné, et le site dédié (copre-arm.github.io) sert de vitrine au projet plutôt qu'à un calendrier de commercialisation. Aucun acteur français ou européen n'apparaît dans cette publication.

RecherchePaper

1 source

2arXiv cs.RO

Réseau de capteurs tactiles pour la détection multi-phalange dans les mains humanoïdes

Des chercheurs décrivent, dans un article publié sur arXiv (référence 2609.30506v1), un capteur tactile bas coût destiné à équiper toute la longueur des doigts d'une main humanoïde, et non plus seulement leur extrémité. Fabriqué à partir de Velostat et de ruban adhésif conducteur, deux matériaux peu coûteux, il place sept points de contact sur la pulpe du doigt, sous forme d'une matrice 2x3 répartie sur les faces avant, gauche et droite plus un point à l'extrémité, tandis que les phalanges proximale et médiane reçoivent chacune une simple ligne de contact frontale. Après avoir mesuré l'hystérésis et le temps de récupération du capteur par des cycles répétés de pression et relâchement, les auteurs ont testé une structure de contact compliante imprimée en 3D, dotée d'un espace et d'une bosse inspirés de travaux antérieurs, qui réduit ce temps de récupération de 74% par rapport à un contact plat de référence. Le capteur distingue ensuite des géométries de contact différentes, surface plane, arête ou coin, au niveau de la pulpe, et détecte simultanément le contact sur les trois phalanges lors d'une prise en main. La vision et la proprioception seules ne suffisent pas à informer une main humanoïde sur la qualité d'une prise, en particulier parce que les doigts masquent souvent la caméra pendant la manipulation ; combler ce vide par du tactile réparti sur toute la longueur du doigt, plutôt qu'au seul bout, s'attaque à un angle mort concret pour les intégrateurs qui conçoivent des mains à cinq doigts pour des humanoïdes commerciaux. L'intérêt de l'approche tient surtout à son faible coût de fabrication, à l'opposé des capteurs tactiles capacitifs ou optiques plus performants mais coûteux employés dans certains laboratoires. Le travail reste cependant un prototype de recherche : une hystérésis résiduelle, c'est-à-dire un capteur qui ne revient pas immédiatement à zéro après une pression, limite pour l'instant sa fiabilité en usage continu, un défaut que les auteurs reconnaissent eux-mêmes et qu'ils proposent de corriger par du traitement logiciel plutôt que par une nouvelle itération matérielle. Le problème visé, doter les mains robotiques d'un sens du toucher réparti et non plus cantonné à l'extrémité des doigts, reste une limite reconnue dans la course aux humanoïdes, où la plupart des mains en développement ou commercialisées misent encore largement sur la vision et sur des capteurs de force concentrés au poignet ou à la pulpe. La structure de contact compliante testée ici s'inspire explicitement de conceptions antérieures, signe que le sujet avance par itérations progressives plutôt que par percée isolée. Les auteurs annoncent vouloir explorer, comme prochaine étape, une compensation logicielle de l'hystérésis, sans toutefois donner de calendrier ni mentionner de partenaire industriel pour une intégration future.

RecherchePaper

1 source

3arXiv cs.RO

EM-Fall : détection de chutes jour et nuit par ondes millimétriques embarquées sur robots humanoïdes

Des chercheurs ont publié sur arXiv (réf. 2606.11109, juin 2026) un framework baptisé EM-Fall, qui intègre un capteur radar millimétrique (mmWave) directement sur un robot humanoïde mobile pour détecter les chutes de personnes âgées en environnement résidentiel. Contrairement aux installations fixes, le robot se déplace activement pour maintenir la ligne de vue sur la cible, même en cas d'occultation partielle ou de transition entre pièces. Le pipeline de traitement associe une perception centrée sur le corps humain à une modélisation temporelle légère (lightweight temporal modeling) qui analyse l'évolution du mouvement avant, pendant et après la chute, et filtre les interférences classiques des environnements domestiques comme le mouvement d'animaux de compagnie ou les artéfacts de multipath radar. L'évaluation a porté sur huit environnements intérieurs réels avec quatre participants, et les auteurs ont constitué un dataset in-home dédié à la détection de chutes par mmWave. Le modèle de robot utilisé n'est pas précisé dans l'abstract, et aucune métrique chiffrée (précision, rappel, F1) n'y figure, ce qui limite l'interprétation des résultats sans accès au papier complet. L'intérêt de l'approche tient à deux verrous résolus simultanément : la détection radar mmWave fonctionne de nuit comme de jour et n'exige pas le port d'un dispositif par l'utilisateur, là où les wearables souffrent d'une faible compliance chez les personnes âgées et où les caméras sont mises en défaut par l'occultation ou les faibles luminosités. La mobilité du robot répond quant à elle à la limite fondamentale des capteurs fixes, qui nécessitent une densité d'installation élevée pour couvrir un appartement entier. Pour un intégrateur de solutions de maintien à domicile ou un COO de résidence senior, c'est la combinaison des deux qui crée la rupture : un seul noeud de sensing mobile remplace potentiellement un réseau de capteurs statiques. Le secteur du fall detection est déjà adressé par des solutions distinctes : Vayyar Care et Amazon Halo Rise utilisent du mmWave fixe, tandis que des prestataires comme Alarm.com ou Apple (Watch Fall Detection) misent sur le wearable. La piste du robot mobile comme plateforme de sensing "embodied" est moins explorée commercialement, bien que des laboratoires comme le MIT CSAIL et l'Université Carnegie Mellon aient publié des travaux analogues sur la perception radar mobile. Ce papier reste à ce stade une preuve de concept académique sans annonce de déploiement ou partenariat industriel, et sa portée réelle dépendra de la publication des métriques complètes et d'une validation à plus grande échelle.

RecherchePaper

1 source

4arXiv cs.RO

SlipSense : détection du glissement en temps réel pour robots à pattes par capteurs multimodaux

Des chercheurs ont publié SlipSense, un système de détection de glissement en ligne pour robots à pattes, présenté le 24 juin 2026 sur arXiv (2606.24350). Le cadre repose sur un pied sensorisé léger et personnalisé monté sur un quadrupède Unitree Go1, couplé à un modèle LSTM qui infère les forces de réaction au sol en temps réel. Le système détecte les glissements en phase initiale -- avant toute instabilité irréversible -- avec un déplacement moyen de 24,1 ± 6,4 mm, pour une précision globale de 85,9 %. Comparé à la baseline cinématique standard (vitesse du pied estimée par odométrie d'état), SlipSense offre une résolution de détection 3,3 fois plus fine et une amélioration relative de 24 % en précision. Les tests ont été réalisés sur terrains glissants en mode aveugle, c'est-à-dire sans caméra ni information extéroceptive. L'intérêt opérationnel est clair : les méthodes proprioceptives classiques ratent les micro-glissements précoces parce qu'elles mesurent des effets cinématiques qui n'apparaissent qu'une fois le glissement déjà engagé. SlipSense anticipe ce seuil en exploitant directement les forces d'interaction sol-pied, ce qui ouvre la voie à une adaptation de démarche en temps réel -- ajustement des contraintes du contrôleur, estimation du coefficient de friction local, modification de la posture avant la chute. Pour les intégrateurs qui déploient des quadrupèdes sur sols industriels humides ou extérieurs enneigés, c'est un signal précurseur exploitable là où les encodeurs seuls échouent. Le Unitree Go1 est l'un des quadrupèdes les plus accessibles du marché, ce qui confère à cette publication une portée pratique au-delà du laboratoire. Les approches concurrentes en détection de glissement s'appuient majoritairement sur des IMU, des modèles de contact analytiques ou des réseaux entraînés sur simulation -- le sim-to-real restant un obstacle connu. SlipSense fait le pari opposé : capteur physique dédié et entraînement sur données réelles. Les auteurs positionnent explicitement ces travaux comme fondation pour des contrôleurs adaptatifs force-aware à venir, avec comme prochaine étape naturelle l'estimation en ligne de la friction et l'intégration dans une boucle de commande locomotion complète.

RecherchePaper

1 source