
Pas un accident : exploiter l'insuffisance des filtres de sécurité des robots humanoïdes
Des chercheurs montrent, dans un article publié sur arXiv (2610.31923), que les filtres de sécurité embarqués sur les robots humanoïdes peuvent eux-mêmes devenir un vecteur d'attaque. Ces filtres sont conçus pour garantir mathématiquement que les commandes générées n'entraînent aucune collision. L'équipe établit que cette garantie n'est valable que si les paramètres de sécurité sont correctement configurés, or la bonne configuration dépend de la tâche et de l'environnement, et aucune méthode générale ne permet de la déterminer pour des déploiements variés. Les auteurs décrivent des attaques par insertion d'objectif (goal insertion), exécutables par un simple utilisateur via des interactions normales, sans privilège ni capacité supplémentaire. Ils présentent SIREN, un outil automatisé qui identifie, pour une tâche et un environnement donnés, les objectifs à insérer pour provoquer une violation de sécurité. Sur le jeu de données SPARK, SIREN trouve des attaques dans tous les scénarios vulnérables, soit trois fois plus qu'une approche de référence. Les chercheurs affirment aussi avoir généré des attaques provoquant une collision sur un humanoïde réel pendant l'exécution de tâches, sans préciser dans le résumé le modèle de robot utilisé ni le nombre d'essais.
Le point central est que la garantie formelle d'un filtre de sécurité ne vaut que sous ses hypothèses de paramétrage, et que ces hypothèses ne tiennent pas forcément après le déploiement. Pour les intégrateurs et les responsables de sites qui envisagent des humanoïdes dans des entrepôts, des hôpitaux ou des domiciles, cela déplace la question de la certification : un filtre validé en laboratoire ou livré en configuration d'usine ne prouve pas la sécurité dans un environnement donné. Le travail ajoute aussi une menace peu discutée, celle d'un utilisateur ordinaire, ou d'un acteur malveillant disposant d'un accès normal, capable de détourner le robot en lui assignant un objectif choisi. Il nuance enfin l'idée que superposer un filtre à une politique apprise, par exemple un modèle vision-langage-action, suffit à régler le risque de collision. Il faut toutefois rester prudent : il s'agit d'un préprint non évalué par les pairs, dont les résultats reposent sur un jeu de données de simulation et une démonstration matérielle dont les détails restent à examiner.
Ce travail s'inscrit dans l'essor des filtres de sécurité à base de fonctions de barrière de contrôle et de méthodes apparentées, devenus une brique courante pour encadrer les politiques de mouvement des robots à mesure que les humanoïdes quittent les laboratoires pour des essais en milieu humain. Il intervient alors que plusieurs acteurs, dont Figure, Tesla, Agility Robotics ou Apptronik, annoncent des pilotes en logistique et en usine, et que les normes de sécurité pour robots mobiles à jambes restent encore en cours de définition. Les suites logiques sont une évaluation par les pairs, des tests sur davantage de plateformes, et des méthodes de calibrage ou de vérification continue des paramètres en conditions réelles. Pour les fabricants, cela implique d'intégrer ce type d'analyse adversariale, que SIREN illustre, dans leurs procédures de validation avant tout déploiement.
Dans nos dossiers




