RRTrack : suivi robuste et récupérable de la pose 6D d'objets pour scènes dynamiques

Des chercheurs ont présenté RRTrack, un système de suivi de pose 6D d'objets conçu pour les scènes robotiques dynamiques, dans un article publié sur arXiv fin juillet 2026. L'architecture repose sur une boucle fermée à deux niveaux : une branche 2D assure la localisation continue de la cible via un module de segmentation vidéo d'objets basé sur la mémoire (VOS), tandis qu'une branche 6D vérifie la cohérence géométrique avant chaque mise à jour de cette mémoire. Pour récupérer une cible perdue après une occlusion complète, les auteurs ajoutent un module d'appariement de templates à double banque, fondé sur DINOv2, qui combine des modèles synthétiques générés hors ligne avec des ancres d'observation captées en temps réel. Un nouveau benchmark RGB-D synthétique, couvrant trois scénarios robotiques à mouvement rapide et occlusion totale, a été introduit pour évaluer la méthode. Sur ce benchmark, RRTrack améliore le score ADD-S AR de 66,3 % et l'AUC ADD-S de 65,7 % par rapport à FoundationPose, tout en tournant à 55,2 images par seconde. Des essais en conditions réelles, avec capteurs bruités, confirment la robustesse du système.

Ce travail s'attaque à une limite concrète des pipelines de manipulation robotique : les estimateurs de pose image par image sont précis mais trop lourds pour du temps réel, alors que les trackers existants décrochent dès qu'un objet disparaît brièvement du champ de vision, par exemple lors d'une prise rapide ou d'une occlusion par un bras ou un autre objet. Un suivi capable de récupérer automatiquement la cible sans relancer une détection complète réduit la latence et la fragilité des boucles de perception-action, un point critique pour les intégrateurs qui déploient des bras ou des AMR dans des environnements encombrés où la visibilité continue n'est jamais garantie.

FoundationPose, utilisé ici comme référence de comparaison, s'est imposé ces deux dernières années comme une base solide pour l'estimation de pose 6D généralisable sans réentraînement par objet, mais reste coûteux à faire tourner en continu. RRTrack se positionne comme une alternative plus légère et récupérable, taillée pour la robotique embarquée. Le code et le benchmark sont publiés sur GitHub, ce qui laisse la porte ouverte à une adoption rapide par la communauté recherche avant d'éventuels transferts vers des systèmes industriels.