Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
RecherchearXiv cs.RO 

Navi-Agent : agent de navigation monoculaire sans localisation

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Un article publié sur arXiv (2609.20388) présente Navi-Agent, un agent de navigation zero-shot pour la Vision-Language Navigation in Continuous Environments (VLN-CE), où un robot doit suivre des instructions en langage naturel dans un environnement inconnu, sans carte préétablie. Face aux systèmes classiques qui s'appuient sur une localisation géométrique ou des coordonnées, et aux approches récentes sans profondeur ni coordonnées globales mais incapables de garder une mémoire spatiale fiable, Navi-Agent construit un état spatial sans coordonnées à partir d'une seule caméra et de l'historique des déplacements exécutés, organisé en topologie où les nœuds sont des lieux visuels et les arêtes des transitions de mouvement. En boucle fermée, il découpe une instruction en sous-objectifs, navigue localement par vision, puis vérifie les lieux visités via cette topologie pour s'auto-localiser, suivre sa progression et se rétablir par revisite visuelle en cas d'erreur. Les auteurs l'évaluent sur un benchmark VLN-CE zero-shot et sur des plateformes robotiques réelles.

L'enjeu pour les intégrateurs de robotique est concret: le système fonctionne avec une seule caméra RGB, sans capteur de profondeur ni odométrie globale, ce qui allège le coût matériel et la dépendance à un SLAM classique en environnement inconnu. Il répond à un point faible connu des architectures dites geometry-free, qui abandonnent les coordonnées mais perdent la capacité à confirmer qu'un lieu a déjà été visité ou à se rétablir après une erreur de trajectoire. Les auteurs revendiquent l'état de l'art parmi les méthodes sans contrainte géométrique et une compétitivité avec les approches à localisation géométrique classique, mais le résumé ne détaille ni taux de réussite ni conditions des essais réels, ce qui invite à la prudence sur la portée de cette comparaison.

Ce travail s'inscrit dans la recherche active en VLN-CE, qui vise à faire suivre des instructions naturelles à un agent dans un espace 3D continu plutôt qu'un graphe discret préconstruit. Il se positionne contre les méthodes à coordonnées globales, précises mais coûteuses en capteurs, et contre les approches geometry-free qui n'ont pas résolu la persistance spatiale. Classé comme nouvelle soumission arXiv, le papier ne cite ni entreprise ni laboratoire affilié, ni date de publication de code.

Dans nos dossiers

arXiv cs.RO

À lire aussi

Navigation topologique par macro-actions sous localisation bruitée par apprentissage par renforcement
1arXiv cs.RO 

Navigation topologique par macro-actions sous localisation bruitée par apprentissage par renforcement

Des chercheurs décrivent dans un article arXiv (2608.23055v1) un agent de navigation capable d'évoluer dans des appartements 3D photoréalistes de grande taille en utilisant uniquement l'apprentissage par renforcement applique aux pixels bruts de la camera, sans accès a la position réelle du robot. L'agent doit atteindre plusieurs objets cibles en séquence, leurs positions changeant a chaque épisode, ce qui l'oblige a explorer l'environnement pour les localiser. Le système s'appuie sur un contrôleur topologique centre sur les objets, développe précédemment par la même équipe, qui utilisait jusqu'ici la position exacte de l'agent et les détections d'objets fournies directement par le simulateur. Dans cette nouvelle version, cette position vérité terrain est remplacée par une estimation embarquée: pour chaque objet, une banque de descripteurs visuels ORB permet, lorsque l'objet est revu, d'obtenir une mesure de position approximative, fusionnée avec un modèle de mouvement via un filtre de Kalman étendu minimal. Les tests sont menés dans le simulateur photoréaliste Habitat, avec des mouvements exécutés bruites pour se rapprocher des conditions d'un robot réel. Ce résultat contredit une hypothèse répandue dans la communauté robotique, selon laquelle la navigation par RL pur, a partir de pixels bruts, dans de grands environnements photoréalistes, serait impraticable. L'astuce technique clé tient au fait que l'estimation de position dérivé avec le temps, mais l'agent et les objets proches dérivent ensemble: une cohérence locale de la position suffit donc pour suivre chaque segment court du graphe topologique puis s'aligner visuellement sur la cible finale. Cette approche permet de remplacer un système SLAM complet, gourmand en calcul, par un modèle beaucoup plus léger, ce qui intéressé directement les intégrateurs et concepteurs de robots mobiles cherchant a réduire le cout de calcul embarque. Elle rappelle aussi, selon les auteurs, le fonctionnement de la navigation biologique, qui repose sur des repères locaux successifs plutôt que sur une carte globale précise, une piste alternative aux pipelines de localisation lourds pour les robots opérant en environnement non structure. Ce travail prolonge directement les recherches antérieures des mêmes auteurs sur un contrôleur de navigation topologique centre sur les objets, qui reposait jusqu'alors sur des informations privilégiées issues du simulateur, position exacte et détections d'objets parfaites. Il s'inscrit dans un courant de recherche en navigation robotique visuelle, en concurrence avec les approches fondées sur le SLAM classique ou sur des modèles vision-langage-action de bout en bout entraines a grande échelle. A ce stade, les expériences restent confinées au simulateur Habitat, sans validation sur robot physique ni chiffres de performance détaillés au-delà de la réussite des taches rapportée par les auteurs. La suite logique, non précisée dans l'article, serait un transfert vers un robot réel pour vérifier si la cohérence locale de la position suffit également face au bruit des capteurs et des actionneurs physiques.

RecherchePaper
1 source
Décision de navigation topologique pour la localisation et la cartographie multi-session
2arXiv cs.RO 

Décision de navigation topologique pour la localisation et la cartographie multi-session

Des chercheurs publient sur arXiv (référence 2602.17226, version 2 révisée) un nouveau cadre pour la cartographie et la localisation multi-session en robotique autonome, un problème central pour les véhicules autonomes, la topographie et la robotique d'entrepôt ou domestique. Le système repose sur une décision structurelle: plutôt que de relancer systématiquement un SLAM complet a chaque nouvelle visite d'un lieu puis de recoller les cartes obtenues a posteriori, méthode couteuse et source d'erreurs, les auteurs analysent directement la topologie du graphe de poses joint. Ils utilisent des métriques de connectivité spectrale pour repérer les zones déconnectées ou faiblement contraintes de ce graphe, et ne déclenchent une nouvelle cartographie ou une fermeture de boucle que lorsque cette structure révèle un manque de support. La carte et le graphe résultants sont ensuite fusionnes dans le modèle existant, ce qui réduit l'erreur accumulée et améliore la cohérence globale sans remaniement redondant. La méthode a été validée sur des séquences de jeux de données se recouvrant partiellement, puis testée dans un environnement réel de type mine souterraine. Ce travail s'attaque a un angle mort fréquent des pipelines SLAM commerciaux: la plupart des systèmes traitent chaque session d'exploration indépendamment puis tentent de fusionner les cartes après coup, une approche qui échoue souvent dans des environnements répétitifs ou peu textures, un scenario courant en mine, en entrepôt ou sur site industriel. En déplaçant la décision de recartographier vers une analyse topologique explicite plutôt qu'une simple heuristique de correspondance, l'approche vise des cycles de navigation plus courts et moins de dérivé cumulée pour les flottes de robots ou véhicules qui reviennent régulièrement sur les mêmes zones, un enjeu direct pour les intégrateurs d'AMR en logistique et les opérateurs de sites industriels cherchant a réduire le temps d'immobilisation lie au recalibrage cartographique. Elle interroge aussi l'hypothèse répandue selon laquelle une fusion de cartes post-hoc suffit a garantir une localisation fiable sur le long terme. La publication s'inscrit dans la continuité des travaux sur le SLAM multi-session et la localisation basée sur carte, un domaine actif en robotique mobile ou la gestion de la redondance entre sessions reste un point de friction face aux méthodes classiques de fermeture de boucle et aux frameworks de pose-graph existants. Le texte ne mentionne aucun partenariat industriel ni déploiement commercial a ce stade: il s'agit d'une contribution de recherche validée expérimentalement, non d'un produit livre. Les auteurs indiquent vouloir étendre les essais a davantage d'environnements réels, en particulier souterrains, la ou la robustesse face aux zones répétitives et faiblement texturées reste la plus critique.

RecherchePaper
1 source
HarnessVLN : unifier la navigation incarnée sans entraînement grâce à un harnais d'agents
3arXiv cs.RO 

HarnessVLN : unifier la navigation incarnée sans entraînement grâce à un harnais d'agents

Des chercheurs ont publié HarnessVLN, un article arXiv (2609.15195, catégorie "new") qui présente un cadre zero-shot, sans entraînement spécifique, pour la navigation robotique incarnée guidée par instructions en langage naturel. Son composant central, l'Agent Harness, orchestre perception, récupération d'information, ancrage spatial, navigation, récupération d'erreurs et terminaison de tâche via une interface outil unifiée : il confronte chaque proposition du planificateur aux preuves spatiales disponibles, à la faisabilité géométrique et à la cohérence des sous-objectifs, avant de réinjecter ce retour structuré dans la décision suivante. Une mémoire d'événements hiérarchique suit la progression de la tâche et l'historique d'exécution, tandis qu'un graphe spatiotemporel persistant conserve les preuves spatiales réutilisables et les annotations d'échec pour vérification ultérieure. Un exécuteur de navigation interchangeable convertit les cibles validées en mouvements concrets, permettant au même protocole de couvrir à la fois le suivi d'instructions et la navigation vers un objet désigné. Sur les benchmarks R2R, RxR, HM3D-v2 et HM3D-OVON, le système atteint des taux de réussite respectifs de 60,8 %, 53,9 %, 76,0 % et 59,3 %, dépassant les meilleurs résultats "sans entraînement" publiés jusqu'ici. Un déploiement sur robot humanoïde en environnement réel est également démontré. L'intérêt tient au problème que le cadre cible directement : les grands modèles multimodaux (MLLM) savent générer des plans d'action plausibles à partir d'images, mais rien ne garantit qu'ils tiennent compte de la géométrie réelle du lieu, de l'avancement effectif de la tâche ou des échecs déjà survenus, ce qui produit des trajectoires incohérentes en pratique. En ajoutant une couche de vérification et de mémoire structurée autour du modèle de langage plutôt qu'en le réentraînant, HarnessVLN suggère que l'architecture de contrôle, davantage que le MLLM sous-jacent, conditionne la robustesse d'un agent de navigation. Le fait qu'un seul protocole couvre suivi d'instructions et navigation vers objet, et se transfère à un humanoïde réel, est un signal pertinent pour les intégrateurs évaluant des piles de navigation zero-shot avant d'investir dans du fine-tuning coûteux en données. Ce travail s'inscrit dans une vague de recherches qui exploitent des MLLM déjà entraînés comme alternative aux politiques VLN classiques, coûteuses à entraîner et peu généralisables hors de leur distribution d'origine. Les benchmarks utilisés, R2R et RxR pour le suivi d'instructions, HM3D-v2 et HM3D-OVON pour la navigation vers objet, sont des références standards du secteur issues des scans Matterport3D et de l'environnement Habitat. La nature exacte de la plateforme humanoïde testée et l'échelle du pilote ne sont pas précisées dans le résumé, ce qui invite à la prudence sur la portée réelle de cette démonstration. La page du projet est accessible à harnessvln.netlify.app.

RecherchePaper
1 source
Mémoire plutôt que cartes : localisation d'objets 3D sans reconstruction
4arXiv cs.RO 

Mémoire plutôt que cartes : localisation d'objets 3D sans reconstruction

Une équipe de chercheurs a publié sur arXiv (référence 2603.20530v2) une méthode de localisation d'objets pour robots mobiles qui abandonne complètement la construction de représentations 3D globales de l'environnement. Baptisée "Memory Over Maps", cette approche remplace les pipelines classiques (nuages de points, grilles de voxels, graphes de scènes) par une mémoire visuelle légère composée uniquement de trames RGB-D géolocalisées (keyframes avec profondeur et position de caméra). À l'exécution d'une requête, le système récupère les vues candidates pertinentes, les reclasse via un modèle vision-langage (VLM), puis reconstruit à la volée une estimation 3D locale de la cible par rétroprojection de profondeur et fusion multi-vues. Les auteurs rapportent, sur leurs benchmarks, une vitesse d'indexation de scène supérieure de plus de deux ordres de grandeur par rapport aux pipelines de reconstruction classiques, avec une empreinte mémoire significativement réduite. Ce résultat remet en question une hypothèse structurante de la robotique d'intérieur : l'idée qu'une carte 3D dense et complète serait un prérequis indispensable à la navigation orientée objets. Si la méthode tient ses promesses à l'échelle, les intégrateurs de robots de service et les développeurs de systèmes de navigation autonome pourraient simplifier drastiquement leurs pipelines de mise en service, en supprimant la phase coûteuse de cartographie initiale. Le fait que le système n'exige aucun entraînement spécifique à la tâche (zero-shot sur les benchmarks testés) renforce son potentiel de généralisation, même si les conditions réelles d'un entrepôt ou d'un hôpital restent plus exigeantes que les environnements de benchmark contrôlés. Il faut noter que les métriques de performance présentées proviennent des propres expériences des auteurs, et que des évaluations indépendantes sur des scènes dynamiques ou encombrées manquent encore. La localisation d'objets pour la navigation robotique est un problème central depuis les travaux fondateurs sur la SLAM (Simultaneous Localization and Mapping). Les approches modernes s'appuient de plus en plus sur des VLM pour raisonner directement sur des observations 2D, dans la lignée des travaux comme ConceptGraphs, OpenScene ou les architectures VLA (Vision-Language-Action) qui cherchent à court-circuiter la représentation explicite du monde. La méthode "Memory Over Maps" s'inscrit dans cette tendance de fond, en compétition directe avec des approches comme EmbodiedScan ou SQA3D. Les prochaines étapes attendues incluent des tests sur des scènes dynamiques, une évaluation sur des plateformes physiques (les résultats actuels sont validés en simulation et sur benchmarks standards), et une intégration avec des architectures de manipulation pour étendre la méthode au-delà de la navigation pure.

RecherchePaper
1 source