RecherchearXiv cs.RO 24 juillet 2026

ZONDA : navigation vers un objet sans apprentissage préalable avec évitement dynamique en environnements multi-étages

1 source couvre ce sujet·Source originale ↗·

Résumé IASource uniqueImpact UE

Une équipe de recherche présente ZONDA, un nouveau framework de navigation robotique "zero-shot" vers un objet désigné (Object Goal Navigation), conçu pour fonctionner dans des environnements multi-étages et en présence de piétons en mouvement. Le système repose sur trois composants : une planification heuristique multi-étages qui exploite des cartes de différences de hauteur pour permettre à un robot de gravir des escaliers et de changer d'étage sans contrôleur spécifique à la plateforme ; une vérification multi-vues de la cible, qui croise des observations à différentes échelles avec un modèle vision-langage (VLM) pour réduire les faux positifs de détection ; et un module d'évitement dynamique des piétons, qui suit et anticipe leurs déplacements pour générer des trajectoires préventives. Le système a été testé sur un robot bipède TITA du fabricant chinois Direct Drive Tech, ainsi que sur des simulations extensives utilisant les jeux de données HM3D et MP3D, deux benchmarks de référence pour la navigation en environnement intérieur photoréaliste. Les auteurs annoncent des résultats "significativement améliorés" par rapport aux méthodes existantes, ainsi qu'une robustesse maintenue sur HM3D-DYNA, une variante dynamique du benchmark incluant des agents mobiles.

Cette publication s'attaque à une limite concrète et rarement traitée des systèmes de navigation robotique actuels : la quasi-totalité des méthodes de pointe supposent un environnement statique et confiné à un seul étage, une hypothèse commode en laboratoire mais irréaliste pour un déploiement réel en entrepôt, hôpital ou bâtiment de bureaux à plusieurs niveaux. En combinant franchissement d'escaliers sans apprentissage spécifique au robot et anticipation des piétons, ZONDA vise directement l'écart entre démonstration en simulation et usage industriel, un problème central pour les intégrateurs qui cherchent à déployer des robots mobiles ou humanoïdes au-delà d'un seul plateau. À noter que l'abstract ne fournit pas de chiffres précis de performance (taux de succès, distance parcourue, temps de cycle) permettant de comparer objectivement l'ampleur du gain revendiqué face aux méthodes concurrentes, une réserve à garder en tête avant de considérer le résultat comme acquis.

Le champ de l'Object Goal Navigation s'est largement construit sur des benchmarks comme HM3D et MP3D, où les méthodes récentes intègrent de plus en plus des modèles vision-langage pour améliorer la reconnaissance sémantique des cibles, dans la lignée de travaux comme les architectures VLA utilisées en manipulation robotique. Le choix du robot bipède TITA de Direct Drive Tech comme plateforme de test réel, plutôt qu'un robot à roues plus classique en recherche de navigation, souligne l'ambition de valider l'approche sur une morphologie capable physiquement de franchir des escaliers, condition nécessaire à toute navigation multi-étages. L'article, publié sur arXiv le 24 juillet 2026, ne mentionne pas de partenariat industriel ni de calendrier de déploiement commercial ; il s'agit à ce stade d'une contribution académique, dont la prochaine étape logique serait une validation sur davantage de plateformes robotiques et dans des environnements réels plus variés que le cadre expérimental actuel.

Dans nos dossiers

Manipulation robotique arXiv cs.RO

À lire aussi

1arXiv cs.RO

Hierarchical Fast-Slow ReAct : un agent de navigation vers un objectif sans apprentissage préalable

Publié en août 2026 sur arXiv, ce travail de recherche présente un agent hiérarchique rapide-lent pour la navigation vers un objet cible en zero-shot (ZSON) : un robot doit localiser une catégorie d'objet dans un bâtiment jamais visité. Les méthodes dominantes choisissent la frontière d'exploration par argmax sur une carte de valeur vision-langage, sans conserver les preuves passées. Le système proposé garde ce contrôleur réactif actif à chaque pas, en construisant une mémoire ancrée sur les coordonnées : grille sémantique des pièces et objets confirmés, plus des images-clés bornées, chaque détection filtrée par un VLM avant écriture. Une couche délibérative relit cette mémoire en boucle bornée raisonnement-récupération-action, se déclenche sur des événements structurels, raisonne d'abord en texte et ne rappelle une image qu'en dernier recours, sous plafonds d'appels et repli automatique. Résultat : 68,75% de succès sur HM3D v1 (val) et 47,29% sur MP3D (val), meilleur score zero-shot comparé ; sur 2000 épisodes HM3D, un argmax simple à la place de la délibération coûte 3,40 points de succès (IC 95% [1,70 ; 5,05]), perte que la délibération systématique ne comble pas. Ce résultat contredit l'hypothèse selon laquelle interroger un VLM à intervalle fixe depuis la vue courante suffit, et qu'une mémoire explicite ne vaut pas son coût de calcul. En montrant qu'une mémoire persistante couplée à une délibération sélective bat l'argmax pur et la délibération exhaustive, l'étude donne un argument concret aux intégrateurs de robots mobiles d'intérieur (logistique, inspection, service) arbitrant entre coût des appels VLM et qualité de décision, et confirme la bascule vers des architectures hybrides rapide-lent en IA incarnée. Le travail s'inscrit dans la lignée des méthodes ZSON à carte de valeur vision-langage, dominantes mais sans mémoire longue, et des architectures plus récentes plaçant un VLM directement dans la boucle de décision, jugées coûteuses et rigides. Il s'appuie sur les benchmarks standards HM3D et MP3D, sous simulateur Habitat, pour se comparer aux méthodes zero-shot existantes. Aucun partenaire industriel n'est mentionné : la validation reste en simulation, l'étape suivante logique étant un test sur robot réel.

RecherchePaper

1 source

2arXiv cs.RO

LG-VLN : un cadre de navigation vision-langage sans apprentissage préalable, orchestré par états LangGraph

Une équipe de recherche présente LG-VLN, un framework de navigation vision-langage en environnement continu (VLN-CE), dans un preprint arXiv de septembre 2026 (arXiv:2609.15098v1). Contrairement aux méthodes existantes qui s'appuient sur LiDAR ou cameras panoramiques, LG-VLN navigue en zero-shot a partir d'une seule camera RGB monoculaire, grâce a un réseau de reconstruction 3D qui estime profondeur, pose et nuage de points, a des features visuelles CleanDIFT partagées entre géométrie et sémantique, et a une carte de valeur sémantique combinant similarité visuelle et pertinence image-texte via BLIP-2. Tout le pipeline, de l'analyse de l'instruction a la récupération d'échec, est orchestre par LangGraph sous forme de graphe d'états a transitions conditionnelles. Sur un sous-ensemble fixe de 550 épisodes du split val-unseen de R2R-CE, le système atteint 21,3% de réussite et 12,1% de SPL, le code devant être publie ultérieurement. Ces résultats, modestes compares aux meilleures méthodes VLN-CE qui s'appuient sur des capteurs plus riches, montrent néanmoins qu'une navigation purement monoculaire et zero-shot reste possible dans des scènes 3D inédites, sans reentrainement dédié a l'environnement. Pour les intégrateurs robotiques, l'enjeu est économique: une navigation fiable sans LiDAR ni vues panoramiques allégé le cout matériel des plateformes mobiles. Le choix de LangGraph illustre aussi une tendance plus large, l'importation d'outils d'orchestration issus des agents LLM dans des pipelines robotiques jusque-la gérés par des machines a états codées en dur. Les ablations confirment que le partage de features sémantiques entre géométrie et navigation, renforce par la fusion avec BLIP-2, explique l'essentiel du gain, validant l'hypothèse que l'incohérence spatiale-sémantique freinait les pipelines séparés. La VLN-CE vise a faire suivre a des robots des instructions en langage naturel dans des bâtiments jamais vus, un objectif longtemps freine par des capteurs géométriques couteux ou un entrainement lourd propre a chaque environnement. LG-VLN s'appuie plutôt sur des modules de vision pré-entraines existants, CleanDIFT et BLIP-2. Le travail reste une publication de recherche en navigation, distincte des architectures vision-langage-action déployées sur des robots humanoïdes comme Optimus, Pi-0 ou GR00T N2, sans déploiement industriel ni partenaire commercial annonce. La suite dépendra de la publication du code, promise mais non datée, pour vérifier les scores au-delà des 550 épisodes testes.

RecherchePaper

1 source

3arXiv cs.RO

Apprentissage de représentations de sûreté par atteignabilité pour la navigation robotique en temps réel en environnements inconnus et dynamiques

Des chercheurs ont publié sur arXiv (version 2 de l'article 2610.16522) une thèse de doctorat qui apprend hors ligne des représentations de sécurité fondées sur l'analyse d'accessibilité de Hamilton-Jacobi (HJ), afin de les exploiter en temps réel pour la navigation de robots en environnement inconnu et dynamique. La fonction de valeur HJ sépare les états qui admettent une continuation sûre de ceux où la collision est inévitable, en tenant compte de la vitesse, de l'orientation et du mouvement des obstacles. Son calcul en ligne pour chaque nouvel environnement reste trop coûteux, d'où l'entraînement de réseaux de neurones implicites sur des solutions précalculées. Cinq méthodes sont proposées. Les deux premières emploient la fonction apprise comme contrainte terminale dans une commande prédictive (MPC), pour des environnements locaux statiques puis pour des obstacles au mouvement prédit. Les deux suivantes l'utilisent comme candidate de fonction barrière dans des filtres de sécurité à fonctions barrières de contrôle (CBF), pour des environnements statiques, puis pour un nombre variable d'obstacles mobiles grâce à des barrières par paires en coordonnées relatives. La cinquième méthode remplace le solveur hors ligne sur grille et atteint des systèmes jusqu'à 13 états. L'astuce centrale tient à la structure du problème : la fonction de valeur ne dépasse jamais la contrainte géométrique, elle équivaut donc à une contrainte calculée directement, comme une distance signée, moins une correction de dynamique positive. N'apprendre que cette correction garantit que les obstacles représentés restent hors de l'ensemble sûr prédit, malgré les erreurs d'approximation. Pour la cinquième méthode, avec des dynamiques affines en la commande et des entrées polytopiques, l'hamiltonien HJ est maximisé en un sommet. Une recherche arborescente parallélisable sur les entrées aux sommets génère alors les étiquettes d'entraînement, associées à une perte issue de l'inégalité variationnelle HJ. L'enjeu pour les intégrateurs et ingénieurs est concret : la vérification géométrique de collision ne suffit pas pour des robots rapides ou face à des obstacles mobiles, et les méthodes d'accessibilité classiques butaient sur la malédiction de la dimension, limitant les quatre premières approches à des modèles de faible dimension. Passer à 13 états ouvre la voie à des drones et à des robots plus complexes. Les auteurs rapportent, en simulation et sur matériel terrestre et aérien, une meilleure évitement que des références géométriques ou conçues à la main, surtout à horizon court et face à des obstacles mobiles. Il s'agit toutefois de résultats académiques, sans chiffres publics dans le résumé, ni déploiement industriel ni comparaison chiffrée détaillée. Ce travail s'inscrit dans la convergence entre analyse d'accessibilité HJ, longtemps réservée aux petits systèmes, et apprentissage de certificats de sécurité, aux côtés des CBF neuronales et des approches de filtres de sécurité pour la robotique mobile et aérienne. Les prochaines étapes naturelles sont l'extension à des dynamiques plus riches, la validation sur des plateformes réelles plus variées et l'intégration à des piles de navigation embarquées. Aucune échéance de transfert industriel n'est annoncée.

UEPas d\'impact direct sur la France/UE

RecherchePaper

1 source

4arXiv cs.RO

Perception multi-capteurs sensible à la mémoire pour une navigation efficace et sûre en environnement dynamique

Un article déposé sur arXiv le 28 septembre 2026 sous la référence 2609.30495 (soumission de type "new", donc non encore relue par les pairs) présente un cadre de navigation autonome dit "memory-aware multi-sensor perception". Le système fusionne des données LiDAR et RGB, construit en ligne une représentation par champ de distance de l'environnement, et pilote le robot via un contrôleur nommé MCBF-QP (Modulated Control Barrier Function Quadratic Program), adapté par étapes selon le contexte local. Plutôt que de se limiter à une carte préexistante ou à des observations à court horizon comme le font la plupart des méthodes actuelles, le robot conserve en mémoire la structure statique déjà vue (murs, mobilier fixe) tout en suivant séparément les obstacles mobiles. Les auteurs rapportent des essais en environnements intérieurs et extérieurs complexes, avec une navigation plus efficace et un meilleur taux d'atteinte d'objectif, mais sans chiffres précis de taux de succès, de temps de trajet ou de comparaison numérique face aux méthodes concurrentes, une réserve à garder en tête tant que le papier n'est pas évalué par les pairs. Pour l'industrie des robots mobiles autonomes et de la robotique de service, l'enjeu dépasse l'exercice académique: la plupart des systèmes déployés en entrepôt ou en environnement humain s'appuient soit sur une carte figée mise à jour périodiquement, soit sur une perception locale qui "oublie" ce qui sort du champ des capteurs, ce qui pénalise l'efficacité dans les couloirs étroits ou les zones encombrées. Donner au robot une mémoire persistante de la géométrie statique, couplée à un contrôleur de sécurité qui module ses contraintes selon le contexte, s'attaque à un point de friction connu entre démonstration en laboratoire et déploiement réel: rester fluide et sûr quand des personnes ou des chariots traversent la trajectoire. Le travail s'inscrit dans une lignée qui combine cartographie en ligne et contrôle par barrières de sécurité (Control Barrier Functions), une famille de techniques de plus en plus utilisée en navigation robotique face aux limites des approches purement réactives. Aucune entreprise, aucun laboratoire ni plateforme commerciale n'est cité dans le résumé fourni, ce qui situe cette contribution au stade de la recherche amont plutôt que du produit ou du pilote industriel. Ni code ni jeu de données n'est annoncé, et la suite logique serait une validation quantitative comparative puis un test sur une flotte réelle en conditions de production.

RecherchePaper

1 source