RecherchearXiv cs.RO 21 octobre 2026

MARE : un simulateur open source de rover lunaire avec vérité terrain des ombres pour la perception et l'autonomie

1 source couvre ce sujet·Source originale ↗·

Résumé IASource uniqueImpact UE

MARE (Modular Autonomy and Rendering Environment) est une suite de simulation open source dédiée à la perception et à l'autonomie des rovers lunaires, présentée dans un article arXiv publié en octobre 2026. Elle repose sur Unreal Engine 5 et ROS 2 et se compose de trois briques. Terrain Studio génère des modèles numériques d'élévation (DEM) de terrains lunaires cratérisés et rocheux pour construire les scènes. Un projet Unreal Engine dédié héberge deux rovers à modèle physique, équipés de plugins pour caméras stéréo, lidar, caméras événementielles et caméras SPAD (Single-Photon Avalanche Diode), qui diffusent des données capteurs horodatées avec une vérité terrain exacte au pixel. Enfin, une pile GNC (guidage, navigation, contrôle) fournit un centre de contrôle de mission accessible par navigateur. Côté validation, les auteurs annoncent un IoU (Intersection over Union) moyen de 0,79 entre ombres prédites et ombres rendues à faible élévation solaire, et une couverture en pixels de la profondeur stéréo réduite dans les zones d'ombre par rapport au terrain éclairé.

L'enjeu est la donnée. Près des pôles lunaires, le Soleil bas produit des ombres longues et très contrastées qui mettent en difficulté la vision stéréo, la segmentation du terrain et la localisation. Entraîner et tester des algorithmes dans ces conditions exige beaucoup de données annotées avec une vérité terrain fiable, que les campagnes de terrain et les installations analogues ne fournissent qu'à coût élevé et avec peu de variété. Un simulateur ouvert qui sort la vérité terrain ombre par ombre, avec des capteurs peu courants comme les SPAD ou les caméras événementielles, peut donc servir de banc d'essai commun pour les équipes qui développent la navigation de rovers, y compris les start-ups et intégrateurs du spatial. Il faut toutefois nuancer : un IoU de 0,79 est correct mais laisse une part d'ombres mal prédites, et il mesure la cohérence interne du moteur de rendu, pas l'écart avec des images lunaires réelles. Le transfert simulation vers réel n'est pas démontré dans le résumé disponible, pas plus que l'usage par des tiers.

Ce travail s'inscrit dans l'essor des missions robotiques lunaires et des rovers autonomes, qui doivent opérer sans guidage constant depuis la Terre, notamment dans les régions polaires visées par plusieurs programmes d'exploration. Il prolonge une lignée de simulateurs fondés sur des moteurs de jeu et sur ROS, que MARE cherche à dépasser par sa modularité, son support de capteurs émergents et son interface de mission web. Il s'agit d'une publication de recherche, sans calendrier de déploiement ni partenaire industriel annoncé. La suite logique serait une comparaison avec des jeux de données réels ou des essais en installation analogue, ainsi que l'adoption par la communauté, qui dépendra de la qualité de la documentation et de l'entretien du code.

Dans nos dossiers

arXiv cs.RO

À lire aussi

1arXiv cs.RO

Politiques vision-langage-action de bout en bout pour l'amarrage autonome d'un rover lunaire

Une équipe de chercheurs publie sur arXiv (2610.19224) une politique vision-langage-action (VLA) de bout en bout pour l'amarrage autonome d'un rover lunaire. Le système associe directement les observations caméra aux commandes de contrôle, sans les composants intermédiaires d'une chaîne de navigation classique (perception, cartographie, planification). Pour l'entraîner, les auteurs ont conçu un cadre de formation extensible qui génère des démonstrations d'experts tenant compte de la sécurité, dans un simulateur lunaire haute fidélité. La politique est ensuite comparée à une chaîne de navigation modulaire de référence, en boucle fermée, face à des perturbations perceptives absentes de l'entraînement. Les résultats la décrivent comme « compétitive » face à cette référence. Les auteurs ajoutent un mécanisme d'horizon d'exécution adaptatif : le modèle détermine sur quelle distance le rover peut avancer en boucle ouverte sans danger, ce qui réduit la fréquence d'inférence tout en limitant les contacts avec des obstacles par rapport à des horizons fixes. Le résumé ne donne aucun chiffre précis, ni taux de réussite, ni gain de calcul, ni taille du modèle. L'intérêt tient à un problème réel de la navigation planétaire. Sur la Lune, les contrastes d'éclairage sont extrêmes, avec des ombres très dures et des zones éblouies, et les erreurs de mesure se propagent d'un module conçu à la main au suivant, ce qui fragilise la chaîne modulaire. Tester une politique VLA dans ce cadre revient à vérifier si la généralisation issue du préentraînement sur données vision-langage d'échelle internet, déjà observée en robotique terrestre et en conduite autonome, résiste à un environnement très éloigné des données d'origine. Le compromis entre calcul et sécurité compte aussi, car les processeurs embarqués durcis aux radiations sont bien moins puissants que les GPU terrestres. Limiter la fréquence d'inférence est donc une contrainte d'ingénierie centrale. Il faut cependant relativiser : tout a été évalué en simulation, sans validation matérielle, et « compétitif » n'indique ni supériorité ni marge de sécurité suffisante pour une qualification spatiale. Ce travail s'inscrit dans l'élan des modèles VLA, qui ont gagné la manipulation et la conduite autonome ces dernières années, tandis que la navigation des rovers planétaires repose depuis longtemps sur des chaînes modulaires éprouvées, comme celles des rovers martiens de la NASA. Les travaux concurrents explorent l'apprentissage de bout en bout pour la navigation terrestre, mais la surface lunaire restait peu caractérisée. Les prochaines étapes logiques seraient des tests sur matériel embarqué, des essais en analogue lunaire réel et des évaluations de sécurité plus strictes, sans calendrier annoncé à ce stade.

RecherchePaper

1 source

2arXiv cs.RO

De la perception à l'assistance : autonomie partagée à vocabulaire ouvert pour la manipulation robotique

Des chercheurs présentent un système d'autonomie partagée pour la téléopération de bras manipulateurs en environnement industriel, publié le 24 juillet 2026 sur arXiv (référence 2607.17323). Le dispositif repose sur une seule caméra RGB-D qui capture les mouvements du bras et les gestes de la main de l'opérateur, sans combinaison connectée, marqueur fiduciaire ni étape de calibration préalable. La cible à saisir est désignée par une simple consigne textuelle en langage libre, interprétée par un modèle vision-langage via la caméra embarquée sur le préhenseur, puis suivie en continu par un modèle de segmentation vidéo promptable sur les caméras du robot, ce qui isole en permanence un repère de saisie de la carte des obstacles. Un contrôleur prédictif (MPC) accéléré par GPU exécute chaque commande tout en évitant les collisions avec l'environnement et avec le robot lui même, grâce à une reconstruction volumétrique calculée en temps réel, pendant qu'un champ de potentiel corrige la trajectoire de l'opérateur lors de l'approche finale. Testé sur un manipulateur mobile quadrupède, le système atteint une précision de positionnement de 59 mm d'erreur quadratique moyenne par rapport à une référence de capture de mouvement, et maintient le bras à au moins 18 cm des obstacles même lorsque l'opérateur tente délibérément une collision de 6 cm. Sur une tâche de manipulation de vanne industrielle et une tâche de prise dépose, le framework complet réussit tous les essais, tandis que le mode entièrement autonome, déclenché par geste, réussit quatre essais sur cinq par tâche. L'intérêt pour l'industrie robotique tient au problème visé: en téléopération classique, aligner précisément un effecteur avec une cible en environnement encombré, avec une perception de profondeur limitée par caméra, reste une source d'erreurs et de collisions coûteuses. En retirant marqueurs et calibration tout en gardant l'opérateur dans la boucle de décision, le système promet un déploiement plus rapide sur des cellules industrielles existantes. Le fait que retirer soit le module de collision, soit le module d'assistance provoque des échecs par des mécanismes différents montre que les deux briques sont complémentaires et non redondantes, un signal utile pour les intégrateurs qui évaluent la robustesse réelle de ces architectures avant tout achat. Le travail s'inscrit dans la convergence actuelle entre modèles vision-langage et téléopération assistée, où l'ancrage d'instructions textuelles dans la perception robotique gagne du terrain face aux interfaces manuelles pures. Les auteurs positionnent leur contribution comme une alternative légère aux pipelines nécessitant équipement dédié ou calibration lourde, et annoncent la possibilité de basculer vers une exécution autonome sur la même cible sans pipeline de perception séparé, ouvrant la voie à des essais plus poussés sur d'autres plateformes et tâches industrielles.

RecherchePaper

1 source

3arXiv cs.RO

Vers une perception spatiale pour la collaboration de robots hétérogènes en milieu minier souterrain

Des chercheurs présentent sur arXiv le pipeline de perception embarqué du projet PERSEPHONE, une mission d'extraction minière autonome dans d'anciennes mines souterraines abandonnées. Le système associe deux robots hétérogènes. Un robot « Explorer », léger, cartographie une mine inconnue et produit un graphe de scène 3D des cibles à inspecter. Pour cela, il exécute une pile de segmentation sémantique vision-langage en zero-shot, qui détecte les gisements minéraux à partir de simples requêtes en langage naturel. La carte et le graphe sont ensuite transmis à un second robot, l'« Inspector », équipé d'une charge utile de capteurs avancés, qui s'en sert pour planifier des points de vue d'inspection rapprochée. L'étape clé décrite est l'abstraction géométrique qui transforme les détections brutes en cibles exploitables : génération de boîtes englobantes par vue, fusion des boîtes entre vues, ajustement de plans et extraction de polygones. La validation a eu lieu dans une installation d'essai souterraine et dans une mine de magnésite en activité, sur des minéralisations de veines de fer et de magnésite, en conditions de perception dégradée. Le résumé ne donne ni taux de détection, ni temps de mission, ni dimensions des robots. L'intérêt tient au constat de départ : aucune plateforme unique ne combine la mobilité nécessaire pour parcourir des kilomètres de galeries dégradées et la charge utile de capteurs requise pour caractériser un corps minéralisé. La réponse est donc une division du travail entre un éclaireur agile et un inspecteur lourd. Pour les intégrateurs et les exploitants, l'enjeu concret est la passation d'un robot à l'autre, à travers une représentation partagée, et non plus la performance d'un seul engin. Le recours à des modèles vision-langage sans entraînement spécifique suggère aussi qu'on peut désigner une cible minérale par une phrase plutôt que par un jeu de données annoté. Reste à savoir ce que vaut cette approche hors des deux sites testés, car le texte ne chiffre pas la précision de détection, la robustesse face à la poussière, à l'obscurité ou aux variations de minéralogie, ni l'autonomie de l'ensemble. Ce travail s'inscrit dans la robotique souterraine, dont les références restent les équipes de la compétition DARPA SubT, qui avaient éprouvé cartographie et exploration en environnements dégradés, mais surtout pour la recherche et le sauvetage. Ici, la finalité est la réouverture de gisements profonds dans des mines abandonnées, un cas d'usage où le graphe de scène sert d'interface entre perception et planification. Le document est un preprint, non évalué par les pairs, et décrit un pipeline de perception, non un système commercial ni un déploiement industriel. Les suites logiques sont l'intégration avec les phases d'extraction de PERSEPHONE et des essais dans d'autres mines, sans calendrier annoncé dans le résumé.

RecherchePaper

1 source

4arXiv cs.RO

Un cadre pratique d'indicateurs de performance clés pour les tests sur le terrain avec plusieurs robots lunaires et planétaires

Une équipe de chercheurs a publié sur arXiv (référence 2601.20529, version 3) un cadre structuré d'indicateurs clés de performance (KPI) destiné à évaluer les missions multi-robots lors d'essais analogiques lunaires et planétaires. Le constat de départ : les nombreux tests de terrain simulant la prospection lunaire (ilménite, terres rares, glace d'eau) utilisent des métriques hétérogènes propres à chaque scénario, rendant toute comparaison inter-missions quasi impossible. Le cadre est dérivé de trois scénarios multi-robots représentatifs et organise les KPI autour de trois axes : efficacité (couverture de terrain, débit d'exploration), robustesse (taux de pannes, reprise après défaillance) et précision (qualité des données scientifiques collectées). Validé lors d'un test de terrain réel, il se révèle directement applicable pour les métriques d'efficacité et de robustesse ; les KPI de précision se heurtent en revanche à l'impossibilité pratique d'obtenir des données de vérité terrain fiables dans des environnements extérieurs non instrumentés. L'absence de standard commun est l'un des freins principaux au développement de la robotique planétaire : sans référentiel partagé, comparer deux systèmes multi-robots issus de plateformes et de configurations expérimentales différentes reste impossible, même lorsqu'ils visent le même objectif scientifique. Ce framework comble ce manque en reliant les métriques d'ingénierie aux objectifs de mission (ressources extractibles, couverture cartographique), ce qui est directement utile pour arbitrer entre architectures de flotte ou stratégies de coordination distribuée. La limite identifiée sur les KPI de précision est significative et honnête : mesurer la localisation absolue d'un essaim de robots en extérieur sans infrastructure de référence reste un problème ouvert, ce qui conditionne directement la fiabilité des futurs démonstrateurs ISRU (In-Situ Resource Utilization). La prospection robotique lunaire connaît une structuration accélérée sous l'impulsion du programme Artemis (NASA), des ambitions lunaires de l'ESA et d'acteurs privés comme ispace (Japon/Luxembourg) ou Astrobotic (États-Unis). Les missions analogiques terrestres sur substrats simulant le régolite sont l'outil standard avant vol, mais leur prolifération sans méthode commune a produit une littérature difficile à synthétiser et à comparer. Ce papier s'inscrit dans un mouvement de standardisation comparable à ce que l'IEEE a accompli pour les robots AMR industriels ; l'étape logique serait son adoption par des consortiums comme l'ESA-ESRIC lors de compétitions analogiques de référence, telles que l'ESRIC Space Resources Challenge, pour confirmer sa portée au-delà d'un seul contexte expérimental.

UEPotentiellement utile pour l'ESA et les consortiums européens (ESA-ESRIC) travaillant sur la robotique planétaire, notamment dans le cadre de compétitions analogiques comme l'ESRIC Space Resources Challenge.

RecherchePaper

1 source