Adaptation continue sans récompense pour des robots spatiaux résilients

Un preprint diffusé sur arXiv fin août 2026 (arXiv:2608.23452v1) présente un cadre d'apprentissage par renforcement continu sans signal de récompense, destiné aux robots spatiaux victimes d'une dégradation matérielle sévère, un contexte où le calcul précis de récompense est impossible faute de systèmes de suivi externes comme le GPS. La méthode pré-entraîne sur des simulations variées un agent doté d'un modèle du monde à état latent qui apprend un prédicteur robuste de récompense, puis, une fois déployé sur un système endommagé, ne réajuste que la dynamique de transition de ce modèle via des trajectoires non supervisées, la politique étant réentraînée uniquement sur des trajectoires imaginées. L'approche est testée en simulation sur trois tâches, traversée planétaire, navigation orbitale et assemblage de précision, sous pannes morphologiques sévères.

L'apport principal tient au découplage entre adaptation et supervision externe: la plupart des méthodes d'apprentissage continu embarqué restent bloquées dès qu'il n'existe pas de vérité terrain en environnement extrême, que ce soit dans l'espace profond, en fond marin ou sur un site nucléaire. Si la méthode se confirme hors simulation, elle ouvrirait la voie à des robots capables de retrouver une capacité opérationnelle après un choc matériel sans intervention au sol, un enjeu direct pour les rovers planétaires, les satellites de service en orbite ou les bras d'assemblage orbitaux. Les résultats publiés restent toutefois purement simulés, sans validation sur matériel réel ni en environnement spatial, ce qui limite la démonstration à une preuve de concept algorithmique.

Ce travail s'inscrit dans la lignée des modèles du monde à état latent, popularisés par la famille Dreamer, devenus un outil courant de l'apprentissage par renforcement basé modèle en robotique pour entraîner des politiques sur des trajectoires imaginées plutôt que sur des interactions réelles coûteuses. La robotique spatiale attire un nombre croissant d'acteurs publics et privés, de la NASA-JPL à l'ESA en passant par des sociétés de service en orbite comme Astroscale ou Intuitive Machines, tous confrontés au même verrou: maintenir et adapter des systèmes hors de portée d'une intervention humaine directe. Le résumé du preprint ne précise ni laboratoire ni affiliation industrielle; la suite logique resterait une validation sur banc d'essai robotique, puis une démonstration en environnement analogue spatial avant tout transfert vers une mission opérationnelle.