Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
OnEvoMemory : une mémoire évolutive via des essais robotiques en ligne pour les politiques de robots préentraînées
RecherchearXiv cs.RO 

OnEvoMemory : une mémoire évolutive via des essais robotiques en ligne pour les politiques de robots préentraînées

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Publié en août 2026 sur arXiv (2608.08749v1), un article de recherche présente OnEvoMemory, un module de mémoire pour politiques robotiques pré-entraînées de type VLA, destiné à la manipulation à long horizon. À la différence des mécanismes existants, qui s'appuient sur des modèles externes ou des règles figées, il apprend directement, à partir des résultats de trajectoires, quelles expériences conserver, combinant contexte récent, expériences à haute valeur et transitions saillantes entre sous-tâches. Des démonstrations hors-ligne initialisent la mémoire, puis des rollouts en ligne, réussis ou échoués, l'affinent au fil de l'entraînement. Sur des bancs de manipulation longue, les auteurs rapportent une amélioration des performances d'une politique VLA de base, sans fournir de chiffres de charge utile, de degrés de liberté ni de temps de cycle: une contribution algorithmique, pas un déploiement matériel.

Ce travail cible un verrou connu des politiques génératives en robotique: le suivi des sous-tâches déjà accomplies sur des séquences longues, condition nécessaire pour éviter qu'un bras ou un humanoïde ne répète une action ou ne perde le fil d'une tâche multi-étapes. Les architectures VLA telles que Pi-0, GR00T N2 ou Helix géraient jusqu'ici ce problème via des modules externes, LLM de supervision ou machines à états codées à la main, plutôt que par une mémoire apprise et intégrée. Pour les intégrateurs qui construisent sur des modèles fondation robotiques, une mémoire native capable de s'améliorer via des essais en ligne réduirait la dépendance à ces pipelines ad hoc, même si le résultat reste une preuve de concept en preprint, non encore revue par les pairs.

La publication s'inscrit dans une vague de recherches visant à réduire l'écart entre les démonstrations spectaculaires de robots humanoïdes ou bras manipulateurs et leur fiabilité réelle sur des tâches enchaînées, un problème documenté depuis l'essor des modèles VLA comme RT-2 ou Octo. En misant sur un affinage par rollouts en ligne plutôt que sur des règles écrites à la main, OnEvoMemory prolonge les efforts pour rendre les politiques de manipulation plus autonomes sans multiplier les modules externes. Déposé sur arXiv sous le type "new", l'article ne mentionne aucun partenariat industriel ni calendrier de mise en production: son adoption dépendra de tests sur des plateformes physiques réelles.

Dans nos dossiers

NVIDIA GR00TOpenVLA / RT-XarXiv cs.RO

À lire aussi

RoboMME : évaluation et compréhension de la mémoire pour les politiques robotiques généralistes
1arXiv cs.RO 

RoboMME : évaluation et compréhension de la mémoire pour les politiques robotiques généralistes

Une équipe de chercheurs a publié RoboMME (Robotic Multi-Memory Evaluation), un benchmark standardisé à grande échelle destiné à évaluer les modèles VLA (vision-language-action) sur des tâches de manipulation robotique nécessitant de la mémoire à long horizon. Le benchmark comprend 16 tâches construites selon une taxonomie en quatre catégories : mémoire temporelle, spatiale, des objets et procédurale, couvrant des scénarios comme le comptage d'actions répétées ou la manipulation d'objets temporairement occultés. Les auteurs ont également développé 14 variantes de VLA augmentées de mémoire, toutes bâties sur le backbone pi0.5 de Physical Intelligence, et les ont évaluées selon différentes stratégies d'intégration mémorielle. L'absence d'un cadre d'évaluation standardisé était jusqu'ici un frein majeur pour la recherche sur la mémoire dans les VLA généralistes : chaque équipe testait ses mécanismes dans des conditions ad hoc, rendant toute comparaison rigoureuse impossible. RoboMME comble ce vide en permettant, pour la première fois, de mesurer systématiquement comment différentes représentations mémorielles (états cachés récurrents, mémoire externe, fenêtre de contexte longue) se comportent sur un spectre de tâches hétérogènes. La conclusion principale est nuancée : l'efficacité d'une architecture mémoire est fortement dépendante de la tâche, chaque approche présentant des avantages distincts selon la catégorie, ce qui remet en cause l'idée qu'une solution universelle serait à portée à court terme. Pour les intégrateurs et les décideurs B2B, cela signifie concrètement que le choix du mécanisme mémoriel devra rester spécifique au cas d'usage, sans recette générique applicable. Ce benchmark s'inscrit dans la montée en puissance des VLA généralistes, portés par des modèles comme pi0 et pi0.5 de Physical Intelligence (levée de 400 millions de dollars en 2024), OpenVLA, Octo ou RoboVLMs, qui cherchent tous à transférer les capacités des grands modèles de langage à la manipulation physique. D'autres benchmarks comme LIBERO, RoboSuite ou MetaWorld couvrent déjà l'évaluation générale des VLA, mais RoboMME se distingue par son focus explicite sur la mémoire à long horizon, un aspect jusqu'ici systématiquement sous-évalué dans ces environnements. Les prochaines étapes probables incluent l'adoption de RoboMME comme référence communautaire dans les pipelines d'évaluation des grands labs robotiques, et le développement d'architectures mémoire capables de généraliser entre catégories de tâches sans sacrifier les performances spécialisées.

RechercheActu
1 source
AURA : une mémoire à déclenchement par action pour les politiques robotiques à VRAM constante
2arXiv cs.RO 

AURA : une mémoire à déclenchement par action pour les politiques robotiques à VRAM constante

Des chercheurs ont publié sur arXiv (référence 2606.02775) une architecture mémoire baptisée AURA-Mem (Action-Utility Recurrent Adaptive Memory), conçue pour réduire drastiquement l'empreinte mémoire des politiques robotiques exécutées sur matériel embarqué. Le principe est simple : envelopper un backbone Vision-Language-Action (VLA) gelé avec une mémoire récurrente de taille fixe, pilotée par une porte apprise qui n'écrit en mémoire que lorsque l'observation courante modifierait l'action suivante. L'état d'inférence reste constant à 4 224 octets, quelle que soit la durée de l'épisode, là où un KV-cache standard atteint 6 061 fois cette taille après 100 000 pas. Sur le benchmark synthétique contrôlé, AURA-Mem produit entre 5,19 et 6,13 fois moins d'écritures que la meilleure baseline O(1), avec un pic à 9,19 fois moins sur les configurations plus faciles. Sur OpenVLA-OFT 7B évalué en boucle fermée sur LIBERO-Long (60 épisodes par bras), le taux de succès reste stable à 0,233, identique à la politique de base non gatée, et légèrement supérieur au bras KV always-write (0,217), tout en divisant par 7 le nombre d'écritures effectives. L'enjeu industriel est direct : les robots mobiles et les manipulateurs déployés en conditions réelles tournent sur hardware edge à mémoire haute bande passante limitée, avec une flash dont l'endurance en écriture est finie. Dans ce régime, c'est l'écriture mémoire, et non la puissance de calcul, qui devient le goulot d'étranglement. AURA-Mem démontre que le signal d'action-surprise, c'est-à-dire écrire uniquement quand l'observation changerait le comportement, est la clé du gain: les plannings d'écriture aléatoires ou périodiques à budget équivalent ne reproduisent pas les mêmes performances, ce qui isole clairement l'apport de la sélectivité apprise. C'est une réponse concrète au problème du déploiement longue durée des VLA sur robots réels, où la gestion de l'état de contexte est souvent traitée par des heuristiques peu robustes. AURA-Mem s'inscrit dans une vague de travaux visant à rendre les grands modèles VLA viables hors datacenter. OpenVLA, développé à Stanford et Embodied Intelligence, est l'un des modèles VLA open-source les plus utilisés en robotique de manipulation; la variante OFT (fine-tuning orienté action) à 7 milliards de paramètres est aujourd'hui un standard de facto pour les évaluations comparatives. La contribution reste pour l'instant une preuve de concept académique: les auteurs signalent eux-mêmes que la borne théorique sur la valeur de l'état d'information approximée est vacuante à cette échelle, et ne constitue pas encore une garantie formelle. Les travaux compétiteurs dans l'espace mémoire des VLA incluent les approches à fenêtre glissante, les mémoires épisodiques par reconstruction, et les architectures Mamba/SSM; AURA-Mem se distingue en ne nécessitant aucune modification du backbone et en ciblant explicitement les contraintes hardware embarquées. Les prochaines étapes naturelles seraient une validation sur robot physique en environnement non contrôlé et une intégration dans des pipelines de déploiement industriels, deux points absents de l'article actuel.

RechercheOpinion
1 source
DREAM : génération de démonstrations au déploiement via transfert réel-vers-simulation pour une adaptation évolutive des politiques
3arXiv cs.RO 

DREAM : génération de démonstrations au déploiement via transfert réel-vers-simulation pour une adaptation évolutive des politiques

Publié fin août 2026 sur arXiv (2608.29078), l'article présente DREAM (Deployment-Time Demonstration Generation via Real-to-Sim), qui génère automatiquement des données d'entraînement pour un modèle vision-langage-action (VLA) déjà pré-entraîné, sans démonstration humaine spécifique au poste de travail. À partir d'une capture de la scène et d'une instruction en langage naturel, le système reconstruit l'environnement, traduit l'instruction en objectifs symboliques et critères de réussite via un grand modèle de langage, puis planifie des trajectoires par planification tâche-et-mouvement (TAMP). Ces trajectoires sont dupliquées sur des configurations d'objets aléatoires, validées par les critères générés, puis converties en paires image-action pour affiner le VLA. Sur robot réel, les auteurs mesurent le gain de réussite apporté par cet affinage face à un déploiement direct, et comparent le coût de collecte à la téléopération humaine. L'enjeu concerne directement les intégrateurs en robotique de manipulation : déployer un VLA généraliste dans un nouvel entrepôt, une nouvelle cellule ou un nouvel arrangement d'objets exige aujourd'hui de nouvelles démonstrations téléopérées, une opération coûteuse qui freine le passage à l'échelle des politiques généralistes du secteur. En remplaçant cette collecte par de la simulation, de la planification symbolique et du rendu synthétique, DREAM teste l'hypothèse selon laquelle l'écart entre démonstration et déploiement réel peut être comblé sans intervention humaine répétée à chaque site. Si l'approche se confirme, elle intéresse les acteurs qui envisagent de déployer des VLA de type Pi-0 ou GR00T chez plusieurs clients sans constituer une équipe de téléopérateurs pour chaque nouvelle configuration, un frein réel à la commercialisation des politiques généralistes. DREAM s'inscrit dans une lignée de travaux combinant reconstruction real-to-sim, grands modèles de langage et planification robotique pour réduire la dépendance à la téléopération, en parallèle des efforts de plusieurs laboratoires de manipulation depuis l'essor des VLA. Le résumé ne précise ni la plateforme robotique, ni le nombre de degrés de liberté, ni de taux de réussite ou de ratio de coût, des éléments à vérifier dans le texte complet avant toute extrapolation industrielle. Il s'agit pour l'instant d'un résultat de recherche à l'état de prépublication, non d'un produit déployé commercialement, dont la portée dépendra de sa capacité à généraliser au-delà des tâches testées sur robot réel.

RechercheOpinion
1 source
PAVE : alignement prédictif et évolution guidée par la valeur pour les politiques monde-action
4arXiv cs.RO 

PAVE : alignement prédictif et évolution guidée par la valeur pour les politiques monde-action

Un article publié le 30 août 2026 sur arXiv sous la référence 2608.30378 présente PAVE (Predictive Alignment and Value-Guided Evolution for World-Action Policies), une méthode d'entraînement pour les politiques vision-langage-action (VLA) qui génèrent des actions robotiques continues. Les auteurs pointent deux limites du clonage de comportement standard: les représentations apprises ne sont pas explicitement contraintes à décrire l'évolution de la scène à plusieurs échelles temporelles, et les trajectoires de déploiement de qualité inégale sont réutilisées sans distinguer la dynamique physique utile du comportement indésirable. PAVE conserve un objectif JEPA local à décalage fixe et y ajoute un alignement de transition multi-horizon calculé à 25%, 50%, 75% et 100% de l'épisode restant, des cibles qui n'existent que pendant l'entraînement et ne transmettent aucun token futur explicite à la tête d'action. La méthode entraîne en parallèle un critique de valeur distributionnel indépendant sur les trajectoires cumulées de déploiement, calcule des avantages à N pas alignés sur des blocs d'action, puis les convertit en conditions textuelles positives, négatives ou nulles pour un acteur par flow matching. Le prédicteur multi-horizon et le critique sont retirés à l'exécution en ligne, préservant une génération d'action directe à partir de l'observation courante, de l'instruction et de la proprioception. Les auteurs rapportent la meilleure performance globale sur trois benchmarks de simulation. Ce travail s'attaque à deux angles morts des politiques VLA génératives: leur incapacité à raisonner explicitement sur l'évolution d'une tâche dans le temps, et le gaspillage de données de déploiement hétérogènes, habituellement écartées faute de signal de valeur. En couplant un objectif prédictif type JEPA à un critique appris a posteriori, PAVE cherche à faire cohabiter apprentissage de représentation et amélioration de politique guidée par la récompense sans alourdir l'inférence, un compromis qui intéresse directement les intégrateurs cherchant à exploiter des logs de déploiement imparfaits plutôt que de ne s'entraîner que sur des démonstrations propres. Si le résultat se confirme au-delà de la simulation, il renforcerait l'idée que les architectures VLA peuvent absorber un signal d'amélioration proche du reinforcement learning sans sacrifier la latence de l'exécution directe. La validation ne porte toutefois que sur trois benchmarks de simulation non identifiés, sans transfert documenté vers un robot réel: la revendication de "meilleure performance globale" reste une annonce de recherche, pas une preuve de généralisation sim-to-real. PAVE s'inscrit dans une lignée de recherche qui enrichit les politiques robotiques génératives d'un objectif de type modèle du monde, dans la filiation des architectures JEPA conçues pour apprendre des représentations prédictives sans reconstruction pixel par pixel. L'acteur par flow matching, conditionné dynamiquement par un signal de valeur positif, négatif ou nul, rejoint une tendance plus large consistant à coupler génération d'action continue et apprentissage hors ligne à partir de trajectoires de déploiement imparfaites plutôt que de les écarter. Le papier ne mentionne ni partenaire industriel, ni déploiement sur robot physique, ni date de publication de code: il s'agit d'une contribution académique dont la suite logique attendue serait une évaluation sur matériel réel et une comparaison directe avec les politiques VLA de référence du secteur.

RechercheOpinion
1 source