Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
RecherchearXiv cs.RO 

Zetta ζ : un harnais incarné en boucle fermée efficace pour une intelligence physique auto-évolutive

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Une équipe de recherche publie sur arXiv (référence 2608.16590v1) un système baptisé Zetta, présenté comme un harnais agentique en boucle fermée pour l'intelligence physique incarnée. Contrairement aux approches agentiques existantes qui suivent des compétences fixes pendant l'exécution et ne réfléchissent qu'après la fin d'un épisode, Zetta garde le modèle de politique de base figé mais fait évoluer en ligne, pendant l'exécution, des critiques codées et des compétences de récupération. Le système repose sur trois boucles séparées par échelle de temps : une gouvernance au rythme de l'action, une proposition de critique et de récupération au niveau du rollout, et des mises à jour de compétences validées avant intégration. Associé à Z-Infra, une infrastructure qui découple la logique de l'agent des ressources d'exécution matérielles hétérogènes, Zetta atteint 90,8% de réussite sur le benchmark de simulation LIBERO-Pro et 93,6% sur RoboCasa, avec une accélération d'inférence de 11,1 fois par rapport aux méthodes comparées, dans le budget de rollout testé par les auteurs.

L'enjeu dépasse le simple score de benchmark : la plupart des harnais agentiques actuels échouent à boucler l'apprentissage pendant l'exécution physique elle-même, car les décisions doivent suivre des états robot-environnement qui évoluent trop vite pour les grands modèles agentiques actuels. Si les résultats se confirment au-delà de la simulation, cela offrirait une voie pour combler l'écart entre modèles de bout en bout figés et agents capables de s'auto-corriger en conditions réelles, un enjeu central pour les intégrateurs cherchant des politiques robotiques fiables à grande échelle plutôt que des démonstrations isolées. Il faut toutefois noter que LIBERO-Pro et RoboCasa restent des environnements simulés, non des déploiements sur robots physiques.

Le papier s'inscrit dans la lignée des travaux sur les modèles vision-langage-action (VLA), en cherchant à dépasser leur principale limite : l'incapacité à s'adapter dynamiquement pendant l'exécution. Les auteurs rapportent que la performance continue de progresser avec l'expérience d'auto-exploration accumulée, que les compétences apprises se transfèrent en zero-shot à de nouvelles tâches, et que des comportements de résolution soudaine ("Aha Moments") émergent au fil de l'entraînement, sans préciser à ce stade de calendrier de validation sur robot réel.

Dans nos dossiers

IA physique & VLAarXiv cs.RO

À lire aussi

De l'IA du monde à l'IA incarnée : une feuille de route pour l'intelligence physique en monde ouvert
1arXiv cs.RO 

De l'IA du monde à l'IA incarnée : une feuille de route pour l'intelligence physique en monde ouvert

Publié sur arXiv le 14 juillet 2026 (arXiv:2607.11689), cet article de synthèse dresse un état des lieux des modèles d'action pour la robotique et propose une feuille de route vers ce que les auteurs nomment le « cerveau incarné » (embodied brain). Le texte retrace l'évolution des politiques vision-langage-action (VLA) vers les World Action Models (WAM), des systèmes qui relient une intervention candidate à ses conséquences prédites avant exécution. Trois failles couplées freinent le secteur selon les auteurs: des espaces d'action et cibles de prédiction incompatibles d'un modèle à l'autre, une absence de standardisation des jeux de données et des protocoles d'évaluation, et des interfaces d'exécution trop fermées pour permettre la réutilisation entre systèmes. Plutôt qu'un nouveau modèle entraîné, le papier propose une architecture cible: le cerveau incarné intégrerait un contexte multimodal, comparerait plusieurs interventions candidates, puis émettrait des requêtes de transition d'état ou de capacité plutôt que des commandes moteur directes, les WAM servant de prototypes pour ces fonctions prédictives. Pour les intégrateurs et décideurs en robotique, ce travail nomme un problème concret: chaque laboratoire, qu'il s'agisse de Physical Intelligence avec Pi-0, NVIDIA avec GR00T N2 ou Figure avec Helix, construit son propre espace d'action et son propre format de données, rendant quasi impossible la comparaison directe des performances ou la réutilisation d'un modèle entre un bras robotique et un humanoïde. En proposant des contrats partagés entre modèles, données, tâches et morphologies, et un post-entraînement en boucle fermée transformant les interactions vérifiées en expérience réutilisable, la feuille de route vise à sortir la robotique généraliste du stade de la démonstration isolée. C'est une contribution méthodologique plus qu'un résultat expérimental: elle ne prouve pas qu'un tel système fonctionne à l'échelle, mais formalise ce qui manque pour y parvenir, un constat qui recoupe les critiques récurrentes sur l'écart entre vidéos de démonstration sélectionnées et déploiements robustes en conditions réelles. Le papier s'inscrit dans la continuité des travaux sur les modèles d'action et les world models, qui ont convergé avec l'essor des VLA avant que des approches hybrides, combinant prédiction du monde et politique d'action, ne donnent naissance aux WAM. Les auteurs ne mentionnent aucun déploiement propre mais positionnent leur cadre face aux systèmes existants de Physical Intelligence, NVIDIA et Figure, sans citer d'acteur français ou européen dans cette revue. La suite annoncée est l'adoption progressive de ces contrats partagés par la communauté de recherche, préalable jugé nécessaire à l'émergence d'agents physiques réellement adaptatifs et auto-améliorants hors laboratoire.

RecherchePaper
1 source
Infrastructure de simulation cloud-native évolutive, reproductible et en boucle fermée pour l'IA incarnée
2arXiv cs.RO 

Infrastructure de simulation cloud-native évolutive, reproductible et en boucle fermée pour l'IA incarnée

Des chercheurs ont déposé le 27 juin 2026 sur arXiv (arXiv:2606.27962) un framework d'infrastructure de simulation cloud-native pour l'intelligence embarquée, conçu pour unifier en une seule plateforme la génération d'environnements de simulation, l'exécution de tâches, la collecte de trajectoires, l'évaluation de modèles et la gestion de données. L'architecture s'articule en quatre couches fonctionnelles et intègre quatre systèmes représentatifs : D-VLA, RL-VLA3, Sword et Pre-VLA, couvrant respectivement la simulation scalable, la planification dynamique des ressources, l'augmentation visuelle et le filtrage de données en temps réel. Le tout repose sur des technologies cloud-native telles que l'ordonnancement élastique des ressources et la simulation conteneurisée, pour gérer des workloads multi-modèles et multi-tâches à grande échelle. L'enjeu sous-jacent touche directement au goulot d'étranglement qui freine les modèles VLA (Vision-Language-Action) : la collecte de données réelles est coûteuse, peu reproductible et difficile à scaler. Ce framework propose une réponse systémique en substituant ou en complétant les données terrain par de la simulation industrialisée, avec une boucle fermée (closed-loop) permettant d'optimiser les données de façon itérative. Si les composants comme Pre-VLA (filtrage temps réel) et RL-VLA3 (apprentissage par renforcement sur architecture VLA) tiennent leurs promesses à l'échelle, cela pourrait réduire significativement le sim-to-real gap qui reste l'obstacle majeur pour déployer des robots génériques en environnement industriel réel. Il faut toutefois noter que la publication reste au stade de preprint sans benchmarks indépendants validés, et les performances sur robots physiques ne sont pas documentées dans ce papier. Ce travail s'inscrit dans une compétition internationale intense autour des infrastructures de simulation pour l'IA incarnée. NVIDIA pousse Isaac Sim avec l'écosystème Isaac Lab pour l'entraînement par renforcement, tandis que Genesis (dévoilé en 2024, affilié MIT) et MuJoCo Playground ciblent eux aussi la simulation GPU-accélérée à grande échelle. L'approche présentée ici se distingue par son orientation service (SOA) et sa couche de gestion de données unifiée, pensée pour des déploiements multi-équipes plutôt qu'un usage chercheur individuel. Les auteurs ne précisent pas d'affiliation institutionnelle clairement identifiable ni de calendrier de mise à disposition publique du code, deux points qui limiteront concrètement l'adoption tant qu'ils resteront non documentés.

RechercheOpinion
1 source
Système d'exploitation auto-évolutif pour agents incarnés : planification cognitive et exécution physique découplées
3arXiv cs.RO 

Système d'exploitation auto-évolutif pour agents incarnés : planification cognitive et exécution physique découplées

Des chercheurs présentent PhyAgentOS, un système d'exploitation pensé spécifiquement pour les agents robotiques incarnés (embodied agents), décrit dans un preprint arXiv (2607.16636v1) publié fin juillet 2026. Le système introduit un "Session-Centered Runtime" qui traite une session complète, et non une action isolée, comme unité minimale d'ordonnancement, de vérification de compatibilité et de collecte de preuves d'exécution. La couche cognitive (planification) est séparée de la couche physique (exécution) via un protocole appelé State-as-a-File, qui matérialise l'état du système sous forme de fichiers Markdown/YAML lisibles et versionnables, sans dépendance de code entre les deux couches. Un module SessionVerifier distingue la fin d'exécution d'une tâche de sa réussite sémantique réelle, avec trois verdicts possibles : succès, échec ou replanification. Les résultats vérifiés alimentent une mémoire épistémique qui capitalise l'expérience sous forme de leçons réutilisables, sans réentraînement du modèle. PhyAgentOS a été testé sur les bancs d'essai Optimus-67, StarDojo et DST-Dojo, validé sur plus de 19 corps robotiques simulés et physiques, et montre des gains de performance sur les benchmarks LIBERO, Calvin et RoboCasa365 avec plusieurs modèles VLA (vision-language-action) différents. L'enjeu dépasse la prouesse technique isolée : les modèles VLA, les modèles du monde et les planificateurs agentiques progressent chacun de leur côté, mais sans abstraction d'exécution commune ni état partagé, ce qui rend leur composition fragile dès qu'on sort du laboratoire. En distinguant explicitement la terminaison d'une action de sa réussite réelle, PhyAgentOS s'attaque directement à l'écart bien documenté entre démonstration et fiabilité en conditions réelles, un problème central pour les intégrateurs qui déploient des flottes de robots en usine ou en entrepôt. Pour un décideur B2B, la promesse n'est pas un nouveau modèle plus performant mais une couche d'infrastructure capable de faire cohabiter différents modèles VLA, de vérifier objectivement leurs sorties et de capitaliser les échecs sans réentraînement coûteux, un point clé pour la maintenabilité à long terme de déploiements robotiques hétérogènes. Cette proposition s'inscrit dans la vague actuelle de modèles VLA généralistes tels que Figure 03, Optimus Gen 3, Pi-0 ou GR00T N2, qui ont démontré des capacités de manipulation impressionnantes en démo mais restent difficiles à orchestrer, vérifier et faire évoluer une fois déployés sur du matériel réel. PhyAgentOS se positionne comme une couche d'infrastructure sous ces modèles plutôt que comme un concurrent direct, avec une architecture de sécurité en couches (préflight, ponts d'action, SafetyGuard, surveillance par heartbeat) et une validation progressive allant des jeux virtuels à la simulation puis au robot physique, en gardant la couche cognitive constante pour isoler les variables. Publié comme preprint arXiv avec le statut "Announce Type: new", ce travail reste à ce stade une contribution de recherche académique plutôt qu'un produit commercial ; les auteurs ne précisent ni calendrier de mise en production ni partenariat industriel à ce jour.

RecherchePaper
1 source
Vers les limites cognitivo-physiques de l'intelligence incarnée : un agent de course autonome centré sur un modèle du monde
4arXiv cs.RO 

Vers les limites cognitivo-physiques de l'intelligence incarnée : un agent de course autonome centré sur un modèle du monde

Une équipe de recherche publie sur arXiv (article 2608.10618v1) un système baptisé agent de course autonome centré sur un modèle du monde, conçu pour sonder les limites conjointes cognitives et physiques de l'intelligence incarnée. Les données d'entraînement proviennent d'essais réels sur véhicule, où le système embarqué a maintenu une localisation et une perception robustes jusqu'à 256,3 km/h, avec une accélération latérale de pointe de 26,8 m/s². Le framework construit un état du monde, raisonne de manière anticipative sur les événements futurs, et pilote le véhicule près de ses limites physiques dans une boucle de raffinement fermée, en apprenant à la fois des réussites et des échecs proches de la limite. En simulation complète de course, l'agent entraîné atteint un taux de réussite d'interaction de 88,3% sur un ensemble de scénarios de course simulés jugés difficiles. L'enjeu dépasse la course automobile : la plupart des systèmes d'IA incarnée sont aujourd'hui évalués avec des marges de sécurité conservatrices, ce qui laisse mal comprises leurs limites réelles de capacité en conditions extrêmes. La course autonome sert ici de banc d'essai exigeant, combinant perception haute fréquence, interactions adversariales et dynamique du véhicule quasi saturée, un cadre plus contraignant que les tests habituels en robotique ou en conduite autonome. Le résultat suggère qu'un modèle du monde peut aider un agent à représenter et affiner en continu ses frontières de capacité plutôt que de se contenter de les éviter par prudence, une piste potentiellement transférable à d'autres systèmes robotiques ou véhicules autonomes où la marge entre performance et sécurité reste mal quantifiée. Le travail se positionne face aux systèmes de course autonome existants, qui repoussent les performances à haute vitesse sans modéliser conjointement les limites cognitives et physiques ni les affiner de manière couplée. Il s'agit à ce stade d'un article de recherche déposé sur arXiv, sans précision sur un véhicule commercial, un partenaire industriel ou un calendrier de déploiement : aucune indication n'est donnée sur une application produit ou un pilote à venir. Les auteurs présentent le raffinement en boucle fermée du modèle du monde et de la politique de contrôle comme une piste pour améliorer la récupération après échec et la généralisation à des circuits inédits, posant les bases d'une méthodologie consciente des limites pour un déploiement plus sûr des agents incarnés dans le monde réel.

RecherchePaper
1 source