TwinDEX de X Square Robot apprend une expérience de chimie en 24 étapes sans aucune donnée d'entraînement sur le robot
La société X Square Robot, basée à Shenzhen, a présenté un robot dextre qui exécute une expérience de chimie standardisée complète, soit 24 sous-actions enchaînées en une seule prise sans coupure, avec une politique entraînée uniquement sur des données collectées sans robot. La démonstration repose sur TwinDEX, système introduit en septembre qui associe un exosquelette portable pour la collecte de données à une main robotique très proche pour le déploiement. Le robot ouvre un flacon de réactif, prélève de la poudre avec une spatule fine, presse une pipette à bulbe en caoutchouc, transfère liquides et solides, puis plaque une baguette de verre quasi transparente contre un bécher pour guider un versement, en changeant d'outil et en coordonnant ses deux mains. La politique a été entraînée de zéro sur quelques centaines d'épisodes sans robot, sans téléopération ni données d'intervention. Les deux dispositifs partagent une architecture à trois doigts et neuf degrés de liberté dont sept actifs, les mêmes axes d'articulation et proportions, les mêmes matériaux de contact et capteurs tactiles aux mêmes endroits. Images multi-vues, poses du poignet, états des doigts et signaux tactiles sont synchronisés, ce qui évite tout retargeting. Selon X Square, l'efficacité de collecte atteint 5,3 fois celle de la téléopération, mesurée sur cinq tâches.
L'enjeu est le goulot d'étranglement de la donnée en manipulation fine. La téléopération immobilise un robot et un opérateur, ce qui limite le passage à l'échelle. Un opérateur, une table et un exosquelette suffisent ici, et la collecte peut se faire en parallèle dans des bureaux ou des cuisines. Si les résultats se confirment, ils indiquent que des données humaines sans robot peuvent égaler la téléopération épisode par épisode, selon la société sur un benchmark multi-tâches. La tâche choisie est exigeante pour la perception seule : le dévissage repose sur des mouvements latéraux des doigts, la pipette demande un ajustement de force après contact, et la baguette transparente est difficile à suivre par caméra. Prudence toutefois : il s'agit d'une démonstration unique, le gain de 5,3 fois est un chiffre du constructeur, et aucun article technique ni taux de réussite sur répétitions n'est publié. Les limites sont reconnues : une seule table, un jeu d'objets restreint, une ergonomie des longues sessions non étudiée, et des tâches plus difficiles pourraient exiger plus de doigts ou d'articulations.
Cette approche s'inscrit dans la course aux données d'entraînement pour les modèles vision-langage-action, où gants, exosquelettes et vidéos humaines concurrencent la téléopération. X Square, déjà connue pour son modèle ouvert WALL-OSS, a aussi présenté HOST, qui apprend des compétences à partir de courtes vidéos, et le modèle WALL-B. Selon Leiphone, le pipeline fonctionne avec WALL-OSS et peut s'adapter à d'autres modèles de fondation comme pi0.5. Sharpa, avec sa main dextre et son gant haptique, travaille dans une direction voisine. La suite annoncée comprend un article technique « bientôt disponible » et l'extension de la collecte aux environnements ouverts et aux tâches de longue traîne. Il s'agit pour l'instant d'une démonstration de recherche, sans produit livré ni déploiement client.
Pas d\'impact direct sur la France/UE
Dans nos dossiers




