AlphaNIST : des compétences d'assemblage émergent de simples récompenses binaires de réussite
AlphaNIST, un travail publié sur arXiv (2610.13354) en octobre 2026, montre qu'une politique unique, entraînée par apprentissage par renforcement (RL) à partir de zéro en simulation, parvient à résoudre les 20 tâches d'assemblage de la NIST Assembly Task Board #1, avec 98,2 % de succès global à l'entraînement. Aucune démonstration humaine, aucun façonnage de la récompense par la progression (progress shaping), aucune primitive scriptée ni réglage par tâche n'ont été utilisés: la seule supervision est une récompense binaire, accordée quand la tâche est accomplie. Les auteurs entraînent aussi des politiques capables d'assembler dix paires de pièces dans un même épisode, sans ordre imposé, la réussite n'étant récompensée que lorsque les dix paires sont simultanément assemblées. Ils décrivent des comportements émergents: choix d'une prise en anticipation de l'assemblage ultérieur, exploitation de la géométrie environnante pour réorienter une pièce, et séquences du type préparer une pièce, en assembler une autre, puis revenir terminer la première, sans planificateur explicite.
L'intérêt tient à ce que le résultat remet en question l'idée selon laquelle l'assemblage de précision exige une forte part de connaissance injectée par l'humain. Jusqu'ici, les progrès sur ce banc d'essai reposaient sur des démonstrations, la décomposition des tâches et des récompenses denses. Montrer qu'une récompense éparse suffit, à condition de disposer de diversité de tâches et d'échelle de calcul, suggère que l'ingénierie de récompense et la collecte de données de téléopération ne sont pas des passages obligés. Pour les intégrateurs, cela laisse entrevoir un déploiement moins coûteux de cellules d'assemblage, puisqu'il suffirait de spécifier le résultat attendu plutôt que le geste. Les réserves sont toutefois nettes: les résultats portent sur la simulation uniquement, le chiffre de 98,2 % est un taux d'entraînement et non une évaluation sur tâches inédites, et rien n'est démontré sur le transfert sim-to-real, qui reste le point dur des tolérances serrées et du contact riche. Les vidéos sont publiées sur le site du projet, sans que l'on sache quelle part des essais elles représentent.
Les auteurs se placent explicitement dans la lignée d'AlphaGo puis AlphaGo Zero, où l'apprentissage par renforcement à grande échelle avait découvert des stratégies sans qu'on lui prescrive comment gagner. La NIST Assembly Task Board #1, référence de l'évaluation en manipulation, combine insertions fines de petites pièces à faible jeu et enchaînements longs nécessitant des récupérations sur erreur. Les approches concurrentes s'appuient plutôt sur l'imitation et les modèles vision-langage-action (VLA), qui misent sur les données réelles et la généralisation, là où AlphaNIST parie sur la simulation massive et une supervision minimale. La suite logique serait un test sur matériel réel, avec randomisation de domaine et gestion des erreurs de perception, avant de juger de la portée industrielle de l'approche.
Pas d\'impact direct sur la France/UE
Dans nos dossiers




