
MorFiC : corriger la mauvaise calibration des valeurs pour le transfert zéro-shot chez les quadrupèdes
Une nouvelle version de l'article MorFiC vient d'être publiée sur arXiv (2603.14554), présentant une méthode d'apprentissage par renforcement qui transfère une politique de marche quadrupède vers des robots de morphologie différente sans réentraînement, un transfert dit zero-shot. Entraînée sur un seul robot source en simulation avec randomisation morphologique, elle atteint ce transfert vers sept robots au total, dont les Unitree Go1 et Go2 déployés sans fine-tuning, et affiche sur AlienGo une vitesse de 1,98 m/s contre moins de 0,65 m/s pour les références PPO à conditionnement additif. L'entraînement complet prend deux heures sur un seul robot, contre des dizaines voire des centaines d'heures pour les méthodes de référence entraînées sur plusieurs corps simultanément. Trois métriques de diagnostic du critique (variance expliquée, taux d'inversion du signe de l'avantage, cosinus du gradient de politique) confirment le rôle déterminant du conditionnement proposé dans la direction des mises à jour de politique.
L'enjeu dépasse la performance brute : dans l'apprentissage acteur-critique classique, une fonction de valeur partagée entre morphologies tend à moyenner des cibles incompatibles, ce qui fausse les avantages calculés et dégrade la politique transférée vers un nouveau robot. MorFiC corrige ce biais par un conditionnement multiplicatif du critique sur un latent de morphologie, là où les méthodes existantes utilisent un conditionnement additif. Pour l'industrie robotique, cela ouvre la voie à des politiques de marche déployables sur des flottes hétérogènes sans entraînement massif multi-corps ni architectures généralistes coûteuses, et contredit l'idée reçue selon laquelle seule l'échelle, plus de robots, plus de données, permet la généralisation entre morphologies.
Les approches précédentes reposaient soit sur un entraînement à grande échelle multipliant les corps réels ou générés, soit sur de larges architectures transférables mais gourmandes en calcul et en stockage, deux familles que l'étude prend comme références directes de comparaison. La démonstration reste de nature académique, limitée à sept robots dont les références commerciales Unitree Go1, Go2 et AlienGo, sans partenaire industriel ni calendrier de déploiement réel mentionnés dans l'article. La réduction du temps d'entraînement à deux heures avec un seul robot source suggère toutefois une piste pour rendre ce type de généralisation inter-robots accessible à des équipes sans accès à de grandes fermes de simulation multi-embodiment.
Dans nos dossiers




