OmniInteract : vers un contrôle unifié de l'interaction corps entier pour deux humanoïdes

OmniInteract, un framework décrit dans un preprint arXiv (version 2 révisée), vise à doter deux robots humanoïdes d'un contrôle corps entier unifié pour des interactions physiques coordonnées. Il repose sur deux briques. La première, Surface Contact-Aware Retargeting, s'appuie sur des correspondances de surface denses entre humain et robot pour transposer simultanément les mouvements des deux humanoïdes, en préservant les interfaces de contact explicites et la géométrie locale autour d'elles. La seconde, Scalable Flow-based Interaction Policy, factorise le contrôle en deux niveaux: un socle moteur réutilisable, constitué d'un prior de mouvement corps entier gelé, et des experts conscients du partenaire qui apprennent des corrections résiduelles. Ces experts sont unifiés par du conditional flow matching dans un espace d'action résiduel partagé. Les auteurs annoncent une meilleure fidélité de retargeting, une meilleure coordination entre humanoïdes et une dégradation moindre des performances quand le nombre de compétences augmente. Un déploiement réel est rapporté, avec établissement du contact, coordination stable et récupération après perturbations externes. Le résumé ne chiffre ni le nombre de compétences, ni les plateformes, ni les taux de réussite.

Pour l'industrie, l'intérêt se situe moins dans une démonstration que dans le problème traité: la collaboration physique entre robots, notamment le portage conjoint d'objets, l'assistance ou la manipulation à deux, exige des contacts précis que la plupart des travaux actuels sur les humanoïdes, centrés sur un agent isolé, n'abordent pas. Le retargeting de données de capture humaine reste un goulot d'étranglement, car les différences de proportions déplacent les points de contact et faussent les relations spatiales. Traiter ce point par la géométrie de surface est une piste pragmatique. L'approche résiduelle sur prior gelé répond aussi à un problème connu de l'apprentissage multi-compétences, l'oubli et la perte de fidélité quand la diversité croît. Prudence toutefois: il s'agit d'un résultat de recherche, sans produit ni déploiement commercial. Les expériences réelles décrites n'ont ni échelle ni conditions précisées, et l'absence de métriques dans le résumé empêche d'évaluer la robustesse hors laboratoire.

Ce travail s'inscrit dans la vague de contrôleurs corps entier appris par apprentissage par renforcement et modèles génératifs, qui a fait passer les humanoïdes du suivi de mouvement à des comportements plus généraux, souvent entraînés en simulation puis transférés au réel. L'interaction à deux robots reste nettement moins explorée que le contrôle d'un seul. Côté industriel, des acteurs comme Figure, Tesla, Agility ou Unitree travaillent surtout sur des agents autonomes isolés. La coordination multi-humanoïde reste, à ce stade, un sujet académique. Les suites probables sont des évaluations quantitatives plus détaillées, des tests sur d'autres morphologies et des tâches de collaboration avec objets, mais aucun calendrier de pilote ou de transfert industriel n'est annoncé.