De la vidéo au modèle : modélisation automatique des objets linéaires déformables

Une équipe de chercheurs publie sur arXiv (octobre 2026) un cadre « vidéo-to-model » qui génère automatiquement le modèle de mouvement d'un fil de suture déformable à partir d'une simple vidéo. Le pipeline comporte trois étages. Un module de perception localise et suit le fil dans l'image, et produit une séquence ordonnée de nœuds le long du fil. Un réseau de neurones convolutif spatio-temporel analyse ensuite ce mouvement observé et estime les paramètres effectifs d'un modèle structuré de type CBF-CLF-QP. Ce modèle repose sur des fonctions de barrière de contrôle (CBF) et de Lyapunov (CLF), résolues sous forme de programme quadratique (QP). Il décrit le comportement d'une corde avec un nombre réduit de paramètres. Ces paramètres servent enfin à simuler le fil sous une vitesse d'aiguille choisie par l'utilisateur. Les auteurs affirment avoir testé le système sur des configurations de fil et des mouvements jamais vus à l'entraînement. Ils rapportent une reconstruction fiable du comportement et une erreur de suivi faible. L'abstract ne chiffre ni cette erreur, ni le nombre de fils testés, ni la nature des vidéos, simulées ou réelles.

L'intérêt tient à un goulot d'étranglement bien connu de la manipulation d'objets linéaires déformables (câbles, fils, sutures). Leur simulation exige en général un réglage manuel de paramètres physiques (raideur, amortissement, frottement), long et peu transposable d'un matériau à l'autre. Estimer ces paramètres directement depuis la vidéo ouvre la voie à des jumeaux numériques calibrés automatiquement, utiles pour la chirurgie robotisée, la planification de suture et la génération de données de simulation. Cela concerne aussi le câblage industriel, où les harnais et câbles restent un cas difficile d'automatisation. Le choix d'un modèle structuré à peu de paramètres, plutôt que d'un réseau de bout en bout, va dans le sens d'une approche plus interprétable et plus contrôlable, qui limite l'écart sim-to-real. Les limites sont réelles : le résultat est présenté comme « un pas » vers la modélisation automatique, sans comparaison annoncée avec des méthodes de référence ni validation sur un robot en boucle fermée.

Ces travaux s'inscrivent dans la robotique chirurgicale autonome, où la suture est une tâche emblématique (sur la lignée des démonstrations de type STAR) et où la dynamique du fil reste mal modélisée. Ils prolongent le modèle CBF-CLF-QP développé récemment, qui visait à simplifier la caractérisation du mouvement de cordes. Ils croisent aussi la recherche sur la simulation différentiable de matériaux déformables et l'identification de paramètres par apprentissage. Les prochaines étapes naturelles seraient une validation sur vidéos réelles de suture avec occlusions et reflets, une généralisation à d'autres matériaux et la fermeture de la boucle avec un contrôleur robotique. Aucun calendrier de déploiement ou partenaire industriel n'est mentionné à ce stade.