Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
MotionDLO : suivi hybride événement-image des objets linéaires déformables
RecherchearXiv cs.RO 

MotionDLO : suivi hybride événement-image des objets linéaires déformables

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Publié sur arXiv sous la référence 2608.22398v1, MotionDLO est un framework de suivi en temps réel pour les objets déformables linéaires (câbles, fils, cordes), une catégorie difficile à percevoir en robotique faute de forme rigide. Le système hybride associe des caméras événementielles, à haute résolution temporelle et flux épars, à des caméras classiques à images qui stabilisent la précision spatiale et l'identité de l'objet suivi, via une segmentation couplée à l'algorithme Coherent Point Drift (CPD) selon les principes de la Motion Coherence Theory. Les auteurs rapportent une fréquence de mise à jour de 12 millisecondes et une erreur de suivi de forme, en distance point-à-courbe, allant jusqu'à 0,43 mm ; le code source et les données de démonstration sont publics.

Ce résultat s'attaque à un verrou industriel connu : le suivi de câbles et faisceaux électriques reste un point faible de la manipulation robotique, notamment dans l'assemblage automobile et électronique où le câblage manuel reste difficile à automatiser. Les approches existantes forçaient un compromis entre méthodes événementielles, rapides mais moins précises, et méthodes à base d'images, plus fiables mais plus lentes ou contraintes de sacrifier la sparsité des événements. En combinant les deux sans explosion du coût de calcul, MotionDLO apporte une preuve de concept utile aux intégrateurs visant l'adaptation dynamique de trajectoire en temps réel, par exemple pour le routage de câbles pendant une manipulation.

Le suivi des DLO reposait jusqu'ici sur deux approches limitées : le suivi par image, pénalisé par le flou de mouvement et la latence lors de déplacements rapides, et le suivi événementiel, réactif mais bruité en l'absence d'image de référence stable. CPD et la Motion Coherence Theory, outils établis en recouvrement de nuages de points, sont ici adaptés au suivi temporel continu. Il s'agit à ce stade d'une publication de recherche fraîchement déposée sur arXiv, sans partenaire industriel ni déploiement réel mentionné : les chiffres proviennent de tests en laboratoire sur des jeux de données publiés par les auteurs eux-mêmes. La mise à disposition du code ouvre la voie à une reproduction indépendante par la communauté robotique, étape préalable à une intégration dans des pipelines industriels pour l'insertion de câbles ou la suture assistée.

Dans nos dossiers

Manipulation robotiquearXiv cs.RO

À lire aussi

De la vidéo au modèle : modélisation automatique des objets linéaires déformables
1arXiv cs.RO 

De la vidéo au modèle : modélisation automatique des objets linéaires déformables

Une équipe de chercheurs publie sur arXiv (octobre 2026) un cadre « vidéo-to-model » qui génère automatiquement le modèle de mouvement d'un fil de suture déformable à partir d'une simple vidéo. Le pipeline comporte trois étages. Un module de perception localise et suit le fil dans l'image, et produit une séquence ordonnée de nœuds le long du fil. Un réseau de neurones convolutif spatio-temporel analyse ensuite ce mouvement observé et estime les paramètres effectifs d'un modèle structuré de type CBF-CLF-QP. Ce modèle repose sur des fonctions de barrière de contrôle (CBF) et de Lyapunov (CLF), résolues sous forme de programme quadratique (QP). Il décrit le comportement d'une corde avec un nombre réduit de paramètres. Ces paramètres servent enfin à simuler le fil sous une vitesse d'aiguille choisie par l'utilisateur. Les auteurs affirment avoir testé le système sur des configurations de fil et des mouvements jamais vus à l'entraînement. Ils rapportent une reconstruction fiable du comportement et une erreur de suivi faible. L'abstract ne chiffre ni cette erreur, ni le nombre de fils testés, ni la nature des vidéos, simulées ou réelles. L'intérêt tient à un goulot d'étranglement bien connu de la manipulation d'objets linéaires déformables (câbles, fils, sutures). Leur simulation exige en général un réglage manuel de paramètres physiques (raideur, amortissement, frottement), long et peu transposable d'un matériau à l'autre. Estimer ces paramètres directement depuis la vidéo ouvre la voie à des jumeaux numériques calibrés automatiquement, utiles pour la chirurgie robotisée, la planification de suture et la génération de données de simulation. Cela concerne aussi le câblage industriel, où les harnais et câbles restent un cas difficile d'automatisation. Le choix d'un modèle structuré à peu de paramètres, plutôt que d'un réseau de bout en bout, va dans le sens d'une approche plus interprétable et plus contrôlable, qui limite l'écart sim-to-real. Les limites sont réelles : le résultat est présenté comme « un pas » vers la modélisation automatique, sans comparaison annoncée avec des méthodes de référence ni validation sur un robot en boucle fermée. Ces travaux s'inscrivent dans la robotique chirurgicale autonome, où la suture est une tâche emblématique (sur la lignée des démonstrations de type STAR) et où la dynamique du fil reste mal modélisée. Ils prolongent le modèle CBF-CLF-QP développé récemment, qui visait à simplifier la caractérisation du mouvement de cordes. Ils croisent aussi la recherche sur la simulation différentiable de matériaux déformables et l'identification de paramètres par apprentissage. Les prochaines étapes naturelles seraient une validation sur vidéos réelles de suture avec occlusions et reflets, une généralisation à d'autres matériaux et la fermeture de la boucle avec un contrôleur robotique. Aucun calendrier de déploiement ou partenaire industriel n'est mentionné à ce stade.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
DLO-Lab : évaluation de la manipulation d'objets linéaires déformables avec physique différentiable
2arXiv cs.RO 

DLO-Lab : évaluation de la manipulation d'objets linéaires déformables avec physique différentiable

Une équipe de chercheurs a publié sur arXiv (arXiv:2606.04206) DLO-Lab, un cadre de recherche combinant simulateur physique différentiable et suite de benchmarks dédiée à la manipulation robotique d'objets linéaires déformables (DLO), soit concrètement les câbles, cordes et élastiques. Le simulateur modélise explicitement une gamme étendue de propriétés matérielles : extensibilité et inextensibilité, élasticité, plasticité en flexion, ainsi que les interactions complexes entre objets. Sur cette base, les auteurs proposent un ensemble de tâches représentatives qui mettent en évidence deux difficultés centrales de la manipulation DLO : la complexité topologique inhérente aux objets déformables et la sensibilité aux points de saisie. Ils introduisent également un agent spécialisé qui sélectionne des points de préhension stratégiques et décompose les tâches longues en sous-séquences pour maximiser l'autorité de contrôle. L'ensemble est évalué avec plusieurs algorithmes d'apprentissage de politiques, et des expériences de transfert sim-to-real sont conduites pour valider le potentiel applicatif de la plateforme. L'enjeu industriel est direct : la manipulation de câbles et de fils est l'un des derniers verrous majeurs de l'automatisation en électronique, câblage automobile et logistique. Les approches antérieures se heurtaient à un double plafond de verre, étroitesse des tâches supportées et impossibilité pratique de collecter des données réelles suffisamment diversifiées. L'usage d'un simulateur différentiable change l'équation : les gradients physiques peuvent guider directement l'optimisation des politiques, ce qui réduit le besoin en démonstrations humaines et rend l'apprentissage plus transférable. Les expériences sim-to-real présentées dans l'article constituent la mesure critique : elles indiquent si le fossé simulation-réalité est franchissable pour ce type d'objets réputés imprévisibles, bien que les conditions expérimentales précises (matériaux testés, taux de succès chiffrés) restent à examiner dans le détail du papier complet. La manipulation DLO est un problème actif depuis les années 2010, avec des travaux notables du MIT, de Berkeley (notamment autour de l'équipe Pieter Abbeel) et, côté européen, de l'Inria et du DLR. Les benchmarks existants comme RLBench ou ManipulaTHOR ne couvrent pas spécifiquement les propriétés physiques des déformables linéaires, ce qui justifie la niche que vise DLO-Lab. Aucun déploiement industriel ni partenariat n'est annoncé à ce stade : il s'agit d'une contribution académique pré-print, non encore évaluée par les pairs. Les prochaines étapes naturelles seraient une intégration dans des environnements de simulation largement adoptés comme Isaac Sim ou MuJoCo, et une validation sur des cas industriels concrets tels que le câblage de faisceaux dans l'automobile.

UELes équipes européennes (Inria, DLR) sont actives sur la manipulation DLO, et l'industrie automobile européenne, notamment le câblage de faisceaux, constitue l'un des débouchés industriels directs visés par ces travaux de simulation différentiable.

RecherchePaper
1 source
ForwardDLO : appariement bimanuel de forme pour objets linéaires déformables non contraints
3arXiv cs.RO 

ForwardDLO : appariement bimanuel de forme pour objets linéaires déformables non contraints

Des chercheurs en robotique, dont l'identité reste masquée dans le cadre d'une soumission en double aveugle (arXiv:2609.18455), présentent ForwardDLO, un modèle de dynamique latente récurrent destiné à la manipulation bimanuelle d'objets linéaires déformables non fixés, cordes ou câbles posés librement sur une surface, que deux bras robotiques peuvent saisir et déplacer en n'importe quel point de leur longueur. Le modèle prédit à chaque pas de temps le déplacement de chaque segment de la corde à partir de son état observé, sans opérations explicites de segment à segment, ce qui rend son évaluation par lots peu coûteuse en calcul. En prédiction en boucle ouverte sur des mouvements réels de corde, il atteint la plus faible erreur parmi les modèles appris testés, 13% sous la meilleure référence. Dans un budget de temps fixe, il évalue de 8 à 22 fois plus d'actions candidates que des modèles de précision comparable, tout en égalant leurs résultats en mise en forme réelle de corde. Sur une tâche simulée de routage de câble à 30 Hz, ce débit supérieur se traduit par 98% de réussite contre 30% au maximum pour les modèles de référence à budget égal. Les auteurs publient le modèle, le code et un jeu de données de 2,42 millions de transitions simulées et 14 107 transitions réelles. L'enjeu pour l'industrie robotique tient moins à la précision brute qu'au goulot d'étranglement du calcul : manipuler une corde ou un câble non contraint implique un espace d'actions combinatoirement immense, et c'est le coût de chaque prédiction qui limite ce qu'un planificateur peut explorer en temps réel. En gagnant un facteur de 8 à 22 en débit de recherche d'actions à précision égale, ForwardDLO s'attaque directement à cette limite, pertinente pour le routage de câbles, l'assemblage de harnais électriques, le démêlage ou la suture chirurgicale assistée. Il faut toutefois noter que le résultat le plus spectaculaire, 98% contre 30% de réussite, provient d'une tâche de routage simulée et non d'un déploiement physique validé sur robot réel, ce qui appelle une lecture prudente au-delà des essais réels de mise en forme de corde. La manipulation d'objets linéaires déformables reste un défi de longue date en robotique, les approches précédentes reposant souvent sur des modèles de dynamique coûteux, notamment des réseaux de graphes modélisant explicitement les interactions entre segments, ce qui limite le nombre d'actions évaluables par unité de temps. ForwardDLO s'en distingue par un choix architectural qui sacrifie cette granularité explicite pour gagner en vitesse sans perdre en précision. Le statut de soumission anonyme suggère un article en cours d'évaluation pour une conférence en double aveugle, avec publication complète du code et des données prévue à la levée de l'anonymat.

RecherchePaper
1 source
AssistDLO : téléopération assistée pour la manipulation d'objets linéaires déformables
4arXiv cs.RO 

AssistDLO : téléopération assistée pour la manipulation d'objets linéaires déformables

Des chercheurs ont publié AssistDLO, un cadre de téléopération assistée conçu pour la manipulation d'objets linéaires déformables (DLOs, Deformable Linear Objects), tels que câbles, cordes ou fils industriels. Le système combine trois composants : une estimation d'état en temps réel par vision multi-vue, une assistance visuelle (VA) projetée dans l'interface opérateur, et un contrôleur de partage d'autonomie géométriquement conscient, baptisé SA-CBF, fondé sur les fonctions de barrière de contrôle (Control Barrier Functions). Le tout a été validé dans une étude utilisateur bimanuelle de dénouage de nœuds (N=22), sur des cordes de longueurs et rigidités variables. Le résultat clé : pour les opérateurs novices, SA-CBF fait passer le taux de succès de 71 % à 88 %, tandis que les opérateurs experts préfèrent la VA seule. Ce travail s'attaque à un verrou persistant de la robotique industrielle : les DLOs sont pratiquement impossibles à modéliser en temps réel en raison de leur espace de configuration de dimension infinie et de leurs dynamiques non linéaires. En téléopération, l'incertitude de profondeur aggrave encore la perception d'état. L'apport de SA-CBF est de fonctionner comme un entonnoir géométrique, guidant la saisie précise sans court-circuiter l'autorité de haut niveau de l'opérateur, contrairement aux méthodes classiques d'autonomie partagée qui utilisent de simples attracteurs géométriques. Pour des applications concrètes, câblage automobile, assemblage électronique ou chirurgie assistée, la démonstration d'un gain mesurable en conditions utilisateur réelles est plus significative qu'un résultat de simulation. Le problème de manipulation des DLOs mobilise la communauté robotique depuis plus d'une décennie, avec des approches allant du contrôle par retour visuel pur aux modèles physiques réduits. AssistDLO se distingue en intégrant explicitement le profil de l'opérateur dans la stratégie d'assistance, une piste dite "user-aware shared autonomy" encore peu exploitée à ce niveau de rigueur expérimentale. Les prochaines étapes probables incluent l'extension à des câbles multiconducteurs et l'intégration sur des plateformes industrielles existantes, potentiellement en lien avec des travaux européens sur la cobotique flexible. La conclusion des auteurs est claire : aucune stratégie fixe ne peut couvrir l'ensemble du spectre opérateur-matériau, et l'autonomie adaptative n'est plus une option mais une nécessité.

RecherchePaper
1 source