Aller au contenu principal
Le Fil Robotique
Le Fil RobotiqueHumanoïdes · IA physique · Industriel
OA-NBV : planification de vues sensible aux occlusions pour la perception active centrée sur l'humain de robots mobiles
RecherchearXiv cs.RO 

OA-NBV : planification de vues sensible aux occlusions pour la perception active centrée sur l'humain de robots mobiles

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

Des chercheurs présentent OA-NBV (Occlusion-Aware Next-Best-View Planning), un pipeline de planification de point de vue pour robots mobiles confrontés à une personne partiellement masquée par des obstacles, publié sur arXiv sous la référence 2603.11072, en version 2 remplaçant une publication antérieure. Le système évalue les points de vue candidats accessibles au robot à l'aide d'un modèle de visibilité centré sur la cible, qui intègre l'occlusion, l'échelle de la personne dans le champ visuel et la complétude de l'observation. Les auteurs rapportent un taux de réussite supérieur à 90% en simulation comme en essais réels, alors que les méthodes NBV de référence se dégradent nettement dès qu'une occlusion survient. Comparé au meilleur de ces baselines, OA-NBV augmente la surface normalisée occupée par la cible d'au moins 81% et la visibilité des points clés du corps, utilisés pour l'estimation de posture, d'au moins 58%, selon les configurations testées.

L'enjeu dépasse la démonstration en laboratoire: recherche et sauvetage, triage d'urgence et intervention post-catastrophe se déroulent justement dans des environnements encombrés où la visibilité partielle dégrade la détection de personnes ou l'estimation de pose en aval. Or la plupart des méthodes NBV existantes optimisent une exploration générique ou une couverture à long horizon, sans viser l'objectif immédiat d'obtenir une seule vue exploitable d'une personne cachée sous des contraintes de mouvement réelles. En ciblant ce cas d'usage plus étroit, OA-NBV se présente comme un module de sélection de point de vue intégrable à diverses tâches de perception centrées sur l'humain sans refonte de la chaîne d'autonomie, un argument qui parle directement aux intégrateurs confrontés au même écart entre couverture générique et besoin réel de perception.

Le travail s'inscrit dans la lignée des recherches sur le Next-Best-View, historiquement tournées vers l'exploration ou la reconstruction 3D générique, dont OA-NBV se démarque en ciblant la perception active centrée sur l'humain. Ses méthodes de référence sont explicitement présentées comme des approches NBV standards qui échouent dès que l'occlusion s'installe, l'écart précis que la contribution cherche à combler. Il s'agit pour l'instant d'une publication de recherche, un preprint arXiv en version 2, sans plateforme, entreprise ni calendrier de déploiement mentionnés dans le texte, son adoption dépendant d'une intégration dans des piles logicielles existantes et de validations sur d'autres morphologies de robots et des occlusions plus denses que celles testées.

Dans nos dossiers

arXiv cs.RO

À lire aussi

Évaluation de l'état de préhension centrée sur l'humain : transférer l'évaluation subjective aux robots
1arXiv cs.RO 

Évaluation de l'état de préhension centrée sur l'humain : transférer l'évaluation subjective aux robots

Des chercheurs détaillent dans une prépublication arXiv (2609.17540, mise en ligne mi-septembre 2026) un framework qui transféré a un robot le jugement subjectif qu'un humain porte sur la qualité d'une prise appliquée a un objet déformable. Le système associe un modèle vision-langage (VLM), charge de générer semi-automatiquement des labels de supervision, a un prédicteur léger d'état de prise : a partir d'un très petit nombre d'essais annotes manuellement par des humains, utilises comme ancres contextuelles, le VLM propage ce jugement a de larges volumes de données non annotées. Une fois entraine, le prédicteur estime en continu, a partir de mesures tactiles et de force de préhension en série temporelle, si la prise est trop laxiste ou trop serrée, et permet un ajustement rapide de la force en ligne. La méthode a été validée sur trois objets déformables représentatifs, avec une étude d'évaluation humaine réunissant 25 participants charges de juger l'adéquation entre les ajustements du robot et leur propre perception d'une prise appropriée. L'enjeu vise un angle mort connu de la manipulation robotique : saisir un objet déformable (tissu, sac souple, aliment, composant fragile) reste bien plus difficile a automatiser que saisir un objet rigide, car le critère de réussite n'est pas géométrique mais dépend d'un jugement humain qualitatif difficile a formaliser. Les approches de deep learning classiques butent sur ce problème car elles exigent un volume prohibitif d'annotations manuelles pour chaque nouvel objet, ce qui freine leur déploiement dans des environnements industriels varies comme la logistique ou l'agroalimentaire. En réduisant ce besoin d'annotation grâce a un VLM utilise comme générateur de supervision plutôt que comme pilote direct du robot, ce travail illustre une piste distincte de l'approche "VLA de bout en bout" popularisée par des systèmes comme Pi-0, GR00T N2 ou Helix. Ce travail relève de la recherche académique plutôt que d'un produit commercial : il s'agit d'une simple prépublication arXiv, sans partenaire industriel ni déploiement annonce, et les auteurs limitent eux-mêmes leurs conclusions a un cadre expérimental restreint a trois objets. La contribution se positionne comme une brique complémentaire aux modèles de manipulation généralistes actuellement pousses par les laboratoires de robotique humanoïde et industrielle, en ciblant un problème souvent absent des démonstrations grand public : l'ajustement fin de la force de préhension sur des matières molles. Les étapes suivantes attendues pour ce type d'approche consisteraient a étendre la validation a davantage d'objets et de morphologies de robots avant d'envisager un transfert vers des applications industrielles réelles.

RecherchePaper
1 source
MobileOcc : un jeu de données d'occupation sémantique sensible à l'humain pour robots mobiles
2arXiv cs.RO 

MobileOcc : un jeu de données d'occupation sémantique sensible à l'humain pour robots mobiles

Une équipe de recherche publie MobileOcc, un jeu de données d'occupation sémantique 3D pour robots mobiles opérant en environnements piétons denses, un scénario peu couvert comparativement à la conduite autonome. L'article, référencé arXiv 2511.16949, décrit un pipeline d'annotation combinant occupation d'objets statiques et un nouveau cadre d'optimisation de maillage pour les humains : leur géométrie déformable est reconstruite à partir d'images 2D puis affinée avec des points LiDAR associés. Le jeu de données alimente deux benchmarks, la prédiction d'occupation et la prédiction de vitesse des piétons, testés avec des méthodes monoculaires, stéréo et panoptiques dotées de métriques et d'implémentations de référence reproductibles. La méthode d'annotation est aussi validée sur des jeux de données d'estimation de pose humaine 3D, avec des résultats jugés robustes ; le code et les données sont publiés sur autonomousrobots.nl. La perception d'occupation dense est une brique critique pour la navigation sécurisée des robots mobiles au contact d'humains, en entrepôt, en hôpital ou en espace public, où anticiper position et mouvement d'un piéton conditionne l'évitement de collision. La plupart des jeux de données d'occupation 3D existants visaient l'automobile, avec des scènes routières peu représentatives des couloirs et halls parcourus par les robots de service. Modéliser les humains comme des objets déformables plutôt que comme de simples boîtes englobantes, et publier des baselines multi-capteurs reproductibles, comble un manque de standardisation qui facilitera la comparaison des systèmes de perception chez les intégrateurs. Ce travail s'inscrit dans une tendance de transfert des techniques de perception nées pour la conduite autonome vers la robotique mobile et humanoïde, à mesure que LiDAR et architectures d'occupation 3D se banalisent. MobileOcc reste un jeu de données et un protocole d'évaluation académiques, sans déploiement industriel annoncé, et il s'agit d'une version corrigée de la publication initiale sur arXiv. L'ouverture du code et des données vise à établir une référence que d'autres laboratoires pourront reprendre pour comparer leurs modèles de perception en environnement piéton, chantier ouvert tant pour la recherche que pour de futurs usages commerciaux en robotique de service.

RecherchePaper
1 source
Perception active sensible aux objets et aux tâches pour la navigation sûre de manipulateurs mobiles en environnements semi-statiques
3arXiv cs.RO 

Perception active sensible aux objets et aux tâches pour la navigation sûre de manipulateurs mobiles en environnements semi-statiques

Des chercheurs proposent un cadre de perception active qui permet à un manipulateur mobile à nombreux degrés de liberté (DoF) d'inspecter, avec la caméra montée sur sa main, les zones incertaines ou critiques pour la sécurité pendant qu'il navigue. La méthode repose sur une formulation probabiliste de type next-best-view (NBV), c'est-à-dire le choix du prochain point de vue le plus informatif. Cette formulation tient compte des objets et de la tâche : elle privilégie les observations proches du chemin prévu et celles qui entourent des objets incertains ou susceptibles d'avoir bougé. L'objectif de perception est intégré à une commande prédictive hiérarchique par tâches (HTMPC). Celle-ci exploite la redondance cinématique du bras pour ajuster le point de vue, sans jamais dégrader la priorité supérieure, le suivi de la trajectoire de la base. Navigation, maintenance de la carte et perception active forment ainsi une boucle fermée unique. Les essais réels annoncent une meilleure cohérence de la carte, une entropie de carte réduite pour la tâche visée et un risque de navigation moindre que des références passives ou non conscientes de la tâche. Des séquences en simulation et en conditions réelles montrent aussi les réactions du système à des changements de scène contrôlés. Le résumé ne donne aucun chiffre sur le gain, le type de robot, les temps de calcul ni le nombre d'essais. L'enjeu concerne les environnements dits semi-statiques, très courants en logistique, en fabrication et dans les services. Palettes, chariots, bacs et mobilier y changent de place entre deux passages du robot, et la carte mémorisée devient alors fausse sans que rien ne le signale. Pour un manipulateur mobile, le risque dépasse la base : le bras déployé peut heurter un obstacle que la carte ne contenait plus. Utiliser les degrés de liberté excédentaires du bras comme capteur orientable évite d'ajouter des caméras ou de ralentir la mission pour une phase d'inspection dédiée. Le point important pour les intégrateurs est que la perception reste subordonnée à la tâche principale. Ce travail reste toutefois une preuve de concept académique. Les comparaisons se font avec des références choisies par les auteurs, et on ne sait pas encore si le calcul en ligne de la NBV et de la HTMPC tient la charge sur du matériel embarqué, ni si la méthode passe à l'échelle d'un entrepôt ou d'une usine. Ce travail s'inscrit dans une lignée connue : la planification NBV existe depuis des années en reconstruction 3D et en exploration, et la commande hiérarchique par tâches est un outil classique de la robotique redondante. La nouveauté tient à leur combinaison dans une boucle fermée de navigation pour manipulateurs mobiles. Elle intéresse les acteurs qui poussent ces plateformes en conditions réelles : Boston Dynamics avec Spot et son bras, les AMR avec bras de l'intralogistique, ou, côté européen, des équipes comme Exotec en entrepôt. Les modèles de fondation de type VLA traitent plutôt la manipulation que la fiabilité de la carte, et ce type de méthode géométrique et probabiliste les complète donc plus qu'il ne les concurrence. Les suites logiques seraient des tests sur plus longue durée, avec davantage de changements de scène non scriptés et des métriques de sécurité chiffrées, avant tout pilote industriel.

RecherchePaper
1 source
Cadre de contrôle partagé pour robots mobiles avec prédiction d'intention au niveau de la planification
4arXiv cs.RO 

Cadre de contrôle partagé pour robots mobiles avec prédiction d'intention au niveau de la planification

Une équipe de chercheurs propose, dans une nouvelle version d'un preprint arXiv (2511.08912v2), un cadre de contrôle partagé pour robots mobiles qui prédit l'intention de l'opérateur au niveau de la planification. Le système replanifie la trajectoire souhaitée du robot en fonction des intentions humaines inférées. Pour représenter les mouvements futurs, les auteurs introduisent un « domaine d'intention », qui sert de contrainte à la replanification. La prédiction de ce domaine et la replanification sont formulées conjointement comme un processus de décision markovien (MDP), résolu par apprentissage par renforcement profond. Un algorithme de génération de trajectoires humaines fondé sur des diagrammes de Voronoï permet d'entraîner le modèle entièrement en simulation, sans participant humain ni données de démonstration. Selon le résumé, des simulations et des études utilisateurs en conditions réelles montrent une réduction de la charge de travail de l'opérateur et une amélioration de la sécurité, sans perte d'efficacité sur la tâche, par rapport aux approches de téléopération assistée existantes. L'intérêt tient au point d'application. La plupart des systèmes de téléopération assistée corrigent la commande à bas niveau, par exemple en évitant un obstacle ou en lissant une consigne. Ici, l'anticipation se fait en amont, sur le chemin lui-même. Pour un intégrateur ou un exploitant de robots mobiles (AMR, plateformes d'inspection, robots d'assistance) pilotés à distance ou à proximité d'humains, cela vise un gain sur la fatigue cognitive et le risque de collision sans ralentir les opérations. L'entraînement purement en simulation est le second point notable : il évite la collecte coûteuse de démonstrations humaines, principal frein au passage à l'échelle des méthodes d'apprentissage en robotique. Cela reste à nuancer. Le résumé ne donne aucun chiffre sur la réduction de charge, le nombre de participants, les robots utilisés ni les scénarios testés. Sans ces éléments, la portée réelle du résultat, et son écart éventuel avec des environnements industriels encombrés, ne peut pas être évaluée. Ce travail s'inscrit dans la lignée du contrôle partagé et de l'autonomie à initiative mixte, où la recherche cherche à passer d'une simple évitement réactif à une compréhension de l'intention. Les approches concurrentes reposent généralement sur des champs de potentiel, des fonctions de coût fixes ou l'apprentissage à partir de démonstrations, tandis que la voie des modèles généralistes (VLA) vise plutôt l'autonomie complète que le partage de contrôle. Il s'agit ici d'une publication académique, sans produit ni pilote industriel annoncé, et la mention « v2 » indique une révision, probablement après relecture. Les suites logiques seraient des validations sur davantage de plateformes, des tests dans des environnements dynamiques peuplés de personnes et, éventuellement, une intégration dans des solutions de téléopération commerciales. Aucune échéance n'est communiquée.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source