Aller au contenu principal
OmniAI : une interface de projection aérienne adaptative pour l'interaction humain-drone
RecherchearXiv cs.RO 

OmniAI : une interface de projection aérienne adaptative pour l'interaction humain-drone

1 source couvre ce sujet·Source originale ↗·
Résumé IASource uniqueImpact UE

OmniAI est un agent aérien embarqué présenté dans un article publié sur arXiv (2608.00721v1), déposé en catégorie "nouveau". Le système équipe un drone d'un projecteur laser MEMS monté sur servomoteur, capable de basculer l'affichage entre un écran embarqué et les surfaces environnantes disponibles à proximité, texte et images compris. La détection des surfaces de projection se fait en temps réel grâce à des capteurs RGB-D combinés à un ajustement de plan par RANSAC, sans nécessiter de cartographie préalable de l'environnement. Le contenu affiché provient d'un pipeline utilisant un grand modèle de langage augmenté par recherche web, et l'ensemble du système, mouvement du drone comme contenu projeté, peut être piloté indifféremment par la voix ou par des gestes effectués en l'air, les deux modalités offrant un contrôle fonctionnellement équivalent.

L'intérêt de cette approche pour la recherche en interaction homme-drone tient à la manière dont elle résout un problème récurrent: les drones évoluant en environnement humain manquent généralement d'interfaces ancrées spatialement pour communiquer de façon située, se limitant à un écran fixe ou une application mobile déconnectée du contexte physique. En transformant n'importe quelle surface proche en support d'affichage détecté à la volée, OmniAI propose une forme de réalité augmentée spatiale mobile, portée par le drone lui-même plutôt que par des lunettes ou un smartphone. Il s'agit toutefois d'un prototype de recherche décrit dans un article académique, et non d'un produit commercialisé ou d'un déploiement en conditions réelles: l'abstract ne fournit ni mesures de performance chiffrées ni retours d'usage.

Ce travail s'inscrit dans la lignée des recherches sur les interfaces embarquées pour drones et sur les systèmes de projection spatiale en réalité augmentée, deux domaines jusqu'ici largement traités séparément. En combinant projection adaptative, reconnaissance vocale, gestuelle et mobilité aérienne dans un seul agent, les auteurs cherchent à démontrer la viabilité d'une interface unifiée pour la communication homme-drone contextuelle. La publication récente sur arXiv suggère une présentation prochaine dans une conférence spécialisée en interaction homme-machine ou en robotique, sans que l'article ne précise pour l'instant de calendrier.

Dans nos dossiers

À lire aussi

Adaptation de la personnalité par élicitation conversationnelle dans l'interaction humain-robot (PACE)
1arXiv cs.RO 

Adaptation de la personnalité par élicitation conversationnelle dans l'interaction humain-robot (PACE)

PACE (Persona Adaptation through Conversational Elicitation) est un framework présenté par des chercheurs pour équiper le robot humanoïde Ameca, du fabricant britannique Engineered Arts, d'une identité conversationnelle adaptable plutôt que figée. Le système repose sur un pipeline d'élicitation interactive de persona : via une session de questions-réponses avec l'utilisateur, le robot construit dynamiquement un profil psychologique structuré, ensuite compilé en un prompt multi-dimensionnel qui pilote son comportement. Les auteurs détaillent aussi l'intégration embarquée nécessaire pour traduire cette spécification textuelle en comportements multimodaux expressifs (voix, gestuelle, expressions faciales) sur la plateforme Ameca. Le système a été évalué lors d'une étude d'interaction homme-robot comparant les personas générées dynamiquement à une persona générique de référence, sur cinq axes : confiance de l'utilisateur, anthropomorphisme perçu, cohérence de la persona dans le temps, pertinence personnelle et qualité globale de l'interaction. Une démonstration vidéo est disponible en ligne, mais l'article ne publie pas de métriques chiffrées détaillées ni la taille de l'échantillon testé. Cette approche s'attaque à un problème concret du secteur des robots humanoïdes et compagnons conversationnels : la plupart des identités robotiques restent codées en dur par les concepteurs, identiques pour chaque utilisateur, ce qui limite l'engagement et la confiance sur la durée. En générant la persona à la volée à partir d'un échange conversationnel, PACE ouvre une voie vers des assistants humanoïdes personnalisables à l'échelle, un enjeu direct pour les intégrateurs qui déploient des robots d'accueil, d'assistance ou de représentation dans des contextes variés (retail, événementiel, santé). Si les gains mesurés sur la confiance et l'anthropomorphisme perçu se confirment au-delà de cette étude pilote, cela renforcerait l'idée que la personnalisation conversationnelle, plus que le seul réalisme physique, constitue un levier clé de l'acceptabilité des robots sociaux. Le travail s'inscrit dans la lignée des recherches en interaction homme-robot cherchant à dépasser les personas scriptées, une limite documentée depuis plusieurs années sur des plateformes conversationnelles comme Pepper ou Sophia. Ameca, connue pour l'expressivité de son visage animé, sert ici de banc d'essai plutôt que de produit commercial déployé en volume : l'étude reste au stade académique, publiée sur arXiv sans partenaire industriel annoncé. Les auteurs présentent PACE comme une voie scalable vers des identités fiables pour les assistants humanoïdes incarnés, sans préciser de calendrier de transfert vers des déploiements réels ni de suite de publication prévue.

RecherchePaper
1 source
OmniInteract : vers un contrôle unifié de l'interaction corps entier pour deux humanoïdes
2arXiv cs.RO 

OmniInteract : vers un contrôle unifié de l'interaction corps entier pour deux humanoïdes

OmniInteract, un framework décrit dans un preprint arXiv (version 2 révisée), vise à doter deux robots humanoïdes d'un contrôle corps entier unifié pour des interactions physiques coordonnées. Il repose sur deux briques. La première, Surface Contact-Aware Retargeting, s'appuie sur des correspondances de surface denses entre humain et robot pour transposer simultanément les mouvements des deux humanoïdes, en préservant les interfaces de contact explicites et la géométrie locale autour d'elles. La seconde, Scalable Flow-based Interaction Policy, factorise le contrôle en deux niveaux: un socle moteur réutilisable, constitué d'un prior de mouvement corps entier gelé, et des experts conscients du partenaire qui apprennent des corrections résiduelles. Ces experts sont unifiés par du conditional flow matching dans un espace d'action résiduel partagé. Les auteurs annoncent une meilleure fidélité de retargeting, une meilleure coordination entre humanoïdes et une dégradation moindre des performances quand le nombre de compétences augmente. Un déploiement réel est rapporté, avec établissement du contact, coordination stable et récupération après perturbations externes. Le résumé ne chiffre ni le nombre de compétences, ni les plateformes, ni les taux de réussite. Pour l'industrie, l'intérêt se situe moins dans une démonstration que dans le problème traité: la collaboration physique entre robots, notamment le portage conjoint d'objets, l'assistance ou la manipulation à deux, exige des contacts précis que la plupart des travaux actuels sur les humanoïdes, centrés sur un agent isolé, n'abordent pas. Le retargeting de données de capture humaine reste un goulot d'étranglement, car les différences de proportions déplacent les points de contact et faussent les relations spatiales. Traiter ce point par la géométrie de surface est une piste pragmatique. L'approche résiduelle sur prior gelé répond aussi à un problème connu de l'apprentissage multi-compétences, l'oubli et la perte de fidélité quand la diversité croît. Prudence toutefois: il s'agit d'un résultat de recherche, sans produit ni déploiement commercial. Les expériences réelles décrites n'ont ni échelle ni conditions précisées, et l'absence de métriques dans le résumé empêche d'évaluer la robustesse hors laboratoire. Ce travail s'inscrit dans la vague de contrôleurs corps entier appris par apprentissage par renforcement et modèles génératifs, qui a fait passer les humanoïdes du suivi de mouvement à des comportements plus généraux, souvent entraînés en simulation puis transférés au réel. L'interaction à deux robots reste nettement moins explorée que le contrôle d'un seul. Côté industriel, des acteurs comme Figure, Tesla, Agility ou Unitree travaillent surtout sur des agents autonomes isolés. La coordination multi-humanoïde reste, à ce stade, un sujet académique. Les suites probables sont des évaluations quantitatives plus détaillées, des tests sur d'autres morphologies et des tâches de collaboration avec objets, mais aucun calendrier de pilote ou de transfert industriel n'est annoncé.

UEPas d\'impact direct sur la France/UE

RecherchePaper
1 source
Robot aérien transformable à liaisons flexibles intégrant des propulseurs pour une manipulation adaptative
3arXiv cs.RO 

Robot aérien transformable à liaisons flexibles intégrant des propulseurs pour une manipulation adaptative

Des chercheurs décrivent, dans un preprint mis en ligne sur arXiv (référence 2609.19328v1), un robot aérien "morphogène" doté de bras continuum flexibles intégrant des rotors répartis sur toute leur longueur. Contrairement aux manipulateurs aériens classiques, à bras rigide et poussée fixe, cette architecture place des hélices directement le long de liens souples qui épousent passivement la forme de l'environnement rencontré, tout en élargissant l'espace de forces et de couples ("wrench space") disponible pour l'effecteur terminal. Le principal verrou technique tenait aux vibrations des liens légers et flexibles : l'équipe a développé une structure composite à lame-ressort offrant à la fois une forte rigidité en torsion et en flexion verticale, associée à des méthodes de contrôle actif de suppression vibratoire. Le prototype a démontré un vol stable ainsi que plusieurs tâches de manipulation aérienne en conditions de laboratoire. Pour l'industrie de la robotique aérienne, ces travaux attaquent un compromis persistant : les manipulateurs souples s'adaptent bien à des environnements irréguliers mais exercent peu de force, tandis que les systèmes multi-propulseurs rigides gagnent en capacité de poussée au prix de la compliance passive. Réunir les deux propriétés dans un même bras, ce qu'aucun robot aérien n'avait fait selon les auteurs, ouvrirait des applications d'inspection ou de manipulation d'objets irréguliers en espace confiné, là où un drone doit toucher et saisir sans trajectoire rigide préplanifiée. L'apport le plus concret pour des intégrateurs reste la résolution du problème vibratoire, obstacle connu qui déstabilise le vol ou dégrade la précision de manipulation dès qu'on allège et assouplit une structure de bras. La manipulation aérienne est un champ de recherche actif depuis plusieurs années, mais les publications se répartissent jusqu'ici entre deux familles distinctes : des robots à bras articulés rigides, plus lourds mais capables de forces élevées, et des pinces souples montées sur drones à poussée fixe, plus adaptables mais limitées en effort. Ce papier revendique explicitement la première fusion des deux approches, propulsion intégrée et structure continuum flexible. Il s'agit toutefois d'un prototype académique à ce stade : aucun partenaire industriel, site de déploiement ni calendrier ne sont mentionnés dans le résumé. La suite logique passerait par des essais de robustesse hors laboratoire, une caractérisation de charge utile et une comparaison chiffrée avec les solutions rigides existantes avant tout transfert industriel.

RecherchePaper
1 source
Contact-Persistent Full Actuation pour l'interaction physique aérienne
4arXiv cs.RO 

Contact-Persistent Full Actuation pour l'interaction physique aérienne

Le laboratoire à l'origine de cette étude propose un nouveau cadre théorique pour certifier l'actionnement complet des drones (UAV) lors de contacts physiques prolongés, un point aveugle des méthodes actuelles. Publié sur arXiv le 24 juillet 2026, l'article part d'un constat simple : les drones dits "fully actuated" sont aujourd'hui validés soit par une condition de rang sur leur matrice d'allocation de commande, soit par leurs performances de suivi en vol libre, deux critères insuffisants dès qu'un robot appuie contre une surface. En contact soutenu, une partie du wrench (force et couple combinés) disponible est absorbée par la tâche elle-même, ne laissant qu'un wrench résiduel pour stabiliser l'appareil. Les chercheurs modélisent le corps rigide sur R3×SO(3) et introduisent une cartographie de wrench dépendante de la morphologie, couvrant les architectures à inclinaison fixe, à inclinaison variable, coaxiales et surdimensionnées en rotors. Ils définissent des ensembles de wrench faisables sous contraintes d'actionneurs, des ensembles résiduels sous charge de tâche, et des marges d'autorité résiduelle. Le résultat central : l'actionnement complet persistant au contact équivaut à ce que le wrench de tâche reste strictement à l'intérieur du polytope de wrench faisable contraint, le rayon d'autorité résiduelle correspondant exactement à la distance jusqu'à la frontière de ce polytope. Pour l'industrie de la manipulation aérienne, ce travail comble un vrai décalage entre théorie et pratique. Un hexarotor incliné peut afficher une matrice d'allocation de rang plein, critère habituellement jugé suffisant, tout en étant incapable d'exécuter une tâche de contact de façon stable. C'est un exemple concret du fossé entre démonstration en vol libre et réalité opérationnelle, que les intégrateurs travaillant sur l'inspection par contact, le ponçage aérien ou la manipulation en environnement industriel doivent désormais intégrer dans leurs choix de conception. Les certificats proposés (marge résiduelle signée, allocation maximisant le slack, condition d'implémentabilité robuste) offrent des outils directement exploitables comme filtre de sécurité conscient des marges. Les drones surdimensionnés en rotors ou à inclinaison variable se sont développés ces dernières années comme alternative aux quadrirotors sous-actionnés classiques, précisément pour permettre l'interaction physique aérienne. L'évaluation numérique, menée sur un hexarotor incliné abstrait plutôt que sur un prototype physique, montre que les angles d'inclinaison intermédiaires préservent l'autorité résiduelle en poussée, tandis que des inclinaisons trop faibles ou excessives échouent respectivement par déficience de force latérale ou perte de marge de vol stationnaire. Une validation matérielle reste la prochaine étape logique pour confirmer ces prédictions théoriques.

RecherchePaper
1 source