European Commission logo
français français
CORDIS - Résultats de la recherche de l’UE
CORDIS

Multimodal Activity Recognition for Interactive Environments

Article Category

Article available in the following languages:

Les yeux au service des technologies

Comprendre le point de mire des yeux et leur mécanisme peut soutenir les interfaces homme-machine et faire progresser de nombreuses applications de haute technologie.

Économie numérique icon Économie numérique

En matière de hautes technologies, de nombreux systèmes et services récents s'appuient sur la reconnaissance des actions et du comportement de l'homme. Et vu que l'automatisation et l'intelligence artificielle font de plus en plus appel aux interactions homme-machine, il est important de faire progresser cette discipline et de développer son potentiel. L'un des points particulièrement intéressants est de comprendre les mouvements des yeux (la direction du regard, le point de mire du regard et son fonctionnement) et de s'en servir pour faire réagir les machines intelligentes. Le projet MARIE («Multimodal activity recognition for interactive environments») financé par l'UE a cherché à faire progresser les technologies impliquées dans la reconnaissance de l'activité de l'oeil humain. Il a utilisé les mouvements de l'oeil pour détecter l'activité et l'intention de l'utilisateur, et conçu une méthodologie pour évaluer les performances de cette reconnaissance de l'activité. Il s'agissait notamment de classer les mouvements de l'oeil en fonction de l'activité et de faire correspondre des séquences de mouvements. Les partenaires du projet MARIE ont conçu et évalué des algorithmes d'estimation des différents mouvements et signaux de l'oeil, comme la fixation et les clignements, dans différents contextes et situations. L'identification des mouvements de l'oeil a été réalisée lors de la copie d'un texte, de la lecture d'un document, d'une prise de note, de la visualisation d'une vidéo et de la navigation sur Internet. L'équipe est également parvenue à comprendre le processus impliqué dans la lecture pendant un déplacement, par exemple pendant qu'une personne marche ou conduit un véhicule. Le projet a publié les résultats de son travail et établi une base de données des mouvements oculaires, utilisable par d'autres chercheurs. Plusieurs chercheurs ayant travaillé sur le sujet, d'autres ensembles de résultats ont également été publiés. Les résultats ont été diffusés via différents supports et ont été bien accueillis par les chercheurs, soulignant ainsi de succès de la reconnaissance de l'activité par les mouvements oculaires. En outre, le projet MARIE a conçu un système complet d'évaluation, avec la comparaison des données et la notification des erreurs, ouvrant la voie à de futurs résultats plus exacts et plus utiles. Ce système a remédié à des faiblesses notables dans la mesure et de l'évaluation par les chercheurs de leurs progrès dans de domaine. En collaboration avec plus de 30 chercheurs spécialisés, le projet a également défini les prochaines étapes de la recherche. Les implications sont importantes dans de nombreux domaines des hautes technologies, et pourraient conduire à des utilisations dans la sécurité, la médecine, les transports, etc.

Découvrir d’autres articles du même domaine d’application