Création de lunettes intelligentes qui suivent le regard et les expressions faciales, sans caméras

La révolution de la technologie des lunettes est en marche avec la création de lunettes intelligentes révolutionnaires qui captent le regard et les expressions faciales sans recourir à des caméras. Cette avancée spectaculaire ouvre de nouvelles perspectives dans le domaine de la réalité augmentée en offrant une interaction plus intuitive et naturelle. Grâce à ces lunettes innovantes, il devient possible de contrôler des éléments virtuels simplement en suivant le regard et en exprimant des émotions faciales. Cette technologie promet de révolutionner non seulement l'expérience utilisateur, mais également les domaines de la santé, de l'éducation et de l'industrie. Les possibilités offertes par ces lunettes intelligentes sont infinies et promettent de repousser les limites de l'interaction homme-machine.

Des lunettes intelligentes révolutionnaires capables de suivre le regard et les expressions faciales

Les chercheurs de l'Université de Cornell ont franchi une étape majeure en développant une technologie de suivi des expressions faciales pouvant être intégrée à la fois dans des lunettes conventionnelles et des casques de réalité mixte. En particulier, ils ont mis au point deux technologies capables de suivre les mouvements oculaires et de lire les expressions faciales à l'aide de capteurs similaires à ceux d'un sonar.

Ces technologies reposent sur des haut-parleurs et des microphones intégrés aux lunettes conventionnelles pour renvoyer les ondes sonores sur le visage et ainsi capturer les signaux réfléchis des mouvements faciaux et oculaires. L'une de ces technologies, appelée GazeTrak, est un système de suivi oculaire basé sur des signaux acoustiques, tandis que l'autre technologie, nommée EyeEcho, est un système capable de détecter de manière continue et précise les expressions faciales et de les reproduire à travers un avatar en temps réel.

Université de Cornell

GazeTrak et EyeEcho : en quoi consistent-elles

En premier lieu, GazeTrak utilise une technologie capable de suivre la direction du regard de l'utilisateur. Il utilise un haut-parleur et quatre microphones sur chaque monture de lunettes, émettant des ondes sonores inaudibles qui résonnent dans l'œil et sont ensuite captées par les microphones. Ces signaux sonores sont ensuite analysés par un réseau de neurones profond utilisant l'IA pour déterminer la direction du regard de l'utilisateur. Cette technologie est très économe en énergie, ne consommant que 5 % de l'énergie requise par d'autres appareils.

D'autre part, EyeEcho emploie un haut-parleur et un microphone près des charnières des lunettes conventionnelles pour capturer les expressions faciales à travers les mouvements de la peau. Ces signaux sont interprétés par l'IA pour permettre des appels vidéo mains libres via un avatar. Cette technologie peut suivre les expressions faciales de manière continue d'un utilisateur et peut les lire avec seulement quatre minutes de formation préalable, comme l'ont démontré des tests réalisés sur 12 sujets. En effet, c'est une technologie très précise, capable de reconnaître les expressions même lorsque les sujets effectuent diverses activités dans différents environnements.