Les chercheurs ont construit des lunettes sonar qui suivent les mouvements du visage pour une communication silencieuse

Un chercheur de l’Université Cornell a mis au point des lunettes sonar qui vous « entendent » sans parler. L’accessoire pour lunettes utilise de minuscules microphones et haut-parleurs pour lire les mots que vous prononcez lorsque vous lui commandez silencieusement de mettre en pause ou de sauter une piste musicale, d’entrer un mot de passe sans toucher votre téléphone ou de travailler sur des modèles CAO sans clavier.

Cornell Ph.D. L’étudiant Ruidong Zhang a développé le système, qui s’appuie sur un projet similaire que l’équipe a créé à l’aide d’un écouteur sans fil – et des modèles antérieurs qui reposaient sur des caméras. Le facteur de forme des lunettes élimine le besoin de faire face à un appareil photo ou de mettre quelque chose dans votre oreille. « La plupart des technologies de reconnaissance vocale silencieuse se limitent à un ensemble sélectionné de commandes prédéterminées et obligent l’utilisateur à faire face ou à porter une caméra, ce qui n’est ni pratique ni faisable », a déclaré Cheng Zhang, professeur adjoint de science de l’information à Cornell. « Nous déplaçons le sonar sur le corps. »

Les chercheurs affirment que le système ne nécessite que quelques minutes de données d’entraînement (par exemple, la lecture d’une série de chiffres) pour apprendre les schémas de parole d’un utilisateur. Ensuite, une fois qu’il est prêt à fonctionner, il envoie et reçoit des ondes sonores sur votre visage, détectant les mouvements de la bouche tout en utilisant un algorithme d’apprentissage en profondeur pour analyser les profils d’écho en temps réel « avec une précision d’environ 95 %.

Ruidong Zhang / Université Cornell

Le système le fait tout en déchargeant le traitement des données (sans fil) sur votre smartphone, permettant à l’accessoire de rester petit et discret. La version actuelle offre environ 10 heures d’autonomie pour la détection acoustique. De plus, aucune donnée ne quitte votre téléphone, ce qui élimine les problèmes de confidentialité. « Nous sommes très enthousiasmés par ce système, car il fait vraiment progresser les performances et la confidentialité », a déclaré Cheng Zhang. « Il est petit, à faible consommation d’énergie et sensible à la confidentialité, qui sont toutes des caractéristiques importantes pour déployer de nouvelles technologies portables dans le monde réel. »

La confidentialité entre également en jeu lorsque l’on examine les utilisations potentielles dans le monde réel. Par exemple, Ruidong Zhang suggère de l’utiliser pour contrôler les commandes de lecture de musique (mains et yeux libres) dans une bibliothèque silencieuse ou pour dicter un message lors d’un concert bruyant où les options standard échoueraient. Peut-être que sa perspective la plus excitante est que les personnes souffrant de certains types de troubles de la parole l’utilisent pour alimenter silencieusement le dialogue dans un synthétiseur vocal, qui prononce alors les mots à haute voix.

Si les choses se passent comme prévu, vous pourrez un jour mettre la main dessus. L’équipe du laboratoire d’interfaces informatiques intelligentes pour les interactions futures (SciFi) de Cornell explore la commercialisation de la technologie à l’aide d’un programme de financement de Cornell. Ils étudient également des applications de lunettes intelligentes pour suivre les mouvements du visage, des yeux et du haut du corps. « Nous pensons que le verre sera une plate-forme informatique personnelle importante pour comprendre les activités humaines dans les environnements quotidiens », a déclaré Cheng Zhang.

Source-145