Microsoft développe une technologie de saisie Eye-Gaze ​​qui permet aux utilisateurs d’écrire avec leurs yeux

Microsoft pourrait lancer une technologie de saisie Eye-Gaze ​​qui aiderait les utilisateurs à taper et à interagir avec des applications en utilisant uniquement leurs yeux, selon le brevet publié récemment et qui peut être lu ici .

La technologie utilise une saisie dite « sans attente », ce qui signifie que les utilisateurs peuvent taper simplement en regardant les touches sur un écran. Mais il peut également être utilisé pour interagir avec d’autres applications en les regardant : par exemple, si un utilisateur regarde un bouton dans un navigateur Web, le système peut cliquer sur le bouton à sa place.

Cela signifie que les utilisateurs n’auront pas à regarder les boutons pendant de longues périodes, car la technologie utiliserait le système sans attente pour donner un sens précis au regard de l’utilisateur et proposer des solutions.

Utilisée dans un système d’exploitation tel que Windows, cette technologie pourrait permettre aux utilisateurs de contrôler divers paramètres tels que le volume audio ou la luminosité en bougeant les yeux. Il ne se limiterait pas à certaines applications, car il pourrait être étendu pour devenir une nouvelle façon d’interagir avec les appareils.

L’aspect le plus intéressant de cette technologie est qu’elle utilise également un modèle basé sur l’IA qui rassemble des informations sur les utilisateurs pour faire des prédictions et des suggestions intelligentes. Si l’utilisateur regarde une certaine zone lors de la navigation dans une application ou un système d’exploitation, la technologie associera ces regards à certaines actions.

Microsoft rend également la technologie Eye-Gaze ​​prédictive en utilisant un processeur dit de prédiction, qui devine le mot ou l’action en fonction de l’endroit où l’on regarde. La technologie utilise également des algorithmes intelligents pour proposer des réponses rapides aux actions de l’utilisateur.

Le géant de la technologie basé à Redmond a expérimenté la technologie du regard sur ses casques HoloLens, bien que dans ce cas, l’expérience existe dans un environnement de réalité mixte. L’appareil Vision Pro d’Apple utilise également une technologie similaire, mais les utilisateurs ont toujours besoin que les mouvements de la main se produisent également dans un environnement de réalité mixte.

Cette technologie, cependant, serait utilisée sur tous les appareils, y compris, mais sans s’y limiter, les téléphones mobiles, les tablettes et les ordinateurs personnels, et elle peut être exécutée sur n’importe quelle application dotée de capacités de saisie de texte, comme les applications de messagerie texte, les applications de messagerie électronique. , ou des applications de moteur de recherche.

Pouvons-nous nous attendre à ce type de technologie dans Microsoft Edge ou dans le futur Windows basé sur l’IA ?