Microsoft entwickelt eine Eye-Gaze-Schreibtechnologie, die es Benutzern ermöglicht, mit den Augen zu schreiben

Laut dem Patent, das kürzlich veröffentlicht wurde und hier gelesen werden kann, könnte Microsoft möglicherweise eine Eye-Gaze-Schreibtechnologie veröffentlichen, die Benutzern das Tippen und Interagieren mit Anwendungen ausschließlich mit ihren Augen erleichtern würde .

Die Technologie nutzt ein sogenanntes „verweilfreies“ Tippen, was bedeutet, dass Benutzer tippen können, indem sie einfach auf die Tasten auf einem Bildschirm schauen. Es kann aber auch verwendet werden, um mit anderen Anwendungen zu interagieren, indem man sie ansieht: Wenn ein Benutzer beispielsweise auf eine Schaltfläche in einem Webbrowser schaut, kann das System für ihn auf die Schaltfläche klicken.

Dies bedeutet, dass Benutzer nicht über längere Zeiträume auf die Tasten blicken müssen, da die Technologie das verweilfreie System nutzt, um den Blick des Benutzers genau zu verstehen und Lösungen zu finden.

In einem Betriebssystem wie Windows eingesetzt, könnte diese Technologie es Benutzern ermöglichen, verschiedene Einstellungen wie Lautstärke oder Helligkeit durch Bewegung ihrer Augen zu steuern. Es wäre nicht nur auf bestimmte Anwendungen beschränkt, sondern kann zu einer neuen Möglichkeit der Interaktion mit Geräten erweitert werden.

Der interessanteste Aspekt dieser Technologie besteht darin, dass sie auch ein KI-basiertes Modell verwendet, das Benutzerinformationen sammelt, um intelligente Vorhersagen und Vorschläge zu treffen. Wenn der Benutzer beim Navigieren in einer Anwendung oder im Betriebssystem auf einen bestimmten Bereich blickt, ordnet die Technologie diese Blicke bestimmten Aktionen zu.

Microsoft macht die Eye-Gaze-Technologie außerdem prädiktiv, indem es einen sogenannten Vorhersageprozessor verwendet, der das Wort oder die Aktion basierend auf dem Blickort errät. Die Technologie nutzt außerdem intelligente Algorithmen, um schnell auf die Aktionen des Benutzers zu reagieren.

Der in Redmond ansässige Technologieriese hat mit der Eye-Gaze-Technologie seiner HoloLens-Headsets experimentiert, obwohl das Erlebnis in diesem Fall in einer Mixed-Reality-Umgebung stattfindet. Das Vision Pro-Gerät von Apple verwendet ebenfalls eine ähnliche Technologie, aber Benutzer benötigen weiterhin Handbewegungen, die auch in einer Mixed-Reality-Umgebung stattfinden.

Diese Technologie würde jedoch auf allen Geräten eingesetzt werden, einschließlich, aber nicht beschränkt auf Mobiltelefone, Tablets und PCs, und sie kann auf jeder Anwendung ausgeführt werden, die über Texteingabefunktionen verfügt, wie z. B. SMS-Apps und E-Mail-Apps oder Suchmaschinen-Apps.

Können wir diese Art von Technologie in Microsoft Edge oder dem zukünftigen KI-basierten Windows erwarten?