Bestätigte KI-Funktionen in Windows 11 Version 24H2

• Microsoft wird in Windows 11 24H2 eine Reihe neuer geräteinterner KI-Funktionen einführen.
• Zu den hervorgehobenen Funktionen gehören Windows Recall, Windows Studio-Effekte, Live-Untertitel, Auto Super Resolution, Voice Clarity, Voice Focus, Click to Do, Cocreator in der Paint-App und Restyle Image in der Fotos-App.
• Darüber hinaus wird es Verbesserungen an Copilot für Windows 11 geben.

Seit dem 1. Oktober ist Windows 11 24H2 (Update 2024) für berechtigte Geräte verfügbar, allerdings fehlen zunächst die erwarteten KI-Funktionen. Microsoft investiert Zeit, um sicherzustellen, dass diese Funktionen vollständig für die Bereitstellung vorbereitet sind. Dennoch wurden Details der ersten KI-Angebote bekannt gegeben, beginnend mit der Integration der Windows Copilot Runtime.

Diese überarbeitete Version des Betriebssystems führt mehrere exklusive KI-Funktionen ein, die für Copilot+-PCs entwickelt wurden, darunter Windows Recall, Windows Studio Effects, Live Captions (einschließlich Echtzeitübersetzungen), Auto Super Resolution, Voice Clarity, Click to Do, Voice Focus, Cocreator in der Paint-App und Restyle Image in der Fotos-App.

Diese Neuerungen basieren auf der neuen „Windows Copilot Runtime“, einer Systemkomponente, die über 40 KI-Modelle integriert, die direkt auf dem Gerät laufen und die notwendige Infrastruktur für ihre Funktionen bereitstellen.

Dies erleichtert Entwicklern auch die Einbettung von KI-Funktionen in ihre Anwendungen über die neuen APIs, die in der Windows Copilot-Bibliothek verfügbar sind .

KI-Funktionen in Windows 11 Version 24H2

Hier ist eine Zusammenfassung der KI-Funktionen, die für Windows im Jahr 2024 und darüber hinaus erwartet werden.

Windows-Rückruf

Windows Recall fungiert als fotografische Erinnerung im Hintergrund und erfasst automatisch Schnappschüsse Ihrer Aktivitäten auf dem Computer. Mithilfe mehrerer lokal ausgeführter KI-Modelle macht diese Funktion alle Inhalte – ob Text oder Bilder – mithilfe natürlicher Sprache durchsuchbar.

Diese innovative Recall-Funktion ist ausschließlich auf Copilot+-PCs verfügbar, die mit kompatibler Hardware ausgestattet sein müssen, darunter ein NPU-fähiger Prozessor, 16 GB RAM und 256 GB SSD-Speicher.

Während der ersten Out-of-Box-Erfahrung (OOBE) können Benutzer diese Funktion aktivieren oder deaktivieren. Zusätzliche Steuermöglichkeiten sind über die App „Einstellungen“ oder die Gruppenrichtlinie verfügbar.

Windows Studio-Effekte

Windows Studio Effects umfasst eine Reihe von Funktionen, die KI nutzen, um die Qualität von Videoanrufen und Audio durch Neural Processing Units (NPUs) zu verbessern.

Derzeit gibt es fünf Haupteffekte, darunter Automatische Rahmung, Hintergrundunschärfe, Blickkontakt, Sprachfokus und Kreativfilter.

• Automatische Rahmung: So bleiben Sie auch während der Bewegung in der Mitte der Kameraansicht.
• Hintergrundunschärfe: Verwischt Ihren Hintergrund während Videoanrufen, um mehr Privatsphäre zu schaffen oder Unordnung zu verbergen. Es sind sowohl die „Standardunschärfe“ als auch die „Portraitunschärfe“ verfügbar.
• Blickkontakt: Passt Ihr Erscheinungsbild an, um sicherzustellen, dass Blickkontakt wahrgenommen wird. Die Modi „Standard“ und „Teleprompter“ sind verfügbar.
• Voice Focus: Minimiert Hintergrundgeräusche für eine klarere Tonqualität bei Anrufen. Es gibt zwei Varianten, eine nutzt NPU und eine andere basiert ausschließlich auf Software.

Während Studio Effects in Windows 11 bereits seit einiger Zeit vorhanden sind, beabsichtigt Microsoft, ihre Verfügbarkeit mit Version 24H2 speziell für Copilot+-PCs zu erweitern.

Live-Untertitel mit Übersetzung

Die in Windows 11 vorhandene Funktion „Live-Untertitel“ wird um Live-Übersetzungen erweitert. Dieses Tool soll allen, insbesondere Hörgeschädigten, dabei helfen, Audioinhalte durch automatische Transkription zu verstehen.

Die verbesserte Funktion übersetzt Audio von Video- oder Sprachanrufen in Echtzeit in Ihre Muttersprache, unabhängig von der Quelle – ob von YouTube oder einer anderen Plattform. Sie kann mehr als 40 Sprachen ins Englische übersetzen, ohne dass eine Internetverbindung erforderlich ist, sofern dies von einer NPU unterstützt wird.

Es ist wichtig zu beachten, dass sich diese Funktion von der einfachen Transkription zur Audioübersetzung in Echtzeit verlagert hat.

Sprachverständlichkeit

Die Funktion „Voice Clarity“ nutzt KI, um Hintergrundgeräusche zu eliminieren, Echos zu unterdrücken und den Nachhall bei Video- oder Sprachanrufen sowie Audioaufnahmen zu reduzieren.

Diese Funktion kommt auch Online-Gaming zugute, da sie für eine klarere Kommunikation sorgt. Anwendungen können „Deep Noise Suppression“ für optimale Audioqualität aktivieren. Voice Clarity funktioniert automatisch bei unterstützten Apps mit kompatibler Hardware, die mit einer NPU ausgestattet ist, ohne dass eine manuelle Aktivierung erforderlich ist.

Klicken Sie hier, um es zu tun

Wenn Sie mit „Circle to Search“ auf Android oder „Google Lens“ in Chrome vertraut sind, wird Ihnen „Click to Do“ ähnlich vorkommen. Es nutzt KI, um Bildschirminhalte zu erkennen und zu interpretieren und bietet verschiedene umsetzbare Aufgaben.

Um es zu verwenden, halten Sie die „Windows“-Taste gedrückt, während Sie auf den Bildschirm klicken, um ein Overlay-Menü mit verschiedenen Aktionsoptionen zu öffnen. Außerdem ist oben ein Suchfeld verfügbar, das in Windows Recall integriert ist.

Erweiterte Windows-Suche

Obwohl es noch keinen offiziellen Namen dafür gibt, wird die Windows-Suchfunktion mit KI-Funktionen ausgestattet. Diese Erweiterung ermöglicht es Benutzern, direkt im Datei-Explorer, der App „Einstellungen“ und der Taskleiste in natürlicher Sprache nach Apps, Dateien und Einstellungen zu suchen, anstatt sich nur auf Schlüsselwörter zu verlassen.

Auto Super Resolution

Auto Super Resolution (SR) nutzt KI-Technologie, um die Auflösung und Bildqualität von Spielen zu verbessern. Dies trägt zu einem flüssigeren und effizienteren Spielerlebnis bei und maximiert gleichzeitig die Bildraten. Im Wesentlichen wird KI eingesetzt, um Spiele zu verbessern, was zu verbesserter Grafik und Leistung führt.

Diese Funktion weist Ähnlichkeiten mit Nvidias DLSS, AMDs FidelityFX Super Resolution (FSR) und Intels Xe Super Sampling (XeSS) auf, die alle KI für eine verbesserte Gaming-Grafik nutzen.

Als Teil dieser Initiative hat Microsoft in Zusammenarbeit mit Nvidia, AMD und Intel die API „DirectSR“ entwickelt, um SR in zukünftige Spieletitel zu integrieren.

Diese Funktion ist jedoch ausschließlich auf Copilot+-PCs mit den neuesten Qualcomm Snapdragon X Elite-Prozessoren verfügbar und auf eine ausgewählte Anzahl von Spielen beschränkt.

Cocreator und Generatives Füllen und Löschen in Paint

Microsoft führt in der Paint-App eine neue Cocreator- Funktion ein, die Ihre Zeichnungen scannt, anstatt ein KI-Bild zu generieren. Diese Funktion unterstützt Sie beim Verfeinern, Bearbeiten und Entwickeln Ihrer künstlerischen Konzepte.

Diese Funktion verwendet einen diffusionsbasierten Algorithmus, um mit minimalem Aufwand ein qualitativ hochwertiges Bild zu erzeugen, und bietet Einstellungen zum Anpassen, ob die Kreation eher wörtlich oder ausdrucksstark ist.

Es ist wichtig klarzustellen, dass Cocreator exklusiv für Copilot+-PCs verfügbar ist und nicht mit „Image Creator“ verwechselt werden sollte, einer KI-Funktion, die Cloud-Ressourcen nutzt, um Textaufforderungen in visuelle Elemente umzuwandeln.

Generative Füllung

Mit der Funktion „Füllen“ in Paint können Benutzer einen bestimmten Bereich eines Bildes auswählen und basierend auf einer Texteingabeaufforderung neue Elemente generieren, um diesen Abschnitt zu verbessern. Diese Funktion wird zunächst auf Copilot+-PCs mit den neuesten Qualcomm-Prozessoren verfügbar sein.

Generatives Löschen

In der Paint-Anwendung wird außerdem die Funktion „Löschen“ eingeführt, mit der Benutzer mithilfe künstlicher Intelligenz Bildabschnitte auswählen und entfernen können – ähnlich den auf Mobilgeräten verfügbaren Funktionen.

Es ist davon auszugehen, dass diese Funktion auf allen Geräten eingeführt wird, auch auf denen ohne KI-Unterstützung.

Bild neu gestalten, Bildeditor und Superauflösung in Fotos

Die Fotos-App wird eine neue Funktion zum „Neugestalten von Bildern“ enthalten, mit der der Stil eines Fotos durch künstliche Intelligenz und die NPU des Geräts geändert werden kann, wobei fortschrittliche Techniken zur Bildgenerierung und -bearbeitung zum Einsatz kommen.

Mit dieser Funktion können Benutzer ein Bild auswählen, um seinen Stil zu ändern, ähnlich wie beim Anwenden von Filtern in mobilen Apps. Benutzer können auch eine Textaufforderung eingeben, um einen neuen Hintergrund zu erstellen.

Bildbearbeiter

Die Fotos-Anwendung verfügt über dasselbe „Image Creator“ -Tool wie Paint, mit dem Benutzer KI-generierte Bilder auf der Grundlage einer einfachen Texteingabeaufforderung erstellen können. Anders als bei der Paint-Version ist diese Funktion nicht exklusiv für Copilot+-PCs verfügbar, da sie in der Cloud unter Verwendung des DALL-E-Sprachmodells ausgeführt wird.

Superauflösung

Die Super Resolution-Funktion ermöglicht es Benutzern, Bilder mithilfe von KI zu verbessern. Diese Funktion ist exklusiv auf Copilot+-PCs verfügbar. Sie nutzt die NPU, um Bilder bis auf das Achtfache ihrer Originalauflösung zu verbessern und zu schärfen.

Microsoft verspricht außerdem, dass die Super Resolution-Funktion in der Foto-App alte Bilder in niedriger Qualität wieder zum Leben erwecken kann.

Updates für Copilot für Windows 11

Obwohl Copilot schon seit einiger Zeit ein Feature von Windows 11 ist, wird Version 24H2 Updates einführen. Die App wird als Standardanwendung funktionieren, die an die Taskleiste angeheftet oder daraus entfernt werden kann, sodass Benutzer ihre Größe ändern und sie wie jede andere App verschieben können (sie ist auch unter Windows 11 23H2 verfügbar).

Bei der Anwendung handelt es sich eigentlich um eine Webversion, die als Web-App unter Windows 11 installiert wird. Während die grundlegenden Funktionen gleich bleiben, können Systemeinstellungen nicht mehr geändert werden. Darüber hinaus wurde die Benutzeroberfläche aktualisiert, um dem OpenAI ChatGPT-Web-Erlebnis zu ähneln.

Darüber hinaus wird Copilot nun in die App „Einstellungen“ integriert. Statt eines expliziten Buttons zum Aufrufen des Chatbots finden Nutzer in den Einstellungen „Copilot-Vorschläge“. So können Nutzer im Bereich „System“ beispielsweise hilfreiche Vorschläge zur Behebung von Audioproblemen, zur Aktivierung von Energiespareinstellungen oder zum Streaming auf ein drahtloses Display sehen.

Im Datei-Explorer möchte Microsoft mithilfe von Copilot die Benutzeraufgaben optimieren, indem Aktionen auf Bilder angewendet werden können, wenn man mit der Maus darüber fährt und auf die Copilot-Schaltfläche klickt.

Darüber hinaus wird Copilot auch Teil der Benachrichtigungsfunktion. Beim Empfang einer Toast-Benachrichtigung werden Vorschläge zum jeweiligen Szenario präsentiert. Wenn eine E-Mail beispielsweise einen PowerPoint-Anhang enthält, empfiehlt Copilot möglicherweise, den Inhalt zusammenzufassen.

Diese Integration ermöglicht es Benutzern, ihren Bildschirm für Copilot freizugeben, um Unterstützung bei verschiedenen Aufgaben zu erhalten.

Entwickler werden zudem damit beginnen, KI-Funktionen in ihre Anwendungen zu integrieren, was auf eine umfassendere Integration von KI-Funktionen in zukünftigen Betriebssystem-Updates hindeutet.

Die jüngsten Änderungen an Copilot wurden erstmals während einer kürzlichen Surface-Einführungsveranstaltung vorgestellt, seitdem wurden jedoch noch keine weiteren Einzelheiten zu den Copilot-Vorschlägen bekannt gegeben.

Abschluss

Das 2024-Update für Windows 11 ist derzeit verfügbar und enthält viele neue Funktionen und Verbesserungen, die KI-Funktionen sind jedoch noch nicht enthalten. Microsoft plant, diese KI-Funktionen, einschließlich Windows Recall mit erweiterten Sicherheitsfunktionen, irgendwann im Oktober für Copilot+-PCs über das Windows Insider-Programm zu testen. Eine breitere Einführung wird für November 2024 erwartet.

Copilot+ PCs sind eine neue Kategorie intelligenter Computer, die für KI-Anwendungen entwickelt wurden. Die erste Produktreihe umfasst Prozessoren der Qualcomm Snapdragon X-Serie sowie integrierte NPUs, die umfangreiche KI-Funktionen unterstützen und gleichzeitig eine ganztägige Akkuleistung gewährleisten. Diese Geräte sind mit mindestens 16 GB RAM und 256 GB Speicher ausgestattet. Neue Angebote von Intel und AMD werden voraussichtlich auch Prozessoren mit NPUs enthalten, um diese fortschrittlichen KI-Erlebnisse zu ermöglichen.

Update 8. Oktober 2024: Dieser Artikel wurde überarbeitet, um genaue und aktuelle Inhalte bereitzustellen.

Quelle