Wat is Windows Copilot Runtime? Windows 11 AI-systeem uitgelegd.

• Windows Copilot Runtime is een systeem met drie lagen op Windows 11 24H2 dat meer dan 40 AI-modellen, API’s en andere hulpmiddelen combineert om AI-functies aan te sturen, zoals Windows Recall, Studio Effects, Auto Super Resolution en meer.

Windows Copilot Runtime is een nieuw systeem voor Windows 11 dat deel uitmaakt van versie 24H2 (2024 Update) en latere releases. Deze releases combineren een reeks kleinere AI-modellen die op het apparaat en andere componenten worden uitgevoerd om AI-functies in het besturingssysteem aan te sturen.

Wat is Windows Copilot Runtime?

Windows Copilot Runtime is een nieuw systeem dat een aantal componenten combineert, waaronder AI-frameworks, toolchains, de nieuwe Windows Copilot-bibliotheek en AI-modellen op het apparaat. Het eindigt met applicaties en functies die AI-mogelijkheden bieden.

Hoewel u wellicht bekend bent met de “Copilot” -branding op Windows 11, die verwijst naar de chatbot AI-functie, is de Windows Copilot Runtime iets anders . Dit nieuwe systeem start direct boven de silicium, wat in dit geval verwijst naar de NPU’s (Neural Processing Units) en GPU’s (Graphical Processing Units), de belangrijkste componenten voor het verwerken van AI-taken.

Laag 1

In de eerste laag vindt u de “AI-frameworks”, waaronder DirectML , ONNX Runtime , PyTorch , WebNN en de “Toolchains”, waaronder Olive , AI Toolkit voor Visual Studio Code en andere tools voor ontwikkelaars.

Laag 2

Microsoft plaatst de “Windows Copilot Library” en “On-device models” in de tweede laag. De “Windows Copilot Library” biedt een nieuwe set API’s (Application Programming Interfaces) waarmee ontwikkelaars AI-functies in hun apps kunnen integreren.

Bovendien, en dat is nog belangrijker, vindt u in deze tweede laag meer dan 40 AI-modellen die tegelijkertijd lokaal op de computer draaien om veel van de nieuwe AI-ervaringen mogelijk te maken, zoals (het controversiële) Windows Recall, Windows Studio Effects, Auto Super Resolution, Voice Clarity, Cocreator for Paint en Restyle Image.

Als onderdeel van de nieuwe runtime integreert Microsoft het Phi Silica Small Language Model (SLM) en andere modellen, zoals Optical Character Recognizer (OCR), Screen Region Detector, Natural Language Parser, Image Encoder, Vector Embeddings, Retrieval Augmented Generation (RAG), Text Summarization en User Activity.

Laag 3

Tot slot vindt u in de derde laag de applicaties die toegang hebben tot deze functies om AI-ervaringen te leveren. Ontwikkelaars moeten echter nieuwe AI-functies integreren door hun apps in de Windows Copilot Runtime te tikken.

Wat gebeurt er met Copilot voor Windows 11?

Copilot voor Windows 11 evolueert nu van een integratie op het niveau van het besturingssysteem naar een eenvoudige webapplicatie die verbinding maakt met de Copilot AI op het web.

Dit betekent dat Copilot afhankelijk blijft van de cloud om gegevens te verwerken en antwoorden te produceren op uw vragen. Als gevolg van deze wijziging kan de chatbot de systeeminstellingen niet meer wijzigen en is de sneltoets “Windows-toets + C” geschrapt.

Microsoft is echter van plan om “Copilot suggestions” uit te rollen , wat een andere evolutie van de ervaring is. In plaats van de chatbot te vragen om instellingen te wijzigen of specifieke taken uit te voeren, zul je zien dat Copilot verschillende acties voorstelt.

In de app Instellingen kan Copilot bijvoorbeeld voorstellen om een ​​probleem op te lossen of een instelling te wijzigen. In Verkenner kunt u functies zoals de mogelijkheid om de achtergrond van een afbeelding te verwijderen, rechtstreeks vanuit het contextmenu gebruiken.

Bij een toastmelding kan Copilot voorstellen om een ​​document samen te vatten dat in uw inbox is aangekomen.

Copilot kan ook worden geïntegreerd met andere apps zoals Foto’s en Paint.

Hoewel de Copilot-app een internetverbinding vereist, werken de meeste nieuwe AI-functies ook zonder internetverbinding via Windows Copilot Runtime.

Kun je Windows Copilot Runtime verwijderen?

In tegenstelling tot de Copilot-app, die kan worden verwijderd, bevat het besturingssysteem geen optie om Windows Copilot Runtime te verwijderen, omdat het een systeemonderdeel is.

Bovendien beperkt Microsoft ontwikkelaars niet tot het gebruik van de on-device modellen die bij het nieuwe AI-systeem worden geleverd, omdat ontwikkelaars hun eigen AI-modellen naar het besturingssysteem kunnen brengen om hun applicaties te ondersteunen.

Kortom, Windows Copilot Runtime is een nieuw systeem dat on-device AI-modellen gebruikt om AI-functies van Microsoft en ontwikkelaars die voor dit systeem kiezen, aan te sturen. Het is ook niet gerelateerd aan de Copilot-app voor Windows 11.