Windows 11 AI-functies bevestigd voor versie 24H2

• Microsoft bevestigt ten minste zeven nieuwe AI-functies op het apparaat voor Windows 11 24H2.
• Deze functies omvatten Windows Recall, Windows Studio Effects, Live Captions, Super Resolution, Voice Clarity, Cocreator voor de Paint-app en Restyle Image voor de Photos-app.
• Dit is een aanvulling op verschillende wijzigingen die naar Copilot voor Windows 11 komen.

Windows 11 24H2 (update 2024) zal een hele reeks nieuwe functies introduceren, met een aanzienlijke focus op AI. In deze gids zal ik dieper ingaan op deze AI-gerichte functies, waarbij ik hun belang benadruk en hoe ze uw ervaring verbeteren.

In deze nieuwe versie van het besturingssysteem kun je minimaal zeven nieuwe AI-functies verwachten die op het apparaat worden uitgevoerd, waaronder Windows Recall, Windows Studio Effects, Live Captions (realtime vertalingen), Super Resolution, Voice Clarity, Cocreator voor de Paint-app en Restyle Image voor de Foto’s-app. (Deze functies zijn exclusief voor Copilot+ pc’s.)

De nieuwe functies zijn mogelijk dankzij de nieuwe ‘Windows Copilot Runtime’, een systeemcomponent op Windows 11 die meer dan 40 AI-modellen integreert die lokaal op de computer draaien en de infrastructuur biedt om deze te onderhouden.

Hierdoor kunnen ontwikkelaars hun apps ook integreren met AI-functionaliteiten met behulp van de nieuwe API’s via de Windows Copilot Library .

Daarnaast zal de Windows 11 2024 Update ook verschillende belangrijke veranderingen en nieuwe mogelijkheden voor de Copilot chatbot AI uitrollen.

Windows 11 AI-functies voor versie 24H2

Hier is een overzicht van de nieuwe functies, mogelijk gemaakt door AI.

Windows-oproep

Windows Recall (of Recall) is een nieuwe functie die werkt als een fotografisch geheugen dat op de achtergrond draait en momentopnamen maakt van alles wat u op de computer doet. Met behulp van verschillende AI-modellen die lokaal op het apparaat werken, analyseert en maakt de functie elk stukje inhoud doorzoekbaar in natuurlijke taal, of het nu om tekst of afbeeldingen gaat.

De Recall-functie is een exclusieve functie voor Copilot+ pc’s, omdat hiervoor de nieuwste Qualcomm Snapdragon X-serie processor met NPU, 16 GB RAM en 256 GB SSD vereist is.

U heeft de keuze om de functie in of uit te schakelen vanuit de out-of-box-ervaring (OOBE), maar u kunt Recall handmatig in- of uitschakelen via de app Instellingen of Groepsbeleid.

Windows Studio-effecten

Windows Studio Effects (of Studio Effects ) is een combinatie van functies die AI gebruiken om videogesprekken en audiokwaliteit te verbeteren met behulp van een Neural Processing Unit (NPU).

Momenteel zijn er vier hoofdeffecten, waaronder automatische kadrering, achtergrondonscherpte, oogcontact, stemfocus, portretlicht, creatieve filters en oogcontact-teleprompter.

• Automatische kadrering: houdt u gecentreerd in het camerabeeld, zelfs als u zich beweegt.
• Achtergrondvervaging: vervaagt de achtergrond achter u tijdens gesprekken, waardoor u meer privacy krijgt of rommel verbergt.
• Oogcontact: Omdat u tijdens een gesprek mogelijk naar uw scherm kijkt, lijkt het met deze functie alsof u oogcontact onderhoudt met andere mensen.
• Voice Focus: Dit effect vermindert het achtergrondgeluid van uw microfoon, waardoor uw stem helderder wordt tijdens gesprekken.

Het is belangrijk op te merken dat Studio Effects al een tijdje deel uitmaakt van Windows 11, maar vanaf versie 24H2 is Microsoft van plan deze functies breder beschikbaar te maken op Copilot+ pc’s.

Live ondertiteling met vertaling

Hoewel Windows 11 al een tijdje over de functie Live Captions beschikt, wordt deze nu bijgewerkt met live vertalingen. Live Captions is een functie die is ontworpen om iedereen, inclusief mensen met gehoorproblemen, te helpen audio te begrijpen via automatische transcripties.

Als onderdeel van de AI-integratie in het besturingssysteem kan de functie ook conversies van een video- of spraakoproep naar uw moedertaal vertalen, inclusief video’s die u vanaf YouTube of andere bronnen bekijkt. Technisch gezien is de functie nu in staat om alle audio die door de computer gaat in realtime te vertalen.

De audio kan live zijn of vooraf opgenomen vanuit elke app of video. De functie kan zelfs zonder internetverbinding meer dan 40 talen naar het Engels vertalen, omdat er een NPU voor nodig is.

Stemhelderheid

In Windows 11 is Voice Clarity een AI-aangedreven functie die achtergrondgeluiden verwijdert, echo’s annuleert en realtime nagalm vermindert bij video- of spraakoproepen of bij het opnemen van audio.

Bovendien komt deze functie ook ten goede aan pc-games met online communicatie. Apps kunnen ‘Diepe ruisonderdrukking’ inschakelen voor alleen spraak of generieke audio-inhoud. Voice Clarity zorgt voor een duidelijke stem in online vergaderingen en vlottere online communicatie.

Voice Clarity werkt automatisch op ondersteunde applicaties met ondersteunde hardware inclusief NPU. U zult geen optie vinden die zegt: schakel Voice Clarity in.

Automatische superresolutie

Auto Super Resolution (SR) is een functie die AI gebruikt om de gameresolutie en visuele kwaliteit te verhogen, waardoor een vloeiendere, efficiëntere ervaring wordt geboden die over de hardware schaalt, inclusief betere framesnelheden. Met andere woorden: Super Resolution gebruikt AI om games op te schalen en de framesnelheden en beeldkwaliteit te verbeteren.

De functie is vergelijkbaar met Nvidia’s DLSS, AMD’s FidelityFX Super Resolution (FSR) en Intel’s Xe Super Sampling (XeSS), die ook AI gebruikt om games op te schalen.

Als onderdeel van deze functie heeft Microsoft ook de “DirectSR” API ontwikkeld in samenwerking met Nvidia, AMD en Intel om SR te integreren in de volgende generatie games.

Microsoft zal de functie exclusief aanbieden voor Copilot+ pc’s met de nieuwste Qualcomm Snapdragon X Elite-processors, en zal alleen beschikbaar zijn voor een select aantal games.

Medemaker voor Verf

In de Paint-app voegt Microsoft ook een nieuwe Cocreator- functie toe die uw tekening scant in plaats van een AI-afbeelding voor u te maken en u helpt een nieuw kunstwerk te maken, dat u kunt verfijnen, bewerken en evolueren met uw ideeën.

Deze functie maakt gebruik van een diffusiegebaseerd algoritme om met minimale inspanning een afbeelding van hoge kwaliteit te produceren.

Cocreator bevat zelfs een setting om de tekening letterlijker of expressiever te maken.

Cocreator is een AI-functie exclusief voor Copilot+ pc’s, maar moet niet worden verward met “Image Creator”, wat ook een AI-functie is die de cloud gebruikt om een ​​tekstprompt in een afbeelding om te zetten.

Afbeelding opnieuw stylen voor foto’s

In de Foto’s-app voegt Microsoft, als onderdeel van Windows 11 24H2 en exclusief voor de Copilot+ pc’s, een nieuwe “Restyle Image” toe die AI gebruikt met de NPU van het apparaat om de stijl van een foto te veranderen met behulp van technieken voor het genereren van afbeeldingen en fotobewerking.

Met deze functie kunt u een afbeelding selecteren en vervolgens de afbeelding transformeren met nieuwe stijlen, vergelijkbaar met het gebruik van filters op uw telefoon. U kunt zelfs een tekstprompt gebruiken om een ​​nieuwe achtergrond te maken.

De Foto’s-app krijgt ook dezelfde “Image Creator” -functie als de Paint-app, waarmee je AI-afbeeldingen kunt maken met een enkele tekstprompt. Deze functie is niet exclusief voor Copilot+ pc’s omdat er geen NPU voor nodig is, aangezien het proces in de cloud plaatsvindt met Copilot met behulp van het DALL-E-taalmodel.

Copilot voor Windows 11

Hoewel Copilot al enige tijd beschikbaar is op Windows 11, zal Microsoft vanaf versie 24H2 enkele wijzigingen doorvoeren. In deze nieuwe versie wordt Copilot bijvoorbeeld een traditionele app die je kunt vastzetten of losmaken van de taakbalk. Je kunt het formaat ook wijzigen en verplaatsen, net als bij elke andere app.

De app is eigenlijk de webversie van Copilot die als webapp op Windows 11 is geïnstalleerd. Hij werkt als voorheen, maar het verschil is dat hij de systeeminstellingen niet meer kan wijzigen. Ook is de interface bijgewerkt met een nieuw ontwerp vergelijkbaar met de OpenAI ChatGPT-ervaring op internet.

Bovendien is Microsoft van plan Copilot binnenkort te updaten met OpenAI GPT-4o (of GPT-4 Omni), een nieuw krachtig taalmodel dat informatie in verschillende formaten begrijpt en verwerkt, zoals tekst, afbeeldingen en zelfs audio.

Copilot komt ook naar de app Instellingen. Je krijgt echter geen knop om de chatbot op te roepen. In plaats daarvan vindt u “Copilot-suggesties” in de instellingen. Als u zich bijvoorbeeld in het gedeelte Systeem bevindt, ziet u mogelijk een verzameling suggesties om audioproblemen op te lossen, de energiebesparende functie in te schakelen of uw scherm naar een draadloos beeldscherm te casten.

Wat File Explorer betreft, is Microsoft van plan Copilot in te zetten, zodat u dingen in minder stappen gedaan kunt krijgen. Als u zich bijvoorbeeld op het tabblad Galerij bevindt, kunt u de muisaanwijzer op een afbeelding plaatsen. Als u op de knop Copilot klikt, verschijnen er verschillende acties die u op het afbeeldingsbestand kunt toepassen.

Verder komt Copilot ook naar Notificaties. Wanneer u een toastmelding ontvangt, verschijnt Copilot met een suggestie om in dat specifieke geval te handelen. Als u bijvoorbeeld een e-mail ontvangt met een PowerPoint-bijlage, kan de chatbot voorstellen om de inhoud samen te vatten.

Op Windows 11 betekent dit ook dat u uw scherm kunt delen met Copilot om hulp te krijgen bij alles wat u doet.

Het is ook belangrijk om erop te wijzen dat ontwikkelaars nu AI in hun apps zullen gaan integreren, wat betekent dat we vanaf de volgende versie van het besturingssysteem meer apps met AI-mogelijkheden zullen zien.

Dingen inpakken

Het besturingssysteem zal vanaf 18 juni een nieuwe functie-update ontvangen met enkele van de nieuwe functies voor Copilot+ pc’s, terwijl de definitieve versie van de functie-update ergens in september of oktober voor iedereen zal worden uitgerold. Zodra de nieuwe versie voor iedereen beschikbaar is, zal Microsoft de resterende functies en wijzigingen voor Copilot+ pc’s uitrollen.

https://www.youtube.com/watch?v=o0RSLOuhRzQ

Copilot+ pc’s vormen een nieuwe categorie computers met AI-mogelijkheden. De eerste reeks apparaten zal beschikken over processors uit de Qualcomm Snapdragon X-serie met geïntegreerde NPU’s die vrijwel elke AI-functie kunnen verwerken en een batterijlevensduur van de hele dag kunnen bieden. Deze apparaten worden geleverd met minimaal 16 GB geheugen en 256 GB opslag. Er wordt verwacht dat Intel en AMD in de toekomst processors met NPU’s zullen uitbrengen om deze nieuwe ervaringen aan te kunnen.

Enkele van deze nieuwe Copilot+ pc’s zijn de Surface Pro (11e editie), Surface Laptop (7e editie), Acer Swift 14 AI, HP Omnibook X, HP EliteBook Ultra G1q, Lenovo Yoga Slim 7x, Samsung Galaxy Book4 Edge-serie, ASUS Vivobook S 15, en Dell-laptops zoals de XPS 13, Inspiron 14, Inspiron 14 Plus, Latitude 5455 en Latitude 7455.