De GPT-4-integratie van Microsoft Bing Chat brengt krachtige beeldherkenning naar Windows 11

Microsoft Bing Chat krijgt weer een grote update op desktops met ondersteuning voor beeldherkenning of OCR. Deze functie maakt gebruik van het ChatGPT-4-visiemodel van OpenAI om de objecten in een afbeelding te detecteren en te begrijpen en een gedetailleerde uitleg van de afbeelding te geven aan de hand van praktijkvoorbeelden.

Microsoft rolt de Bing Chat-visiefunctie uit om gebruikers over de hele wereld te selecteren. Na de update zie je een nieuwe optie naast het stempictogram, waarmee je afbeeldingen rechtstreeks naar de chat kunt uploaden of afbeeldingen van internet kunt plakken en Bing kunt vragen om uitleg.

Deze functie heet officieel “beeldherkenning”, en slechts enkele gebruikers hebben ons verteld dat ze er toegang toe hebben, wat suggereert dat het een willekeurige A/B-test kan zijn. In een verklaring bevestigden Microsoft-functionarissen de uitrol van Bing Vision bij minder dan 10 procent van degenen die Bing Chat regelmatig gebruiken, wat onze speculatie bevestigt dat het een willekeurige A/B-test is.

Volgens Microsoft kun je de Bing Vision-optie de komende weken voor iedereen verwachten.

Het is belangrijk om te begrijpen dat de functie ook in Windows Copilot is opgenomen. U kunt een afbeelding van het bureaublad of de bestandsverkenner slepen, neerzetten op Copilot en de AI vragen de afbeelding uit te leggen of iets soortgelijks te maken. Ten slotte kunt u de afbeelding rechtstreeks naar PowerPoint, Word of het klembord kopiëren.

Bing Chat komt naar Chrome en Safari.

Microsoft heeft Bing Chat-ondersteuning kort getest in Safari en Chrome in mei, en we verwachten binnenkort een formele aankondiging die de uitbreiding bevestigt. Hoewel het mogelijk is om Bing Chat aan het werk te krijgen in Chrome door de user-agents aan te passen, kan het onnodig aanvoelen, vooral omdat Bard en andere chatbots gemakkelijk toegankelijk zijn.

Naast Chrome- en Safari-ondersteuning, wil Microsoft Bing Image Creator verbeteren met behulp van de AI van Microsoft.

De functie zal waarschijnlijk beter worden met de integratie van Bing-plug-ins, waarbij ambtenaren suggereren dat Microsoft een “grootschalige uitrol van plug-ins” plant om de mogelijkheden van Bing-chat uit te breiden.

Het bedrijf is van plan om van elke functie een plug-in te maken en verschillende facetten van zoeken te creëren.

Microsoft heeft al verschillende belangrijke verbeteringen aangebracht aan Bing Chat, zoals het verwijderen van ondersteuning voor Microsoft-accounts.

Eerder blokkeerde Microsoft gebruikers door ze te dwingen zich aan te melden met een Microsoft-account. De beperking is opgeheven omdat Microsoft nu probeert de acceptatie van Bing AI te pushen boven andere services zoals Microsoft-account of Edge.