Die GPT-4-Integration von Microsoft Bing Chat bringt leistungsstarke Bilderkennung in Windows 11

Microsoft Bing Chat erhält ein weiteres großes Update für Desktops mit Bilderkennungsunterstützung (OCR). Diese Funktion nutzt das Vision-Modell ChatGPT-4 von OpenAI, um die Objekte in einem Bild zu erkennen und zu verstehen und anhand von Beispielen aus der Praxis eine detaillierte Erklärung des Bildes zu geben.

Microsoft führt die Bing Chat Vision-Funktion für ausgewählte Benutzer weltweit ein. Nach dem Update werden Sie neben dem Sprachsymbol eine neue Option bemerken, mit der Sie Bilder direkt in den Chat hochladen oder Bilder aus dem Internet einfügen und Bing um eine Erklärung bitten können.

Diese Funktion heißt offiziell „Bilderkennung“ und nur einige Benutzer haben uns mitgeteilt, dass sie Zugriff darauf haben, was darauf hindeutet, dass es sich möglicherweise um einen zufälligen A/B-Test handelt. In einer Erklärung bestätigten Microsoft-Mitarbeiter die Einführung von Bing Vision bei weniger als 10 Prozent derjenigen, die Bing Chat regelmäßig nutzen, und bestätigten damit unsere Vermutung, dass es sich um einen zufälligen A/B-Test handelt.

Laut Microsoft können Sie damit rechnen, dass die Bing Vision-Option in den nächsten Wochen für alle verfügbar sein wird.

Es ist wichtig zu verstehen, dass die Funktion auch in Windows Copilot enthalten ist. Sie können ein Bild vom Desktop oder Datei-Explorer ziehen, es auf Copilot ablegen und die KI bitten, das Bild zu erklären oder etwas Ähnliches zu erstellen. Abschließend können Sie das Bild direkt in PowerPoint, Word oder die Zwischenablage kopieren.

Bing Chat kommt für Chrome und Safari.

Microsoft hat die Bing Chat-Unterstützung in Safari und Chrome im Mai kurz getestet und wir erwarten bald eine formelle Ankündigung, die die Erweiterung bestätigt. Es ist zwar möglich, Bing Chat in Chrome zum Laufen zu bringen, indem man die Benutzeragenten ändert, es kann sich jedoch unnötig anfühlen, insbesondere da Bard und andere Chatbots leicht zugänglich sind.

Zusätzlich zur Chrome- und Safari-Unterstützung möchte Microsoft den Bing Image Creator mithilfe der KI von Microsoft verbessern.

Mit der Bing-Plugin-Integration wird die Funktion wahrscheinlich besser. Beamte schlagen vor, dass Microsoft einen „groß angelegten Plugin-Rollout“ plant, um die Funktionen des Bing-Chats zu erweitern.

Das Unternehmen plant, jede Funktion in ein Plugin umzuwandeln und verschiedene Facetten der Suche zu erstellen.

Microsoft hat bereits einige wesentliche Verbesserungen an Bing Chat vorgenommen, beispielsweise die Entfernung der Unterstützung für Microsoft-Konten.

Zuvor hat Microsoft Benutzer blockiert, indem es sie gezwungen hat, sich mit einem Microsoft-Konto anzumelden. Die Einschränkung wurde aufgehoben, da Microsoft nun versucht, die Einführung von Bing AI gegenüber anderen Diensten wie Microsoft-Konto oder Edge voranzutreiben.