L’intégration GPT-4 de Microsoft Bing Chat apporte une reconnaissance d’image puissante à Windows 11

Microsoft Bing Chat reçoit une autre mise à jour importante sur les ordinateurs de bureau avec prise en charge de la reconnaissance d’image, ou OCR. Cette fonctionnalité utilise le modèle de vision ChatGPT-4 d’OpenAI pour détecter et comprendre les objets dans une image et donner une explication détaillée de l’image à l’aide d’exemples réels.

Microsoft déploie la fonctionnalité de vision Bing Chat pour sélectionner des utilisateurs dans le monde entier. Après la mise à jour, vous remarquerez une nouvelle option à côté de l’icône vocale, vous permettant de télécharger des images directement sur le chat ou de coller des images depuis Internet et de demander à Bing de l’expliquer.

Cette fonctionnalité est officiellement appelée « reconnaissance d’image », et seuls certains utilisateurs nous ont dit y avoir accès, suggérant qu’il pourrait s’agir d’un test A/B aléatoire. Dans un communiqué, les responsables de Microsoft ont confirmé le déploiement de Bing Vision à moins de 10 % de ceux qui utilisent régulièrement Bing Chat, confirmant notre hypothèse selon laquelle il s’agit d’un test A/B aléatoire.

Selon Microsoft, vous pouvez vous attendre à ce que l’option Bing Vision apparaisse pour tout le monde dans les prochaines semaines.

Il est important de comprendre que la fonctionnalité est également incluse dans Windows Copilot. Vous pouvez faire glisser une image depuis le bureau ou l’explorateur de fichiers, la déposer sur Copilot et demander à l’IA d’expliquer l’image ou de créer quelque chose de similaire. Enfin, vous pouvez copier l’image directement dans PowerPoint, Word ou le presse-papiers.

Bing Chat arrive sur Chrome et Safari.

Microsoft a brièvement testé la prise en charge de Bing Chat dans Safari et Chrome en mai, et nous attendons une annonce officielle confirmant bientôt l’extension. Bien qu’il soit possible de faire fonctionner Bing Chat dans Chrome en modifiant les agents utilisateurs, cela peut sembler inutile, d’autant plus que Bard et d’autres chatbots sont facilement accessibles.

Outre la prise en charge de Chrome et de Safari, Microsoft cherche à améliorer Bing Image Creator à l’aide de l’IA de Microsoft.

La fonctionnalité est susceptible de s’améliorer avec l’intégration du plug-in Bing, les responsables suggérant que Microsoft prévoit un « déploiement de plug-in à grande échelle » pour étendre les capacités du chat Bing.

La société prévoit de transformer chaque fonctionnalité en plugin et de créer différentes facettes de la recherche.

Microsoft a déjà apporté plusieurs améliorations significatives à Bing Chat, telles que la suppression de la prise en charge des comptes Microsoft.

Auparavant, Microsoft bloquait les utilisateurs en les forçant à se connecter avec un compte Microsoft. La restriction a été levée car Microsoft essaie maintenant de pousser l’adoption de Bing AI sur d’autres services comme le compte Microsoft ou Edge.