Microsoft annonce le modèle de langage de vision Turing Bletchley v3 pour les recherches d’images Bing

Microsoft a officiellement annoncé la troisième version de son modèle de base de langage de vision multilingue Turing Bletchley. Il est actuellement déployé sur un certain nombre de produits Microsoft, notamment Bing pour améliorer la recherche d’images.

Microsoft a lancé la première version du modèle Turing Bletchley en novembre 2021. Dans un article publié aujourd’hui sur le blog officiel de Bing , Microsoft a déclaré avoir commencé à tester la troisième version du modèle à l’automne 2022 avant de l’ajouter à Bing et à d’autres produits. .

Le modèle utilise à la fois du texte et des images pour trouver les éléments qu’une personne recherche sur le moteur de recherche Bing de Microsoft. L’objectif est de rendre le modèle aussi proche que possible afin qu’un texte décrivant, par exemple, « un chien mangeant de la glace » se rapproche le plus possible des images d’un chien mangeant de la glace dans un résultat de recherche.

Une partie de la façon dont Turing Bletchley v3 établit ces connexions est importante en ce qui concerne le modèle. Microsoft déclare :

Étant donné une image et une légende décrivant l’image, certains mots de la légende sont masqués. Un réseau de neurones est ensuite entraîné pour prédire les mots cachés conditionnés à la fois par l’image et le texte. La tâche peut également être inversée pour masquer les pixels au lieu des mots. Ce type de formation masquée, associé à un grand modèle basé sur un transformateur, conduit à un modèle pré-entraîné solide qui peut être affiné sur un ensemble diversifié de tâches en aval.

En plus d’être utilisé pour les recherches d’images dans Bing. le nouveau modèle Turing Bletchley v3 est utilisé pour la modération du contenu sur son service de jeux Xbox. Cela aide cette équipe à identifier, par exemple, les images et vidéos téléchargées par les joueurs Xbox sur leurs profils qui seraient considérées comme inappropriées et en violation des normes communautaires de l’entreprise sur la plate-forme Xbox.