Microsoft potrebbe ridefinire la ricerca di Windows 11 con l’intelligenza artificiale per cercare nei file audio e video

Oltre a Recall, Microsoft sta lavorando a una nuova Windows Search basata su un indice semantico che potrebbe risolvere i problemi con l’attuale indice di ricerca. Il nuovo motore di ricerca di Windows 11 potrebbe usare l’intelligenza artificiale per alimentare i risultati di ricerca locali e persino cercare file audio o video.

La funzionalità Recall di Windows 11 era una delle caratteristiche principali dei PC Microsoft Copilot+, ma le cose non sono andate come l’azienda sperava. Dopo lo sdegno dovuto a problemi di privacy e sicurezza, Microsoft ha ritirato Windows Recall e ha promesso di ripristinarlo a ottobre dopo che ci siamo rivolti a Microsoft.

Mentre puoi cercare le tue attività passate con Recall, presto potresti anche esaminare i file video e audio utilizzando l’intelligenza artificiale in Windows 11.

Il ricercatore Microsoft Xeno ha recentemente individuato riferimenti a “Ricerca multimediale intelligente” in Windows 11 Build 27695. Contiene diversi riferimenti a funzionalità che puntano verso una funzionalità AI in grado di cercare contenuti all’interno di file video e audio.

Questa magia AI funzionerà dopo aver scaricato i modelli rilevanti, il che renderà possibile questa impresa. Sembra che la funzionalità trascriverà prima ogni file video/audio sul tuo PC. Dopodiché, puoi eseguire una ricerca basata sul contenuto.

Windows Latest si aspetta che tu possa cercare parole specifiche dette in una conversazione. Ad esempio, potresti cercare dettagli come il nome di un progetto o una statistica importante e vedere i video/file audio pertinenti apparire in quel risultato.

Potrebbe anche andare oltre e presentare l’ora esatta in cui la parola appare nel file o sottolinearne la rilevanza nella conversazione.

La ricerca sui media intelligenti potrebbe essere correlata alla ricerca semantica

È possibile che la ricerca multimediale intelligente sia correlata alla ricerca semantica annunciata da Microsoft all’evento Copilot+.

Come notato da Windows Latest, Microsoft ha sottolineato in un recente post sul blog che “Recall AI è basato su Windows Semantic Index”.

Il vantaggio di questo indice è che puoi interagire con esso usando il linguaggio naturale. Presto, gli sviluppatori potranno accedere a Vector Embeddings e RAG API nella Windows Copilot Library.

Le prime demo di Recall AI hanno mostrato che avrebbe utilizzato snapshot per aiutarti a trovare qualsiasi cosa avessi fatto in precedenza sul tuo PC. La “ricerca multimediale intelligente” sarebbe stata un passo avanti. Ci piace l’idea, ma come Recall AI, questa sarà anche esclusiva dei PC Copilot+, che hanno debuttato a giugno 2024.

I PC Copilot+ hanno l’hardware necessario per eseguire modelli AI localmente con 40 TOPS e oltre NPU. Non ci aspettiamo che la funzionalità arrivi sui normali PC Windows 11 perché non hanno l’hardware necessario.

Integrazione Dev-party in Windows 11 AI

Microsoft desidera inoltre estendere le funzionalità di ricerca in linguaggio naturale agli sviluppatori di app di terze parti.

Gli sviluppatori possono offrire un’esperienza di ricerca in linguaggio naturale simile nelle loro app. Pensa a un’app finanziaria in cui puoi cercare un’azione passata usando il linguaggio naturale. La risposta di ricerca sarà più rapida poiché tutti i dati saranno presenti sul PC.

Recall AI tornerà a ottobre 2024 per i tester dopo una pausa di quattro mesi. Puoi rimuoverlo tramite la finestra di dialogo Funzionalità opzionali del Pannello di controllo se non ne hai bisogno.