Nova patente da Microsoft revela Copilot para criar música para acompanhar vídeos e apresentações em PowerPoint

A Microsoft, a potência tecnológica sediada em Redmond, começou recentemente a atualizar sua ferramenta Copilot com uma interface nova e elegante que aprimora a experiência do usuário. No entanto, a empresa tem planos ainda mais ambiciosos guardados para esse assistente orientado por IA.

Em uma patente recém-lançada, a Microsoft revela seu desenvolvimento de um modelo de inteligência artificial para compor trilhas sonoras de áudio . Essa tecnologia inovadora visa criar música ou som que se alinha com várias formas de mídia, incluindo vídeos, texto, apresentações em PowerPoint, realidades virtuais e até mesmo videogames atualmente em fase de produção.

A patente, intrigantemente intitulada “Modelo de inteligência artificial para composição de partituras de áudio” , explora os métodos pelos quais esta ferramenta avançada do Copilot geraria música.

Inicialmente, o processo envolve acumular dados de treinamento substanciais de uma gama diversificada de conjuntos de dados audiovisuais abrangendo elementos visuais e de áudio.

Esses conjuntos de dados passam por uma análise completa para extrair uma variedade de recursos. Isso inclui examinar as características visuais do vídeo, como cores, formas, movimentos e cenas. Além disso, quaisquer elementos textuais presentes no vídeo, como legendas ou texto na tela, também são coletados. A ferramenta também analisará os recursos de áudio existentes no próprio vídeo, diferenciando-os de uma partitura musical.

Depois que os dados forem extraídos, o Copilot avaliará esses recursos para estabelecer correlações. Por exemplo, ele pode identificar que certas cenas — como um pôr do sol — geralmente correspondem a tipos específicos de música, como melodias calmantes.

Com o treinamento desses recursos, o modelo de IA utilizará seu sistema de correlação para gerar pontuações de áudio adequadas que se alinhem aos atributos visuais e textuais do novo conteúdo de vídeo.

Esta tecnologia inovadora abre inúmeras aplicações potenciais, incluindo:

• Produção de filmes e vídeos : criação automática de trilhas sonoras para longas-metragens, séries de televisão ou conteúdo de vídeo on-line.
• Marketing : Compor músicas que combinem perfeitamente com o tom e a mensagem dos anúncios.
• Jogos : Criação de trilhas sonoras adaptáveis ​​que mudam em resposta aos visuais do jogo e às ações do jogador.
• Realidade Virtual : aprimorando experiências imersivas por meio de áudio que evolui com o ambiente visual.

Com sua capacidade de gerar música, o Copilot pode reduzir significativamente o tempo necessário para produção de áudio, garantindo que a trilha sonora complemente o conteúdo visual perfeitamente ao automatizar o processo de composição de trilhas sonoras.

É importante observar que o modelo de IA atualmente oferece recursos básicos de composição musical por meio do plugin SUNO, que foi lançado no início deste ano.

No entanto, um aprimoramento desse plugin seria benéfico, permitindo que os criativos estabelecessem sua visão para composições musicais antes de apresentá-la a um compositor musical profissional.

Embora as preocupações sobre a possível substituição de compositores humanos sejam válidas, dar poder ao Copilot para compor música aumentaria principalmente a produtividade a longo prazo. O que você pensa sobre esse desenvolvimento inovador?

Você pode ler a patente aqui .

Fonte