O Google não é novo no uso da IA para criar música, lançando seu MusicLM em janeiro para gerar música a partir de texto. Agora, o Google elevou o nível e está usando a IA para ler o seu cérebro e produzir som com base na sua atividade cerebral.
Em um novo artigo de pesquisa intitulado Brain2Music, o Google utiliza a IA para reconstruir música a partir da atividade cerebral conforme observada através de dados de ressonância magnética funcional (fMRI).
Como o Google explica em um artigo de pesquisa intitulado “Brain2Music: Reconstruindo Música a partir da Atividade Cerebral Humana” (via ZDNet), foram selecionados aleatoriamente trechos de 15 segundos de 540 músicas de dez gêneros diferentes. Cinco participantes ouviram os trechos por meio de fones de ouvido compatíveis com ressonância magnética (MRI), durante os quais sua atividade cerebral foi escaneada.
Os pesquisadores alimentaram os dados no MusicLM para “prever e reconstruir os tipos de música aos quais o sujeito humano foi exposto”. No final, a música gerada apresentou semelhanças com a música que os participantes do teste ouviram originalmente “em um nível semântico”.
Se você quiser ouvir parte da música reconstruída a partir da atividade cerebral, o Google criou uma página da web para o estudo, apresentando os estímulos originais e as reconstruções.
A equipe de pesquisa também revelou três fatores que limitam a qualidade da música gerada pela IA:
- As informações contidas nos dados de fMRI são muito temporal e espacialmente escassas (as regiões observadas têm um tamanho de 2x2x2mm3, muitas ordens de magnitude maiores do que os neurônios humanos).
- As informações contidas nos “embutimentos” de música a partir dos quais reconstruímos a música (usamos MuLan, em que dez segundos de música são representados por apenas 128 números).
- As limitações de nosso sistema de geração de música. Quando estudamos o MusicLM, vimos que ele tem espaço para melhorias tanto na maneira como adere à solicitação de texto quanto na fidelidade do áudio produzido.
Assim como na maioria dos modelos de linguagem, ainda há muito trabalho a ser feito. Dito isso, já está claro que a IA pode efetivamente usar a atividade cerebral para recriar os sons que você ouve. Mas se você está preocupado com um estranho escaneando suas ondas cerebrais e roubando seus pensamentos, você provavelmente está seguro (por enquanto).
Com isso a equipe observa que os voluntários tiveram que passar horas em um grande scanner de fMRI para este estudo. Portanto, evite ir em qualquer primeiro encontro em grandes scanners de fMRI.
