Dans une avancée fascinante de l'intelligence artificielle, Google a dévoilé une nouvelle IA qui peut générer de la musique en interprétant les schémas d'activité cérébrale d'une personne.
Une étude intitulée "Brain2music : reconstruire la musique à partir de l'activité cérébrale humaine" a été menée par des chercheurs de l'Université d'Osaka et du National Institute of Information and Communications Technology, en collaboration avec Google et Araya. Ces chercheurs ont présenté une méthode novatrice qui lie l'intelligence artificielle à l'activité cérébrale humaine.
L'approche repose sur une "méthode de reconstruction de la musique à partir de l'activité cérébrale capturée à l'aide de l'imagerie par résonance magnétique fonctionnelle". Pour réaliser cette prouesse, les scientifiques ont tiré parti de MusicLM, une IA développée par Google, capable de générer de la musique à partir de descriptions textuelles. Cependant, au lieu d'utiliser du texte, l'IA de Brain2Music interprète les données d'activité cérébrale obtenues à partir de l'IRM.
L'équipe de recherche a préparé les réseaux neuronaux de Brain2Music en exposant cinq sujets à des extraits de musique de 15 secondes dans des styles variés tels que le rock, le reggae, le jazz et le métal. Les vidéos générées par imagerie par résonance magnétique fonctionnelle ont permis à l'IA de lier les motifs musicaux aux régions cérébrales activées en fonction des caractéristiques spécifiques de la musique, comme le rythme, l'ambiance et la dynamique. Une fois que ces données ont été interprétées et transformées en mots, elles ont été fournies à MusicLM, qui a "reconstruit" le morceau original.
Selon le groupe de chercheurs, les résultats de l'expérience sont prometteurs : "la musique générée ressemble aux stimuli musicaux que les sujets humains ont expérimentés en ce qui concerne les propriétés sémantiques telles que le genre, l'instrumentation et l'humeur". Cependant, bien que cette réalisation soit impressionnante, il est important de noter que les compositions reconstruites ne reproduisent pas fidèlement l'œuvre originale.
Bien que les compositeurs aspirant à créer de la musique par la pensée devront encore patienter, cette percée témoigne du potentiel sans précédent de l'intelligence artificielle pour transformer nos activités mentales en créations artistiques innovantes.
