Pour ne pas être en reste avec Google, Meta a publié son propre générateur de musique alimenté par l’IA – et, contrairement à Google, l’a ouvert.
Appelé MusicGen, l’outil de génération de musique de Meta, dont une démo peut être trouvée ici, peut transformer une description textuelle (par exemple « Une chanson pop entraînante des années 80 avec une batterie lourde et des nappes de synthé en arrière-plan ») en environ 12 secondes d’audio, donner ou prendre. MusicGen peut éventuellement être « dirigé » avec de l’audio de référence, comme une chanson existante, auquel cas il essaiera de suivre à la fois la description et la mélodie.
Meta dit que MusicGen a été formé sur 20 000 heures de musique, dont 10 000 morceaux de musique sous licence de «haute qualité» et 390 000 morceaux d’instruments uniquement de ShutterStock et Pond5, une grande bibliothèque multimédia. L’entreprise n’a pas fourni le code qu’elle a utilisé pour former le modèle, mais il a a mis à disposition des modèles pré-formés que toute personne disposant du bon matériel – principalement un GPU avec environ 16 Go de mémoire – peut exécuter.
Alors, comment fonctionne MusicGen ? Eh bien, je dirais – mais certainement pas assez bien pour mettre les musiciens humains au chômage. Ses chansons sont raisonnablement mélodiques, du moins pour les invites de base telles que la « musique chiptunes ambiante » et – à mes oreilles – à égalité (sinon légèrement mieux) avec les résultats du générateur de musique AI de Google, MusicLM. Mais ils ne remporteront aucun prix.
Voici la sortie de MusicGen pour « musique d’ascenseur jazz »:
Et voici la prise de MusicLM :
Ensuite, j’ai donné une invite plus compliquée pour tenter de lancer MusicGen pour une boucle : « Lo-fi slow BPM électro chill avec des échantillons organiques. » MusicGen a étonnamment surpassé MusicLM en termes de cohérence musicale, produisant quelque chose qui trouverait facilement sa place sur Lofi Girl.
Voici l’échantillon de MusicGen :
Et voici MusicLM :
Pour changer un peu les choses, j’ai essayé d’utiliser les deux outils pour générer une chansonnette au piano dans le style de George Gershwin. Je dis « essayé » parce que, dans un effort pour prévenir les problèmes de droits d’auteur autour des outils de musique générative, Google a mis en place un filtre dans la version publique de MusicLM qui bloque les invites mentionnant des artistes spécifiques.
MusicGen n’a pas un tel filtre. Mais les résultats pour « Musique de fond pour piano dans le style de Gershwin », laissaient à désirer, je dois dire :
La musique générative progresse clairement (voir Riffusion, Dance Diffusion et OpenAI’s Jukebox). Mais d’importantes questions éthiques et juridiques doivent encore être aplanies. L’IA comme MusicGen « apprend » de la musique existante pour produire des effets similaires, un fait avec lequel tous les artistes – ou les utilisateurs génératifs de l’IA – ne sont pas à l’aise.
De plus en plus, les morceaux faits maison qui utilisent l’IA générative pour évoquer des sons familiers qui peuvent être présentés comme authentiques, ou du moins assez proches, sont devenus viraux. Les labels de musique n’ont pas tardé à les signaler à des partenaires de streaming, invoquant des problèmes de propriété intellectuelle – et ils ont généralement été victorieux. Mais on ne sait toujours pas si la musique « deepfake » viole le droit d’auteur des artistes, labels et autres titulaires de droits.
Il ne faudra peut-être pas longtemps avant qu’il y ait des conseils sur la question. Plusieurs procès en cours devant les tribunaux auront probablement une incidence sur l’IA génératrice de musique, dont un concernant les droits des artistes dont le travail est utilisé pour former des systèmes d’IA à leur insu ou sans leur consentement.
Pour sa part, Meta, qui n’impose pas de restrictions sur la façon dont MusicGen peut être utilisé, affirme que toute la musique sur laquelle MusicGen a été formé était « couverte par des accords juridiques avec les détenteurs de droits », y compris un accord avec Shutterstock.