La nouvelle expérience d’IA de Google compose des clips musicaux abstraits inspirés d’instruments

La nouvelle expérience d’IA générative de Google vous permet de créer de la musique « inspirée par » plus de 100 instruments dans le monde. Instrument Playground commence par demander une simple invite contenant le nom d’un instrument de musique, éventuellement précédé d’un adjectif comme « optimiste », « étrange » ou « sombre ». Il crachera ensuite un clip audio de 20 secondes comme point de départ pour composer une musique (souvent extrêmement décalée ou abstraite) qui peut ou non inclure le son de l’instrument spécifique que vous avez saisi.

Simon Doury, artiste en résidence au Google Arts & Culture Lab, a conçu l’expérience. Il exploite MusicLM de Google, un outil de synthèse texte-IA mis à la disposition du public en mai.

Instrument Playground vous invite à « choisir parmi plus de 100 instruments du monde entier dont vous aimeriez jouer », en suggérant certains moins connus des Américains comme le veena d’Inde, le dizi de Chine ou le mbria du Zimbabwe. Pendant ce temps, préfixer l’invite de votre instrument avec un adjectif vous permet de suggérer des styles tels que « maussade », « joyeux » ou « romantique ».

L’expérience fonctionne moins littéralement que ce à quoi on pourrait s’attendre. Par exemple, « Angry Tuba » ne génère pas le solo de cuivres agressif auquel vous vous attendez. Au lieu de cela, cela ressemble plus à un orgue synthétisé avec des aspirations de tuba. De même, « l’étrange didgeridoo » est sorti comme une section inquiétante d’une partition de Hans Zimmer. Les résultats ressemblent à des compositions abstraites avec des couches de sons qui capturent (en quelque sorte) la sensation – plus que le son spécifique – de l’invite.

Il rejette également certains adjectifs pour des raisons inexplicables. Lorsque je saisis « décalé » ou « psychédélique », une fenêtre contextuelle d’erreur m’indique qu’elle n’autorise pas les invites faisant référence à des artistes spécifiques.

Une fois que l’expérience a généré un clip que vous aimez comme point de départ, vous pouvez choisir parmi « Ambient », « Beat » et « Pitch » pour contrôler différents aspects de la composition, la transformant en quelque chose de plus unique. Si vous souhaitez ajouter plus d’instruments (ou les sons qu’il émet en réponse aux invites basées sur les instruments), un mode avancé ouvre un séquenceur pour superposer et boucler jusqu’à quatre pistes pour votre chef-d’œuvre musical étrange. Enfin, vous pouvez télécharger un fichier .wav de votre morceau une fois que vous en êtes satisfait.

Google a inclus l’exemple suivant sur le thème des vacances pour vous inciter à démarrer. Si cela ressemble à quelque chose avec lequel vous souhaitez jouer, vous pouvez visiter Instrument Playground et vous connecter avec votre compte Google pour commencer à composer.

Source-145