Aller au contenu

De la peinture de bruit visuelle à l’album Multi-tasking

Alors, mon nouvel album "Multi-tasking" s’apprête à sortir sur les services de streaming, et il est déjà sur Bandcamp si ça vous tente. Maintenant, parlons des processus qui l’ont créé, et pourquoi je pense que c’est un tournant, pas seulement pour moi en tant qu’artiste, mais pour la musique IA en général.

Avant tout, c’est un album bourré de performances IA. Mais elles sont différentes cette fois, elles s’appuient sur un certain nombre de processus expérimentaux développés spécifiquement pour ce genre de musique.

À noter ici qu’environ 80% de l’album a été créé avec un processus que j’ai développé, appelé "peinture de bruit".

J’ai commencé à développer la peinture de bruit en 2019 pour réussir de meilleurs selfies avec des applis de filtres photo basées sur l’IA comme FaceApp.

Tout a commencé par le constat que l’IA de reconnaissance faciale voit souvent des visages là où un humain n’en verrait pas. J’ai donc décidé de voir où se situait la limite, et ça m’a entraînée dans un terrier de lapin incroyable : mécanique de l’IA, disputes avec des développeurs de modèles sur le fonctionnement des nœuds, et des tonnes d’art visuel vraiment intéressant, alors que je poussais le processus au maximum.

À la fin, j’utilisais FaceApp pour transformer des croquis en photos de studio, et j’en ai tiré un niveau de flexibilité que je n’aurais jamais imaginé.

De FaceApp à la diffusion

Puis, Stable Diffusion est arrivé. J’ai encore développé et retouché le processus pour viser spécifiquement la distorsion et/ou la manipulation du mécanisme de débruitage dans le processus de diffusion. J’utilise toujours la peinture de bruit pour faire de l’art visuel intéressant.

"Mais Lynn", pourriez-vous dire, "quel est le rapport avec la musique ou le dernier album ?"

Du calme, c’est un long post, on y arrive.

Des images à la musique

Chirp et Suno ont frappé fort l’année dernière. Au début, je m’amusais juste avec l’outil comme un nouveau jouet IA sympa. Mais discrètement, ça a ravivé ma fascination pour la création musicale d’une manière à la fois intensément personnelle et profonde. Ça a complètement changé mon focus d’artiste quand j’ai réalisé à quel point écrire des chansons et produire de la musique pouvait être fantastiquement satisfaisant.

J’ai commencé par essayer de sur-prompter le système, trouver des recoins que personne ne connaissait encore, et prompter des combinaisons de styles intéressantes et inattendues pour obtenir des résultats originaux. Puis, quand j’ai remarqué que la machine hallucinait à des moments bizarres, j’ai essayé de comprendre pourquoi. Et ça m’a menée vers le lyrisme style jazz et hip hop, et l’apprentissage de la méthode.

Je me suis donc lancé dans des exercices d’écriture pour affiner ma technique et, avec un peu de chance, devenir meilleure en composition. Que j’y sois arrivée ou non, eh bien, c’est subjectif, et ce n’est pas à moi de décider. Mais j’ai fait du chemin.

Quand Udio est sorti, je n’ai pas été impressionnée au début. Mais c’est vite devenu un outil très avancé, ce qui a mené à plein d’expériences incroyablement intéressantes.

Et là, j’ai fait beaucoup de musique parfaitement adéquate, et je me suis appris les bases de la production musicale à l’ancienne. Je me suis pris un DAW, un clavier Roli et un million de milliards de plugins pour faire toutes sortes de trucs avec le son.

Je me suis mise à fond dans la composition musicale avec Hookpad, et j’ai vraiment commencé à évoluer en tant que musicienne. J’ai alors développé de nouveaux processus pour superposer et expérimenter avec la musique IA et conventionnelle en empilant tout ça dans mon DAW.

La peinture de bruit avec le son

Le processus a changé quand Suno et Udio m’ont permis d’uploader des fichiers. Suno m’a permis d’étendre et d’extrapoler mes samples de façon intéressante ; j’ai commencé à dérailler volontairement mes entrées sonores pour pousser la machine dans ses retranchements et produire une musique plus captivante.

Udio, par contre, a fait un truc curieux. Ils ont exposé tellement de fonctionnalités, un tel contrôle sur la fenêtre de contexte (à ne pas confondre avec la fenêtre de rendu d’Udio) et des éléments qui hurlaient : « Hé, je suis un processus de diffusion ! Utilise-moi comme un processus de diffusion !»

Et bon, quand l’app hurle « Hé, je suis un processus de diffusion ! », vous savez qu’il n’y a qu’une seule chose à faire. Et oui : la peinture de bruit !

J’ai vite découvert que la différence entre le système d’Udio et Stable Diffusion, c’est que là où Stable Diffusion utilise du bruit de pixels pour arriver à un résultat, Udio semble utiliser du bruit spectral de la même manière. Ça veut dire qu’on peut lui injecter un motif de bruit qu’il n’attend pas ou pour lequel il n’est pas entraîné, et le forcer à contourner le son exactement comme on peut tordre Stable Diffusion avec des images inattendues.

La peinture de bruit avec du bruit audible, c’était aussi un truc que je n’avais jamais vu venir quand tout ça a commencé. Mais c’est ça, la grande joie de bosser avec l’IA. Atterrir dans des endroits où on ne s’attendait pas du tout à être, et se demander avec un blanc créatif comment on est arrivée là.

J’adore ça.

Alors j’ai fait pas mal d’expériences avec différents types de sons et d’enregistrements faits de toutes les manières possibles. De la piste DAW finalisée à moi chantant sous la douche, et tout ce qu’il y a entre les deux.

Multi-tasking

Le résultat de ces expériences, c’est « Multi-Tasking ».
Mon deuxième, ou peut-être troisième très sérieux, sérieux album.

Pour autant que je sache, personne n’en a encore fait un comme ça. Et j’ai l’impression d’avoir créé quelque chose de riche, avec un rendu naturel pour cette sortie.

N’hésitez pas à l’écouter.