Publié initialement le 26 janvier 2023. Un premier guide de peinture de bruit.
La composition de départ
Allez, on se lance dans la peinture de bruit ! J’ai commencé avec ça, et j’ai transformé ça en ceci avec Clip Studio. Voilà notre point de départ. Je n’ai aucune idée de ce que je vais créer ni de ce à quoi l’œuvre finale va ressembler, et je ne sais même pas quoi mettre dans le prompt. Alors, on y va.
Vérification des cibles de profondeur
La première chose que je fais, c’est de lancer SD 1.5 Pruned avec un réglage très bas et générique pour voir si mes cibles de profondeur tiennent la route sur un certain nombre d’images. Si SD n’arrive pas à capter un visage ou un buste, on est mal. En gros, on veut juste que tout reste intact.
Pour l’étape suivante, je garde le prompt et l’image tels quels, et je passe le tout dans un checkpoint qui gère très bien le line art. Je recommande un truc comme Pulp Art Diffusion qui, soit dit en passant, est basé sur des œuvres du domaine public, donc c’est encore mieux.
Comme vous pouvez le voir, on a déjà complètement cassé le style pulp, et on a sacrément embrouillé l’ordinateur. Rappelez-vous que les modèles entraînés ne donnent un style prévisible que si on leur donne des données prévisibles et ennuyeuses. Bidouillez le bruit, les lignes ou la couleur, et regardez ça devenir bizarre !
Maintenant, avec le checkpoint sur-entraîné, on commence à voir un problème si on pousse les réglages de bruit au-delà de la simple correction de lignes. Ce qui se passe, c’est que si nos cibles pour le visage et le corps sont à peu près bonnes, celles de la profondeur ne le sont pas, et on obtient des résultats foireux.
Un simple calque de noir semi-transparent pour séparer le premier plan de l’arrière-plan, et voilà : au lieu d’avoir 6 images sur 9 ratées d’une manière ou d’une autre, 8 sur 9 sont parfaitement nickels. On a enfin de bonnes probabilités.
En montant à .47, on obtient 2/3 de résultats utilisables. Et à l’époque, vers octobre 2022 (environ 900 peintures plus tôt), je me serais arrêtée là. J’aurais dit que c’était bon, posté une photo sur Twitter et laissé les gens me dire que c’était joli. Voilà la base de la peinture de bruit.
Compositing de bruit supplémentaire
De temps en temps, le système recrache un truc magnifique et expressif dont je n’ai pas vraiment l’utilité sur le moment. Je garde ça pour le compositing. Vous voyez, une fois qu’on a établi que notre peinture de bruit fonctionne, c’est là que le vrai plaisir commence !
Un peu de compositing, un peu de déformation, et on se retrouve avec un arrière-plan encore plus bruité et un bruit de couleur plutôt sympa pour ses vêtements et ses cheveux (au fait, je commence toujours par des nus, c’est juste plus simple).
Ensuite, je balance ça dans Stable Diffusion, et ça prend vie pour nous donner de l’art gothique plutôt joli (et ennuyeux). Rappelez-vous, la peinture de bruit casse le système, et « cassé » n’est pas forcément mauvais. On obtient surtout pas mal de belles textures. Maintenant, on est presque prêts à partir en vrille. Prêts ?
Injecter du chaos
Maintenant, on passe au checkpoint qu’on va utiliser. Comme vous pouvez le voir, le premier rendu avec la requête simple génère encore de l’art d’un ennui mortel. C’est pour ça qu’on va injecter un peu de chaos pour rendre ça intéressant
Le petit truc : si vous saturez un checkpoint stylisé, N’IMPORTE lequel, mais surtout ceux où les commutateurs de style sont activés, vous obtenez généralement une version du style beaucoup plus flexible, moins dramatiquement sur-entraînée
Il n’en faut pas beaucoup pour que ça marche. Ici, j’injecte Hannah Höch et Gil Elvgren, tous les deux dans les versions du modèle 1.5. Et je lui demande d’utiliser le mouvement Dada et le Surréalisme comme lignes directrices. C’est basique, mais ça nous permet d’y arriver
Alors, mes réflexions :
1. Je n’aime pas bosser dans le réalisme plat parce que c’est chiant... à moins d’avoir un angle extrêmement intéressant. Il y a des artistes qui savent bien le faire. Ils ne sont pas nombreux, et ils ne devraient pas forcément le faire. À vous de voir
2. Gil Elvgren était un artiste pop qui ne faisait pas d’abstrait. Pourtant, Hannah, artiste de collage allemande radicale, utilisait son travail, et celui d’artistes similaires, dans ses collages. Sans Gil ou un artiste de son genre, c’est difficile de recréer ce langage avec une IA. Les IA ont des lacunes
3. Si vous prévoyez de nommer une catégorie ou une période, vous aurez de meilleurs résultats si vous l’étudiez. Gardez des livres d’art et des sites d’histoire de l’art sous la main. Vous en aurez besoin. C’est utile et inspirant. Si vous nommez un artiste, connaissez son langage expressif
Ce troisième point est important parce qu’on ne peut pas subvertir ou recontextualiser correctement un langage artistique si on ne le pige pas. On pourra toujours l’utiliser, certes. Mais la connaissance, c’est ce qui fait la différence entre un scalpel et une masse. Enfin, bon, parfois on a vraiment besoin d’une masse
Et maintenant, on pète un plomb : écriture automatique, on laisse les doigts naviguer et on laisse l’esprit critique au placard, on compare les idées, on explore, et surtout, on pousse les niveaux de réduction du bruit assez haut pour presque détruire sa peinture de bruit 40 % du temps à 0.6
Je sais pas, on devrait pas pousser le délire encore un peu ? On est déjà allées jusque-là. Allez, d’accord, vous m’avez convaincue. Mais d’abord, on affine un peu le prompt et on ajoute quelques tags d’emphase. Voilà, c’est déjà un peu mieux
Et jusqu’à 7.4...
Passage à Inkpunk
Comme je n’avais pas vraiment d’objectif ce soir, je n’avais pas vraiment de destination. Mais disons, théoriquement, que si j’en avais une et que ça ne m’y menait pas. Genre, si cet art brillant, joyeux et tout mignon n’était pas ce que je voulais créer ? Eh bien, mes amis, n’ayez crainte. J’ai Inkpunk pour le côté sombre
Je l’utilise de la même manière, avec le même prompt surchargé et le même seed. Pour ceux que ça intéresse, ma valeur de seed est 165678995. Mais comme cette expérience doit bien s’arrêter un jour, on va essayer d’obtenir des blocs comme dans l’original
C’est magnifique, mais c’est beaucoup trop propre. Ça casse complètement l’injection. 7.4, c’est trop haut. Je vais devoir baisser. Je réfléchis... on descend à 6 et on voit ce que ça donne
À 5.5, on commence à entrer dans la zone des pièces finies. Je vais publier la #5 et la #6. Un truc que j’adore avec Inkpunk, c’est que quand je demande des éclaboussures de peinture, j’ai des éclaboussures de peinture
À 0.4, presque toutes pourraient servir de produit final, mais la #5 est encore ma préférée. On va donc conclure avec celle-là
De la source à la pièce finie
L’expérience a commencé tranquillement, a dérivé vers des trucs intéressants et s’est terminée en beauté, je pense. Je suis partie de cette couverture de magazine dont j’ai effacé le texte, je suis passée par la peinture de bruit pour arriver au produit final. C’est moins bizarre que ce que j’aime d’habitude, mais c’est pas mal.
Prompt et checkpoints
Maintenant, les détails :
Retrouvez la version finale de mon prompt et les détails techniques sur Pastebin https://pastebin.com/r8cVyzwg
Checkpoints :
Modern Art Style : https://civitai.com/models/3519/modernartstyle
Pulp Art Diffusion :
https://civitai.com/models/1462/pulp-art-diffusion
Et voilà, je crois que c’est tout les bébés. Je vous aime tous, vous êtes magnifiques. Vous m’inspirez. J’espère que ce petit guide a été utile. Et si vous débarquez, je fais ce genre de trucs tout le temps, alors bienvenue.