Skip to content

噪声绘画:从粗糙构图到成品图

最初发布于2023年1月26日。一份早期噪声绘画演练。

起手构图

好嘞,那我们画点噪声绘画!我从这张开始,用 Clip Studio 把它变成这样。这就是我们的起点。我完全不知道我要做的是什么、成品会长什么样,连要提示进去什么都不晓得。所以来吧,干它

过程图 1
过程图 2

检查深度目标

我干的第一件事,是拿 SD 1.5 Pruned 在一个极低的档、通用设置上跑一遍,看看我的深度目标在这么多张里头,大体上对不对。要是 SD 连脸或胸像都认不出来,那我们有麻烦了。基本上我们只想要一样东西:全都完好

过程图 3

下一步,提示词和图保持原样,我要把它过一道线稿见长的 checkpoint。我这里推荐 Pulp Art Diffusion 之类,顺带一提它基于公有领域作品,所以格外好

如你所见,我们已经把那股纸浆杂志风彻底干碎,并把那台计算机吓得不轻。记住:训练过的模型,只在你喂它无聊的可预测数据时,才给出可预测的风格。去折噪声、线条或颜色,看它出鬼!

过程图 4

那么现在,在这个过度训练的 checkpoint 上,如果噪声水平高于基本修线的档位,问题就露头了。发生的事是:面部和身体目标大致还成,深度目标不行了,于是给出我们不想要的结果

过程图 5

一层简单的半透明黑,把前景和背景分开。然后,九张里乱掉六张,变成九张里八张完好。这赔率不错。

过程图 6
过程图 7

调到 .47,三分之二可用。换在从前,大约 2022 年 10 月(约 900 张画之前),我大概就会在这附近收手。叫一声不错,发张图上推特,听大家夸它好看。这就是噪声绘画的基本功

过程图 8

拼合更多噪声

所以偶尔,系统会吐出一件漂亮又有表现力、但我当下用不上的东西。这些我都存着,留给拼贴。你看,一旦确立了我们这手噪声画是好使的,真正的乐趣才开始!

过程图 9
过程图 10

一点拼贴,一点扭,现在我们手里是一个更噪的背景,加上给她衣服和头发用的、相当不错的颜色噪声(顺带一提,我总是从裸体起手,就是省事)

过程图 11
过程图 12

然后我把这个提示进 Stable Diffusion,它就活了,给我们相当好看(无聊)的哥特艺术。记住,噪声绘画干碎这个系统,而碎了不等于糟。但我们的确搞到一大把好材质。现在,差不多可以发疯了。准备好了吗?

过程图 13
过程图 14

往里灌混沌

现在,换到我们要用的那个 checkpoint。如你所见,带着简单查询的第一轮渲染,还是在产出痛彻心扉的无聊艺术。所以我们才要往里灌一点混沌,做点有意思的东西

过程图 15

冷知识:如果你让一个风格化 checkpoint 过载——任何风格化 checkpoint,尤其开关式风格切换打开的那些——你通常能拿到这个风格的一个灵活得多的版本,训练过火程度也轻得多

让这套东西开始替你干活的门槛也不高。这里,我灌进 Hannah Höch 和 Gil Elvgren,都取 1.5 模型里的版本。而且我让它拿达达运动和超现实主义当指南。很基本,但够我们抵达

过程图 16

想法如下:
1. 我不喜欢在扁平写实里干活,因为无聊……除非你在上头有一个极其刁钻的角度。有艺术家能干好这个。能干好也该干的,不多。效果自担

2. Gil Elvgren 是个不搞抽象的流行画家。然而 Hannah——一位激进的德国拼贴艺术家——确实把他的作品、和类似艺术家的作品,用进了她的拼贴。没有 Gil 或与他同类的人,就很难用 AI 复现那种语言。AI 有知识盲区

3. 如果你打算点名一个类别或一个时期,学透它,结果会更好。把艺术史的书和网站备在手边。你会用得着。它们有用,也提气。如果你点名一位艺术家,就得懂他的表达语言

说到第三点,它要紧,因为拿捏不住一种艺术语言,你就颠覆不好、重新语境化不好。你永远能「用」它。但知识是手术刀和大锤之间的差别。当然,有时候你就是需要一把大锤

现在,放疯了,做自动书写,让手指替你散步,把批判脑子留在家,比对照,去探险,最重要的:把去噪水平拉高到几乎能干翻你的噪声绘画——40% 的概率会翻——0.6

过程图 17

不知道欸,要不要再疯上一点点?都走到这了。行吧,你把我说动了。但先得把提示词磨精一点,加点强调标签。喏,这版好了些

过程图 18

然后拉到 7.4……

过程图 19

换到 Inkpunk

今晚我本来就没有目标,所以也没有目的地。但假如——理论上——我有,而这些到不了呢?比如,这份亮闪闪的开心艺术,不是我想做的东西?朋友们,别怕。我有 inkpunk,专治阴郁

照样用它,同一份顶格过载的提示词,同一个种子。有兴趣的话,我的种子值是 165678995。不过,这个实验总得收尾,那就推到它的块面和原图对上为止

这些美极了,但干净过头。灌入被它们整个干碎。7.4 过高。得往下调。想一想……降到 6,看看发生什么

过程图 20

5.5 上,开始踩进成品领地。我会发布 #5 和 #6。Inpunk 有一点我特别喜欢:我要泼漆,它就真给泼漆

过程图 21

0.4 上,这些几乎全部都能当成品,但 #5 又是我最喜欢的。那就用它收尾吧

过程图 22

从源图到成品

我们的实验开得轻松,去过一些有意思的地方,收得也漂亮,我觉得。从这本被我抹掉文字的杂志封面起,穿过噪声画,走进成品。没有我平时喜欢的那么怪,但不赖

过程图 23
过程图 24
过程图 25

提示词与 checkpoint

上细节:
提示词的最终版和微调细项,在 Pastebin https://pastebin.com/r8cVyzwg

Checkpoint:
Modern Art Style: https://civitai.com/models/3519/modernartstyle

Pulp Art Diffusion:
https://civitai.com/models/1462/pulp-art-diffusion

我想就到这儿了,宝贝们。我爱你们所有人,你们很美。你们让我有劲。希望这份小演练有用。你要是新来的:这类活我常干的,欢迎