深度解析Midjourney的tuner炼丹秘诀

12 月 19, 2023 发表于: AI绘画教程. 评论

Sponsor

Midjourney的tuner（谐调器）功能已经出来2个月了，也就是我们常说的Midjourney的炼丹功能。但我们发现，在真正的应用过程中，别说能炼出好的自定义模型了，就是对tuner生成的style模型的应用方法都是错的，即使好一点的同学能自己通过tuner来生成style，但也仅限于输入prompt生成tuner页面，然后从页面中选一个自己喜欢的风格生成style，然后去应用。其实做到这些，也只是了解了tuner功能的10%，远不能发挥出Mijourney炼丹的真正威力，今天咱们就来深入的分析一下，到底如何在Midjourney中进行炼丹，以及炼丹过程中的到底有什么样的技巧和方法，让你真正的能够发挥出Midjourney的自定义模型的巨大威力。

本文是MIDjourney高阶内容，具体什么是tuner以及用法，大家可以参考Midjourney的官方文档，在这里咱们不就不再赘述了。

https://docs.midjourney.com/docs/style-tuner-1

有问有答

Q1：随便怎么写prompt,只要使用了自定义的–style code就可以保证出图的风格吗？

A：不能，想要保证出图风格的一致性，最好能够在prompt中加入触发词（trigger）,这个跟SD中使用Lora有相似之处。

Q2：普通的prompt和tuner有什么区别？

A：普通的prompt的目的是生成一张图，定义tuner是为了生成相对固定的风格，他们的目的和作用都是不同的，所以在编写的时候侧重点也有所不同。

炼丹提示词技巧

tuner提示词的基本公式：替换词(Replace)+触发词（Trigger）

1、关注【适用性】

很多同学在编写炼丹的提示词的时候，完全按照普通prompt来编写的，超级详细超级具体，这样造成的结果就是生成的tuner风格使用范围非常窄。前面我们就说过，炼丹的目的是生成相对稳定的风格，为了生成的风格在应用时有更大，更自由的适用性，我们编写炼丹提示词的时候，要尽可能的做到简洁。

2、兼顾【实用性】

为了后续应用的时候方便套用，在写tune提示词的时候，建议可以包含可置换的提示词（replace），如以上【/tune prompt:coloring book lineart, character】中，character就是方便后续进行内容替代而留下的，这样以后只需要用实际的描述替代这部分就可以了。

3、方便【引用性】

很多同学在引用tuner的时候，错误的认为不管prompt怎么写，只要加上 –style code 就可以生成和对应模型相同风格图像。结果却发现，生成的结果却和对应的模型展示相去甚远。其实，这就是我们在有问有答中就提到的“想要保证出图风格的一致性，最好能够在prompt中加入触发词（trigger）,这样才能保证生成的风格和你自己定义的模型风格尽可能的相似。同时，我们在关注适用性中提到要“尽可能做到简洁”，其实还有一层意思，就是触发词不要太多，避免在引用的时候会造成混乱。

举例说明

/imagine prompt: cute woman by tony taka –style zEd3Bp72

当我们忽略触发词，将prompt写成：woman –style zEd3Bp72时，即使是替换词不改变的情况下，生成的图像和以上自定义的风格也产生了相当大的差异，效果如下：↓↓↓

但当我们加入触发词，即便是替换部分变成了完全不同的内容（我们用自定义风格来创作小红帽的形象），整体风格也能很好的和自定义的风格保持一致。如：A little girl with Little Red Riding Hood and flower skirt, cute style, illustrated by tony taka –style zEd3Bp72（保留了触发词 cut 和 by tony taka），效果如下↓↓↓