DeepSeek赋能Stable Diffusion,零基础SD生图秘籍(1)
我们热衷探索 Stable Diffusion 是因为它的开源生态与极大的自由度和控制力。尽管 Stable Diffusion 在图像控制精度上远超 Midjourney,但其复杂操作流程总让创作者望而却步。
然而,最近情况出现了转机。开年以来,DeepSeek 因其最新发布的 R1 推理模型极其强大的推理认知能力席卷全球科技圈——它不仅登顶中美应用商店下载 Top榜,更被黑神话悟空的制作人冯骥称为“国运级科技成果”。
在我们看了网上各位大神们的文章,发现他们利用DeepSeek 强大的认知能力,不断将 Stable Diffusion 的操作门槛降低。站在大佬们的肩膀上,我们开展了进一步尝试并成功借助 DeepSeek 的【联网+推理】能力让 Stable Diffusion 中布置 ComfyUI 工作流 和 炼制Lora 模型两大环节变得简单而高效。
速通 Comfy UI 工作流
ComfyUI 节点繁多,连接复杂。选择合适的节点并了解其连接与设置方法需要大量相关知识,这无疑极大抬高了 ComfyUI 的使用门槛。并且由于各节点,插件更新频率不统一,且迭代较快,使得教程过时的速度很快,数月前新推出的教程,现在就可能由于节点更新而无法完全适配。因此我们可以利用 DeepSeek 的信息检索能力让他快速辅助我们搭建出合理的工作流。
ComfyUI节点库
目前 DeepSeek 大模型已接入多个平台,我们可以选择任意一个支持联网搜索的平台进行使用。
主流的工作流创建有两种方法,第一种是直接使用现成的工作流json文件进行导入,第二种是手动连接节点。我们在多次尝试后发现 DeepSeek 暂不支持写出完整可用的工作流 json 代码。
因此,我们选择了第二种方式,通过让 DeepSeek 描述节点连接方法的方式辅助我们进行工作流的手动搭建。
对于 Deepseek 指令的输入,我们按照 “任务+要求+补充” 的结构化方法进行描述。此外,如果需要搭建的流程是基于特定环境或情景,也可以加上对指令背景的描述。
DeepSeek 对话截图
因此我们给出如下指令:
“我要在 ComfyUI 上搭建文生图工作流,让我可以输入提示词生成对应描述的图片(任务),并且详细说明每个节点的各接口是否空置或与哪个节点连接(要求),并且详细说明连接完毕后这个工作流如何使用,可以如何进行调节(补充)”
可以看到 DeepSeek 给出了一个整体的节点连接顺序,并且对每个节点该如何连接进行了详细描述。
DeepSeek 回答截图
接下来,我们在 Liblib AI 去尝试进行工作流搭建,首先我们按照 DeepSeek 的描述,搜索“Checkpoint Loader”,添加对应节点,并按照描述进行连接。
工作流搭建界面
最后我们输入正面和负面提示词进行测试,可以看到,DeepSeek 完整实现了文生图的一个工作流的搭建,并且可以正常运行并生成图片,极大降低了新手的入门门槛。
文生图工作流
文生哪吒衍生形象
下面我们实际使用 DeepSeek 来帮助我们生成一个哪吒形象。
基于前文提问后,DeepSeek 认为我们需要使用 Lora模型进行生图。那么我们进一步提问,让他告诉我们连接方法。首先按照之前的提问格式,给出完整问题“我要在 ComfyUI 上搭建文生图工作流用来生成哪吒2电影中的哪吒衍生形象(任务),需要加载 Lora 模型(要求),详细说明每个节点的各接口是否空置或与哪个节点连接,并且详细说明连接完毕后这个工作流如何使用,可以如何进行调节(补充)”
DeepSeek 回答截图
根据新工作流的描述,搭建出可加载 Lora 模型的工作流,并输入自己想要的哪吒衍生形象提示词,即可完成文生哪吒工作流,完整工作流节点设置如下:
文生哪吒 ComfyUI 工作流
最后,我们在上面搭建好的工作流中输入提示词即可得到哪吒衍生形象。所用到的提示词如下:
一起来看看效果图吧:
哪吒衍生形象
最后
这次将 Stable Diffusion 和 DeepSeek 的成功结合,确实让我们眼前一亮。过去,AI 在设计领域的应用往往是碎片化的,需要人工在不同工具之间来回切换和协调。而这次尝试,预示着AI全流程设计时代的开启。
这让我想起了一个关于荷花的故事:在一个空池塘里,荷花每天以翻倍的速度生长,第一天 1 朵,第二天 2 朵,第三天 4 朵……直到第 30 天,池塘被完全填满。那么,池塘被填满一半是在哪一天呢?答案是第 29 天。
这个故事似乎也在暗示着我们当下的处境——AI 技术的进步并非一蹴而就,而是以指数级的速度悄然积累。
或许,我们正站在第 29 天的门槛上,眼前的一切只是冰山一角。
真正的爆发,可能就在不远处。
本期 DeepSeek 赋能 Stable Diffusion 零基础生图秘籍到这里就分享完了。下期我们将和大家分享接入 DeepSeek 的飞书如何辅助我们炼制 Lora 模型,欢迎大家持续关注。
本文作者:TechUX试验田(公众号)
感谢阅读!
如果本文还不错,就请分享一下文章吧~
设计达人2025.03.06补充:本文实用模型是“XL 哪吒,魔丸”Lora模型,没有垫图。
(像这种特别火的形象基本都有现成的lora,比垫图可好用多了哦!)

版权:除非注明,本站文章均为原创文章,转载请联系我们授权,否则禁止转载。