用AI进行辅助虚拟屏背景设计
在央视杭州临安吴越文化节的璀璨舞台上,我们用一周时间紧锣密鼓地打造了一幅环形虚拟屏背景。借助AI的神奇力量,PS、Midjourney和Stable Diffusion软件的协同,我们展开了一场视觉与技术的创新之旅。
现场展示
制作流程
草图阶段
因为拿到这个需求后留给制作的时间也就一周,所以时间比较短,先提取一下关键词,用mj去生成一些类似的场景,一是去找一下接近的素材,二是提供灵感,方便后面创作。
一开始打算建筑和构图一起去生成,后面发现这样的构图场景还是太小了,不能满足要开阔视野而且有纵深感的需求。所以后面生成就单独去生成一些场景,关键词:水面,倒影,山,星空,空旷,梦幻,等之类的关键词,尺寸调整是空格–ar空格7:1或者3740:1080
拿到这些素材我习惯是都变成黑白,剔除颜色只关注与构图和空间,进行一些场景和所需前景的组合。
得到了这几张图,后面选择到了第四张,结合上面的素材进行一些拼接。
细化阶段
大家都会遇到mj给到的图很好看,就是画质和内容太模糊,根本无法直接去使用,这时候就需要使用SD的一个插件叫:tile-resample 这个插件怎么获取这里先不讲,可以自行搜索。
拿到这个素材放大,有两种思路,一,是觉得图像内容有点空,需要继续添加润色。二,就是生成的图像很满意,就是缺少像素和里面的清晰度。这时候有两种方式。
第一种,使用SD图生图模式和局部重汇模式调整画面的构图和所需的内容,也可以在ps里面进行修改。
需求是要地平线尽量的低,这样能让前景的演员更好的融入画面,这个素材可以看到地面高而且有黑框,这时候先在ps中进行修正。
接下来就是SD的设置,大模型我感觉没有固定的哪个,想要什么画面就去使用什么类型的大模型。
通用反提词:paintings, sketches, (worst quality:2), (low quality:2), (normal quality:2), dot, mole, lowres, normal quality, monochrome, grayscale, lowres, text, error, cropped, worst quality, low quality, jpeg artifacts, ugly, duplicate, morbid, mutilated, out of frame, extra fingers, mutated hands, poorly drawn hands, poorly drawn face, mutation, deformed, blurry, dehydrated, bad anatomy, bad proportions, extra limbs, cloned face, disfigured, gross proportions, malformed limbs, missing arms, missing legs, extra arms, extra legs, fused fingers, too many fingers, long neck, username, watermark, signature, (mole:1.4),NSFW,mask,((mask)) 有效的提高精度。
如图所示,提示词引导如果画面锐化很高,就说明提示词给到的太强了,一般都在7-11左右。重回幅度是直接影响画面,下面展示0.2-0.5的生成展示。
这时候就可以提取自己想要的素材,比如这些倒影,树林,远处的山,这些素材都非常不错。或者有什么特殊需求也可以再回到PS或者重绘进行多次生成。当一些满意的时候再使用SD插件放大画面添加像素。
第二种方式,就是素材很不错,直接生成添加细节,用tile-resample(分块重采样)和SD放大。一个是增加画面精度和细化内容,一个是放大画面。
控制权重也就是需要画面精度和内容的幅度,越高AI智能添加的素材细节就更多。
脚本使用SD放大,选择R-esrgan 在放大画面的同时也会添加一些细节。放大倍数很好理解,不过倍数越大计算时间越长,显存不太ok的要开少。
关键词:Starry sky, reflections in the lake, beauty, aurora, fantasy, rich details,
这时候图像文件从524K变成了5MB而且内容也添加的很丰富,如果觉得重绘幅度太大或者和原图差距太大可以减少权重。
把之可以用到的素材取自己所需,进入PS继续调整,细化。
背景生成这时候加入前景,前景我也是之前找到的模糊建筑,这时候还是用到SD的图生图模式,把画面截取出来进行局部图生图。
也是需要多次升级,这时候重绘强度可以在0.2-0.4之间,多次生成,也是取所需要的效果和素材。
最后调整
把素材合并在一起,调整画面中的不合理,细节,等等等等。最后就是调色。
整体制作三天,修改很多的细节和瑕疵四天,尤其在这么大的屏幕上展示,细微的瑕疵会被画面放大,所以修饰的阶段也是最重要的。
最后感谢中央电视台吴越文化节的小伙伴的付出和指导,感谢能有这次合作的机会,也希望这次结合AI的绘画流程,能给小伙伴在商业的绘画中提供新的思路。
经过三天的紧张制作与四天的细致打磨,我们的作品终于在吴越文化节上绽放光彩。感谢央视团队的协作与支持,这次AI辅助绘画的探索,不仅为商业创作开辟了新径,更为我们带来了无限的启发与可能。
作者:邪喵工作室 来源:站酷
赞助商链接版权:除非注明,本站文章均为原创文章,转载请联系我们授权,否则禁止转载。