AI绘画保姆级教程!如何用ComfyUI快速生成黏土风?
这个五一小长假,一款 Remini 的人工智能修图软件火了,一夜之间,大家都变成了粘土人。你喜欢粘土风格吗?这篇文章带你了解了解~
推荐阅读
最近你是不是也被各个平台爆火的丑萌丑萌的粘土人照片视频刷屏了?这个五一小长假,一款 Remini 的人工智能修图软件火了,一夜之间,大家都变成了粘土人。很多人的第一反应是:太丑了!添加滤镜后的照片不仅丑萌丑萌,甚至还有点“呆傻”。还有网友评价:每一张都丑得很意外。真的很丑萌吗?我们一起瞧瞧!
虽然丑出天际、丑到无语,甚至五官乱飞,但很多人一上手根本停不下来。有网友说,一玩玩到了凌晨五点;还有网友表示:阴森森的,但就是很喜欢,感觉自己进入了双人成行的世界里。
截屏微博网友(如有侵权,联系删除)
黏土滤镜是 Remini 最近上线的一个新功能。短短几天时间,小红书上关于 Remini 黏土滤镜的笔记超过了 6000,黏土滤镜、黏土教程、黏土特效等相关帖子的浏览量达到几千万。
Remini 的收费并不低,一周会费 68 元,不过前面 7 天可以享受免费试用服务。有意思的是,因为黏土滤镜过于火爆,闲鱼已经出现 24 小时接单的商家,价格从 1 元 1 张,到 3 元 10 张不等。
作为会使用 comfyui 搭建的我来说,当然是直接搭建一个 comfyui 工作流啦。
1. 工作流原作者
感谢原作者的分享,我在原工作流基础上增加了 SVD 和增加视频帧率的流程,让其更加方便地能够直接通过图片转成视频。
完整工作流截屏(高清图附件下载)
2. 工作流主要技术点
3. 大模型和 Lora 的选择
这里的大模型可以直接使用官方版本的 SDXL 大模型或者其他常用的大模型都可以,不做强制要求,lora 使用的是粘土风格的 lora 模型。
黏土风格 lora 的下载地址:
粘土风格 lora1:CLAYMATE - Claymation Style for SDXL
网址:/uploads/pic/20240514/pp粘土风格 lora2:Doctor Diffusion's Claymation Style LoRA
网址:/uploads/pic/20240514/pplora 强度根据可以不用动,参考下图即可,这里 lora 堆模块使用的是一个插件 ComfyUI_Comfyroll_CustomNodes,如果缺失了这两个模块可以在 manager 直接搜索下载。
也可以在 github 直接下载,安装到你的 comfyui 根目录\custom_nodes 文件夹中即可。
lora 堆模块使用的是一个插件 ComfyUI_Comfyroll_CustomNodes
4. IP-adapter 风格提取
Ipadapter 使用了新版本,如果使用老版本也是可以的直接将下载两个模块删除替换即可。ipadapter 使用的是 plus 版本的模型,ipadapter 强度 0.7,并且使用 image Resize 将图片做了缩放,保证图片不会太大,可以在工作流中正常生成。
Ipadapter 需要的三个模块
5. WD1.4 提示词反推
正向提示词使用了 WD14 进行反推,并且使用 Comfyui-Gemini 插件中的 ConcatText 模块将两个提示词连接到一起,primitive 元节点中写的是 lora 的触发词。
注意点:如果缺失 WD14 模型会发生报错,如果有报错,或者缺失 WD14 插件可以直接附件下载我的这个。
Comfyui-Gemini 插件
6. ControlNet Canny 控制最后生成的图片
Controlnet 这里需要注意的是和大模型版本一定要一致,使用 SDXL 版本的模型才可以。当然这里使用的是 sdxl 版本的 canny 模型。
完成以上内容之后就可以输入到 k 采样器中进行图片转绘啦。生成好图片之后,就来到了图片转视频的流程。
7. SVD 图片转视频
最后添加了一个 svd 工作流,使用的是 SVD_xt 模型,这个 svd 工作流最多能够生成 25 帧的长度的视频,如果视频帧率设置为 8,那么生成的视频长度大约是 3 秒。
再添加一个 VFI 模块,用于将 svd 生成的视频增加帧率,让其更加流畅。
SVD 图片转视频相关不是特别了解的小伙伴可以看这条视频,详细讲解了 svd 参数调节和 svd 工作流使用方法:
这个案例用到 lora 模型和工作流,我已经打包了,有需要的同学自取哟!
- 免责声明
- 本文所包含的观点仅代表作者个人看法,不代表新火种的观点。在新火种上获取的所有信息均不应被视为投资建议。新火种对本文可能提及或链接的任何项目不表示认可。 交易和投资涉及高风险,读者在采取与本文内容相关的任何行动之前,请务必进行充分的尽职调查。最终的决策应该基于您自己的独立判断。新火种不对因依赖本文观点而产生的任何金钱损失负任何责任。