CrabNote螃蟹笔记

Comfyui SD 学社 做一个黏土头像

Comfyui SD 学社 做一个黏土头像

Comfyui SD 学社 做一个黏土头像 Comfyui SD 学社 做一个黏土头像 Modified December 13, 2024 需要用到的插件 如果提示缺失节点, 就通过管理器安装一下. 1. 提示词反推WD14 Tagger https://github.com/pythongosss/ComfyUl WD14 Tagger 首次使用会自动下载模型(需要网络环境) 2. 处理人物一致性 IPAdapter:https://github.com/cubiq/ComfyUI IPAdapter plus 也可以用instantID,这里我们使用的是IPadpter, 后续很多地方也会用到,建议大家也可以先用起来 关于IPAdapter的使用,之前有写了一篇文章介绍,不熟悉的小伙伴可以先看下. 🥇 因为作者新版本重写了代码,所以新版一定注意模型的放置位置, 这样后续使用统一加载,会方便不少. 3. controlNet 预处理的插件 comfyui controlnet aux https://github.com/Fannovel16/comfyui controlnet aux controlNet模型 XL CN模型下载:https://huggingface.co/lllyasviel/sd control collection/tree/main 1.5理模型下载:https://huggingface.co/lllyasviel/ControlNet v1 1/tree/main controlnet不熟悉的小伙伴,同样也可以看之前写的一篇文章,快速上手. 视频转绘 No access 5月17日2 00:00 No access 黏土转绘1 00:00 有了上面的图生图基础, 上点强度,来做V TO V, 只需要在上面的基础上加入animatediff, 同样,不熟悉的小伙伴也可以看之前的介绍. Hyper SDXL 8steps lora.safetensors 加快生成的时间,使用方法与lora一致,使用后可以适当降低采样步数. https://huggingface.co/ByteDance/Hyper SD/blob/main/Hyper SDXL 8steps lora.safetensors AnimateDiff节点和模型 AD源项目(非官方是分支更全):https://github.com/Kosinkadink/ComfyUI AnimateDiff Evolved AD模型下載:https://huggingface.co/guoyww/animatediff/tree/main 需要用到的插件 如果提示缺失节点, 就通过管理器安装一下. 1. 提示词反推WD14 Tagger https://github.com/pythongosss/ComfyUl WD14 Tagger 首次使用会自动下载模型(需要网络环境) 2. 处理人物一致性 IPAdapter:https://github.com/cubiq/ComfyUI IPAdapter plus 也可以用instantID,这里我们使用的是IPadpter, 后续很多地方也会用到,建议大家也可以先用起来 关于IPAdapter的使用,之前有写了一篇文章介绍,不熟悉的小伙伴可以先看下. 🥇 因为作者新版本重写了代码,所以新版一定注意模型的放置位置, 这样后续使用统一加载,会方便不少. 因为作者新版本重写了代码,所以新版一定注意模型的放置位置, 这样后续使用统一加载,会方便不少. 3. controlNet 预处理的插件 comfyui controlnet aux https://github.com/Fannovel16/comfyui controlnet aux controlNet模型 XL CN模型下载:https://huggingface.co/lllyasviel/sd control collection/tree/main 1.5理模型下载:https://huggingface.co/lllyasviel/ControlNet v1 1/tree/main controlnet不熟悉的小伙伴,同样也可以看之前写的一篇文章,快速上手. 视频转绘 No access 5月17日2 00:00 No access 黏土转绘1 00:00 No access 5月17日2 00:00 No access 5月17日2 00:00 No access 5月17日2 00:00 No access 黏土转绘1 00:00 No access 黏土转绘1 00:00 No access 黏土转绘1 00:00 有了上面的图生图基础, 上点强度,来做V TO V, 只需要在上面的基础上加入animatediff, 同样,不熟悉的小伙伴也可以看之前的介绍. Hyper SDXL 8steps lora.safetensors 加快生成的时间,使用方法与lora一致,使用后可以适当降低采样步数. https://huggingface.co/ByteDance/Hyper SD/blob/main/Hyper SDXL 8steps lora.safetensors AnimateDiff节点和模型 AD源项目(非官方是分支更全):https://github.com/Kosinkadink/ComfyUI AnimateDiff Evolved AD模型下載:https://huggingface.co/guoyww/animatediff/tree/main ⌛️ 活动时间:2024年5月20日至下2024年5月26日 🎯 活动目标 • 了解lora,controlNet,WD题词反推,IPadpter的基础用法 • 生成黏土风格头像 📝 活动内容 • 生成黏土风格的图片,视频 • 题材不限,可以用微信头像,给自己做一个黏土风格的头像 • 文生图,图生图,视频转绘的流都有 • 想了解animatediff的,可以尝试下视频转绘 • 给出的流是基础的,大伙根据需要完善. 🎫 参与方式: 1. 使用SD,生成黏土风格头像。 2. 作品直接发送至SD学社微信群。 🗂️ 作品收集: • 创建一个在线文档,用于收集大家的作品. 🆚 评选方式: • 5月26日(周日),将举行群内投票,每位群成员均可参与投票。 • 投票将选出前三名最受欢迎的作品。 📢 注意事项: • 请确保您的设计是原创的,不得侵犯他人的版权或商标。 • 提交的作品将被视为允许在群内公开展示。 • 请在截止日期前提交作品。 工作流与模型地址 https://pan.quark.cn/s/dc52ba9cc5fe https://pan.baidu.com/s/1Q NYuvs9Zetv07D6LSqIIA?pwd=cycy 说明文档 https://xiaobot.net/post/c5c824a4 9fe5 4d9a acab 61a7a889486d lora下载地址 📍 可以多个lora组合使用, 但是需要以一个为主,其他的强度在0.5或者以下,防止冲突 可以多个lora组合使用, 但是需要以一个为主,其他的强度在0.5或者以下,防止冲突 CLAYMATE 黏土lora(SDXL1.0) https://civitai.com/models/208168?modelVersionId=236248 lora触发词 claymation 迪福森博士的黏土动画风格(SDXL1.0) lora触发词 made of clay https://civitai.com/models/181962/doctor diffusions claymation style lora Clay style(SD1.5) https://civitai.com/models/121119/clay style 大模型下载地址 迪士尼真实卡通混合(SDXL1.0) DisneyRealCartoonMix https://civitai.com/models/212426/disneyrealcartoonmix 这个模型与黏土配合测试下来还不错,可能是因为迪士尼的浓眉大眼风格和黏土比较搭吧. 模型触发词: modisn disney, modisn disney style 大家也可以选择不同的模型测试比如: Playground AI's Playground v2.5 1024px https://civitai.com/models/325263/playground ais playground v25 1024px 模型可以自由选择 这里我们用SDXL来做实验 如果不熟悉comfyui的小伙伴,可以先从文生图开始,再到图生图 文生图 图生图