Comfyui LivePortrait

Comfyui LivePortrait Comfyui LivePortrait Modified December 14, 2024 效果 No access LivePortrait 00025 audio 00:00 No access LivePortrait 00051 audio 00:00 测试的参考视频 No access d6 00:00 No access d3 00:00 No access d19 00:00 No access d18 00:00 No access d14 00:00 No access d12 00:00 No access d0 00:00 No access d10 00:00 No access d11 00:00 关于脸部检测 节点中提供了三种的方法 最大的区别是许可证：Insight face严格用于非商业用途。MediaPipe在检测方面有点差，并且无法在Windows中的GPU上运行，尽管与Insight face相比，它在CPU上要快得多 faceAlignment这个是基于https://github.com/1adrianb/face alignment 由于这可以使用blazeface后置摄像头模型（或SFD），它比只能使用blazeface短模型的MediaPipe更适合较小的面部。选择这个节点, 第一次运行, 会自动下载需要的模型文件到 ComfyUI aki\models\liveportrait\landmark model.pth 动物脸部 https://github.com/KwaiVGI/LivePortrait/blob/main/assets/docs/changelog/2024 08 02.md 第一次运行会下载动物脸部的模型 ComfyUI\models\liveportrait\animal 的文件夹里面,网络问题, 可以在网盘里面找下. 相关资料 项目地址 https://github.com/KwaiVGI/LivePortrait ComfyUI LivePortraitKJ节点地址 https://github.com/kijai/ComfyUI LivePortraitKJ 效果 No access LivePortrait 00025 audio 00:00 No access LivePortrait 00025 audio 00:00 No access LivePortrait 00051 audio 00:00 No access LivePortrait 00051 audio 00:00 测试的参考视频 No access d6 00:00 No access d3 00:00 No access d19 00:00 No access d6 00:00 No access d6 00:00 No access d6 00:00 No access d3 00:00 No access d3 00:00 No access d3 00:00 No access d19 00:00 No access d19 00:00 No access d19 00:00 No access d18 00:00 No access d14 00:00 No access d12 00:00 No access d18 00:00 No access d18 00:00 No access d18 00:00 No access d14 00:00 No access d14 00:00 No access d14 00:00 No access d12 00:00 No access d12 00:00 No access d12 00:00 No access d0 00:00 No access d10 00:00 No access d11 00:00 No access d0 00:00 No access d0 00:00 No access d0 00:00 No access d10 00:00 No access d10 00:00 No access d10 00:00 No access d11 00:00 No access d11 00:00 No access d11 00:00 关于脸部检测 节点中提供了三种的方法 最大的区别是许可证：Insight face严格用于非商业用途。MediaPipe在检测方面有点差，并且无法在Windows中的GPU上运行，尽管与Insight face相比，它在CPU上要快得多 faceAlignment这个是基于https://github.com/1adrianb/face alignment 由于这可以使用blazeface后置摄像头模型（或SFD），它比只能使用blazeface短模型的MediaPipe更适合较小的面部。选择这个节点, 第一次运行, 会自动下载需要的模型文件到 ComfyUI aki\models\liveportrait\landmark model.pth 动物脸部 https://github.com/KwaiVGI/LivePortrait/blob/main/assets/docs/changelog/2024 08 02.md 第一次运行会下载动物脸部的模型 ComfyUI\models\liveportrait\animal 的文件夹里面,网络问题, 可以在网盘里面找下. 相关资料 项目地址 https://github.com/KwaiVGI/LivePortrait ComfyUI LivePortraitKJ节点地址 https://github.com/kijai/ComfyUI LivePortraitKJ LivePortrait：通过一张静态肖像生成动态视频 LivePortrait可以精确控制眼睛和嘴唇的动作，还能无缝拼接多个肖像，将不同人物特征合并成一个视频，确保过渡自然流畅。因为使用了一种不同于主流扩散方法的隐式关键点框架。该框架在计算效率和可控性之间取得了有效的平衡。LivePortrait生成的动画质量优于现有的非扩散和扩散模型方法。在RTX 4090 GPU上，生成速度为每帧12.8毫秒，效率显著高于现有的扩散模型。 静态肖像变得生动的视频生成技术，控制非常精准。 这项技术对AI视频生成中的人物表演和数字人具有很大帮助。 支持各种风格的图片,常见的动物面部迁移,并可以微调面部运动幅度 工作流与模型地址 https://pan.baidu.com/s/1Fk GTXLmM0Ofynz04NfCaQ?pwd=cycy https://pan.quark.cn/s/8dfd7ace4f05 内容依技术发展更新，请以文档为准 https://xiaobot.net/post/74238a84 d273 4b2c a195 ed2858b24ffe 工作流与模型地址 https://pan.baidu.com/s/1Fk GTXLmM0Ofynz04NfCaQ?pwd=cycy https://pan.quark.cn/s/8dfd7ace4f05 内容依技术发展更新，请以文档为准 https://xiaobot.net/post/74238a84 d273 4b2c a195 ed2858b24ffe 准备工作 安装节点LivePortraitKJ comfyui管理器 节点管理 搜索LivePortraitKJ 拖入工作流, 第一次运行会自动下载的模型(需要网络环境), 没有自动下载可以看下面的liveportrait和insightface. liveportrait需要的模型文件 网络环境不好, 模型放在网盘里面了, 下载完后，放入 ComfyUI/models/liveportrait 文件夹目录下, 如果没有就新建一个. 原模型文件地址 https://huggingface.co/Kijai/LivePortrait safetensors/tree/main 网盘地址 链接：https://pan.baidu.com/s/1Fk GTXLmM0Ofynz04NfCaQ?pwd=cycy insightface也是需要的(用于脸部检测) 放到 ComfyUI/models/insightface/buffalo l目录里. 原模型文件地址 https://github.com/deepinsight/insightface/releases/download/v0.7/buffalo l.zip 网盘地址 链接：https://pan.baidu.com/s/1Fk GTXLmM0Ofynz04NfCaQ?pwd=cycy 运行时,遇到这个报错, 是因为节点更新了, 按照下面方法修改,