CrabNote螃蟹笔记

ComfyUI MagicTime 延时视频

ComfyUI MagicTime 延时视频

ComfyUI MagicTime 延时视频 ComfyUI MagicTime 延时视频 Modified May 1, 2024 🎉 作者:CYCHENYUE 来源: 🚝 开源的Ai知识库 MagicTime项目地址 https://github.com/PKU YuanGroup/MagicTime?tab=readme ov file 该项目的任务是帮助复制 Sora 并提供高质量的视频文本数据和数据注释流水线,以支持 Open Sora Plan 或其他基于 DiT 的 T2V 模型。为此,我们首先将我们的 MagicTime 方案集成到基于 DiT 的框架中。具体来说,我们的方法支持用于微调的 Open Sora Plan v1.0.0。我们首先通过在相同的注释框架中使用额外的变质地貌延时视频来扩展规模,以获得 ChronoMagic Landscape 数据集。然后,我们使用 ChronoMagic Landscape 数据集对 Open Sora Plan v1.0.0 进行微调,得到 MagicTime DiT 模型。 🚝 开源的Ai知识库 🎉 作者:CYCHENYUE 来源: 🚝 开源的Ai知识库 🚝 开源的Ai知识库 作者:CYCHENYUE 来源: 🚝 开源的Ai知识库 🚝 开源的Ai知识库 MagicTime项目地址 https://github.com/PKU YuanGroup/MagicTime?tab=readme ov file 该项目的任务是帮助复制 Sora 并提供高质量的视频文本数据和数据注释流水线,以支持 Open Sora Plan 或其他基于 DiT 的 T2V 模型。为此,我们首先将我们的 MagicTime 方案集成到基于 DiT 的框架中。具体来说,我们的方法支持用于微调的 Open Sora Plan v1.0.0。我们首先通过在相同的注释框架中使用额外的变质地貌延时视频来扩展规模,以获得 ChronoMagic Landscape 数据集。然后,我们使用 ChronoMagic Landscape 数据集对 Open Sora Plan v1.0.0 进行微调,得到 MagicTime DiT 模型。