最快视频转绘-AnimateDiff-Lightning

Video-to-Video Generation

AnimateDiff-Lightning 非常适合视频到视频的生成。使用 ControlNet 提供最简单的 comfyui 工作流程。

「ComfyUI-aki-v1.3.7z」链接：https://pan.quark.cn/s/199a753292d8

1. 下载导入工作流

animatediff_lightning_v2v_openpose_workflow.json

下载地址：https://pan.quark.cn/s/90fdf5f4a88b

2. 安装节点 可以手动安装它们或使用 ComfyUI-Manager。

￮ ComfyUI-AnimateDiff-Evolved

￮ ComfyUI-VideoHelperSuite

￮ ComfyUI-Advanced-ControlNet

￮ comfyui_controlnet_aux

3. 下载你最喜欢的基础模型 并将它们放在下面 /models/checkpoints/

模型打包下载：https://pan.quark.cn/s/fc3172240d9f

写实风格

• epiCRealism

• Realistic Vision

• DreamShaper

• AbsoluteReality

• MajicMix Realistic

动漫与卡通风格

• ToonYou

• IMP

• Mistoon Anime

• DynaVision

• RCNZ Cartoon 3d

• MajicMix Reverie

4. 下载AnimateDiff-Lightning模型文件animatediff_lightning_Nstep_comfyui.safetensors

模型打包下载：https://pan.quark.cn/s/f8ce7dce237b

并将它们放在/custom_nodes/ComfyUI-AnimateDiff-Evolved/models/下

5. 下载 ControlNet OpenPose control_v11p_sd15_openpose.pth checkpoint

control_v11p_sd15_openpose.pth下载链接：https://pan.quark.cn/s/28064c8c2e1d

放到 ComfyUI-aki-v1.3\models\controlnet

6. 上传视频并运行

补充:

1. 视频不宜太长或太高分辨率. 测试使用的分辨率 576x1024 8 秒 30fps
2. 设置帧速率以匹配您的输入视频，音频与输出视频才能匹配
3. DWPose 首次运行会自己下载 checkpoint
4. DWPose 可能会卡在 UI 中，但管道实际上仍在后台运行。检查 ComfyUI 日志和输出文件夹

原文：https://huggingface.co/ByteDance/AnimateDiff-Lightning