阿里视频控制模型Wan2.1-Fun-1.3B-Contro

模型介绍

Wan2.1-Fun-Control 是阿里团队推出的开源视频生成与控制项目，通过引入创新性的控制代码（Control Codes）机制，结合深度学习和多模态条件输入，能够生成高质量且符合预设控制条件的视频。该项目专注于通过多模态控制条件实现对生成视频内容的精准引导。

目前 Fun Control 模型支持多种控制条件，包括 Canny（线稿）、Depth（深度）、OpenPose（人体姿势）、MLSD（几何边缘） 等，同时支持使用 轨迹控制。 模型还支持多分辨率视频预测，分辨率可选 512、768 和 1024，帧率为每秒 16 帧，最长可生成 81 帧（约 5 秒）的视频。

模型版本方面：

• 1.3B 轻量版：适合本地部署和快速推理，对显存要求较低
• 14B 高性能版：模型体积达 32GB+，效果更优但 需高显存支持

我们本次提供的是1.3b的版本，如果你先更实用1.4b模型可以到以下链接下载：

Wan2.1-Fun-14B-Control · 模型库

安装方法

1.模型文件Wan2.1-Fun-1.3B-control.safetensors下载到ComfyUI安装目录的models\diffusion_models文件夹内。
2.clip_vision_h.safetensors文件下载到models\clip_vision文件夹内。
3.umt5_xxl_fp8_e4m3fn_scaled.safetensors文件下载到models\text_encoders文件夹内。
4.comfy-wan_2.1_vae.safetensors文件下载到models\vae文件夹内