SCAIL-2

4.0

智谱开源的角色动画模型,给一张角色图和一段参考视频,让角色照着视频动。

官网在新窗口打开。价格和功能以官网为准。

SCAIL-2官网首页截图
huggingface.co 首页截图

SCAIL-2是什么

拍短剧时常见的需求是:角色图已经定了,想让他做出某段真人表演的动作。SCAIL-2 就干这个,它由智谱(zai-org)开源,输入一张角色参考图和一段驱动视频,输出角色按视频动作表演的片段,也支持把视频里的人替换成你的角色。

和上一代需要骨架图的做法不同,它宣称端到端完成,不依赖中间的骨架图或修补遮罩,同时能处理多角色画面。模型基于 Wan 2.1 体系,许可证是 MIT,可商用方向相对宽松,具体仍要自己核对上游模型和素材的授权。

门槛在部署:官方仓库要装 SCAIL-Pose 子模块、下载姿态权重、转换权重格式,并没有写显存要求。ComfyUI 已有原生支持,社区还有量化版本,适合愿意折腾本地环境的人。

主要功能

  • 动作驱动角色用一张角色图加一段参考视频,让角色复现视频里的动作
  • 角色替换把驱动视频里的人换成指定角色,保留原视频背景
  • 多角色场景支持多人画面,用不同颜色的遮罩标记谁是谁
  • 512p 与 704p端到端驱动支持两档分辨率,宽高须为 32 的倍数,704p 效果更好
  • ComfyUI 支持已并入 ComfyUI,可直接搭工作流,不必全靠命令行

在 AI 短剧里怎么用

在角色定稿之后使用:先用图片模型出角色立绘,再找演员或自己拍一段表演视频当动作参考,交给 SCAIL-2 生成角色表演镜头。需要换背景时可以用黑底角色图配合动画模式,社区反馈这种做法有时比替换模式更稳。成片之后再接口型、配音和剪辑工具。

用户怎么说

有用户在 issue 里反映,替换模式时好时坏:同一个动作,换一张姿势几乎相同的参考图,结果就差很多。维护者的建议是黑底角色图加 T2V LoRA,用动画模式而不是替换模式。

— 来自 GitHub 用户反馈

有人发现驱动视频里舞者的黄色短裙会断断续续出现在自己角色身上,试过改提示词和 LoRA 强度都没解决,长视频里还出现过角色突然位移或缩放。

— 来自 GitHub 用户反馈

整理自公开平台上的用户反馈,已翻译改写,不代表 TVLab 观点。

适合谁,不适合谁

适合:有本地显卡、会用 ComfyUI,想让固定角色照真人表演做动作戏或舞蹈镜头的创作者。
要注意:部署步骤多,官方未写显存要求;有人反馈替换结果不稳定、衣着会串到角色上,长视频还可能出现位置跳变。

常见问题

SCAIL-2 要多大显存?

模型页和官方仓库都没有写显存要求。社区有量化版本和 ComfyUI 工作流,各家给的数字不一致,建议以官方仓库和实际工作流说明为准。

SCAIL-2 可以商用吗?

模型本身采用 MIT 许可证。但它基于其他开源组件,参考图、驱动视频的肖像权和版权也要自己负责,商用前以官方许可文件为准。

SCAIL-2 怎么用在 ComfyUI 里?

ComfyUI 已原生支持,官方在 2026 年 6 月宣布了集成,多参考图支持也已并入。具体节点和模板名称以 ComfyUI 当前版本为准。

同类工具

用过 SCAIL-2?

到 TVLab 社区说说你的用法、踩过的坑,或者问问别人怎么调参数。