把剧本拆成分镜后批量生成,适合连续的 AI 短剧。

Sync是什么
拍完或生成完一段对白镜头,后来想改台词、换语言,嘴型就对不上了。sync. labs 做的就是这一步:上传视频,再给一段音频,它把画面里人物的嘴部重新生成,让口型跟新的声音匹配。
官网列出的模型有 sync-3、lipsync-2-pro 和 react-1,场景上强调多人同框、多机位、侧脸、暗光、快速对白,以及手或话筒挡住嘴的情况。音频可以来自视频原声,也可以用它的声音克隆或生成的声音。
它同时提供网页工作室和 API,另有 Premiere 插件和 ComfyUI 节点,既能手点,也能接进批处理流程。
主要功能
- 视频口型替换在原视频上重写嘴部动作,对上新的音频,保留其他画面。
- 多人与多机位官方称能处理多张脸、不同角度和快速对白的片段。
- 遮挡处理有开关用来应对手、话筒等挡住嘴的镜头。
- 声音选项可用视频原声、克隆声音或生成声音作为驱动音频。
- API 与插件提供 API、Premiere 插件和 ComfyUI 节点,方便批量处理。
在 AI 短剧里怎么用
放在配音之后、成片之前:先把对白用 TTS 或真人录好,必要时译成其他语种,再把镜头和新音轨交给它对口型。出海短剧做多语种版本时最有用,同一批画面不用重拍。素材先在剪辑软件里按镜头切开,单段不要太长。
适合谁,不适合谁
要做多语种译配、或台词改动后需要补口型的短剧和广告团队。
按秒计费,镜头多了成本累积;官网未明确写免费额度;官网列出的语言有限。
常见问题
Sync 怎么收费?
按套餐月费加每秒用量计费,官网价格页列有 Hobbyist、Creator、Growth、Scale 等档位,不同档位的视频长度上限和是否去水印不同,具体价格以官网为准。
Sync 支持中文吗?
官网首页明确列出的语言有英语、西班牙语、印地语、法语、德语和韩语。中文是否适用,以官网文档和你自己的试跑结果为准。
Sync 能处理多人同框的镜头吗?
官网称支持多人脸和多机位,高档位套餐还有说话人检测功能。复杂镜头建议先用短片段试一遍再批量处理。
同类工具
做角色定妆图、海报和分镜参考图。
字节的人像加音频驱动模型,给一张人物图和一段声音,生成口型和表情对得上的说话视频
阿里开源的视频生成模型系列,文生视频、图生视频、语音驱动和角色动画都能在自己显卡上跑。
Luma AI 的视频生成平台,自家 Ray 系列模型擅长电影感画面,可用关键帧控制镜头走向。
快手出品的视频生成工具,动作和镜头运动表现好。
用过 Sync?
到 TVLab 社区说说你的用法、踩过的坑,或者问问别人怎么调参数。










