Sync 2.0 Pro Lip-sync
参考素材→个视频擅长
- 在实拍视频上口型同步最精准——影棚级水准
- 直接从视频中捕捉说话者的风格,无需单独训练——观察输入内容,在运动中构建对这个人的认知
- 最高支持 4K,面部用扩散放大处理,而不是老办法——胡须和嘴部都很干净
- 能处理画面中较大的人脸——约 350 像素,画质不下降
- 适用于剧情片、绘画和生成的视频
不擅长
- 需要输入中有人在主动说话:如果画面里的人不出声,嘴唇可能完全不会动
- 侧脸明显或脸部被部分遮挡时效果较差
- 速度慢——大约是轻量版的两倍慢
- 价格贵
不要用它来做
- 不要输入人物沉默或只是看着镜头的画面
- 不要输入强烈侧脸,或脸被手、麦克风、头发挡住的画面
- 只有照片时不要用它——那种情况有另一个模型
典型用途
- 让片段里的人说出另一段话
- 更换说话者的语言,同时保留面部
- 不用重拍就能修正台词
- 为剧情片或广告镜头配音