Synclabs是一款可以实现视频实时唇语同步,支持任何语言,只需一段人物视频即可实现唇语同步。
我们打开Synclabs官网,可以用谷歌/Github账号授权登录。注册成功需要填写问卷才能进入操作界面。
我们点击new project创建,可以上传人物视频或者通过Url读取,音频也可以上传,或者填写文字选择人物声音,当然也可以自定义人物声音哦~最后选择模型,等待生成。
生成的速度挺快的,生成视频的时长也是根据音频来决定,第一段用的是美国中年女性的声音,读中文口音比较重。
我们再来生成第二段,还是用文字来生成音频,不过这次选择美国青年女性的声音。
生成了14秒的视频,速度比第一段相对于来说稍微慢点,不过效果却是不错的。
其实之前也体验过开源的实时唇语同步工具,与Synclabs相比,两者的效果相差不大,不过使用Synclabs比较方便,开源的部署比较麻烦。