项目地址:https://github.com/Rudrabha/Wav2Lip
需要提供新建预训练模型(Wav2Lip+GAN权重)工具和方法,分辨率达到256*256(原作者提供的预训练模型为64*64,且预训练模型仅针对特定人脸的素材,合成效果才能达到MODE效果)
测试:针对特定人脸数据集进行预训练(训练所需数据集和GPU设备我可以提供),直到LOSS函数符合预期,在进行合成应用时,输出视频质量和时效达到以下参考标准:
https://zenvideo.qq.com/smart/listVirtual