wanghx1121
wanghx1121
> 跟我遇到的一样,已经解决了,可以参考 #397 感谢,感谢!~
> 看起来不是推理的问题,是视频拼接的问题,在那一帧应该是用的别的帧的图片,然后导致突然的抖动,可以检查一下特定帧对应的图片。 这个问题,应该怎么去定位 ,麻烦告知一下 @ZiqiaoPeng
> 看起来不是推理的问题,是视频拼接的问题,在那一帧应该是用的别的帧的图片,然后导致突然的抖动,可以检查一下特定帧对应的图片。 https://github.com/ZiqiaoPeng/SyncTalk/assets/159092899/30c9933c-6c92-427b-8e47-743b3c8fe503 上述视频是推理完成后,自动生成的测试结果。也出现了这个问题!~
> > 看起来不是推理的问题,是视频拼接的问题,在那一帧应该是用的别的帧的图片,然后导致突然的抖动,可以检查一下特定帧对应的图片。 > > 5.9.7.mp4 > 上述视频是推理完成后,自动生成的测试结果。也出现了这个问题!~ @ZiqiaoPeng
> 如果方便的话可以把原视频发送到我的邮箱[[email protected]](mailto:[email protected]),以对问题进行定位。 可以的。下面是nerf训练出来的结果: https://github.com/ZiqiaoPeng/SyncTalk/assets/159092899/8ec08ad8-6b58-4c5b-954d-5a9d88d3b476
> [email protected] 已发送邮件,请查收!~
> 如果方便的话可以把原视频发送到我的邮箱[[email protected]](mailto:[email protected]),以对问题进行定位。 请问你本地复现了吗? @ZiqiaoPeng
> 我使用hubert训练的结果没有问题,头部稳定,唇形同步,眼睛正常眨眼。 @ZiqiaoPeng 请问素材你做了特殊处理吗?能详细说一下你的预训练过程吗?谢谢!~
> > > 我使用hubert训练的结果没有问题,头部稳定,唇形同步,眼睛正常眨眼。 > > > > > > @ZiqiaoPeng 请问素材你做了特殊处理吗?能详细说一下你的预训练过程吗?谢谢!~ > > 没有特殊处理,step1训练6w步,step2训练到10w步。 我step1 训练20W步,step2 训练到40W步。复现了该问题。因为我的素材时长为5分钟,步数太少,像楼上所说,会出现双下巴 @ZiqiaoPeng