EMO 可以看看我们的demo

我们的虚拟人也在开发中，用了不同的合成路径，能达到实时合成，实现全身控制演示页面： http://smartcan-stf-fullbody-female-2-1.smartcan-service.1997894777848128.cn-beijing.fc.devsapp.net http://smartcan-stf-lvmu-1.smartcan-service.1997894777848128.cn-beijing.fc.devsapp.net http://smartcan-zzx-zhaolei-a3-1.smartcan-service.1997894777848128.cn-beijing.fc.devsapp.net

注意第一次打开网页是冷启动，需要等一段时间。。。

联系我们：[email protected]

Mar 03 '24 23:03 threesond

非常棒的工作，但抖动的稍微有点厉害

Mar 04 '24 02:03 wangchenwc

厉害

Mar 04 '24 02:03 Xasperfect

非常棒的工作，但抖动的稍微有点厉害

正在使用diffusion重跑，原始模型是transformer直给目前发现可能是latent的标准化做的有问题，持续优化中

Mar 04 '24 02:03 threesond

感觉耗时还是比较久的？看着像wav2lip + 视频源的方式推理实现的

Mar 04 '24 05:03 ApolloRay

感觉耗时还是比较久的？看着像wav2lip + 视频源的方式推理实现的

确实不是用的换嘴，可以看这个地址 http://smartcan-zzx-zhaolei-a3-1.smartcan-service.1997894777848128.cn-beijing.fc.devsapp.net/ 会发现手部的动作和声音是一致的

耗时长是因为用的阿里云的gpu服务，本地可以做到实时

Mar 04 '24 06:03 threesond

感觉耗时还是比较久的？看着像wav2lip + 视频源的方式推理实现的

确实不是用的换嘴，可以看这个地址 http://smartcan-zzx-zhaolei-a3-1.smartcan-service.1997894777848128.cn-beijing.fc.devsapp.net/ 会发现手部的动作和声音是一致的

耗时长是因为用的阿里云的gpu服务，本地可以做到实时

这个是怎么实现的呢？有论文吗？

Mar 04 '24 09:03 ApolloRay

这个可以上传图片用做驱动的人物吗？还是只能使用固定模版的人物

Mar 04 '24 09:03 renrenzsbbb

感觉耗时还是比较久的？看着像wav2lip + 视频源的方式推理实现的

确实不是用的换嘴，可以看这个地址 http://smartcan-zzx-zhaolei-a3-1.smartcan-service.1997894777848128.cn-beijing.fc.devsapp.net/ 会发现手部的动作和声音是一致的耗时长是因为用的阿里云的gpu服务，本地可以做到实时

这个是怎么实现的呢？有论文吗？

这个是我们的原创方法，跑了快三年的模型。。。如果未来没有变现的可能的话我们会先发论文然后开源，让大家共同改进，还请理解。

Mar 04 '24 12:03 threesond