sd-webui-mov2mov icon indicating copy to clipboard operation
sd-webui-mov2mov copied to clipboard

Published 20 hours ago • verified publisher icon Scholar01

能否联系上下帧

Open ck7-32 opened this issue 1 year ago • 5 comments

ck7-32 avatar Mar 01 '23 12:03 ck7-32

有这方面考虑，可以具体说说流程吗

Scholar01 avatar Mar 02 '23 00:03 Scholar01

比如参考这个AI 插帧工具，做模型融合？ https://github.com/n00mkrad/flowframes

huazhuoyu avatar Mar 02 '23 06:03 huazhuoyu

自动补帧算法——RIFE的使用 https://zhuanlan.zhihu.com/p/565633270

huazhuoyu avatar Mar 02 '23 06:03 huazhuoyu

直接用上一帧渲染好的图片拿去img2img再加上当前帧的controlnet骨架试试? 这只是我的想法但我技术不足;=;

ck7-32 avatar Mar 05 '23 11:03 ck7-32

多帧渲染法，已经实现了，只是他的实现没有帮助生成视频 https://xanthius.itch.io/multi-frame-rendering-for-stablediffusion https://www.bilibili.com/video/BV1R54y1M7u5/?vd_source=fd21336c9a7bec3ef7168d36b968e7e9 https://github.com/OedoSoldier/enhanced-img2img

Season02 avatar Mar 13 '23 11:03 Season02

有这方面考虑，可以具体说说流程吗

能否把这个脚本集成到插件中来实现上下帧的联系呢？https://xanthius.itch.io/multi-frame-rendering-for-stablediffusion

Looong01 avatar Apr 12 '23 18:04 Looong01

这个会显著增加显存. 一般机器都受不了

Scholar01 avatar Apr 24 '23 15:04 Scholar01