controlnet训练报错

Open intersoulest opened this issue 2 years ago • 3 comments

controlnet 可以自定义训练sd2的模型吗？我使用md中的教程一直出现错误。

Oct 13 '23 07:10 intersoulest

我解决了，该错误是因为数据集尺寸大小不一致，不是64的倍数导致报错，自定义数据集必须尺寸大小是64的倍数

Oct 16 '23 10:10 intersoulest

使用sd2训练出来的controlnet模型效果很差，基本只有一个轮廓，而且图片是灰色的，我的提示词为：a red flower。训练出来的结果图 demo1 原图 mihui_1

Oct 26 '23 06:10 intersoulest

可能需要重点考虑以下情况：确保训练数据集包含足够的、高质量的样本确保paddle、ppdiffusers等版本适配，可以先不加载controlnet看看推理是否正常排查是不是精度问题，可以先使用fp32训练和推理

Jan 30 '24 06:01 westfish