ddpm-pytorch icon indicating copy to clipboard operation
ddpm-pytorch copied to clipboard

关于训练过程中Loss突然变大的问题

Open ShaochengShen opened this issue 2 years ago • 3 comments

想请问一下博主,我使用LSUN的数据集,初始学习率2e-04,使用adam优化器,为什么会有训练到一半突然loss增大的问题。 期待您的回复。

ShaochengShen avatar Jul 25 '23 01:07 ShaochengShen

image

ShaochengShen avatar Jul 25 '23 02:07 ShaochengShen

可能是……学习率太大了?

bubbliiiing avatar Jul 27 '23 16:07 bubbliiiing

感谢回复 调整了学习率之后训练好多了

---原始邮件--- 发件人: @.> 发送时间: 2023年7月28日(周五) 凌晨0:48 收件人: @.>; 抄送: @.@.>; 主题: Re: [bubbliiiing/ddpm-pytorch] 关于训练过程中Loss突然变大的问题 (Issue #17)

可能是……学习率太大了?

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: @.***>

ShaochengShen avatar Jul 27 '23 16:07 ShaochengShen