LFFD-A-Light-and-Fast-Face-Detector-for-Edge-Devices icon indicating copy to clipboard operation
LFFD-A-Light-and-Fast-Face-Detector-for-Edge-Devices copied to clipboard

训练出现Nan

Open mifan0208 opened this issue 5 years ago • 4 comments

作者,你好,在训练过程中location_loss出现了Nan,请问你遇到过这样的问题嘛?正常吗?

mifan0208 avatar Nov 25 '19 07:11 mifan0208

@mifan0208 偶尔遇到过。 这里很有可能你的数据准备有些问题,不然就是学习率太大。是训练widerface么?

YonghaoHe avatar Nov 26 '19 05:11 YonghaoHe

对的,训练的widerface,找到原因了,是因为我计算loss的时候,先进行计算l2loss,再乘的mask;在训练的过程中,cls的metric不怎么提升,或者提升很慢,在0.05左右震荡(训了3个epoch),请问你当时的metric提升的怎么样呢?

mifan0208 avatar Nov 26 '19 07:11 mifan0208

@YonghaoHe 你好,我在训练的时候cls_loss很低,但是metric却不高,很奇怪,能加一下你的联系方式嘛?咨询你个问题,谢谢。

mifan0208 avatar Nov 26 '19 14:11 mifan0208

训练的脚本是哪 一个?

121649982 avatar Jan 16 '20 06:01 121649982