PaddleSeg icon indicating copy to clipboard operation
PaddleSeg copied to clipboard

请教一下enet训练过程中loss爆炸可能是什么原因导致的

Open USTCKAY opened this issue 2 years ago • 0 comments

问题确认 Search before asking

  • [X] 我已经搜索过问题,但是没有找到解答。I have searched the question and found no related answer.

请提出你的问题 Please ask your question

PaddleSeg版本是最新的develop分支,在用npu训练enet时训练几百个step后loss会突然变得巨大。想请教一下套件的同学这有可能是什么原因造成的?训练指令如下: python tools/train.py --config configs/enet/enet_cityscapes_1024x512_80k.yml --device npu --do_eval --use_vdl --save_interval 500 image

USTCKAY avatar Jul 20 '23 08:07 USTCKAY