YOLOX 单机多卡训练，在eval阶段，除主进程外的其余进程全部消亡

单机多卡训练，在eval阶段，除主进程外的其余进程全部消亡

Open QWERDF007 opened this issue 3 years ago • 4 comments

单机多卡训练，在eval阶段，除了主进程，其他进程全部自动结束，并没有阻塞等待主进程完成eval，并且主进程eval结束后卡死，nvidia-smi显示rank0的卡usage为100%，其余卡均无占用。

Aug 02 '21 02:08 QWERDF007

我也遇到同样的问题，第一次eval结束之后，输出了eval结果，就卡死了，只有一张卡一直是100%占用，而且没有看到保存best模型

Aug 07 '21 14:08 sUtomorrow

同

Mar 10 '22 07:03 huqiyii

同

May 07 '22 05:05 YuNaruto

同样的问题

Jul 05 '22 02:07 ladyxuxu