TextZoom SR图像的颜色很诡异

每个图中从上到下依次是LR、SR、HR，可以看到SR图像的背景颜色很奇怪，我不知道这是不是导致训练中image loss一直是0的原因，希望能得到解答，谢谢~~

Apr 19 '21 07:04 NO2-yh

我也不是很清楚为啥loss一直是0，，至于颜色我感觉是数据分布的问题，因为这个数据本身是从通用超分辨率数据集上采的，原数据集大多数图片都没有文字，很多文字图片都是来自于少部分图片，比如纸盒，背景色相当单调

Apr 19 '21 08:04 WenjiaWang0312

我也不是很清楚为啥loss一直是0，，至于颜色我感觉是数据分布的问题，因为这个数据本身是从通用超分辨率数据集上采的，原数据集大多数图片都没有文字，很多文字图片都是来自于少部分图片，比如纸盒，背景色相当单调

我这边复现的精度(Aster模型)，大体上可以复现您的结果（考虑到训练的稳定性）。至于颜色问题，我这边继续排查一下，总感觉和您论文里面的贴图看着差异较大，尤其是整体的背景颜色（而且越是训练前期，这种颜色差异越是巨大）。image loss的问题我会继续排查，因为我看代码里面这个loss_im会参与backward，因此会对训练有影响，如果一直是0，那说明loss_im在训练中一直没起作用。。。等我有进展了，我会在这里继续更新我的结论:) easy: 73.32% -> 75.1%(paper) medium: 56.20% -> 56.3%(paper) hard: 39.76% -> 40.1%(paper)

Apr 19 '21 08:04 NO2-yh

我也不是很清楚为啥loss一直是0，，至于颜色我感觉是数据分布的问题，因为这个数据本身是从通用超分辨率数据集上采的，原数据集大多数图片都没有文字，很多文字图片都是来自于少部分图片，比如纸盒，背景色相当单调

我这边复现的精度(Aster模型)，大体上可以复现您的结果（考虑到训练的稳定性）。至于颜色问题，我这边继续排查一下，总感觉和您论文里面的贴图看着差异较大，尤其是整体的背景颜色（而且越是训练前期，这种颜色差异越是巨大）。image loss的问题我会继续排查，因为我看代码里面这个loss_im会参与backward，因此会对训练有影响，如果一直是0，那说明loss_im在训练中一直没起作用。。。等我有进展了，我会在这里继续更新我的结论:) easy: 73.32% -> 75.1%(paper) medium: 56.20% -> 56.3%(paper) hard: 39.76% -> 40.1%(paper)

easy的话，由于数据本身对齐得很好，所以可以不加stn训练会更好😂

Apr 20 '21 06:04 WenjiaWang0312