DCLS-SR icon indicating copy to clipboard operation
DCLS-SR copied to clipboard

关于模糊核的对比实验

Open fenghao195 opened this issue 1 year ago • 11 comments

您好,大佬。我们在做对比试验中发现DCLS生成的模糊核偏离真实核,这应该是您重构后的核,应该怎么将其恢复呢? img_043 img_096 DCLS生成的核 img_043 img_096 GT核

fenghao195 avatar Apr 20 '23 11:04 fenghao195

这个是4x超分吗?应该是正常的结果,你可以将这个DCLS生成的模糊核应用在原图上,可以比较生成的LR图像和原始LR图像的PSNR。

此外如果只是为了visualize这个模糊核的话,你可以截取它的中心部分(1/4或1/2大小)再放大,应该就可以跟GT kernel的比较了。

Algolzw avatar Apr 20 '23 13:04 Algolzw

image

感谢您的回复,我们是做一个估计核的可视化结果对比,在对DCLS估计核可视化时候发现它的估计结果偏离GT核。但是鉴于DCLS的性能非常好,我们认为我们对DCLS可视化的核是不是经过傅里叶重构过的,如果拿重构的核做对比对您的DCLS模型有些不公平。

fenghao195 avatar Apr 20 '23 13:04 fenghao195

确实不太公平。不过可视化的话可以裁剪放大后比较(caption里说明一下),同时建议增加一个数值对比(使用模糊核对HR图像进行blur+downsample,比较LR-PSNR)。这里别的模型应该都是先blur再下采样,不过DCLS是先下采样再blur。

嫌麻烦的话可以直接裁剪后放大比较吧,其实形状上应该是和GT核一致的。

Algolzw avatar Apr 20 '23 13:04 Algolzw

image 原来如此,您这里是做的LR-PSNR。我们是做的kernel-PSNR

fenghao195 avatar Apr 20 '23 13:04 fenghao195

image 您好,您建议增加一个数值对比(使用模糊核对HR图像进行blur+downsample,比较LR-PSNR),您这里的实验是做的下采样4倍的对比试验嘛

fenghao195 avatar Apr 21 '23 02:04 fenghao195

是的,如果你也是x4的话,应该也可以直接用数值。

Algolzw avatar Apr 21 '23 07:04 Algolzw

image

你好,感谢你的工作,我也遇到了相同的问题,将你工作的核预测器预测的核可视化后,画面成了这样,截取后还是无法继续比较,你能告诉我是什么原因造成的吗?感谢!

Lincoln20030413 avatar Jul 26 '23 11:07 Lincoln20030413

image

你好,感谢你的工作,我也遇到了相同的问题,将你工作的核预测器预测的核可视化后,画面成了这样,截取后还是无法继续比较,你能告诉我是什么原因造成的吗?感谢!

你好,你比较的是哪个倍率下的kernel呢?以及是无法比较数值还是kernel图像呢? 如果是可视化比较的话,你可以截取后再放大到和GT kernel一样的大小(使用nearest插值)。

Algolzw avatar Aug 01 '23 14:08 Algolzw

确实不太公平。不过可视化的话可以裁剪放大后比较(caption里说明一下),同时建议增加一个数值对比(使用模糊核对HR图像进行blur+downsample,比较LR-PSNR)。这里别的模型应该都是先blur再下采样,不过DCLS是先下采样再blur。

嫌麻烦的话可以直接裁剪后放大比较吧,其实形状上应该是和GT核一致的。

您好,请问如何使用模糊核对HR图像进行blur呢?主要在我操作后算出的模糊后的图像与原始LR的psnr指标很低。

andrea20192316 avatar Sep 07 '23 14:09 andrea20192316

您好,我想请问一下您的试验在对比模糊核MSE的时候,DANv2的输出好像是个(10,1)的code,您在比较MSE的时候是把对比方法都经过PCA转化(10,1)的维度上进行的比较还是把code进行了逆转为核的形式再进行比较。同时我有个疑问如果DANv2核的size是(21,21),kernelGan的核的size是(31,31),那么如何比较MSE。

ssuuuii avatar Sep 08 '23 07:09 ssuuuii

你好,DANv2也会输出kernel的哈,我们是直接比较的kernel图像。(31x31)和(11x11)的size是针对各项异性kernel的,而(21x21)是针对各项同性kernel.

Algolzw avatar Sep 17 '23 10:09 Algolzw