Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

关于模糊核的对比实验 #35

Open
fenghao195 opened this issue Apr 20, 2023 · 11 comments
Open

关于模糊核的对比实验 #35

fenghao195 opened this issue Apr 20, 2023 · 11 comments

Comments

@fenghao195
Copy link

fenghao195 commented Apr 20, 2023

您好,大佬。我们在做对比试验中发现DCLS生成的模糊核偏离真实核,这应该是您重构后的核,应该怎么将其恢复呢?
img_043
img_096
DCLS生成的核
img_043
img_096
GT核

@Algolzw
Copy link
Collaborator

Algolzw commented Apr 20, 2023

这个是4x超分吗?应该是正常的结果,你可以将这个DCLS生成的模糊核应用在原图上,可以比较生成的LR图像和原始LR图像的PSNR。

此外如果只是为了visualize这个模糊核的话,你可以截取它的中心部分(1/4或1/2大小)再放大,应该就可以跟GT kernel的比较了。

@fenghao195
Copy link
Author

fenghao195 commented Apr 20, 2023

image

感谢您的回复,我们是做一个估计核的可视化结果对比,在对DCLS估计核可视化时候发现它的估计结果偏离GT核。但是鉴于DCLS的性能非常好,我们认为我们对DCLS可视化的核是不是经过傅里叶重构过的,如果拿重构的核做对比对您的DCLS模型有些不公平。

@Algolzw
Copy link
Collaborator

Algolzw commented Apr 20, 2023

确实不太公平。不过可视化的话可以裁剪放大后比较(caption里说明一下),同时建议增加一个数值对比(使用模糊核对HR图像进行blur+downsample,比较LR-PSNR)。这里别的模型应该都是先blur再下采样,不过DCLS是先下采样再blur。

嫌麻烦的话可以直接裁剪后放大比较吧,其实形状上应该是和GT核一致的。

@fenghao195
Copy link
Author

image
原来如此,您这里是做的LR-PSNR。我们是做的kernel-PSNR

@fenghao195
Copy link
Author

image
您好,您建议增加一个数值对比(使用模糊核对HR图像进行blur+downsample,比较LR-PSNR),您这里的实验是做的下采样4倍的对比试验嘛

@Algolzw
Copy link
Collaborator

Algolzw commented Apr 21, 2023

是的,如果你也是x4的话,应该也可以直接用数值。

@Lincoln20030413
Copy link

image

你好,感谢你的工作,我也遇到了相同的问题,将你工作的核预测器预测的核可视化后,画面成了这样,截取后还是无法继续比较,你能告诉我是什么原因造成的吗?感谢!

@Algolzw
Copy link
Collaborator

Algolzw commented Aug 1, 2023

image

你好,感谢你的工作,我也遇到了相同的问题,将你工作的核预测器预测的核可视化后,画面成了这样,截取后还是无法继续比较,你能告诉我是什么原因造成的吗?感谢!

你好,你比较的是哪个倍率下的kernel呢?以及是无法比较数值还是kernel图像呢? 如果是可视化比较的话,你可以截取后再放大到和GT kernel一样的大小(使用nearest插值)。

@andrea20192316
Copy link

确实不太公平。不过可视化的话可以裁剪放大后比较(caption里说明一下),同时建议增加一个数值对比(使用模糊核对HR图像进行blur+downsample,比较LR-PSNR)。这里别的模型应该都是先blur再下采样,不过DCLS是先下采样再blur。

嫌麻烦的话可以直接裁剪后放大比较吧,其实形状上应该是和GT核一致的。

您好,请问如何使用模糊核对HR图像进行blur呢?主要在我操作后算出的模糊后的图像与原始LR的psnr指标很低。

@ssuuuii
Copy link

ssuuuii commented Sep 8, 2023

您好,我想请问一下您的试验在对比模糊核MSE的时候,DANv2的输出好像是个(10,1)的code,您在比较MSE的时候是把对比方法都经过PCA转化(10,1)的维度上进行的比较还是把code进行了逆转为核的形式再进行比较。同时我有个疑问如果DANv2核的size是(21,21),kernelGan的核的size是(31,31),那么如何比较MSE。

@Algolzw
Copy link
Collaborator

Algolzw commented Sep 17, 2023

你好,DANv2也会输出kernel的哈,我们是直接比较的kernel图像。(31x31)和(11x11)的size是针对各项异性kernel的,而(21x21)是针对各项同性kernel.

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

5 participants