【前言】
这次带大家看的是一个去除图像中的反射部分的工作,这个应该是手机的计算摄影一类的范围了,有源码。
以下解读与见解均为我的个人理解,要是我有哪里曲解了,造成了不必要的麻烦,可以联系我删除文章,也可以在评论区留言,我进行修改。也欢迎大家在评论区进行交流,要是有什么有意思的paper也可以留言,我抽空看一下也可以写一些。正文内容中的“作者”二字,均是指paper的作者,我的个人观点会显式的“我”注明。而文中的图基本都是从paper上cv过来的,我也没本事重做这么多的图,况且作者的图弄得还挺好看的。
Paper基本信息
题目:Location-aware Single Image Reflection Removal
作者:Zheng Dong, Ke Xu, Yin Yang, Hujun Bao, Weiwei Xu, Rynson W.H. Lau
链接:
https://openaccess.thecvf.com/content/ICCV2021/papers/Dong_Location-Aware_Single_Image_Reflection_Removal_ICCV_2021_paper.pdfopenaccess.thecvf.com
Github:
https://github.com/zdlarr/Location-aware-SIRRgithub.com
总结:使用合成数据以及循环网络逐步细化通过拉普拉斯算子找出来的反射区域
Paper内容介绍
【基本介绍】
这里的去除反射,指的是摄像头透过玻璃一类的物体进行成像,去除玻璃上面的反射的问题。按照alpha混合模型,可以表示为: ,其中
是alpha的混合mask,
是透射层,
是反射层,
是摄像头拍到的图像。任务的目标就是由
得到
。这属于单幅图像反射消除(SIRR)问题。
这个工作的主要贡献有:
-
提出了一种新颖的SIRR方法,迭代的修复输入图像的透射层
-
提出了一个反射检测模块(RDM)来定位图像中存在反射的区域
【相关工作】
-
传统方法,基于优化引入先验知识
-
Li观察发现反射区域一般都不是图像的焦点,会比透射区域模糊,因此在计算两层的梯度之前引入相对平滑
-
Shih发现在玻璃厚度不能忽略的时候,可以通过产生的重影来消除反射
-
Huang提出基于小波变换的正则化方法来分离重影跟背景
-
Wan提出基于多尺度景深的分析方