论文阅读:ERL-Net: Entangled Representation Learning for Single Image De-Raining

这篇是假期很久之前看的,那段时间没有整理笔记,最近看的一篇论文中有提到这个,再回头整理一下。

2019 ICCV:ERL-Net

这篇文章是2019年ICCV的一篇文章,主要提出了一种缠结表示学习的方法结合编解码结构,完成单幅图像的去雨。这篇文章与2018ACMMM的一篇编解码结构的网络有相似之处,应该放到一起整理。
在这里插入图片描述

文章首先指出了当前编解码网络得到的结果因为缺少细节而存在的不足。将解码器网络解释为条件发生器,解码器在其中充当条件发生器,条件发生器取决于编码器学习的嵌入,输出结果不理想的原因可能是编码器学习的嵌入质量不高。
本文中则是假设存在一种从低质量到嵌入到潜在最优嵌入的内在映射,译码器可以利用这种映射产生更好的结果。提出了构造一个残差学习分支来学习该映射,能以缠结表示的方式自适应地添加残差到原始的低质量嵌入中,这样就能使细节恢复更好。

主要思想阐释:

基本思想:

文中花费很大笔墨阐述的缠结表示学习,其实就是一种将残差编码分支学习到的细节以及其他属性叠加到原本的编解码网络上,只是说的比较高级罢了。
从后面的网络结构便可以很清晰地看出,整体网络结构就是一个带有跳跃连接的U-Net编解码结构,然后添加了一个残差编码结构,将残差添加到基本输入中,使经过校正后的映射表现出更完整的属性,包括雨不变量和其他要素(如纹理和颜色)。

缠结表示学习机制:
在这里插入图片描述
这是一个双分支的编码器。
其中,MEN代表主编码器,MDE代表主解码器,

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值