今天发现自己构思了很久的一个想法,已经初步成型 的网络,在ArXiv上发现了已经成型的论文。害,现在心情很down
2018 WACV :GCANet
这篇文章主要结合平滑扩张卷积以及提出了一种门限融合子网络来完成图像的去雾和去雨,效果比较好。
本片文章主要是提出了一个端到端门控上下文聚合网络来直接恢复最终的无模糊图像。
在该网络中,我们采用最新的平滑扩张卷积技术来帮助去除广泛使用的扩张卷积引起的网格伪影,而额外的参数可以忽略,并利用门控子网络融合不同层次的特征。
主要关键词: 平滑扩张卷积 + 门控融合子网络
网络结构
整体网络可以看作一个简单的自动编码器。
从网络中我们可以看出,首先是三个卷积模块将输入的模糊图像编码到特征图中作为编码部分,并且最后一个卷积层进行了下采样。
然后通过七个平滑扩张的残差块,使用平滑扩张卷积替代了原始的正则卷积层。除了最后一个卷积层和平滑扩张卷积层中额外的每一个可分离和共享的卷积层,我们在每个卷积层之后放置了实例归一化层 IN 和ReLU层。
再之后通过一个门限融合子网络用于融合不同leve的特征,这里是一个简单的卷积模块。
再之后,通过一个反卷积层上采样到原始分辨率,接下来的两个卷积层将feature map转换回图像空间,得到残差图,最终得到一个处理之后的图像。
具体实现
1、平滑扩张卷积
对于传统的池化层和连续的上下采样可能