【RefineNet】RefineNet: Multi-Path Refinement Networks for High-Resolution Semantic Segmentation

RefineNet：高分辨率语义分割的多路径细化网络

最新推荐文章于 2024-02-07 22:19:53 发布

原创

最新推荐文章于 2024-02-07 22:19:53 发布 · 1k 阅读

2 ·

CC 4.0 BY-SA版权

RefineNet是CVPR 2017提出的一种用于高分辨率语义分割的网络结构，它通过多路径细化网络和长范围残差连接解决高层语义和低层细节信息的融合问题，实现state-of-the-art的表现。文章贡献包括提出Residual Convolution Unit和Chained Residual Pooling，以及在多个数据集上取得最优结果。

Alt

CVPR 2017

文章目录

- 概述
- 细节
- Results
- Conclusion

概述

要解决的问题
- 实现high-resolution prediction
采用的方法
- 自己新设计的一些网络结构
- long range residual connecntions
- chained residual pooling
结果如何
- IOU score of 83.4 on PASCAL VOC 2012，state-of-the-art，比当时的最佳DeepLab高很多。
- 在7个公共数据集上state-of-the-art，包括PASCAL VOC 2012, PASCAL-context, NYUDv2, SUN-RGBD, Cityscapes, ADE20K, the object parsing Person-Parts dataset。
Contributions
- 提出一种多路径精细网络（RefineNet），用细粒度的低级特征递归地对低分辨率语义特征进行细化，以生成高分辨率语义特征图。
- 利用残差的手法进行高效的端到端训练。
- “Chained residual pooling”结构
- 总的来说，论文就是针对如何更好的利用高层语义信息分类和低层信息来产生得到更多细节信息，来产生更高分辨率的预测。
Related work(一点点综述)：
- 早期的分割方法有基于区域建议的，如RCNN。
- 后面提出了FCN型的网络，然后很多就用上了，而且这是一个对于Dens-prediction tasks（语义分割是其中的一种，还有诸如 depth estimation, image restoration, image super-resolution等任务）都比较适用的方法。
- FCN低分辨率预测问题的一些解决：基于空洞卷积的DeepLab-CRF；CRF-RNN基于上面的方法，并实现recurrent layers for end-to-end learning of the dense CRF and FCNN；Deconvolution methods。
- 利用middle layer来获取更多信息：FCN， Hypercolumn都有用到利用中间层的信息，但是都是stage-wise manner来进行训练的，比如在FCN中是几个出口进行融合得到某一个结果的；SegNet, Unet的skip

最低0.47元/天解锁文章