要点
1. 构建一个全卷积网络,首个支持端到端像素级训练的网络,网络的输入为任意尺寸,输出为等大图像。
2. 在空间密集型预测任务中解释了其应用。
3. 定义跳接结构,结合深层的语义信息和浅层的表征信息产生精准的分割结果
读引言
研究背景
卷积神经网络已经有力推动了识别任务进展,在图像整体分类、结构化输出局部任务取得了明显进展。下一步自然是想获得产生细致的预测,即对每个像素点进行预测。
先前的工作都是对封闭对象或区域分类,分类结果作为目标中每一个像素的标记。这是他们的缺点,也是我们的工作要解决的问题。
为什么要研究
语义分割面对着语义与位置之间的矛盾:全局信息和局部信息分别解决了什么。
针对这个问题,提出跳接思想。
主要内容
3.1 先使用分类网络训练,再将其全连接层改为卷积层进行学习
3.2与3.3 Shift-and-stitch(https://zhuanlan.zhihu.com/p/56035377)
不如反卷积快速且有效
3.4 划分为patch训练即相当于损失的采样
patchwise训练中patch的选择可能会有重复,必须要限制随机取样集