[SS]语义分割——基础知识

原创

已于 2024-01-18 10:10:14 修改 · 1.4k 阅读

CC 4.0 BY-SA版权

文章标签：

于 2024-01-17 17:42:13 首次发布

本文详细介绍了语义分割的概念，包括与实例分割和全景分割的区别，以及在自动驾驶、GIS等领域的应用。重点讨论了建筑物提取任务BFE，涉及的数据集格式、常用方法和评价指标。此外，文章提到了PASCALVOC2012和MSCOCO数据集，以及Labelme和EISeg这样的标注工具。

语义分割前言

语义分割（Semantic Segmentation）是计算机视觉中的一项任务，目标是将图像中的每个像素按其语义类别进行分类。与传统的目标检测不同，语义分割对图像中的每个像素都进行分类，而不是只关注物体的边界框。

语义分割的目标是给图像中的每个像素分配一个类别标签，通常使用颜色编码来可视化不同的类别。例如，将图像中的道路像素标记为蓝色，建筑物像素标记为红色等。

语义分割在许多计算机视觉任务中起到重要作用，如自动驾驶、智能监控、图像编辑等。它可以提供详细的场景理解，使计算机能够准确地理解图像中的不同物体和区域，并在各种应用中进行更精确的分析和决策。

近年来，随着深度学习的快速发展，基于深度学习的语义分割方法取得了显著的进展。常用的深度学习模型包括全卷积网络（FCN）、U-Net、DeepLab等，它们能够准确地分割图像，并在各种实际场景中取得了优秀的性能。

语义分割、实例分割、全景分割？这些基本概念别再搞混了！

语义 VS 实例 VS 全景分割

语义分割(Semantic Segmentation)

语义分割是将图像分割为不同的语义区域，即将图像中的每个像素都标记为属于哪个语义类别。换句话说，它的目标是为图像中的每个像素分配一个语义标签，例如人、车、树、建筑等。语义分割关注的是图像中的每个像素的语义信息，不关心具体的实例。

实例分割(Instance Segmentation)

实例分割是将图像中的目标物体分割为独立的实例，即为每个目标分配唯一的标识符，并进行像素级的分割。与语义分割不同，实例分割不仅关注目标的语义类别，还关注目标的个体性。因此，在实例分割中，同一类别的不同目标物体会被分配不同的标识符，以区分它们。

全景分割(Panoramic Segmentation)

全景分割是语义分割和实例分割的融合，旨在将图像中的每个像素分配一个语义标签，并为每个目标物体分配唯一的标识符，同时区分不同的实例。全景分割可以视为将图像中的每个像素标记为语义类别和实例标识符的任务。实质上，全景分割是一种综合性的图像分割任务，旨在提供对图像中所有物体的语义信息和个体信息。

建筑物提取任务BFE（Building Footprint Extraction）是指从高分辨率遥感图像中准确地提取出建筑物的轮廓或边界信息。这是一项具有重要应用价值的任务，可以用于城市规划、地理信息系统（GIS）、自动驾驶、灾害评估等领域。