论文解读 | MVSNet：非结构化多视图立体的深度推理

原创 | 文 BFT机器人 

这篇论文的题目是《MVSNet: Depth Inference for Unstructured Multi-view Stereo》。这是一篇关于深度学习在多视角立体视觉（MVS）中的应用的研究论文。MVS任务的目标是从多个视角的图像中还原出三维场景的深度信息，从而实现准确的三维重建。本文提出了一个名为MVSNet的深度学习架构，该架构能够实现端到端的深度估计，为MVS任务带来了显著的性能提升。

01

引言

立体视觉是计算机视觉领域的一个重要问题，其目标是从多个视角的图像中还原出三维场景的几何结构。这个问题在许多领域中都有广泛的应用，如机器人导航、虚拟现实、三维建模等。传统的立体视觉方法通常包括多个步骤，如特征提取、匹配、深度图优化等，这些步骤需要手工设计和调整，因此非常复杂和耗时。深度学习技术的兴起为解决这一问题带来了新的机会。

MVSNet的主要贡献是提出了一种端到端的深度学习架构，它将MVS任务分为三个关键部分：2D特征提取、3D成本体积构建和深度图优化。其中，2D特征提取网络负责从输入的多个图像中提取特征表示，3D成本体积构建网络负责将这些特征表示转化为深度估计，而深度图优化网络则对深度图进行后处理，以获得更精确的深度估计结果。