【论文笔记-Stereo】ICCV2017 Cascade Residual Learning: Stereo Matching

【Paper Reading】 不过欧洲的会有一个不好,就是他们的人通常英语口音很重,有些人甚至不太会说英文,所以开会和交流的时候,稍微有些费劲。《International Comference on Computer Vision》,正如很多和他一样的名字的会议一行,这样最朴实的名字的会议,通常也是这方面最nb的会议。通常比较 junior 的审稿人会更严厉一些,发现一些小问题就会倾向于给低分,而 senior 的审稿人反倒宽松一些,如果觉得论文确有可取之处,通常不会太计较一些小问题。是一个关于机器学习和计算神经科学的国际会议。 阅读详情

这篇文章介绍了一种新的双目视差计算框架,Cascade Residual Learning。

近年来,在MC-CNN的启发下,视差计算算法成为了一种可以用学习解决的问题。文章总结了近年来基于CNN的视差算法,主要可以分为一下三种:
1. Matching cost Learning:这种方法主要将CNN用于匹配代价计算,辅之以一些经典的后处理方法,以得到比较好的视差图。主要代表有:

  • Han et al.的MatchNet:提出了Siamese 结构
  • Zbontar的MC-CNN:提出将CNN用于提取patch特征用于计算patch simularity,同时,他们将视差计算问题当做一个二分类问题,采取正负样本抽样、使用hinge loss 训练cost 计算网络
  • Luo 等人将该问题变换为一个概率分布学习问题

这些方法都取得了非常不错的效果,可是他们都需要对生成的视差图比较繁杂的后处理,才能得到最后的结果。
2. Regularity Learning
3. End-to-end disparity learning: 通过细心的设计网络的结构,我们可以通过端到端的方式直接学习得到精细的视差图。这种框架的主要代表有:

  • Mayer等人提出的DispNet,这种方法被用来学习合成的双目图像对。该方法还被用于光流计算,FlowNet 2.0便由此而来。
  • GC-Net用3D卷积网络学习上下文信息,以计算视差图
  • 在单目视差估计领域,监督的非监督的方法都实现了端到端的视差生成,并且,他们只需要少量的训练样本。
  • CVPR 2017, 有人提出将CNN+CRF混合模型,也实现了双目视差的end-to-end计算。

论文中的算法属于第三种,

论文阅读《Cascade Residual Learning: A Two-stage Convolutional Neural Network for Stereo Matching》 Cascade residual learning (两阶段) Problem: 不适定区域(目标遮挡、重复纹理、无纹理等)难以产生高质量的视差 贡献: DispNet + up-conv 恢复到全分辨率输出,使视差图像包含更多细节 校正初始视差(多规模残差学习机制提供更多有效的优化) Tip: 直接学习残差信号比直接学习视差更容易 改进: 非一个个堆积残差块,残差信号不能... 阅读详情

相关推荐

《Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches》

总结MC-CNN

正在挣扎中的人 1434

论文阅读笔记《Cascade Residual Learning A Two-stage Convolutional Neural Network for Stereo Matching》

摘要   利用卷积神经网络的最新进展,从一对立体图像中匹配稠密的对应关系可转化为一个学习问题,其表现要优于其他的传统方法。然而,在一些病态区域生成高质量的视差图时依旧存在很多问题。为了解决这个问题,我们提出了一种新型的两级CNN结构。第一级是在DispNet网络的基础上增加额外的上卷积模块(up-convolution modules),以获得保留更多细节的视差图。第二级是对第一级初始化的视差图...

深视 2876

Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches

LeCun经典论文,现在才分析,罪过罪过 摘:本文其实通过卷积神经网络得到一个立体匹配成本stereo matching cost,而后面则是一系列的后处理:cross-based cost aggregation, semiglobal matching, a left-right consistency check, subpixel enhancement,a median fil

网瘾少年康复中心 2319

双目立体匹配

立体匹配共四步:匹配代价计算、匹配代价聚集、视差计算、视差优化 立体匹配主要解决两个问题: 一个是低纹理区域的视差估计 一个是深度不连续区域的视差估计,也就是遮挡区域 图像分割(Image Segmentation) 主要目的也就是将图像(image)分割成若干个特定的、具有独特性质的区域(region),然后从中提取出感兴趣的目标(object) 2003 [1] Stereo matching using belief propagation (BP) 改进:置信度传播算法进行视差求

beryl2017的博客 1383

论文阅读《MC-CNN: Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches》

论文地址:https://arxiv.org/abs/1510.05970 源码地址:https://github.com/jzbontar/mc-cnn 背景   传统的立体匹配算法包含:匹配代价计算,代价聚合,视差计算,视差精细化四个步骤;针对初始匹配代价计算,本文提出一种基于CNN的patch相似度衡量方法,再结合传统算法中的代价聚合、视差计算与视差精细化步骤预测输入图像的深度图; 模型结构   基于自监督学习的框架引导模型训练,用<Pn×nL(p),Pn×nR(q)><\math

薛定谔的猫头咕咕咕 2137

双目单目深度估计 论文总结

Depth 自然户外场景深度值在80米以内,户内深度在0-10米范围内 单目 2017-CVPR-Unsupervised Monocular Depth Estimation With Left-Right Consistency 相似工作: 不是完全的可以微分的,使得训练不是最优的 不能图像构成模型不能放大到大的输出分辨率 方法: 在训练时把自动深度看成一个

youmibuaa的博客 1万+

论文笔记-Learning Stereo from Single Images

论文信息 标题: Learning Stereo from Single Images 作者:Jamie Watson, Oisin Mac Aodha, Daniyar Turmukhambetov, Gabriel J. Brostow, Michael Firman 机构:Niantic, University of Edinburgh, UCL 代码链接 https://github.com/nianticlabs/stereo-from-mono/ 论文主要贡献 提出自动的生..

kingsleyluoxin的博客 878

一文搞懂 RC Correlation Scale Factor 的生成与应用

pre-route 用的是统计估算模型,post-route 用的是详细布线提取,signoff 用的是第三方 QRC 或 StarRC——三个工具,三套参数体系,结果自然天差地别。不同 RC corner(rc_worst/rc_best/rc_typical)对应不同的工艺角和温度环境,每个 corner 的 R/C 偏差比例不同,必须分别生成和应用各自的 scale factor。别被名字骗了,这个工具专门干一件事——统计拟合两组 SPEF 之间的偏差,自动推荐最优 scaling factor。

weixin_47770727的博客 552

《Cascade Residual Learning: A Two-stage Convolutional Neural Network for Stereo Matching》

总结CRL

正在挣扎中的人 870

Spring Boot应用Docker化实战:从Dockerfile编写到镜像推送完整流程

本文详细介绍了将Spring Boot应用Docker化的完整实战流程。从环境准备、项目审视,到编写高效且安全的Dockerfile,重点讲解了多阶段构建、镜像层优化、Spring Boot分层JAR等核心技巧,并涵盖了镜像构建、验证、调试以及最终推送至仓库并集成CI/CD的最佳实践,帮助开发者构建生产级Docker镜像。

butter的博客 1023

90nm CMOS工艺下6μW超低功耗LDO设计实战:从原理图到版图全解析

本文详细解析了在90nm CMOS工艺下设计一款静态功耗仅为6μW的超低功耗LDO(低压差线性稳压器)的全过程。文章深入探讨了如何通过改进型翻转电压跟随器(FVF)架构实现无输出电容设计,在满足极低功耗和芯片面积高效(chip-area-efficient)要求的同时,确保环路稳定性与快速瞬态响应,为物联网、可穿戴设备等应用提供关键电源管理解决方案。

weixin_29196613的博客 274

论文学习——Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches

论文学习——Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches 原始论文地址:https://arxiv.org/abs/1510.05970 代码:https://github.com/jzbontar/mc-cnn 摘要:针对很多立体匹配算法的第一阶段——匹配代价计

xxxlinttp的博客 2516

UDP_千兆光通信(四)Tri Mode Ethernet MAC ip核

其中 Transmit Engine 从 AXI-Stream TX 接口接收数据,并添加前导码 Preamble、帧起始界定符 SFD、帧校验序列 FSC 等,并在必要时(长度小于最小 MAC 帧长度)填充数据,因此在使用 TEMAC 时,MAC 帧的这几个部分就不需要我们自己添加了(不过其他的 MAC 帧部分,可选的帧过滤器 Frame Filter 用于过滤与一组可配置过滤器匹配的帧,一般用于过滤掉目的 MAC 地址与本设备不一致的帧,TEMAC 默认开启帧过滤器。默认值为使用64位宽的计数器。

lzr232的博客 1772

Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches 译文

摘要 我们提出了一种从已纠正的一对图片来提取深度信息的方法。我们的方法聚焦于很多立体构建算法的第一阶段:匹配损失(match cost)计算。我们通过卷积神经网络通过对小的图像块的相似度的学习,来解决这个问题。通过构建一个二分类的数据集(相似,不相似的样本)进行有监督的训练。我们提出连个网络去实现这个任务,一个调整速度、一个调整精度。cnn的输出被用作立体匹配的成本(stereo match...

dyingstraw的博客 617

Zabbix华为交换机光衰告警

zabbix使用自动发现监控huawei网络设备光衰

qq_31651649的博客 4529

非sudo用户如何安全使用Docker:Rootless模式实战指南

Docker Rootless模式是一种基于Linux用户命名空间(userns)的容器运行时安全机制,它通过UID/GID映射、fuse-overlayfs文件系统和slirp4netns网络栈,在不提升权限的前提下实现容器隔离。其核心原理是将容器内root身份映射为宿主机非特权用户,从而规避docker组等价root的安全风险。相比传统root模式,Rootless在权限控制、逃逸防护和多租户隔离方面具备天然优势,适用于CI/CD流水线、Kubernetes边缘节点及受限生产环境。本文聚焦无sudo权限

weixin_30274627的博客 348

【翻译学习笔记】Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches

Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches 通过训练卷积神经网络对比图像小块的方法实现立体匹配(更新中) Abstract We present a method for extracting depth information from a rectified ima...

liuqy123的博客 2263

别再混淆了!深入浅出图解四元数姿态控制中的‘误差四元数’(附四种定义对比与仿真)

本文深入解析四元数姿态控制中的误差四元数定义差异,对比四种常见定义(如Q₀∘Q⁻¹与Q⁻¹∘Q₀)及其对PD控制性能的影响。通过刚体动力学仿真验证,揭示定义二(Q⁻¹∘Q₀)在无人机和航天器控制中的最优性能,提供工程实践建议与参数整定技巧,帮助开发者避免常见陷阱并提升控制效率。

weixin_42528191的博客 277

基于深度学习立体匹配的基本网络结构和变种

点击上方“3D视觉工坊”,选择“星标”干货第一时间送达作者丨HawkWang来源丨计算摄影学点击进入—>3D视觉工坊学习交流群深度学习立体匹配之 MC-CNN中两种结构:MC-CNN-fst和MC-CNN-acrt。这两个算法由Zbontar和LeCun共同研发,分别代表了速度与精度的平衡。MC-CNN-fst关注于快速处理,而MC-CNN-acrt则更注重匹配精度。这两种算法为深度学习立...

3D视觉工坊 1451

Modbus RTU 详解 + FreeMODBUS移植(附项目源码)

本文全面解析Modbus RTU通信协议,详细介绍其报文格式、功能码定义及典型应用场景,并手把手指导如何将FreeMODBUS协议栈移植到嵌入式平台。内容涵盖从底层硬件驱动配置、协议栈移植到主机/从机通信测试的全流程,重点讲解移植过程中的常见问题及解决方案。文章最后提供经过实测的完整项目源码,帮助开发者快速实现稳定的Modbus RTU通信功能。

Bit_Dong的博客 2926

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

Improved Stereo Matching with Constant Highway Networks and Reflective Confidence Learning

Improved Stereo Matching with Constant Highway Networks and Reflective Confidence Learning (2016 KITTI 2012 2015 前列) (引入跳跃连接-λ比例系数 反射置信度 混合权重) 摘要:我们提出立体匹配问题三步流程,每个步骤介绍多个创新。提出新的高速路网络结构对于在每个可能...

qq_33495762的博客 573

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

论文阅读——R2U-Net:Recurrent Residual Convolutional Neural Network based on U-Net for Medical Image

论文阅读之R2U-Net:Recurrent Residual Convolutional Neural Network based on U-Net (R2U-Net) for Medical Image Segmentation R2U-Net Abstract 深度学习近年来在图像识别、分割及物体检测等领域取得了优异的成果。UNet就是其中一种广受好评的框架。本文则提出了基于UNet架构的循...

qq_37151108的博客 1万+

IDEA的使用指南

IDEA基于java的使用手册,可以最快速的上手,在使用中不断的丰富自己的使用技巧.

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

论文翻译------Stereo Matching by Training a Convolutional Neural Network to Compare Image Patches

原文介绍了一种基于深度学习的密集匹配方法MC-NET,是第一篇将深度学习引入密集匹配方面的文章。 原文链接如下MC=NET **********************************************************手动分割线***********************************************************************...

梦的漂流瓶的博客 702
上一篇: [Stereo_unsupervised][cvpr16]Unsupervised learning of disparity maps from stereo images
下一篇: Postprocessing of stereo vision
zhwli
博客等级 码龄9年 21粉丝 51原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值