CBDNet:Toward Convolutional Blind Denoising of Real Photographs

最新推荐文章于 2025-02-21 17:55:56 发布
原创 最新推荐文章于 2025-02-21 17:55:56 发布 · 5k 阅读 · 25 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍了CBDNet，一种用于真实照片盲去噪的深度卷积网络。现有方法通常依赖合成噪声图像，而CBDNet通过结合噪声估计子网络和非盲目去噪子网络，以及一个更接近真实噪声的模型，实现了对真实噪声图像的有效处理。论文提出非对称学习策略，以解决噪声估计误差问题。实验表明，CBDNet在多个数据集上表现出优越的去噪效果。

Toward Convolutional Blind Denoising of Real Photographs

Shi Guo , Zifei Yan  , Kai Zhang , Wangmeng Zuo , Lei Zhang

Harbin Institute of Technology, Harbin, 150001, China
Department of Computing, The Hong Kong Polytechnic University, Hong Kong

目前深度卷积神经网络去噪方法

  1. 大多数存在的盲去噪的方法都包括两步：噪声估计和非盲目去噪。
  2. 深度卷积神经网络的效果依赖于训练数据，但真实噪声图像和干净图像太少，而合成的噪声图像与真实噪声图像相差太大。
  3. 真实噪声的特征不能充分地被设计的噪声模型所刻画。
  4. 非盲目去噪器（BM3D、FFDNet）对低估噪声等级敏感，而对高估噪声等级表现良好。即在噪声估计网络对噪声图像的噪声估计的噪声等级低于实际噪声等级时，去噪效果不好，但当噪声估计网络对噪声图像的噪声估计的噪声的呢估计高于实际噪声等级时去噪效果良好。

论文的方法是如何借鉴和改进前人的方法

  1. 针对第一点，同样分为两个子网络：噪声估计子网络和非盲目去噪子网络
  2. 针对第二点和第三点，论文选择同时用合成噪声图像和真实噪声图像交替训练网络 。
  3. 针对第三点，论文提出了一个更接近真实噪声的模型，既考虑了信号相关的噪声，又考虑了摄像机的处理流水线中的噪声。
  4. 针对第四点，论文充分利用BM3D对高估计噪声等级表现良好的特性，选择用非对称的方法来学习，即的那个噪声估计网络高估噪声时，给与一个较小的惩罚，而的那个网络低估噪声等级时，给予较大的惩罚。

论文主要贡献

  1. 图像噪声模型在深度卷积神经网络对真实噪声图像去噪中起到关键的作用。论文提出了一个更接近真实噪声的模型，同时考虑了信号相关的噪声和在摄像机的处理流水线中的噪声。
  2. 论文提出了一个CBDNet，由噪声估计子网络和非盲目去噪子网络两部分组成。同时使用非对称学习方法。
  3. 同时采用合成噪声图像和真实噪声图像训练CBDNet。
  4. 在三个数据集上的实验结果表面论文提出的CBDNet相比于前人的方法有突出的效果。

论文的主要方法

噪声模型

信号依赖的噪声：干净图像x，更真实地噪声模型n(x)\sim N(0,\delta (y))，\delta ^2(x)=x\cdot \delta ^2_s+\delta ^2_c

n(x)=n_s(x)+n_c，其中n_s是信号依赖的噪声，n_c是静态噪声分量，n_c

最低0.47元/天 解锁文章
【图像去噪】论文精读：Toward Convolutional Blind Denoising of Real Photographs（CBDNet）
主要更新底层视觉（去噪、超分等）相关的科研内容，形式为【论文精读】+【论文复现】
08-19 1893
论文题目：Toward Convolutional Blind Denoising of Real Photographs —— 迈向真实照片的卷积盲去噪CVPR 2019！真实世界盲图像去噪！虽然深度卷积神经网络(CNNs)在加性高斯白噪声(AWGN)图像去噪方面取得了令人印象深刻的成功，但它们在真实世界的噪声照片上的性能仍然有限。主要原因是他们的学习模型很容易过拟合简化的AWGN模型，该模型严重偏离了复杂的真实噪声模型。
《Toward Convolutional Blind Denoising of Real Photographs》阅读笔记
69小石头的博客
05-11 760
一、论文 《Toward Convolutional Blind Denoising of Real Photographs》 摘要：尽管深卷积神经网络（CNN）在加性高斯白噪声（AWGN）的图像去噪方面取得了令人瞩目的成功，但其性能在实际嘈杂的照片上仍然受到限制。 主要原因是他们的学习模型很容易在简化的AWGN模型上过度拟合，而AWGN模型与复杂的实际噪声模型大相径庭。 为了提高深层CNN去噪器的泛化能力，我们建议使用更逼真的噪声模型和真实的噪声清洁图像对来训练卷积盲去噪网络（CBDNet）。 一方面
论文：Toward Convolutional Blind Denoising of Real Photographs
桃子有了的博客
07-18 288
图像去噪的论文阅读
Toward Convolutional Blind Denoising of Real Photographs
weixin_33725126的博客
10-23 368
本文提出了一个针对真实图像的盲卷积去噪网络，增强了深度去噪模型的鲁棒性和实用性。 摘要 作者提出了一个 CBD-Net，由噪声估计子网络和去噪子网络两部分组成。 作者设计了一个更加真实的噪声模型，同时考虑了信号依赖的噪声和相机内部处理的噪声。 基于真实噪声模型合成的图片和真实的噪声图片被联合在一起对网络进行训练。 噪声模型 除了高斯噪声，真实的图片噪声更加复杂，并且是信...
Toward Convolutional Blind Denoising of Real Photographs（CBDNet）, CVPR2019
heitang1802的博客
06-25 1508
这篇文章是哈深和香港理工大学合作的文章，来自CVPR2019，任务是去噪。上周看的Noise2Void针对高斯噪声改进方法减少了训练所需数据，CBDNet这篇文章针对的则是模型在真实噪声上效果差的问题，使得去噪不再局限于较理想化的高斯噪声。 CNN去噪模型的效果很大程度上取决于合成噪声和实际噪声的分布是否匹配，于是本文的去噪模型分为两阶段——第一阶段进行噪声估计，第二阶段将噪声估计结果与噪声图一并作为输入进行非盲去噪。 噪声建模 对噪声进行建模是为了生成去噪网络的训练集，建模越趋近真实噪声后续去噪效果
论文笔记：Toward Convolutional Blind Denoising of Real Photographs
热门推荐
zbwgycm的博客
08-25 1万+
Introduction 这是哈工大与香港理工大Lei Zhang老师课题组合作完成的论文，是今年7月份才在arxiv上放出来。Lei Zhang老师课题组在图像去噪方面一直走在前沿，许多经典工作都是他们提出的，如WNNM、DnCNN等。这一篇也是其在深度图像去噪方面的新的文章。与其前面的工作不同的是，这篇文章主要研究了卷积网络在真实图像上的去噪效果，其主要贡献在于以下几点： 提出了...
论文 Toward Convolutional Blind Denoising of Real Photographs 中文翻译
08-10
标题中的“论文 Toward Convolutional Blind Denoising of Real Photographs 中文翻译”表明本文是对一篇关于真实照片卷积盲去噪技术的研究论文进行中文翻译。描述中的“真实图片的去噪神经网络——CBDNet的中文翻译...
【论文精读】图像去噪系列：Toward Convolutional Blind Denoising of Real Photographs(CBDNet) | CVPR 2019
静谧、淡雅
02-21 1215
Toward Convolutional Blind Denoising of Real Photographs(CBDNet) | CVPR 2019
CBDNet：“对真实照片进行卷积盲去噪”的代码，CVPR 2019
02-04
面向真实照片的卷积盲去噪 纸版 ISP /反向ISP运算符的Python实现和一些资料 （与Matlab代码不完全相同） 1.摘要 尽管深卷积神经网络（CNN）在高斯降噪方面取得了成功，但在实际嘈杂的照片上仍然非常有限，甚至可能比BM3D表现差。 为了提高深度去噪模型的鲁棒性和实用性，本文提出了一种融合了网络架构，非对称学习和噪声建模的卷积盲去噪网络（CBDNet）。 我们的CBDNet由一个噪声估计子网和一个去噪子网组成。 受BM3D对噪声估计误差的不对称敏感性的影响，在噪声估计子网络上进行了非对称学习，以抑制更多的噪声水平估计不足。 为了使学习的模型适用于真实照片，结合了基于信号依赖噪声模
CBDNet-pytorch:CBDNet的非官方PyTorch实施
04-02
CBDNet-火炬 CBDNet的非官方PyTorch实施。 更新 2021.04.02：该代码可能存在一些实现错误，请谨慎使用。 拉请求是受欢迎的。 2020.12.04：我们使用新的数据集训练了CBDNet模型。 PSNR（DND基准）：38.06-> 39.63。 快速开始 从下载数据集和预训练的模型。 将文件解压缩到data文件夹和save_model文件夹，如下所示： ~/ data/ SIDD_train/ ... (scene id) Syn_train/ ... (id) DND/ images_srgb/ ... (mat files) ... (mat files) save_model/ checkpoint.pth.tar 训练模型： python tr
FFDNet:FFD网
05-11
FFD网 新的培训和测试代码（ ） 培训和测试代码（ ） PixelUnshuffle层（PyTorch） from torch . nn import Module def pixel_unshuffle ( input , upscale_factor ): r"""Rearranges elements in a Tensor of shape :math:`(C, rH, rW)` to a tensor of shape :math:`(*, r^2C, H, W)`. written by: Zhaoyi Yan, https://github.com/Zhaoyi-Yan and Kai Zhang, https://github.com/cszn/FFDNet 01/01/2019 """ batch_siz
图像噪声的概念与分类
FPGA/MATLAB学习教程/源码/项目合作开发
11-09 7194
图像噪声的概念与分类 图像噪声是图像在摄取或传输时所受的随机信号干扰，是图像中各种妨碍人们对其信息接受的因素。很多时候将图像噪声看成是多维随机过程，因而描述噪声的方法完全可以借用随机过程的描述，即用其概率分布函数和概率密度分布函数。 图像噪声是多种多样的，其性质也千差万别，所以了解噪声的分类是很有必要的。 按产生的原因分类 1.外部噪声，即指系统外部干扰以电磁波或经电源串进系统内部而引起的噪声。如电气设备，天体放电现象等引起的噪声。 2.内部噪声，一般有四个源头：a)由光和电的基本性质所引起的..
图像去噪——CBDNet网络训练自己数据集及推理测试，模型转ONNX模型（详细图文教程）
qq_40280673的博客
01-08 4833
CBDNet 是一种性能优异的图像去噪网络。它在多种噪声图像去噪任务上都取得了优异的效果，具有一定的应用潜力。
论文笔记21：Deep spatio-spectral Bayesian posterior for hyperspectral image non-i.i.d. noise removal
Hermite Lee的博客
11-21 1226
所提出的框架在深度空间-光谱贝叶斯后验(DSSBP)结构下，协作地对HSI中的非i.i.d.噪声嵌入和移除进行建模。具体地，非i.i.d.噪声估计、分布和去除过程都是用基于模型驱动的策略和基于数据驱动的策略来执行的。通过融合贝叶斯变分后验和深度卷积神经网络，该方法既继承了传统的基于模型驱动的HSI噪声建模方法的可靠性，又继承了基于数据驱动的参数学习方法的高效性。
探索高效深度学习：CBDNet，一个优化的实时边缘检测框架
gitblog_00098的博客
04-17 822
探索高效深度学习：CBDNet，一个优化的实时边缘检测框架 项目简介 在计算机视觉领域，边缘检测是基础且至关重要的一步，用于识别图像中的边界和形状。 是一个基于深度学习的实时边缘检测器，由郭世及其团队开发，旨在提供高精度与快速计算之间的良好平衡。 技术分析 CBDNet的设计灵感来源于经典的Canny算法，但它采用了深度学习的方法来实现自动化和优化。该模型的核心是一个多尺度特征金字塔网络，它能够捕...
论文阅读笔记之——《Toward Convolutional Blind Denoising of Real Photographs》及基于pytorch的CBDNet的复现
gwpscut的博客
12-06 6999
本文是CBDNet（convolutional blind denoising network）的阅读笔记。本博文分为两块，一块是阅读笔记，一块是本人对CBDNet的实验记录 论文链接：https://arxiv.org/pdf/1807.04686.pdf 论文的代码：https://github.com/GuoShi28/CBDNet 一些去噪用的数据集https://blog.csdn...
【亲测免费】 CBDNet-PyTorch: 卷积盲去噪网络实现教程
gitblog_00471的博客
08-15 1011
CBDNet-PyTorch: 卷积盲去噪网络实现教程 1. 项目介绍 CBDNet（Convolutional Blind Denoising Network）是由Guo等人在2019年的IEEE计算机视觉和模式识别会议（CVPR）上提出的一种用于真实照片卷积盲去噪的方法。这个开源项目是CBDNet在PyTorch框架下的非官方实现，旨在提供一个高效且易于使用的图像去噪工具。它包括训练和推断两部...
PIFOLD: TOWARD EFFECTIVE AND EFFICIENT PROTEIN INVERSE FOLDING
最新发布
07-09
### PiFold方法在蛋白质逆折叠中的应用 PiFold 是一种高效的蛋白质逆向折叠算法，旨在解决从目标结构生成相应氨基酸序列的问题。该方法基于深度学习技术，并且在ICLR 2023上被提出，其设计目的是为了提高蛋白质设计的有效性和效率[^3]。 在实际应用中，PiFold 可以用于新药开发、材料科学以及合成生物学等领域。通过给定一个理想的三维结构，研究人员可以使用 PiFold 来预测能够形成这种结构的氨基酸序列。这对于创建具有特定功能的新蛋白质是非常重要的一步[^1]。 ### PiFold的效果 根据相关研究论文中的摘要信息，PiFold 展示了其在蛋白质逆折叠任务上的有效性与高效性。它能够在保证结果质量的同时减少计算资源的需求，使得科学家们可以更快地进行蛋白质设计和优化过程[^3]。 此外，在与其他方法如基于ESM2的方法比较时，尽管基线模型可能已经很强，但 PiFold 在某些评估指标上依然展现出了竞争力。虽然具体的性能对比需要查阅原始文献来获得详细数据，但是从已有的信息来看，PiFold 在泛化能力方面有一定的优势[^5]。 值得注意的是，最近提出的 UniIF 模型在时间划分评估中超越了包括 PiFold 在内的所有基线模型，这表明新的模型可能提供了更好的泛化能力和更少的可学习参数[^5]。然而，这并不意味着 PiFold 已经过时；相反，它仍然是当前领域内的重要工具之一，特别是在那些对现有解决方案有高要求的应用场景中。 ```python # 示例代码：假设我们有一个函数用来调用PiFold API（虚构示例） def generate_sequence_from_structure(structure): # 这里会包含调用实际API或本地模型的代码 # 返回生成的氨基酸序列 return "ACDEFGHIKLMNPQRSTVWY" # 假设的输出 # 使用示例结构作为输入 structure_input = "example_3d_structure_data" generated_sequence = generate_sequence_from_structure(structure_input) print(f"Generated sequence: {generated_sequence}") ``` 这段示例代码展示了如何设想一个接口来利用 PiFold 技术生成氨基酸序列。当然，真实的实现将依赖于具体的软件库或者网络服务提供的接口。
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值