Deep Image Prior-1

深度学习在图像超分辨率中的应用
本文介绍了深度学习在图像超分辨率领域的应用,特别是Deep Image Prior项目。该项目展示了未训练的CNN如何捕获低级图像统计信息,用于图像恢复任务,如去噪、超分辨和修补。文章还提到了基于学习的图像超分辨方法,如SRCNN,它是首个将深度学习应用于该领域的模型,采用端到端训练,提高了图像重建质量。

Deep Image Prior-1

这是GitHub上的一个项目《Deep image prior》。项目相关的论文是2017年11月29号第一次提交到arxiv并紧接着30号就提交了V2版本的。

深度卷积网络已经成为图像生成和重建的常用工具。人们猜想,他们优秀的表现是归功于他们能够从大量图像样本中学习到真实图像先验的能力。而相反,Dmitry Ulyanov等人展示生成网络在经过任何学习之前就能够捕获大量的低级图像统计信息,也就是说,这些信息可能并不是通过大量的数据集学习得来。他们使用未被训练的cnn网络(其中的权重都是随机初始化的),然后数据上只需要输入一张被损坏的图片。在这个过程中,网络的权重扮演着图像恢复时候所需要的参数:即给定一个随机初始化的网络,然后基于给定的受损图片和任务依赖的观测模型,通过迭代使得模型参数逼近最大似然。这种方法在去噪、超分辨、修补等人物上都有优异的表现。它也连接了两个非常流行的图像重建方法派别:基于学习的方法和基于非学习方法。

补充

目前实现图像超分辨的算法主要有三种:

  1. 一种是基于插值的传统方法,它先将低分辨率的图像序列的对应信息配准到高分辨率网格上,然后通过插值算法得到高分辨率图像在各采样点的像素值,最后进行去模糊去噪等;
  2. 第二种是基于重建的方法,它是先将低分辨率图像利用算法计算得到一个高分辨率的图像,然后把这个结果投影到低分辨率上,获得一个低分辨率图像,然后计算此图像与本来的图像之间的差异,根据差异大小调整高分辨率图像;
  3. 第三种是基于学习的方法,它基本思想是给定对应高低分辨率的数据集,通过机器学习找到高低分辨率图像之间的映射关系。利用这个就能恢复出高分辨图像。

最早将深度学习应用到图像超分辨的是SRCNN

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值