本文发表于CVPR 2018上
文献地址:https://arxiv.org/abs/1712.06087
作者的项目地址:http://www.wisdom.weizmann.ac.il/~vision/zssr/
简介
- 本文主要工作:引入“Zero-Shot” SR方法(ZSSR),该超分辨率算法不依赖任何其他图片样本和预先训练,使用图像的内部自相似信息,测试时训练一个特定图片的CNN网络。在超分辨率一张LR图片时,对该图再度降采样,学习二者之间的超分辨参数,再用于LR的进行超分辨。
- 文章中作者把传统的深度学习超分辨方法叫做 SotA supervised CNNs。这些方法的网络深度较深并且经过良好的设计,通过大量外部已有数据库作为训练数据,这些算法会在测试数据满足训练数据的一些条件时(ideal),有着极好的效果,但是如果测试数据没有满足约束时(no-ideal),效果会很差。
- 训练数据的选取:训练数据只包含测试图片这一幅,需要对训练样本扩张,将HR多次不同下采样的LR,HR father对应多个LR son,这些LR-HR用例对作为网络的训练数据。使用旋转、反射方式增加训练数据。
- ZSSR是在test的同时训练的,但是因为网络结构小,因此和SotA supervised CNNs相比test的时间相差不多。
- 理论基础:“the internal entropy of patches inside a single image is much smaller than the external entropy of patches in a general collection of natural images”,意思是单幅图片的内部图像块