Real-ESRGAN图像超分算法渲染实践应用，加速实时渲染图像处理

前言

“SR”是“Super Resolution”的缩写，意为“超级分辨率”，这是一种将低分辨率图像转换为高分辨率图像的技术。

D5 SR 是 D5 自研的超级分辨率采样算法，结合多通道的渲染特征图和神经网络图像生成算法，作为D5 2.5更新的功能， D5 SR 可以大大优化静帧图片的渲染效率，节约渲染时间。

超级分辨率技术的应用非常广泛，例如在视频渲染中可以用来增强视频的细节和分辨率，在实时渲染中可以用来增加画面的帧率，提高使用体验等。但如何在不失真的情况下，增强渲染图的分辨率，始终是一项挑战。

二、技术背景

D5 SR 技术利用D5渲染出图效率高的功能特性，大批量渲染图片对模型算法进行学习优化。基于神经网络的超级分辨率算法，可以有效利用从这些图像中学到更多先验信息，从而得到更好的高分辨率重建效果。

然而，由于重构过程中没有加入足够的三维场景信息，例如几何形状、材质和纹理等，这导致我们的重建结果与基于物理的高分辨率渲染的效果有所不同。