建筑场景日夜转换与多面体结构设计偏好预测
建筑场景日夜转换
在建筑渲染领域,日夜场景转换是一项重要的图像处理任务。为了实现高效且自然的日夜场景转换,研究人员提出了一种基于颜色转移的优化算法。
算法步骤
- 特征图拼接 :将$M_L^S$、$M_L^R$与VGG19在各通道提取的特征图$F_L^S$、$F_L^R$进行拼接,生成新的特征图$F_{ML}^S$和$F_{ML}^R$,尺寸均为(224, 224, 64 + 150)。
- 特征图替换 :用$F_{ML}^S$和$F_{ML}^R$替换$F_L^S$和$F_L^R$,以构建源图像$S$和参考图像$R$之间的映射。
在采用预训练语义分割模型处理图像时,并非所有通道的结果都适用于特定应用场景,因为不同通道可能表示相同内容。因此,建议手动调整(合并或舍弃某些通道)语义分割模型的输出,以获得更好的性能。此外,用户还可以使用满足特定应用需求的自训练语义分割模型,为颜色转移过程提供指导。
算法实现方案
完整算法基于He等人的渐进式颜色转移算法以及提出的特征增强技术。为提高转移速度,优化后的算法取消了从第5层到第1层的循环,仅在一层执行最近邻场(NNF)搜索和局部颜色转移。将层值初始化为1到5之间的特定数字,测试结果表明第1层的性能最佳,因为该层的图像分辨率最高。为了帮助构建$S$和$R$之间更准确的对应关系,可以选择聚类或语义分割这两种方法之一添加额外特征。
在算法实现中,使用C语言优化NNF搜索和局部颜色转移等重计算模块,与P
超级会员免费看
订阅专栏 解锁全文
28

被折叠的 条评论
为什么被折叠?



