【每周CV论文推荐】基于GAN的图像对比度与色调映射增强值得阅读的文章

图像对比度增强之A New Image Contrast Enhancement Algorithm Using Exposure Fusion Framework——论文阅读和个人理解 项目主页:CAIP2017 (baidut.github.io) 笔者按:最近风格化的项目暂且告一段落,开始往HDR的方向进发。在开始阶段先不追求真HDR,只是尝试对图像的对比度进行改善(过曝和欠曝的优化),偶然在github上看到了这篇文章,其主页的效果非常吸引人,整个算法框架也肥肠简单,所以就看一下这篇论文,顺便把论文笔记记录下来,可能会顺便放一些自己的思考进去。 阅读详情

欢迎来到《每周CV论文推荐》。在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的。

图像对比度与色调映射(Tone Mapping)是一个非常基础的图像处理领域,随着生成对抗网络技术的成熟,基于GAN的图像对比度与色调映射在各类场景的自动化增强应用中有比较不错的进展,本次我们来简单给大家推荐一些初学者值得关注的工作。

作者&编辑 | 言有三

1 基本模型

我们之所以研究GAN模型用于图像对比度与色调映射,主要就是因为GAN模型强大的生成能力,使其对于图像颜色和纹理有很好的判别学习能力,一个基本的思路就是使用GAN的对抗机制来学习增强模型,但核心在于如何设计好其中的颜色与纹理优化目标。

文章引用量:400+

推荐指数:✦✦✦✦✧

73aeaaabcc62ddbb99232fd9368c9f66.png

[1] Ignatov A, Kobyshev N, Timofte R, et al. Dslr-quality photos on mobile devices with deep convolutional networks[C]//Proceedings of the IEEE International Conference on Computer Vision. 2017: 3277-3285.

2 无监督模型

如果我们将需要增强的图像称之为低质量图像,增强后的图像称之为高质量图像,成对的数据并不容易获得,因此研究无监督的模型是必要的,其中CycleGAN为代表的框架提供了非常好的基准模型,在其基础上进行设计改进即可以获得不错的结果。

文章引用量:400+

推荐指数:✦✦✦✦✧

f449df3fd1c8e06a5fd547129e41ffc6.png

[2] Kim D W, Ryun Chung J, Jung S W. Grdn: Grouped residual dense network for real image denoising and gan-based real-world noise modeling[C]//Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition Workshops. 2019: 0-0.

[3] Chen Y S, Wang Y C, Kao M H, et al. Deep photo enhancer: Unpaired learning for image enhancement from photographs with gans[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2018: 6306-6314.

3 注意力模型

虽然图像对比度与色调映射(Tone Mapping)是一个全局的图像映射,但是不同像素需要的增强力度不同,我们更关注的是低对比度区域的映射,这也是许多经典Tone Mapping方法增强曲线的特点,因此注意力机制的添加是合理的。

文章引用量:500+

推荐指数:✦✦✦✦✧

c57de60af69190b12a21a3c9d6f37ed6.png

[4] Jiang Y, Gong X, Liu D, et al. Enlightengan: Deep light enhancement without paired supervision[J]. IEEE Transactions on Image Processing, 2021, 30: 2340-2349.

[5] Ni Z, Yang W, Wang S, et al. Towards unsupervised deep image enhancement with generative adversarial network[J]. IEEE Transactions on Image Processing, 2020, 29: 9140-9151.

4 图像对比度与色调映射应用

对于许多朋友来说,可能最开始接触到图像对比度与色调映射领域,是接触图像去雾这个领域,比较差的传感器拍摄出来的图片总给人雾蒙蒙的感觉,这就需要图像去雾算法来进行改进。另外,还有一些比较特殊的图片,比如水下拍摄的图片,也可以使用图像增强来进行改进,这些都是典型应用场景。

文章引用量:600+

推荐指数:✦✦✦✦✧

b14945c93dc4fe848dce4f229563d25c.png

[6] Engin D, Genç A, Kemal Ekenel H. Cycle-dehaze: Enhanced cyclegan for single image dehazing[C]//Proceedings of the IEEE conference on computer vision and pattern recognition workshops. 2018: 825-833.

[7] Li J, Skinner K A, Eustice R M, et al. WaterGAN: Unsupervised generative network to enable real-time color correction of monocular underwater images[J]. IEEE Robotics and Automation letters, 2017, 3(1): 387-394.

5 如何实战

为了帮助大家掌握基于GAN的图像对比度与色调映射等问题!我们推出了相关的专栏课程《深度学习之图像增强GAN:理论与实践》,全面讲解基于GAN的图像降噪、色调映射、去模糊、超分辨、修复等问题,感兴趣可以进一步阅读:

【视频课】超8小时,5大模块,掌握基于GAN的图像增强应用(降噪色调映射去模糊超分辨修复)

e0dfbbe0be5315a334f8eba210ec8b1b.jpeg

总结

本次我们介绍了基于GAN的图像对比度与色调映射增强的典型研究,从事相关方向的朋友可以通过阅读这些文章进行初步了解,作为一个比较小众但是非常经典的问题,图像对比度与色调映射增强是掌握图像增强相关任务的必经之路。

有三AI- CV夏季划

63913c262f710bd3719ce790b55f910a.png

如何系统性地从零进阶计算机视觉,永久系统性地跟随我们社区学习CV的相关内容,请关注有三AI-CV夏季划组,阅读了解下文:

180bac3d8067be4601787c91199afb80.jpeg

【CV夏季划】2022年正式入夏,从理论到实践,如何系统性进阶CV?(产学研一体的超硬核培养方式)

转载文章请后台联系

侵权必究

2eabbaf9641b1f14bfc64349be1f7d2d.gif

ae20f317bab4ca2ed8f9a221f9d13120.png

3e3e7b8810e84585d149e53a1126f41b.png

往期相关精选

基于生成对抗网络(GAN)的图像生成:理论与实践 基于生成对抗网络(GAN)的图像生成技术已经取得了显著进展,特别是在图像质量和生成效果上。通过本篇博客的学习,我们深入了解了GAN的原理、损失函数以及实现细节,掌握了如何用TensorFlow/Keras构建和训练GAN模型。通过不断改进生成器和判别器结构,并采用最新的训练技巧,GAN已经能够生成高质量的图像,推动了图像生成领域的发展。未来,我们可以进一步探索GAN在更多领域的应用,如图像修复、超分辨率图像生成、视频生成等。 阅读详情

相关推荐

GAN在图像检索中的应用

GAN在图像检索中的应用 作者:禅与计算机程序设计艺术 / Zen and the Art of Computer Programming 关键词:GAN, 图像检索, 图像生成,风格迁移,特征提取 1. 背景介绍 1.1 问题的由来

AI天才研究院 1365

【论文阅读】局部对比度增强算法:从LCM、PCM到ALCNet

文章目录1. LCM: local contrast method(2014) 参考资料与文献: 参考博客1 1. LCM: local contrast method(2014) 目标局部对比度的计算方法: 第一步:计算周围8个邻域的平均像素值: 式中,NuN_uNu​表示子窗口中包含的像素数量,IjiI_j^iIji​表示第iii个子窗口内的第jjj个像素的像素值 第二步:计算局部对比度 中心子窗口与其邻域窗口的对比度可表示为: 式中,L0L_0L0​表示中心子窗口的像素最大值 第三步:计算LC

轻舟的万重重山 1万+

GAN图像修复实战指南:从原理到PyTorch源码解析

图像修复是计算机视觉中的经典难题,传统方法在缺失区域较大时容易产生模糊,而生成对抗网络(GAN)通过生成器与判别器的对抗博弈,能结合全局语义信息补全图像结构,让修复结果更真实自然。理解GAN修复的核心在于掌握生成器、判别器与损失函数的搭配,常用UNet架构结合掩码输入,配合PatchGAN判别器与感知损失,可在细节和真实性上取得平衡。该技术广泛应用于老照片修复、电商图片处理、医学影像补全等场景。本文基于开源Python源码,从图像预处理、掩码生成、模型训练到推理优化,系统讲解GAN图像修复的完整实践链路,并

weixin_34341117的博客 443

渣画质的救赎:基于GAN的超分辨率方案

本次给大家介绍2篇文章——SRGAN[3]和ESRGAN[5],基于生成对抗网络的超分辨率方案。 先回顾一下以往的方法: 1. 图像放大与基于CNN的超分方案 所有使用电脑的人都会用到图片放大的操作,而把图片放大超过其分辨率后,图片就会模糊。传统放大图片都是采用插值的方法,最常用的有最近邻插值(Nearest-neighbor)、双线性插值(Bilinear)、双立方插值(bicubic)等,这些方法的速度非常快,因此被广泛采用。 基于卷积神经网络/深度学习超分方案的开山之作叫做SRCNN(Supe

爱CV 4244

基于金字塔注意力机制和GAN的水下图像增强

为提升水下图像的增强效果,提出了一种基于金字塔注意力机制和生成对抗网络(GAN)的水下图像增强算法。它将生成对抗网络作为基本架构,生成网络采用编码解码结构并引入特征金字塔注意力模块,多尺度金字塔特征与注意力机制的结合可以捕获更丰富的高级特征以提升模型性能;判别网络采用类似马尔科夫判别器的结构。此外,通过构建包含全局相似性、内容感知和色彩感知的多项损失函数,使增强后的图像与参考图像的结构、内容和色彩保持一致。实验结果表明,所提算法增强的水下图像在清晰度、颜色校正和对比度上都有所提升。其中,在SSIM、UIQM和IE指标上的平均值分别为0.7418、2.9457和4.6925。在主观感知和客观评价指标上,所提算法的实验结果均优于对比算法。

CST新手必看:共面波导色散曲线绘制全流程(附参数设置避坑指南)

本文详细介绍了CST Microwave Studio中绘制共面波导色散曲线的全流程操作,特别针对新手常见的边界条件设置错误、参数扫描失效等问题提供解决方案。通过模型建立、边界条件设置、本征模求解器配置等步骤,帮助工程师快速掌握CPW色散特性分析方法,并附有参数设置避坑指南,提升高频电路设计效率。

tomato的博客 991

深度学习与图像识别:从CNN到GAN

1.背景介绍 深度学习是一种人工智能技术,它通过模拟人类大脑中的神经网络学习和处理数据。深度学习的核心技术是神经网络,它由多个节点(神经元)和它们之间的连接(权重)组成。神经网络可以学习从大量数据中抽取出特征,并进行分类、预测和识别等任务。 图像识别是深度学习的一个重要应用领域,它涉及到将图像数据转换为数字信息,并通过深度学习算法进行分类和识别。图像识别的主要任务是将图像数据作为输入,并通过深...

AI天才研究院 1699

基于STM32和MPU6050的手势控制小车设计与实现

MPU6050传感器:用于检测手势变化,采集加速度和陀螺仪数据。STM32微控制器:处理MPU6050传感器的数据,根据手势变化控制小车的运动。电机驱动模块:接收来自STM32的控制信号,驱动小车的电机,实现小车的前进、后退、左转和右转。小车底盘:作为整个系统的机械部分,提供移动平台。MPU6050是一款集成了3轴加速度计和3轴陀螺仪的传感器,具有高精度、低功耗和小体积等特点。它通过I2C接口与微控制器通信,可以实时采集加速度和角速度数据,广泛应用于运动检测、姿态控制和手势识别等领域。

m0_57781768的博客 2310

paddle复现colorGAN(动漫黑白线条上色)

CGAN colorgan 动漫线条图片上色

weixin_45259896的博客 1079

智能枕头

睡觉和吃饭是一样重要的,一个人想要健康的体魄,不仅要饮食得当,更需要有一个好的睡眠质量。随着人们生活品质的提高,人们对于睡眠的要求越来越高,那么就非常需要一款舒适的枕头。为了适应市场的需求,我爱物联网推出了智能枕头。因为智能枕头可以给头部及颈椎一个良好的承托力,舒适、柔软、放松,让人更好的进入睡眠。 目录 一、智能枕头方案介绍 二、智能枕头的优点 三、智能枕头功能介绍 四、智能枕头APP开发 五、...

6108我爱物联网方案开发优快云博客 3660

从原理到实现:在《图灵完备》中构建一个144*256像素、1536时钟刻/帧的视频播放器

本文详细解析了在《图灵完备》游戏中构建144*256像素、1536时钟刻/帧视频播放器的全过程。从图灵完备原理出发,通过分层架构设计、视频数据预处理和关键电路实现,展示了如何用基础电子元件模拟现代显卡功能。重点介绍了像素坐标定位系统和颜色数据处理流水线的优化方案,为游戏内复杂电子系统设计提供实践指导。

weixin_42520025的博客 446

超分辨率(1)--基于GAN实现图像超分辨率重建

基于GAN网络实现图像超分辨率重建流程详解

GodFishhh的博客 9167

西门子1200,与V90和步科MD60第三方伺服PN通讯

需要注意的是回零方式的选择,因为V90是绝对值编码器,这里回零模式选择模式7,系统自动根据编码器反馈以及组态的机械参数,计算出轴的位置,并且掉电保持。在线访问中,找到对应的网卡,以及下面扫描到的设备,可以在线修改ip地址和profinet名称,注意一定要和组态中的完全一致。以上硬件组态上完成,主要是gsd文件导入后,添加硬件,建立连接,修改ip和profinet名称,添加报文。1- 博图V18内,设备组态,网络视图中,拖入V90以及MD60伺服,并与PLC创建连接。向厂家索要GSD文件,PN的描述文件。

weixin_37596954的博客 2466

【每周CV论文推荐】基于GAN的图像修复值得阅读的文章

欢迎来到《每周CV论文推荐》。在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的。图像修复(补全)是一个非常基础的图像处理领域,也是一个难度较大的方向,随着生成对抗网络技术的成熟,基于GAN的图像修复在传统方法的基础上取得了非常大的进展,本次我们来简单给大家推荐一些初学者值得关注的工作。作者&编辑 | 言有三1基本模型由于GAN...

hacker_long的专栏 2556

uniapp开发小程序保存图片权限获取失败一直走fail?本地能保存,线上版就不行! 原来是这个问题!

通过这次经历,我发现线上版小程序和开发版、体验版的权限控制差异较大。如果你也遇到类似的问题,首先要检查是否已勾选“采集用户隐私”,并确保在提交审核时配置了隐私条款。这个设置非常关键,避免像我一样浪费了不少时间和版本。

代码简单说 Vue、JAVA、PHP、Node.js 熟练运用,接口、架构、性能全搞定。 1079

【数字IC刷题】华为海思数字IC笔试题(3)详细解析版

【数字IC刷题】华为海思数字IC笔试题(3)详细解析版

MoorePlus的博客 2373

【每周CV论文推荐】基于GAN的图像降噪值得阅读的文章

欢迎来到《每周CV论文推荐》。在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的。图像降噪是一个非常基础的图像处理领域,随着生成对抗网络技术的成熟,基于GAN的图像降噪在一些复杂问题上取得了比较不错的进展,本次我们来简单给大家推荐一些初学者值得关注的工作。作者&编辑 | 言有三1基本噪声仿真模型我们之所以研究GAN模型用于图像降...

hacker_long的专栏 937

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

【通知】《生成对抗网络GAN原理与实践》代码开源,勘误汇总!

有三上个月出版了新书《生成对抗网络GAN:原理与实践》,Generative Adversarial Networks(中文名生成对抗网络,简称GAN)自从被提出来后,其发展就非常迅猛,几乎已经被应用于所有CNN可以使用的领域,应用涉及图像与视频生成,数据仿真与增强,各种各样的图像风格化任务,人脸与人体图像编辑,图像质量提升。学好GAN算法,对于计算机视觉领域从业,完全是有必要的。我们公众号输出过...

hacker_long的专栏 1223

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

【总结】有三AI所有原创GAN相关的学习资料汇总(2022年12月)

GAN的研究和应用在这几年发展可以说是非常迅猛,无疑是这几年深度学习计算机视觉领域里落地性最酷的技术之一,包括图像与视频生成,数据仿真与增强,各种各样的图像风格化任务,人脸与人体图像编辑,图像质量提升等。GAN最早期也是最经典的任务,就是高质量图像生成,当前已经可以生成1024分辨率以上的高清逼真图像,如下图生成了一些假明星脸。图像翻译与风格化则是另外一个应用极其广泛的领域,因为从图像到图像的任务...

hacker_long的专栏 1040

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

基于LTX 3.2技术栈的AI对口型视频生成全流程实战指南

对口型(Lip-sync)技术是计算机视觉与语音合成交叉领域的重要应用,其核心原理是通过深度学习模型建立音频特征与面部运动参数之间的映射关系。这项技术的价值在于能够将静态图像转化为动态的说话视频,极大地降低了数字人、虚拟主播和创意视频内容的制作门槛。在实际应用场景中,它广泛用于短视频创作、在线教育、娱乐特效和虚拟助手等领域。本文以LTX 3.2技术栈为例,详细解析了从环境搭建、素材预处理到模型推理的完整工程实践流程,其中涉及人脸关键点检测、音频特征提取等关键技术环节,并提供了针对CUDA显存优化和面部渲染质

weixin_34293246的博客 406

51c深度学习~合集8

方法的完整数学描述略显复杂,如果只是想了解主要思想,可以只看上面 PatchMix的流程图即可(其实只是公式多,每个公式也不复杂,后续有机会做个演示动画,帮助大家理解。这个方法也可以用简单的 Mask 方法实现,但是本方法在大规模图像处理上效率是最高的),对该工作感兴趣的同行可以看一下,我尽量写得清楚一些。结合 PatMix 的流程图,主要过程如下:由于混合图像和混合图像之间,重叠比例的不同,mix-to-mix label 中每一项的权重分数是不同的,根据上图,可以得到权重系数可以表示为。

whaosoft~aiotの开发板商城 2964

【pytorch基础笔记五】基于条件GAN的色彩填充

【参考文献】 【1】《深入浅出GAN生成对抗网络》7.3 ColorGAN实现 训练过程如下图所示,然后自己本身对CGAN的任务主要两点: 1、生成器网络模型实际上是一个编解码器 2、条件因素相当于是对某一类特征进行了强调 PS:从实验结果看不理想,也可能是训练数据比较少的原因:(也或许是模型理解还有偏差。。。。 from random import randint import numpy as np import torch import torch.nn as nn import torch.

Fred's Note 1653

生成对抗网络(GAN)原理详记

生成对抗网络(GAN)原理详记前言一:什么是生成对抗网络(GAN)1.GAN是什么2.生成任务3.GAN的数学描述 前言 最近几天,入坑了生成对抗网络(GAN),主要是研读了缪茂文 潘志宏著写的《深入浅出GAN生成对抗网络原理剖析与Tensorflow实践》,这里把GAN一些基础的,必要的东西梳理一下。 一:什么是生成对抗网络(GAN) 1.GAN是什么 GAN网络结构是由生成器和判别器组成,训练过程中,生成器G不断的生成赝品,判别器D这识别生成器G生成的结果是真品还是赝品,两个网络相互对抗,生成器G努力生

weixin_45259896的博客 1万+

CVPR 2023 | 用GAN统一图像识别和生成!谷歌提出MAGE,效果号称超越MAE,达到SOTA!...

本文来源 机器之心识别和生成是人工智能领域中的两大核心任务,如果能将二者合并到一个统一的系统中,这两个任务应该能实现互补。事实上,在自然语言处理中,像 BERT [1] 这样的模型不仅能够生成高质量的文本,还能够提取文本中的特征。然而,在计算机视觉领域,目前的图像生成模型和识别模型大多是分开进行训练,没有充分利用这两个任务的协同作用。这主要是由于图像生成和图像识别的模型通常具有本质上的结构差异:...

idol24的博客 2834

基于生成对抗网络(GAN)的图像生成与编辑:原理、应用与实践

生成对抗网络(GAN)是一种通过生成器与判别器对抗训练生成高质量图像的深度学习技术。本文详细介绍了GAN的基本原理、训练过程及损失函数,并探讨其在图像生成、风格转换、图像修复等领域的应用。通过PyTorch实现的GAN模型案例展示了人脸图像的生成过程,并以艺术工作室应用为例,说明如何利用GAN生成梵高风格的绘画作品。研究表明,GAN技术为图像生成与编辑提供了强大支持,未来将在计算机视觉和艺术创作等领域持续发挥重要作用。

qq_74383080的博客 1513
上一篇: 【每周CV论文推荐】基于GAN的图像降噪值得阅读的文章
下一篇: 【每周CV论文推荐】基于GAN的图像超分辨值得阅读的文章
言有三
言有三 领域专家: 人工智能技术领域 领域专家: 人工智能技术领域
博客等级 码龄15年 3635粉丝 976原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

言有三

三人行必有AI

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值