【每周CV论文推荐】GAN与VAE的结合,有哪些必读的论文?

VAE论文简单介绍(Auto-Encoding Variational Bayes) VAE论文简单介绍 阅读详情

欢迎来到《每周CV论文推荐》。在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的。

VAE和GAN是两类最具有代表性的生成式模型,其中VAE是典型的显式生成模型,GAN是典型的隐式生成模型,两者的结合又可以产生什么样的火花呢,本次我们来介绍其中值得阅读的文章。

作者&编辑 | 言有三

1 VAE论文

基本的GAN模型大家还是比较熟悉的,而变分自编码器(Variational Auto-Encoder,简称VAE)有许多朋友可能并不熟悉,因此大家还需要先了解其基本原理,阅读原始论文。

文章引用量:22000+

推荐指数:✦✦✦✦✦

a0060975ab95c23a3a32ea914a860cc2.png

[1] Kingma D P, Welling M. Auto-encoding variational bayes[J]. arXiv preprint arXiv:1312.6114, 2013.

2 对抗自编码器

Adversarial Autoencoders的核心仍然是利用一个生成器G和一个判别器D进行对抗学习,以区分real data和fake data,但是差别在于这里需要判别真假的data并不是自然图像,而是一个编码向量z,对应的real data和fake data分别由autoencoder中的encoder和一个预定义的随机概率分布生成,最后用于image generation的网络也并非是之前的生成器G,而是autoencoder中的decoder。

文章引用量:2400+

推荐指数:✦✦✦✦✦

f3ac0fcda5b051e7200e8de67ee55215.png

[2] Makhzani A, Shlens J, Jaitly N, et al. Adversarial autoencoders[J]. arXiv preprint arXiv:1511.05644, 2015.

3 ALI与BiGAN

Adversarially Learned Inference(简称ALI)与Adversarial feature learning(简称BiGAN)类似,GAN中的生成器实现了从Latent向量空间z到图像空间x的转换,ALI和BiGAN模型则添加了图像空间x到Latent向量空间z的转换。判别器不仅需要学习区分生成的样本和真实的样本,还需要区分两个不同的数据和潜在变量联合分布。

文章引用量:3000+

推荐指数:✦✦✦✦✦

1791d82466a054c9039dd9d79fd2c3a5.png

[3] Dumoulin V, Belghazi I, Poole B, et al. Adversarially Learned Inference[J]. arXiv: Machine Learning, 2016

[4] Donahue J, Krähenbühl P, Darrell T. Adversarial feature learning[J]. arXiv preprint arXiv:1605.09782, 2016. 

4 VEEGAN 

VEEGAN是一个用于减少GAN模型训练过程中过拟合程度的框架,它通过额外添加的Autoeencoder损失来实现,其损失是一个两个联合分布(真实数据与编码器输出,噪声向量与生成器输出)的KL散度。

文章引用量:500+

推荐指数:✦✦✦✦✧

272ca0e7b2ad82f1b6ab3010e500747c.png

[5] rivastava A, Valkov L, Russell C, et al. Veegan: Reducing mode collapse in gans using implicit variational learning[J]. Advances in neural information processing systems, 2017, 30.

5 AVB

Adversarial variational bayes(简称AVB)采用对抗学习的方式来训练变分自编码器,可以任意的使用复杂的推理模型,能够学习丰富的后验分布,并证明该模型能够为复杂的数据集生成样本。

文章引用量:500+

推荐指数:✦✦✦✦✧

d4e392eea2dde3adb33163b76d569960.png

[6] Mescheder L, Nowozin S, Geiger A. Adversarial variational bayes: Unifying variational autoencoders and generative adversarial networks[C]//International conference on machine learning. PMLR, 2017: 2391-2400.

6 AGE

ALI包含了编码器,解码器和判别器,但是有研究表明,没有判别器也是可以的,这就是Adversarial Generator-Encoder Networks,可以减少模型的总体参数量,与ALI模型和VAE模型进行了对比,相比于VAE拥有更好的细节,相比于ALI则拥有更精确的重建结果。

文章引用量:100+

推荐指数:✦✦✦✦✧

8afc1c0f69dc7ce1c10f2811405978d1.png

[7] Ulyanov D, Vedaldi A, Lempitsky V, et al. It Takes (Only) Two: Adversarial Generator-Encoder Networks[J]. arXiv: Computer Vision and Pattern Recognition, 2017.

 7 如何进行实战

为了帮助大家掌握一些图像生成模型的重要方法,我们推出了相关的专栏课程《深度学习之图像生成GAN:理论实践篇》,可以进一步阅读:

【视频课】CV必学,超6小时,2大模块,循序渐进地搞懂GAN图像生成!

88978941291f8206ce0ffde5f2207037.png

45a7cf677e222661615a8a15f951e8e6.jpeg

总结

本次我们简单介绍了GAN与VAE结合的一些研究,这是两类非常具有代表性的生成模型,对于从事图像生成相关领域的朋友,是必须掌握的基础内容。

有三AI秋季划-GAN组

b86bea7e24ec5429bac2691145383a8f.png

如果想要永久系统性地跟随我们社区学习GAN的相关内容,请关注有三AI-CV秋季划GAN组,阅读了解下文:

e5d8532d98b64f3893626c9ae45f51e4.png

【CV秋季划】生成对抗网络GAN有哪些研究和应用,如何循序渐进地学习好(2022年言有三一对一辅导)?

转载文章请后台联系

侵权必究

541212dd2a16611861f72fa6538fa930.gif

d55b854a9aef9da692bbd3c834c14a82.png

365b950d0f7af0982cd18c0e110a8eaa.png

往期相关精选

深入浅出搞懂VAE 2013年提出的VAE,跨越11年,获得首届ICLR‘24时间检验奖,是深度学习的重要技术之一。这篇论文把深度学习和可扩展的概率推理整合在一起,从而产生了变分自编码器(VAE),这项工作其持久的价值在于优雅,加深了我们对于深度学习和概率建模之间相互作用的理解,引发了许多后续有趣的概率模型和编码方法的开发。下面按照三个部分进行,由易到难:核心思想,技术难点和实现(如何将概率转换成网络?),理论支持(变分下界推导,损失函数),复盘。 阅读详情

相关推荐

【论文阅读】(VAE)Auto-Encoding Variational Bayes

【论文阅读】(VAE)Auto-Encoding Variational Bayes

weixin_45142381的博客 2762

论文精读--VAE

我们如何在有连续潜在变量和难以处理的后续分布的定向概率模型中进行有效的推理和学习?我们引入了一种随机变分推理和学习算法,该算法可扩展到大型数据集,并且在一些温和的可微分性条件下,甚至在难以处理的情况下也能工作。我们的贡献有两个方面。首先,我们展示了对变分下界的重新参数化产生了一个下界估计器,该估计器可以使用标准的随机梯度方法直接优化。

m0_73202283的博客 1766

VAE(变分自编码器)论文学习

VAE(变分自编码器) 论文《Auto-Encoding Variational Bayes》 Variational Auto-Encoder 我们平常的编码器可以对数据进行压缩,降噪之类的一些处理,但是实际上不能来生成任意数据。 而VAE就可以,它可以直接通过模型生成隐变量z,并且z是及含有数据信息又含有噪声的,所以可以无穷无尽的生成数据 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传 这是一个重要的生成模型(功能和GAN相似),不过VAE采用的是概率的思想(我们知道密

Facico的博客 4638

【通知】《生成对抗网络GAN原理与实践》代码开源,勘误汇总!

有三上个月出版了新书《生成对抗网络GAN:原理与实践》,Generative Adversarial Networks(中文名生成对抗网络,简称GAN)自从被提出来后,其发展就非常迅猛,几乎已经被应用于所有CNN可以使用的领域,应用涉及图像与视频生成,数据仿真与增强,各种各样的图像风格化任务,人脸与人体图像编辑,图像质量提升。学好GAN算法,对于计算机视觉领域从业,完全是有必要的。我们公众号输出过...

hacker_long的专栏 1223

计算机视觉研究方向有哪些?什么方向最好出论文创新点

计算机视觉(CV)是人工智能中一个活跃且应用广泛的研究领域,旨在让计算机理解和处理图像与视频。其主要研究方向包括图像分类、目标检测、图像分割、姿态估计、图像生成与重建、视频理解、三维视觉和跨模态视觉理解。这些方向不仅涉及基础理论,还紧密联系实际应用,适合发表论文和实现项目落地。为了在CV领域取得创新,建议关注跨模态学习、小样本学习、图像生成模型的控制与轻量化、视频分析以及医学图像分析等方向。此外,通过阅读顶会论文、复现SOTA方法、模型微调和数据集创新等方式,可以有效切入研究并产生有价值的成果。

OpenCVtuxiang的博客 3550

汽车Bootloader流程

根据ISO14229-1 写的汽车行业 Bootloader流程 1:编程前 → 先读取软硬件版本号 22 F1 XX 软件信息 22 F1 XX 硬件信息 → 进入扩展会话extend diagnostic sessions 功能寻址 10 03 → 编程条件检测routine control:ECU升级条件的判断,如车速,检测车的型号 31 01 02 03 → 关闭DTC检测,(由于很多节点收不到其它节点的报文后会记录DTC故障)功能寻址 85 02 → 关闭诊断通讯(禁止各个节点的应用报...

weixin_41320142的博客 2834

【总结】有三AI所有原创GAN相关的学习资料汇总(2022年12月)

GAN的研究和应用在这几年发展可以说是非常迅猛,无疑是这几年深度学习计算机视觉领域里落地性最酷的技术之一,包括图像与视频生成,数据仿真与增强,各种各样的图像风格化任务,人脸与人体图像编辑,图像质量提升等。GAN最早期也是最经典的任务,就是高质量图像生成,当前已经可以生成1024分辨率以上的高清逼真图像,如下图生成了一些假明星脸。图像翻译与风格化则是另外一个应用极其广泛的领域,因为从图像到图像的任务...

hacker_long的专栏 1040

ETL数据集成案例

一个典型的ETL数据集成案例是将多个来源的数据合并成一个数据集。假设有一个公司,该公司使用一些不同的系统来存储不同部门的数据,例如销售数据存储在一个CRM系统中,财务数据存储在一个ERP系统中,人力资源数据存储在一个HR系统中。为了更好地进行报告和分析,该公司决定将所有这些数据集成到一个数据仓库中。以下是实现这一目标的ETL过程的步骤:提取(Extract):首先,需要从每个系统中提取所需的数据。每个系统可能有不同的数据格式和结构,因此需要编写不同的提取程序或查询来提取数据。

runqu的博客 948

创业者必读的8篇AI产品级论文:从技术原理到商业落地

Transformer、Diffusion、CLIP等核心AI模型并非抽象学术概念,而是定义现代智能产品能力边界的工程基石。其底层原理——如自注意力机制实现多任务统一建模、潜在空间降维支撑实时生成、弱监督训练大幅降低数据门槛——直接决定产品可行性、成本结构与用户体验上限。这些技术已催生百亿级SaaS、AIGC工具与语音交互新品类,成为创业者评估技术红利窗口、规避方案过时风险、构建真实技术壁垒的关键依据。本文聚焦8篇真正驱动产品创新的‘拐点论文’,解析其能力接口、成本接口与演进接口,帮助非技术背景的产品决策者

cuililai5127的博客 364

【学习路线】 游戏客户端开发入门到进阶

游戏开发是一个交叉性极强的技术领域,对开发者提出了高维度的要求。作为初学者,不要急于求成,打牢基础、注重原理、勤于实践,你的成长将会非常快速而稳健。希望这份学习路线与书单能为你指明方向,迈出职业开发者的第一步。

hhw_hhw的博客 2131

棋牌App逆向工程实战:透视风险分析与反作弊加固思路

在移动应用安全领域,逆向工程是一项关键的攻防技术,它通过静态分析、动态调试与协议抓包等手段,深入还原客户端真实逻辑。这项技术的核心原理,是从已编译的安装包中提取数据流,验证服务端下发的信息是否超出了客户端应有的可见范围。从技术价值看,安全测试人员可以借此定位协议层、内存层与缓存层的潜在风险,为反作弊体系提供精准的加固建议。在棋牌类App等实时对局场景中,逆向工程常被用于排查牌局信息泄露类隐患,而合规授权与测试环境是开展此类研究的必要前提。本文结合一次棋牌App的安全评估实践,梳理了从环境准备到数据流还原的完

weixin_29326909的博客 176

我的第一本算法书 pdf_只推荐一位一个专注于分享python,AI,算法类的公众号

点击上方“AI遇见机器学习”,选择“星标”公众号原创干货,第一时间送达今天给大家推荐一个Python,AI,算法类的公众号「AI遇见机器学习」AI遇见机器学习:长期专注于Python及AI领域。公众号日常会分享机器学习,深度学习,NLP,CV等相关的学习资源和干货,并不间断的分享AI相关前沿动态和算法资料,当然还有不定期的送书等粉丝福利,强烈推荐大家关注!扫码关注!公众号会分享包括但绝不...

weixin_39640265的博客 467

终端运行脚本报: 因为在此系统上禁止运行脚本。有关详细信息,请参阅 https:/go.microsoft.com/fw link/?LinkID=135170 中的 about_Execution_

PowerShell 执行策略是一种安全机制,用于控制哪些脚本可以在系统上运行。默认情况下,Windows 系统会设置较为严格的执行策略,以防止恶意脚本的执行。执行策略有以下几种常见级别:Restricted(限制):不允许运行任何脚本。AllSigned(全部签名):仅允许运行经过数字签名的脚本。RemoteSigned(远程签名):允许运行本地脚本,但远程下载的脚本需要数字签名。Unrestricted(无限制):允许运行所有脚本,但会警告未签名的脚本。

欢迎来到我的技术博客!这里是一个专注于软件开发的地方,我将分享关于 Java、Python、C++ 和易语言等多种编程语言的教程、技巧、最佳实践以及开发经验。 5089

计算机视觉要学哪些东西?CV零基础到能做图像识别学习路线

计算机视觉是人工智能领域中的一项关键技术,旨在使计算机能够理解和处理图像与视频内容。这项技术广泛应用于人脸识别、商品图搜索、自动美颜等场景。学习计算机视觉需要掌握Python编程、图像处理库(如OpenCV、Pillow)、数学基础(线性代数、概率统计、微积分)以及深度学习模型(如CNN、ResNet、YOLO等)。入门阶段建议从图像分类项目开始,逐步进阶到目标检测、图像分割等复杂任务。实践是学习计算机视觉的最佳方式,通过动手项目可以加深理解并提升技能。推荐的学习路径包括掌握基础工具、理解核心模型、进行项目

OpenCVtuxiang的博客 1078

操作系统课程项目 OS project —— Pintos from Project 1 to Project 3

Pintos Project 陪伴我们操作系统课程大半个学期了…… 虽然做了这么长时间,个人能力有限,pintos代码,看过的可能也就看懂了一半吧,更不用说没看过的了…… 但是也找到了一些有价值的资料,整理一下,供后辈们参考…… 关于环境的问题,最好是用ubuntu 16.04 windows用户不要折腾装双系统了,特别是win10,动不动更新一下,说不定双系统就出问题了,linux...

Deserted Land 8557

别再让信号‘撞墙’了!手把手教你用嘉立创阻抗计算器搞定PCB高速线(附免费压层结构选择)

本文详细介绍了如何使用嘉立创阻抗计算器解决PCB高速线设计中的阻抗匹配问题,避免信号反射和传输损耗。通过免费压层结构选择和五步计算法,帮助工程师快速掌握USB3.0差分线等高速信号的设计技巧,提升PCB设计效率和信号质量。

weixin_30736301的博客 282

【赠书】图表示学习+图神经网络:破解AI黑盒,揭示万物奥秘的钥匙!

‍‍从电信网络到社交网络,从经济网络到生物医学网络……图结构的数据无处不在。如何提取图的特征,表示或编码图的结构,基于图数据进行学习、推理和归纳变得越来越重要。因为无论是进行数据挖掘、分析...

hacker_long的专栏 438

【全局路径规划模块运动学算法】无人机Kinodynamic A*算法、Kinodynamic RRT*算法(附C++代码)

认知有限,望大家多多包涵,有什么问题也希望能够与大家多交流,共同成长!本文先对Kinodynamic A*算法做个简单的介绍,具体内容后续再更,其他模块可以参考去我其他文章提示:以下是本篇文章正文内容啃这个Kinodynamic A_star算法,建议先啃一啃高飞fast_planner那篇论文,把理论打好,如果还是比较迷,就先看Dijksta、再看A_star、再看hybrid A_star 三个的流程,因为往上资料比较多,再看这个Kinodynamic A_star算法,流程已经很相像了。如果。

qq_35635374的博客 2604

Python深度学习:从入门到实战

亲爱的读者,欢迎您翻开这本书。我们即将探索的,是深度学习的宇宙——一个由数据、算法与算力构筑的奇妙世界。它既是严谨的科学,也是创造的艺术,更是一条通往未来智慧的修行之路。本书将带您从最基础的数学原理出发,亲手搭建神经网络,驾驭Transformer等前沿模型,最终将智慧转化为现实世界的价值。请放下畏惧,保持好奇。这不仅是一次知识的学习,更是一场思维的远行。来,随我一起,开启这趟非凡的旅程吧。

YunWisdom 87

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

lwip-2.0.3

lwip是瑞典计算机科学院(SICS)的Adam Dunkels 开发的一个小型开源的TCP/IP协议栈。实现的重点是在保持TCP协议主要功能的基础上减少对RAM 的占用。

神经网络学习路线:从感知机到Transformer,系统构建AI模型思维

神经网络作为现代人工智能的核心技术,广泛应用于图像识别、语言处理、推荐系统和自动驾驶等领域。要深入理解神经网络,需掌握其数学基础、结构原理、训练方法及实际应用。学习路径包括:1) 数学与编程基础,如线性代数、微积分、概率统计和Python编程;2) 基础神经网络结构,如感知机模型、前馈神经网络和激活函数;3) 深度神经网络训练机制,包括权重初始化、正则化方法和学习率调节策略;4) 主流神经网络架构,如卷积神经网络、循环神经网络和生成式模型;5) 模型解释性与可视化,如特征可视化和梯度类方法;6) 前沿方向与

OpenCVtuxiang的博客 1158

jdk-8u144-linux-x64.tar.gz.

该资源为搭建Linux系统Java环境用,资源的后缀为tar.gz格式的压缩包

视频大模型研发“每月一亿”投入能否保障技术领先?——多维战略评估与行业实证分析

🔍 行业洞察:阿里云视频检索系统采用“双通道缓存”设计——热数据存于NVMe SSD(延迟<100μs),冷数据自动迁移至对象存储,并通过大模型预测访问模式实现预加载,使95%查询响应<300ms。在AIGC爆发式演进的当下,视频大模型(Video Foundation Model)已成为全球AI竞争的核心制高点。:腾讯混元视频模型SkyReels V4采用“分层时空注意力+动态token剪枝”架构,在同等算力下推理速度提升3.2倍,该创新背后是其团队连续18个月聚焦视频理解子方向的专项投入。

热爱技术与前沿创新,深耕科技领域,在科创中精进自我;探索技术乐趣,分享技术干货与成长心得,以技术为伴,热爱生活,在科创与生活中双向成长。 769

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

ChatGPT技术原理解析:从RL之PPO算法、RLHF到GPT4、instructGPT

本篇ChatGPT笔记会全力做到,通俗易懂且循序渐进(尽最大努力让每一个初学者哪怕是文科生都能没有障碍的读懂每一字一句、每一个概念、每一个公式) 一方面,对于想了解ChatGPT背后原理和如何发展而来的,逐一阐述从GPT/GPT2/GPT3到强化学习、PPO算法,最后再到instructGPT、ChatGPT、SeqGAN 且本文之前,99%的文章都不会把PPO算法从头推到尾,本文会把PPO从零推到尾,按照“RL-策略梯度-重要性采样(重要性权重)-TRPO(增加信任区域和KL散度约束)-PPO”的顺序逐步

结构之法 算法之道 22万+
上一篇: 【每周CV论文推荐】初学模型可视化分析有哪些值得阅读的论文?
下一篇: 【每周CV论文推荐】初学视频分类与行为识别有哪些值得阅读的论文?
言有三
言有三 领域专家: 人工智能技术领域 领域专家: 人工智能技术领域
博客等级 码龄15年 3635粉丝 976原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

言有三

三人行必有AI

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值