多面特征可视化:揭示深层神经网络中每个神经元学习特征的不同类型

本文介绍了《Multifaceted Feature Visualization》论文,该论文提出了一种新的多面特征可视化(MFV)算法,以揭示深度神经网络中每个神经元学习到的不同类型特征。MFV通过PCA和t-SNE对图像进行降维和聚类,然后使用激活最大化技术并结合中心偏置正则化生成更清晰、多方面的激活图像。实验结果显示,MFV能有效展示神经元对同一类物体不同方面的识别能力,特别是在高层神经元中,呈现出多面性和抽象性。这一方法提高了深度学习特征可视化的质量和理解,有助于优化深度学习算法。

作者:18届 cyl

日期:2021-08-08

论文:《Multifaceted Feature Visualization: Uncovering the Different Types of Features Learned By Each Neuron in Deep Neural Networks》多面特征可视化-呈现神经元学习到的不同类型特征的可视化结果-引入一种正则化技术改善激活图像质量

一、本文围绕的主要问题

1、MFV算法的具体流程
2、MFV的实验结果

二、背景

1.Deep Learning很吸引人,也很玄乎的一个点就是大家都说它可以提取到分级的逐层抽象的特征。但
对我们来说,总是耳听为虚,眼见为实。所以,每当我们训练完一个深度模型后,我们还特别想把这个
深度模型学到的东西给可视化出来,好弄明白它到底学到了什么东西,是不是有意义的,是不是像传说
中的那样神奇。那怎样有意义的可视化呢?对了,我们用deep net来做什么的了?来提取特征的。那它
提取什么特征呢?如果它像我们所说的提取的是底层到高层的特征,例如边缘,到形状,到目标等等,
那就证明我们的目的是达到的。
2.因此,通过确定每个神经元已经学会检测哪些特征,我们可以更好地理解深度神经网络。为此,研究
人员创造了包括激活最大化在内的深度可视化技术。而对激活最大化技术简单的概括就是使用梯度上升
的方法来寻找能够最大程度激活某个神经元的图像,并将其可视化,以有意义的表达这个神经元所学习
到的特征。
3.虽然在当时有了这么一个初步解析神经网络,对特征进行可视化的理解思路,但

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

中南大学苹果实验室

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值