- 博客(129)
- 资源 (5)
- 收藏
- 关注
原创 【很详细】高斯分布之间的KL散度讲解+Python代码实现
非常详细的高斯分布、高斯分布的KL散度的讲解,附带Python代码,加深理解,全过程,很详细
2023-06-10 23:44:53
4749
1
原创 全网最全的多模态实体识别论文列表-【原文+代码】
目前全网最全的多模态实体识别论文列,附原文和代码!多模态、实体识别、论文、代码、全都有!
2023-05-25 22:03:22
2821
13
原创 【必知必懂论文】之多模态实体识别
随着互联网技术和信息存储技术的发展,互联网中的信息形态已从传统的纯文本模态转变为涵盖文本、图像、视频等多模态形式,这给传统的面向纯文本的命名实体识别任务带来巨大的挑战,本篇文章就想带领大家学习一下,多模态命名实体识别(MNER)的几篇必知懂论文。这几篇论文是小编根据多模态命名实体识别方法的类别,从主要的几类方法中挑选出几篇代表性工作,希望能够给大家带来帮助。如果喜欢我们的文章,就加个关注吧,小编会持续地为大家输出详细的、精彩的论文分享,或者如果你想了解什么内容,也可底部留言给我们。
2023-05-11 09:00:40
4310
1
原创 【全过程】Pycharm 远程服务器调试 配置 project Interpreter
前言因为深度学习算法的流行,目前很多算法的运行都需要在GPU上运行,因为Deep Learning是一项数据驱动的技术,训练的时候需要大量的数据支撑,所以,要想快速的完成基于深度神经网络模型的训练模型,一般是要在GPU上跑的。一般,穷人是买不起大容量的GPU的,都会借助于实验室或者公司的服务器,这就会遇到在本地编码,远程服务器运行的问题,这篇博客就是来解决这样的问题。准备我本地使用的Python编辑器是pycharm,另外,肯定需要有服务器的支撑。连接首先在本地建立要编码的project,比如建立
2021-07-29 10:34:17
6106
1
原创 Pytorch之循环神经网络
希望通过本文,能够让大家,不需要再去参阅其他资料,就可以完全弄清楚torch.nn.LSTM(),不明白的地方可以随时留言~本文不定时更新。循环神经网络层的理解torch.nn.LSTM()pack_padded_sequence和Pad_packed_sequence在设计RNNs类的神经网络的时候,经常会使用pack_padded_sequence和Pad_packed_sequence,这是因为pytorch通过pack_padded_sequence和Pad_packed_sequence这
2021-03-22 14:54:52
729
原创 pytorch之卷积神经网络
torch.nn.Conv2d()官方文档文档中文文档输入格式注意下面的说明:即参数kernel_size, string, padding, dilation 也可以是一个int的数据,此时卷积height和weight的数值相同;也可以是一个tuple数组,tuple的第一维表示height的数值,tuple的第二维表示width的数值。Hout和Wout的计算H_{out} 和 W_{out} 的计算Hout和Wout的计算:参数说明in_channels
2021-03-19 23:51:19
2735
1
原创 《态度》-吴军 第9封---第11封信
态度请仔细阅读和思考下面这句话,非常受用,一起共勉吧!注意你的态度,因为它能影响你的想法。注意你的想法,因为它能决定你的言辞和行动。注意你的言辞和行动,因为它能主导你的行为。注意你的行为,因为它能变成你的习惯。注意你的习惯,因为它能塑造你的性格。注意你的性格,因为它能决定你的命运。今天读了态度的第二章节洞察世界中的内容(第9封信至第11封信),在此记录下我的一些感受,希望也够激发到你们,希望我们一起进步与成长。洞察生活之生活是具体的(第9封信)这里吴军老师主要是讲述了德国人做人做事的
2021-03-18 14:44:53
960
3
原创 本地浏览器使用tensorboard查看远程服务器训练情况
前言由于服务器端是没有浏览器的(纯命令模式),我们需要进行相应的配置,才可以在本地浏览器,使用tensorboard查看服务器运行的训练过程。方案:Xshell隧道配置打开Xshell,右击相应的会话,在弹出的对话框中选择属性->连接->SSH->隧道->添加。在侦听端口和目标端口中填入相同的端口,此处填写了6006;(这里的端口号,也可以随便换成其他的,只要保证两处相同即可)。服务器端启动tensorboard使用以下语句启动:tensorboard --lo
2020-08-02 16:57:39
9232
2
原创 Echarts 画图(适用于新手)
引言写论文的时候想要画一个好看的知识图谱,接触了echarts,在此记录一下从安装到使用的过程。安装可以参见菜鸟教程上的安装过程Echarts的三种安装方法,在此我使用的是第一种安装方法,就是下载一个.js文件,放在你的指定目录下,后期再编写.html文件的时候,导入js的路径,就是你的存放路径。使用浏览器打开对应的html文件,就可以看到效果了。命令行生成:snapshot graph.html pdf需要注意的问题:版本匹配...
2020-06-30 00:06:52
4630
1
原创 Pycharm中出现 ImportError:DLL load failed:找不到指定模块
引言本博文主要解决一下问题:为啥命令行中导入包没有问题,在Pycharm中就有问题?就会出现ImportError:DLL load failed:找不到指定模块的问题?解决方案在Pycharm内部添加环境变量,Run > Edit Configurations > Environment Variables,添加PATH=${Anaconda的根路径}\Library\bin,然后就能正常运行了。...
2020-06-20 16:27:47
4018
4
原创 ubuntu下使用conda创建/安装失败 错误 提示:An unexpected error has occurred
引言使用公用的服务器,免不了要建立自己的虚拟环境,以防止和其他同学安装软件包的时候,发生冲突。最近,由于需要,使用conda创建了虚拟环境,但是在我创建又删除这样的几轮操作之后,不知什么原因,在我再次使用conda创建虚拟环境或者使用conda进行安装软件包的时候,出现了以下错误提示。经络一天试坑 解决方案,终于解决完毕,想必这算是比较全面的一个解决方案了。撸起袖子加油干起来!错误提示我的虚...
2020-05-07 22:07:20
11127
原创 自然领域中的数据集
引言这将会是一个不断更新的博客,提供了一些数据集下载来源或者数据集信息介绍。在我的研究中,我可能会碰到一些相关任务的数据集,在此做个记录,顺便分享给大家。一、实体、关系抽取相关的数据集CoNLLCoNLL: The SIGNLL Conference on Computational Natural Language Learning。具体的解释可以参见这里 或者这里其中,SIGNLL ...
2020-04-04 15:43:05
4202
2
原创 迁移学习、端到端学习、多任务学习
文章目录迁移学习多任务学习端到端学习端到端学习的优点端到端学习的缺点:迁移学习迁移学习(Transfer Learnining)是将一个神经网络从一个任务中学到的知识和经验,运用到另一个任务中。如下例所示如上图所示,将为猫识别器构建的神经网络迁移应用到放射诊断中,因为猫识别器的神经网络已经学习到了关于图像的结构和性质等方面的知识,所以只要先删除神经网络中的最后一层,输出层的权重也改为随机初...
2020-04-01 17:34:25
1556
原创 自动生成文本摘要的相关知识点【入门篇】
文章目录前言背景动机文本摘要分类按照输入类型按照输出类型按照相关技术抽取式摘要传统的方法Lead-3TextRank聚类序列式标注方法序列标注摘要基本框架序列标注集合结合Seq2SeqSeq2seq方式句子排序方式句子排序结合新的打分方式生成式摘要利用外部信息多任务学习生成对抗的方式抽取生成式摘要数据集总结一些参考资料前言本文主要介绍与自动生成文本摘要相关的知识点。背景随着互联网产生的文本...
2020-03-24 15:47:15
8317
1
原创 几个机器翻译与自动文摘评价指标
文章目录总体认识总体认识自然语言中的机器翻译或者自动文摘任务的评价指标主要分为两大类:客观评价指标(即使用一些可计算的评价指标)和主观评价指标(即人工评测,通常是领域专家或者学者)。客观评价指标有:BLEUROUGEMETEORCIDEr主观评测需要考虑一下三点:流畅度相关性助盲性...
2020-03-22 18:04:42
2426
原创 Transformer--Attention is All You Need (推荐--非常详细)
文章目录论文地址模型提出的背景(或者动机)本论文模型---TranformerModel ArchitectureEncoderDecoderAttentionScaled Dot-Product AttentionMulti-Head AttentionPosition-wise Feed-Forward NetworksEmbeddings and SoftmaxPositional Enco...
2020-03-19 16:01:45
4338
1
原创 tf.nn.dynamic_rnn(推荐阅读)
文章目录参数讲解代码讲解:单层RNN多层RNN多层LSTM参考参数讲解函数原型为:tf.nn.dynamic_rnn( cell,#RNNCell的一个实例. inputs,#RNN的一个输入 #如果time_major == False(默认), 则是一个shape为[batch_size, max_time, input_size]的Tensor,或者...
2020-03-15 16:43:47
737
原创 tf.Graph()as default && session
原文链接:https://blog.youkuaiyun.com/xierhacker/article/details/53860379文章目录一.Graph二、Session(tf.Session)一.Graph一个TensorFlow的运算,被表示为一个数据流的图。一幅图中包含一些操作(Operation)对象,这些对象是计算节点。前面说过的Tensor对象,则是表示在不同的操作(operatio...
2020-03-14 10:15:14
455
原创 Encoder-Decoder综述理解(推荐)
文章目录一、Encoder-Decoder(编码-解码)介绍几点说明信息丢失的问题应用二、Seq2Seq(序列到序列)介绍Seq2Seq与Encoder-Decoder代码实现一、Encoder-Decoder(编码-解码)介绍Encoder-Decoder是一个模型构架,是一类算法统称,并不是特指某一个具体的算法,在这个框架下可以使用不同的算法来解决不同的任务。首先,编码(encode)由...
2020-03-12 22:19:19
58403
6
原创 Ubuntu下安装pytorch-gpu 和tensorflow-gpu【GPU版】
文章目录引言配置参考资料引言本文主要是介绍在Ubuntu系统下安装torch-gpu版和tensorflow-gpu版.配置因为两者均是GPU版本和python版,因此所需要的配置环境几乎一模一样。在正式安装torch和tensorflow之前,需要安装以下软件:安装cuda安装cuDNN(注意和cuda版本相对应起来)安装Anconda(同样主要要和cuda版本对应起来)参...
2020-01-20 22:23:54
1341
原创 从0到1 激活函数(一)sigmod函数
引言本节主要是介绍神经网络中常见的激活函数-----sigmod函数。sigmod的函数简介sigmod的函数是一个在生物学中常见的S型函数,也称为S型生长曲线。在信息科学中,由于其单增以及反函数单增等性质,常被用作神经网络的激活函数,将变量映射到0,1之间。-------------摘自《百度百科》sigmod函数也叫作Log...
2019-12-20 16:52:28
75442
3
原创 第一站 Theano 简介
前言因为近期学习的需要,需要学习一下theano的使用,在网上发现了莫烦python的视频,感觉还可以,以此做一个学习笔记,分享及便于日后查询。该笔记我会尽量以简洁易懂的方式进行记录,同时也会加入自己的一些想法和看法(一般会标红或者加粗等标记一下)。1.1 科普:人工神经网络 VS 生物神经网络生物神经网络900亿个神经细胞构成婴儿期的神经元还并没有形成系统和网络,只是一些分散的细胞而...
2019-11-25 10:16:11
317
原创 赵军之《知识图谱》 第三章 知识体系构建和知识融合
第三章 知识体系构建和知识融合说明什么是知识体系思维导图说明本章主要介绍了知识体系构建和知识融合两个任务,主要内容包括:1、知识体系赋予知识图谱明确的语义信息。一般来说,知识体系主要包括三个方面的内容:对概念的分类,概念属性的描述以及概念之间关系的定义。本章介绍了两种知识体系的构建方法:人工定义构建和自动学习构建。2、知识体系具有很高的抽象性和概括性,高质量的类别体系需要通过人工进行构...
2019-07-19 16:19:57
3054
原创 词性标注集句和句法分析标注集
两大标注集说明词性标注集一个简单的概括以字母顺序展开解释句法分析树标注集参考文献说明因为在学习自然语言处理过程中,遇到了很多标注符号(比如,词性标注,句法分析树)记不住其具体含义,在此总结如下。主要工作是整合一下,方便查询,后面给出了参考的博客。词性标注集一个简单的概括其实,我们常见的词性主要就是以下几大类,当然还有一些小众类,后面也会给出介绍。词性符号代表名词N...
2019-07-12 11:12:20
2249
原创 赵军之《知识图谱》 第二章 什么是知识表示
第二章 知识表示说明什么是知识表示思维导图说明说明:本章主要介绍了知识的表示方法。首先,介绍了传统人工智能领域从认知角度提出的不同知识表示方法,主要包括逻辑、语义网络、框架和脚本等方法。然后,介绍了在互联网时代从不数据出发提出的语义网以及语义网的背景和其知识描述体系,知识图谱的表示和存储等方法大量使用了语义网的标准和体系。知识图谱是传统知识表示方法和语义网技术在互联网应用中的体现,它广泛利...
2019-07-10 11:11:52
1110
原创 赵军之《知识图谱》第一章 什么是知识图谱
第一章 概述什么是知识图谱新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入说明:本章首先讨论了知识图谱的定...
2019-07-08 11:37:49
1597
原创 主成成分分析PCA参考资料
基本概念PCA(Principal Component Analysis),即主成分分析方法,是一种使用最广泛的数据降维算法。PCA的主要思想是将n维特征映射到k维上,这k维是全新的正交特征也被称为主成分,是在原有n维特征的基础上重新构造出来的k维特征。 PCA的工作就是从原始的空间中顺序地找一组相互正交的坐标轴,新的坐标轴的选择与数据本身是密切相关的。其中,第一个新坐标轴选择是原始数据中方差最...
2019-05-11 10:39:47
615
原创 Graph Embedding 、Network Embedding和Knowledge Graph Embedding以及Representation 和Embedding之间的区分
注意,在此只是谈一下个人的一点理解,如有不对的地方,欢迎指正,共同探讨!Representation和Embedding首先,想先说一下representation和embedding之间的区别和联系,仅供参考。这两个词在目前的计算机领域,尤其的是深度学习方面是如火如荼啊,算是热词啊。很多文献里面,对这两个词没有进行严格的区分,认为是同一个概念,比如常见的有word embedding和wor...
2019-03-26 20:37:55
4096
2
原创 Knowledge Base、Semantic Web、Semantic Network、Linked Data、Knowledge Graph概念解析
先介绍一下基本的概念Knowledge Base :通常翻译为“知识库”。知识库是人工智能的经典概念之一。最早是作为专家系统(Expert System)的组成部分,用于知识推理。知识库中的知识有很多种不同的形式,例如本体知识、关联性知识、规则库,案例知识等。相比于知识库的概念,知识图谱更加侧重关联性知识的构建,如三元组。知识库是一个很泛的概念,其内容形式要比知识图谱广,可以将知识图谱看作是知...
2019-03-20 11:41:57
2353
原创 LDA的研究点
一、来自知乎的回答参考链接:点击这里经典的LDA主题模型实现了文本的软聚类的工作,将文档转化为基于主题的数值向量,每个维度上的主题概率取值就是对特定主题的聚类中心的隶属度。由于LDA主题模型提出较早,所以作为基础模型有了很多改进和创新,技术上总结下来有以下几个方面: 短文本的处理和优化 考虑主题随时间变化的情况 考虑按照时间排序的文章之间在主题分布上有连贯性 考虑主题之间存在相关性...
2019-03-18 18:02:50
575
原创 知识图谱之综述(一目了然)
发现了一张关于知识图谱概括的思维导图,现在共享给大家,看完之后,能够帮助大家对知识知识图谱有了整体的认识。在此,对上图稍作解析。从图中可以看出,是从知识图谱构建的七个方面(其实,主要是六个方面)展开的思维逻辑,分别是:技术选型知识图谱的应用知识图谱的架构存储形式数据来源自顶向下的方式构建知识图谱自底向上的方式构建知识图谱建议大家着重阅读2、3、5、7部分。具体的内容可以参见...
2019-03-11 11:17:58
2119
3
原创 知识图谱(Knowledge Graph)之综述理解
注:该博文是我在看了数篇知识图谱综述以及阅读了相关资料后的一个总结以及自己的相关理解。知识图谱技术是人工智能技术的重要组成部分,以结构化的方式描述客观世界中的概念、实体及其键的关系。知识图谱提技术提供了一种更好的组织、管理和理解互联网海量信息的能力,将互联网的信息表达成更接近于人类认知世界的形式。因此,建立一个具有语义处理能力与开放互联能力的知识库,可以在智能搜索、智能问答、个性化推荐等智能...
2019-03-08 09:36:59
72401
8
翻译 优快云最新编辑保存一下
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...
2019-02-19 14:48:17
282
1
原创 深度学习之Attention Mechanism
参考文献1、一文看懂 Attention 机制,你想知道的都在这里了。Enjoy!这实际上是一篇翻译版的博文,原文在这里.这篇博文实际上只是简单的系统地介绍了attention机制的基本思想,以及它的一些应用。文章并不是特别长,读完之后,可以对attention机制有一个整体的认知。值得推荐的地方时,这篇文章在最后给出了一些学习attention的参考资料,可以进一步的学习,比较赞。...
2018-08-03 11:06:18
4061
原创 深度学习之训练trick
参考资料注:因为最近在学习中,这是我在学习过程中阅读过比较好的一些资料,在此作个笔记,若恰能帮助到你们,也是非常欣慰的。1、Google研究员Ilya Sutskever:成功训练LDNN的13点建议 本文由Ilya Sutskever(Google研究员、深度学习泰斗Geoffrey Hinton的学生、DNNresearch联合创始人)所写,讲述了有关深度学习的见解及实用建议,包括深...
2018-08-02 16:53:23
743
原创 Pytorch之日常整理
1、tensor.view()的作用torch.Tensor.view会返回具有相同数据但大小不同的新张量。 返回的张量必须有与原张量相同的数据和相同数量的元素,但可以有不同的大小。一个张量必须是连续contiguous()的才能被查看。类似于Numpy的np.reshape()。2、torch.manual_seed() torch.manual_seed(args.seed) #为C...
2018-07-30 10:21:33
421
原创 神经网络之Pytorch
参考资料1、用PyTorch还是TensorFlow?斯坦福大学CS博士生带来全面解答 本篇主要对比了tensorflow和pytorch,对于初学者可以提供一个大体的比较。2、PyTorch 深度学习: 60分钟快速入门 一个帮助初学者快速入门的教程3、pytorch中文文档...
2018-07-24 15:45:30
366
原创 深度学习之循环神经网络
参考资料1、Recurrent Neural Networks Tutorial, Part 1 – Introduction to RNNs 大牛写的文章,还是值得一看的,这是关于RNN第一部分的网址,文章里面也给出了其他部分的网址,并且里面也给出一些相应知识点的参考地址,例如SGD等。...
2018-07-21 15:47:04
265
Python基础编程全教程+实践案例
2023-06-07
如何撰写期刊论文-英文版
2023-06-07
1天入门深度学习---李宏毅
2017-10-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人