自然语言处理之北大词性标注集

结巴分词--词性标注 1、简介 词性(part-of-speech)是词汇基本的语法范畴,通常也称为词类,主要用来描述一个词在上下文的作用。例如,描述一个概念的词就是名词,在下文引用这个名词的词就是代词。有的词性经常会出现一些新的词,例如名词,这样的词性叫做开放式词性。另外一些词性中的词比较固定,例如代词,这样的词性叫做封闭式词性。因为存在一个词对应多个词性的现象,所以给词准确地标注词性并不是很容易。例如,“改革”在 阅读详情

最近在做人工智能相关技术的学习,在自然语言处理这里发现了词标注标准,顺带分享给小伙伴们

词性是词汇基本的语法属性,通常也称为词类。词性标准是在给定句子中判定每个词的语法范畴,确定其词性并加以标注的过程。例如名词、动词、形容词等。中文领域尚无统一的标注标准,较为主流的为北大的词性标注集和宾州词性标注集两大类。

下面分享北大的词性标注集:

代码    名称             解释

    Ag     形语素     形容词性语素。形容词代码为a,语素代码g前面置以A。
    a       形容词      取英语形容词adjective的第1个字母。
 ad 副形词 直接作状语的形容词。形容词代码a和副词代码d并在一起。
 an 名形词 具有名词功能的形容词。形容词代码a和名词代码n并在一起。
    b       区别词      取汉字“别”的声母。
    c       连词        取英语连词conjunction的第1个字母。
    Dg     副语素     副词性语素。副词代码为d,语素代码g前面置以D。
    d       副词     取adverb的第2个字母,因其第1个字母已用于形容词。
    e       叹词     取英语叹词exclamation的第1个字母。
    f        方位词      取汉字“方” 的声母。
  g  语素    绝大多数语素都能作为合成词的“词根”,取汉字“根”的声母。
    h       前接成分   取英语head的第1个字母。
    i        成语        取英语成语idiom的第1个字母。
    j        简称略语  取汉字“简”的声母。
    k       后接成分
    l        习用语     习用语尚未成为成语,有点“临时性”,取“临”的声母。
    m       数词     取英语numeral的第3个字母,n,u已有他用。
    Ng      名语素     名词性语素。名词代码为n,语素代码g前面置以N。
    n        名词        取英语名词noun的第1个字母。
    nr  人名        名词代码n和“人(ren)”的声母并在一起。
    ns      地名     名词代码n和处所词代码s并在一起。
    nt      机构团体    “团”的声母为t,名词代码n和t并在一起。
    nz     其他专名    “专”的声母的第1个字母为z,名词代码n和z并在一起。 
    o       拟声词     取英语拟声词onomatopoeia的第1个字母。
    p       介词     取英语介词prepositional的第1个字母。
    q       量词        取英语quantity的第1个字母。
    
r       代词        取英语代词pronoun的第2个字母,因p已用于介词。
    s       处所词     取英语space的第1个字母。
    Tg     时语素      时间词性语素。时间词代码为t,在语素的代码g前面置以T。
    t     时间词      取英语time的第1个字母。
    u       助词        取英语助词auxiliary 的第2个字母,因a已用于形容词。
    Vg     动语素      动词性语素。动词代码为v。在语素的代码g前面置以V。
    v       动词        取英语动词verb的第一个字母。
    vd     副动词      直接作状语的动词。动词和副词的代码并在一起。
  vn     名动词      指具有名词功能的动词。动词和名词的代码并在一起。
    w      标点符号   
    x       非语素字    非语素字只是一个符号,字母x通常用于代表未知数、符号。
    y       语气词      取汉字“语”的声母。
    z      状态词      取汉字“状”的声母的前一个字母。

jieba分词原理 ‖ 词性标注 jieba分词原理 ‖ 基于前缀词典及动态规划的分词实现 jieba分词原理 ‖ 基于汉字成词能力的HMM模型识别未登录词实现 jieba分词原理 ‖ 词性标注 jieba分词原理 ‖ 关键词抽取 1 简介 词性(part-of-speech)是词汇基本的语法范畴,通常也称为词类,主要用来描述一个词在上下文的作用。例如,描述一个概念的词就是名词,在下文引用这个名词的词就是代词。有的词性经常... 阅读详情

相关推荐

NLP实践—第1关:词性标注

在自然语言分析中,机器需要模拟理解语言。为了实现这一点,自然语言处理过程中必须在一定程度上能够了解自然语言的规则。首先需要理解的是词,特别是每一个词的性质,判断它是一个名词还是一个形容词?如果它是一个动词的屈折形式,那么它的不定形式是什么,以及该屈折形式使用了什么对应的时态、人称和数?这个任务被称为词性标注。词性标注的目标是用一个单独的标签标记每一个词,该标签表示了用法和其句法作用,比如名词、动词、形容词等。词性标注的正确与否将会直接影响到后续的句法分析、语义分析,它是中文信息处理的基础性课题之一。

wangzaojun的博客 2161

分词:词性标注北大标准

汉语词性对照表[北大标准/中科院标准]   词性编码 词性名称 注 解 Ag 形

John.Deng的专栏 5606

从零开始:如何用STM32和MAX30100打造你的第一台智能心率监测设备

本文详细介绍了如何使用STM32微控制器和MAX30100传感器从零开始构建智能心率监测设备。涵盖硬件选择、电路设计、软件开发到心率算法实现的全过程,特别适合嵌入式开发新手和创客。通过OLED显示和蓝牙串口传输数据,打造低成本、高精度的心率检测仪,为健康监测项目提供实用解决方案。

7z8x2c4v6b9的博客 191

北大 宾州树库 语料标注集

北大标注集 词性编码 词性名称 注解 Ag 形语素 形容词语素。形容词代码为a,语素代码为g前面置以A a 形容词 取英语形容词adjective的第1个字母 ad 副形词 直接作状语的形容词。形容词代码a和副词代码d并在一起 an 名形词 具有名词功能的形容词。形容词代码a和名词代码n一起 b 区别

qiqiaiairen的博客 5679

wpf入门第五篇 WPF with ECharts

前言 本文是wpf入门系列第五篇,面向有winform或者web前端基础的、并且也有C#基础的同学。 ECharts是百度团队开发的开源免费的js图表控件库,非常强大,文档齐全。WPF中使用图表,除了可以选择devexpress或者oxyplot之类的专为wpf开发的图表控件之外,还可以考虑使用 WebBrowser+ECharts 来完成复杂的图表展示,其展示效果不亚于前者。 本文介绍了 WP...

wf824284257的博客 1万+

嵌入式STM32控制电梯面板

嵌入式STM32控制电梯面板 用点阵来显示电梯向上还是向下运动,用数码管来显示楼层数(由于灯阵显示楼层数比较困难故用数码管代替)。当按下对应的按钮,就可以去到对应层数,可上升可下降。 #include "stm32f10x.h" #include "stm32f10x_exti.h" #include "stm32f10x_it.h" #define uint unsigned int #define KEY1 GPIO_ReadInputDataBit(GPIOA,GPIO_Pin_10) #define

code_init_的博客 2111

中文分词及词性标注

支持中文分词(N-最短路分词、CRF分词、索引分词、用户自定义词典、词性标注),命名实体识别(中国人名、音译人名、日本人名、地名、实体机构名识别),关键词提取,自动摘要,短语提取,拼音转换,简繁转换,文本推荐,依存句法分析(MaxEnt依存句法分析、CRF依存句法分析) TL;DR 启动服务 docker pull samurais/hanlp-api:1.0.0 docker run -it --rm -p 3002:3000 samurais/hanlp-api:1.0.0 访问服务 中文分词 P

Chatopera 4524

find命令

命令是 Linux/Unix 系统中用于搜索文件和目录的强大工具,支持多种搜索条件组合,并能对搜索结果执行各种操作。以下是其详细说明、常用参数及示例: 搜索路径:指定起始目录(如 、 或 表示当前目录)。 查找条件:基于文件名、类型、大小、时间等属性过滤。 处理动作:对匹配结果执行操作(如打印、删除、执行命令等)。 常用参数及示例 1. 按名称查找 :区分大小写匹配文件名。 :不区分大小写匹配文件名。 2. 按文件类型查找 :指定文件类型。 文件类型: :普通文件 :目录 :符号链接

qiao2458的博客 1134

第二十天自然语言处理

梅尼埃搞的俺前庭发炎停更了几天

weixin_45256637的博客 320

ddr3ip核心_DDR3 IP 核配置

DDR3 控制器 IP 核2.DDR3 IP核配置点击 Flow Navigator 面板下的“Project Manager -->IP Catalog”。 在“Memories & Storage Elements -->Memory Interface Generators”分类展开后,可以看到名为“Memory Interface Generator (MIG 7 ...

weixin_33049919的博客 2935

Unity 如何使用命令模式

命令模式 游戏中,当你想通过一种通用的方式来存储命令并能够撤消命令时,那么命令模式最有用。 在“示例”中,你将看到一个可以通过GUI按钮移动的简单点。 采取行动后,您可以撤消并重做。我在屏幕上添加了一个简单的OnGUI标签输出,因此您可以看到命令列表,并指出哪个是当前命令。 在此示例中使用了4个类: Command-这是任何命令模式都可以继承的基本结构(抽象类)。您可以在任何项目中使用此类。 MoveCommand-这是从Command类继承的结构,将使用Execute和UnExecute(撤消)。每个移

TxNet 1555

NLP从零开始------5基础文本处理之词性标注

现代汉语中的词性可分为实词和虚词,共有12种词性。实词有名词、动词、形容词等;虚词有副词、介词、连词等。中文词性通常会通过一些简单字母编码对词性进行标注,如动词、名词、形容词分别用“v”、“n”、“adj”表示。词性标注是指为分词结果中的每个词标注一个词性的过程,也就是确定每个词是名词、动词、形容词或其他词性的过程。中文词性标注相比与英文词性标注有一定的难度,这是因为中文不像英文可以通过词的形态变化判断词的词性。一个中文词可能有多种词性,在不同的句子中表现的意思也大不相同。

m0_74922316的博客 2322

【Simulink教程案例7】基于Simulink的滑模控制器设计与实现

欢迎订阅滑膜控制是一种变结构控制策略,其和常规控制方法的主要区别在于控制的不连续性,即一种使系统结构随时间变化的开关特性。所以,滑膜控制器也叫做变结构控制器,其本质是一类特殊的非线性控制器,并且这种非线性为不连续性。滑膜控制器和其他控制方式最大的区别在于其结构的不固定性,在其工作过程中,系统当前的状态会发生变化,使得系统按照预先设置的“滑动模态”的状态轨迹运动。正是由于这个特点,滑膜控制器具有快速响应的优点。滑模控制的基本定义如下所示:1).穿越切换面上的某个点;2).从切换面上的某个点离开;

FPGA/MATLAB学习教程/源码/项目合作开发 3240

【自然语言处理】词性标注(北大,宾州)

文章目录词性标注规范前言北大词性标注集宾州词性标注集 词性标注规范 前言          词性标注在中文领域暂无统一的标注标准,最常见较为主流的是北大和宾州词性标注集。 北大词性标注集 词性编码 词性名称 注解 Ag 形语素 形容词语素。形容词代码为a,语素代码为g前面置以A a 形容词 取英语形...

贾继康的博客 2271

概念解析 | 雷达动态范围

这里存在一个动态范围的问题:强雷达发射信号和弱目标反射信号存在非常大的功率差异,比如传统的脉冲多普勒雷达动态范围可达90dB以上。随着上述技术的发展,预计未来十年雷达接收机动态范围将达到120dB以上,届时雷达的监视能力将得到极大增强。简单来说,雷达动态范围越大,表示接收机噪声越低,对强信号过载保护能力越强,就越能检测到弱信号目标。此外,部分新概念雷达对动态范围提出新的需求,如被动雷达动态范围需大于100dB。当前,随着阵列雷达和数字雷达技术的发展,对雷达接收机动态范围提出了更高要求。

NLOS的博客 1051

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

NLP算法-词性标注

在自然语言分析中,机器需要模拟理解语言。为了实现这一点,自然语言处理过程中必须在一定程度上能够了解自然语言的规则。首先需要理解的是词,特别是每一个词的性质,判断它是一个名词还是一个形容词?如果它是一个动词的屈折形式,那么它的不定形式是什么,以及该屈折形式使用了什么对应的时态、人称和数?这个任务被称为词性标注。

Albert_weiku的博客 4090

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

词性标注与命名实体识别

Table of Contents 词性标注 简介 词性标注规范 jieba 命名实体识别 简介 基于条件随机场的命名实体识别 词性标注 简介 词性是词汇基本的语法属性,也称为词类。词性标注是在给定句子中判定每个词的语法范畴,确定其词性并加以标注的过程。词性标注是很多NLP任务的预处理步骤,如句法分析,经过词性标注后的文本会带来很大的便利性,但也不是不可或缺的步骤。整体上看在中...

明日世界 8979

efm32 入门.pdf

本PDF共计22页,介绍的是操作驱动API,下载与否自己斟酌。

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

ictclas,ansj,结巴分词,StanfordNLP中文分词以及所用词性标注集

NLPIR(ICTCLAS),参见java实现NLPIR(ICTCLAS)分词:http://www.bubuko.com/infodetail-665665.html,词性标注使用北大词性标注集。在Linux系统中的使用方法:http://jingyan.baidu.com/article/9158e0004251b4a2541228e5.html ansj分词,非常好用,ansj-...

weixin_30483495的博客 260

文本数据分析之词性标注

文本数据分析中的中文词性标注

weixin_62837637的博客 980

【ML】北大标注集,计算所标注集

代码    名称        帮助记忆的诠释     Ag      形语素      形容词性语素。形容词代码为a,语素代码g前面置以A。     a       形容词      取英语形容词adjective的第1个字母。     ad      副形词      直接作状语的形容词。形容词代码a和副词代码d并在一起。     an      名形词      具有名词功能的形容词

DSbatigol的专栏 3108

北大、宾州语法树标记集合

北大标注集 词性编码 词性名称 注解 Ag 形语素 形容词语素。形容词代码为a,语素代码为g前面置以A a 形容词 取英语形容词adjective的第1个字母 ad 副形词 直接作状语的形容词。形容词代码a和副词代码d并在一起 an 名形词 具有名词功能的形容词。形容词代码a和名词代码n一起 b

baiyi_canggou的博客 1614

结巴分词

1、简介 词性(part-of-speech)是词汇基本的语法范畴,通常也称为词类,主要用来描述一个词在上下文的作用。例如,描述一个概念的词就是名词,在下文引用这个名词的词就是代词。有的词性经常会出现一些新的词,例如名词,这样的词性叫做开放式词性。另外一些词性中的词比较固定,例如代词,这样的词性叫做封闭式词性。因为存在一个词对应多个词性的现象,所以给词准确地标注词性并不是很容易。例如,“改革”在...

everyst的博客 1020

分词工具ICTCLAS5.0使用心得

接触自然语言处理有一年多了,最基本的一些自然是分词,词性标注,命名实体识别之类的知识,有些应用知道原理是一回事,自己动手做起来又是另外一回事了。最近又开始重操旧业:分词。分词最著名的自然就是中科院的分词系统,这几天接触的ICTCLAS5.0(下载的文件夹名称是:ICTCLAS50_Windows_32_JNI)觉得不错,摸索下,记录下心得和收获。 <一>.使用 http://blo...

weixin_33713707的博客 298

自然语言处理之词性标注

词性标注作为NLP领域的一项基本任务,其与分词任务同等重要,是很多任务的基础,比如句法分析,命名实体识别等。命名实体识别在一定程度上也属于标注任务,不过,难度相比一般的词性标注而言,上升了不少。对于词性标注而言,不论是中文还是英文,其难点在于对于不同的语境,词性的多变化;另一方面,随着社会的发展,很多词都会潜移默化的产生额外的词性。相信这些现象,大家都有所感触,也经常遇到这些情况,...

CSAIWQYB 4790
上一篇: 聊聊软件测试面试中——人脸识别要考虑哪些测试点?
下一篇: mac环境下安装部署mysql5.7
挨踢~小先生
博客等级 码龄13年 4112粉丝 98原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

挨踢~小先生

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值