中科院分词pynlpir使用说明续（翻译）

最新推荐文章于 2024-11-07 17:57:02 发布

原创

最新推荐文章于 2024-11-07 17:57:02 发布 · 2.8k 阅读

20 ·

CC 4.0 BY-SA版权

今天继续来写pynlpir分词库的后续pynlpir.nlpir(以下简称nlpir)。nlpir比pynlpir的功能相似，更易于使用，下面开始介绍。

初始化

pynlpir.nlpir.Init(data_dir, encoding=GBK_CODE, license_code=None)

使用Init方法初始化函数。

data_dir（str） - NLPIR数据文件夹的父文件夹的路径。 PACKAGE_DIR可用于此目的。
encoding（int） - NLPIR应该期望的编码。此参数应使用GBK_CODE，UTF8_CODE，BIG5_CODE和GBK_FANTI_CODE。
license_code（str） - 无限使用的许可证代码。大多数用户不需要使用它。

需要说明的是，在我自己运行的代码中，发现如下问题：

from pynlpir import nlpir
d = '大使馆

最低0.47元/天解锁文章

200万优质内容无限畅学

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

飞霖雨

关注关注

3
点赞
踩
20

收藏

觉得还不错? 一键收藏
4
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

NLP自然语言处理分词模块NLPIR-ICTCLAS

Mr数据杨

01-21

240

NLPIR/ICTCLAS 作为一款中文自然语言处理工具，通过提供从分词、词性标注到命名实体识别和情感分析等一系列功能，展示了其在中文文本处理中的广泛应用潜力。基于其精准的分词算法和多样化的处理方法，能够高效支持关键词提取、文本聚类、自动摘要等关键任务，帮助用户从大量的文本数据中迅速获取重要信息。在多种实际应用场景中，NLPIR/ICTCLAS 的应用不仅提升了文本分析的效率，还极大拓展了中文自然语言处理的可能性。

Python调用PYNIPIR(ICTCLAS)进行中文分词

hongliryan的专栏

01-16

8550

Python调用PYNIPIR(ICTCLAS)进行中文分词NLPIR汉语分词系统,主要功能包括中文分词；词性标注；命名实体识别；用户词典功能；支持GBK编码、UTF8编码、BIG5编码。新增微博分词、新词发现与关键词提取；张华平博士先后倾力打造十余年，内核升级10次。（http://ictclas.nlpir.org/）NLPIR系统提供了丰富的编程接口，包括JAVA、C、C#，当然还有Pytho

4 条评论您还未登录，请先登录后发表或查看评论

中科院分词pynlpir使用说明（翻译）

qq_34130509的博客

04-25

7345

今天用jieba分词分中英混合的句子时效果不太好，就寻求其他分词库，找到了中科院分词pynlpir，不过没找到比较新的，中文的使用说明，这里对照github上的英文说明做一个简要的介绍。安装在cmd里输入对应语句即可： pip install pynlpir 需要说明的是，安装完成后，使用模块时提示我license有问题，需要更新一下，所以需要继续在cmd里输入： pynlpir...

pynlpir

kylin_learn的博客

11-01

518

https://blog.csdn.net/qq_38404440/article/details/80352879 解决Pynlpir分词License过期问题

Pynlpir词性标记集

huludan的专栏

12-30

3115

reference page： http://pynlpir.readthedocs.io/en/latest/_modules/pynlpir/pos_map.html?highlight=pos http://pynlpir.readthedocs.io/en/latest/pos_map.html?highlight=pos https://github.com/tsroten/p

pynlpir(ICTCLAS)初步使用

微电子学与固体电子学-俞驰

08-21

1883

# -*- coding:utf-8 -*- import pynlpir # 引入依赖包 pynlpir.open() # 打开分词器 # s = 'NLPIR分词系统前身为2000年发布的ICTCLAS词法分析系统，从2009年开始，为了和以前工作进行大的区隔，并推广NLPIR自然语言处理与信息检索共享平台，调整命名为NLPIR分词系统。' # 实验文本 s='我想听刘德华的笨小孩' p

nlp Python库之pynlpir

AI蜗牛之家

12-02

2330

项目需要，需要分词外加情感分析，网上的很多直接用的情感分析不适合本项目，因此需要修改情感词典从而加以修正。本次使用的就是pynlpir进行分词，然后情感分析逻辑自己搞。先跑几个小demo，可以试一试效果相关简短介绍： NLPIR分詞系統前身為2000年發布的ICTCLAS詞法分析系統，從2009年開始，為了和以前工作進行大的區隔，並推廣NLPIR自然語言處理與信息檢索共享平臺，調整命名為N

利用Python中文分词组件Jieba实现中文分词利用Python中文分词组件Pynlpir实现中文分词利用Python中文分词组件Pyhanlp实现中文分词利用Python中文分词组件Pyltp实现中文分词

12-14

利用Python中文分词组件Jieba实现中文分词的方法如下： ...搜索引擎模式分词结果：小明/硕士/毕业/于/中国/科学/学院/科学院/中国科学院/计算/计算所/，/后/在/日本/京都/大学/日本京都大学/深造 ```

推荐开源项目：PyNLPIR - 中文文本分词利器

gitblog_00030的博客

05-20

469

python nlpir_nlp Python库之pynlpir

weixin_39928768的博客

12-17

310

项目需要，需要分词外加情感分析，网上的很多直接用的情感分析不适合本项目，因此需要修改情感词典从而加以修正。本次使用的就是pynlpir进行分词，然后情感分析逻辑自己搞。先跑几个小demo，可以试一试效果相关简短介绍：NLPIR分詞系統前身為2000年發布的ICTCLAS詞法分析系統，從2009年開始，為了和以前工作進行大的區隔，並推廣NLPIR自然語言處理與信息檢索共享平臺，調整命名為NLPIR分...

PYNLPIR中文分词，生成词云图片

Z_Pythagoras的博客

03-22

652

from collections import Counter import matplotlib.pyplot as plt import wordcloud import pynlpir with open('./paper.txt', encoding='utf-8') as text: contents = text.read() # 分词 pynlpir.open() ...

PyNLPIR python中文分词工具

deex13491的博客

09-21

700

官网：https://pynlpir.readthedocs.io/en/latest/github：https://github.com/tsroten/pynlpir NLPIR分词系统前身为2000年发布的ICTCLAS词法分析系统，从2009年开始，为了和以前工作进行大的区隔，并推广NLPIR自然语言处理与信息检索共享平台，调整命名为NLPIR分词系统。 ...

pynlpir中文分词+加载用户自定义词典

GreatXiang888的博客

12-29

4254

官方链接：https://github.com/tsroten/pynlpir [我是py3] 安装 1，pip install pip install pynlpir 2，更新 license （否则可能会报错） pynlpir update 简单使用 import pynlpir pynlpir.open() s = '欢迎科研人员、技术工程师、企事业单位与个人参与NLPIR平台的建设工...

pynlpir + pandas 文本分析

weixin_30536513的博客

04-30

420

pynlpir是中科院发布的一个分词系统，pandas(Python Data Analysis Library) 是python中一个常用的用来进行数据分析和统计的库，利用这两个库能够对中文文本数据进行很方便的分析和统计。分词系统有好几种，在使用pynlpir时发现有一些不好的地方： ①不能对繁体字正确的分词，如 “台灣” 分出来时 “台” “灣” 两个字，“台湾” 分出来...

Python环境下NIPIR(ICTCLAS2014)中文分词系统使用攻略

CH4211148的博客

01-14

719

一、安装官方链接：http://pynlpir.readthedocs.org/en/latest/installation.html 官方网页中介绍了几种安装方法，大家根据个人需要，自行参考！我采用的是： Install PyNLPIR using easy_install: $ easy_install pynlpir 二、使用NLPIR进行分词注：此处主要使用pyn...

python 中 pynlpir错误 Cannot Open Configure file pynlpir解决

红目香薰

02-18

415

python -m pip install --upgrade pip 在用python做分词、数据处理的时候，想调用pynlpir库，pynlpir.open()时出现错误，更新一下授权文件还是错误。可是，pip不能用了，原因是pip中配置的安装库的路径也变了然后，更新了一下pip，cmd中输入命令：python -m pip install --upgrade pip 然后就可以了 ...

python pynlpir中科院分词的使用

红目香薰

02-18

4107

中科院汉语分词系统是一个非常好用的分词工具，和结巴分词类似，但是比结巴分词功能更加强大，而且更加个性化。 中科院分词的使用步骤如下：导入中科院分词模块初始化pynlpir分词库。在pynlpir库中提供了open()函数用来初始化pynlpir分词库 1、需要下载【pynlpir】库 2、【open()】函数介绍： open()函数的原型如下： pynlpir.open(data_dir=pynlpir.nlpir.PACKAGE_DIR, encoding=pynlpir.ENCOD

anaconda3环境安装pynlpir库

weixin_44018540的博客

11-19

1705

下载pynlpir库 1.打开Anaconda Prompt 输入 pip install pynlpir 2.运行代码 ##利用NLPIR实现分词 import pynlpir ##精确模式分词 string = '这个把手该换了，我不喜欢日本和服，别把手放在我的肩膀上，工信处女干事每月经过下属科室都要亲口交代24口交换机等技术性器件的安装工作' pynlpir.open() result = pynlpir.segment(string) print('\n利用NLPIR实现分词') print(re

PyNLPIR 项目常见问题解决方案