jieba 分词 入门小笔记

最新推荐文章于 2024-03-01 11:54:22 发布
原创 最新推荐文章于 2024-03-01 11:54:22 发布 · 361 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#jieba #分词

本文通过一个简单的例子展示了如何使用结巴分词进行中文文本的精确分词，并介绍了如何通过添加自定义词来提高分词准确率。 
import jieba
juzi1 = "你妈妈喊你回家吃饭啦！你在干嘛，怎么还不回家?"
jieba.add_word("还不")
#jieba.add_word("还不")
seg_list = jieba.cut(juzi1,cut_all = False)
text = " ".join(seg_list)
print(text)


不加自定义词
你 妈妈 喊 你 回家 吃饭 啦 ！ 你 在 干嘛 ， 怎么 还 不 回家 ?
你 妈妈 喊 你 回家 吃饭 啦 ！ 你 在 干嘛 ， 怎么 还不 回家 ?

                

        

    


  



    



                



	

		

			

				
					
python中jieba库的基本知识及使用（cut lcut add_word del_word ）

				
			

			

				

					2301_78696436的博客
				

				

					03-21
					
					1940
					
				

			

		

		

			
				
（具体原因：这段代码的输出结果是 <generator object Tokenizer.cut at 0x021FBE60> 是因为 jieba.cut 方法默认返回的是一个。在使用jieba库的cut方法时，返回的是一个可以迭代的生成器，这意味着数据是一个一个返回的不是一次性返回的，所以不可以直接print生成器哦。生成器是一种特殊的迭代器，它可以在迭代过程中逐个生成元素，而不是一次性地计算所有元素，这有助于节省内存。而当cut_all参数为False时为精确模式，不会造成过多的数据冗余。

			
		

	



                

            
              



	

		

			

				
					
jieba的作用是什么

				
			

			

				

					m0_57236802的博客
				

				

					09-28
					
					892
					
				

			

		

		

			
				
除了使用默认词典外，还可以添加自定义词典以适应特定场景。

			
		

	



              


  
              

                


	

		

			

				
					
结巴分词1--结巴分词系统介绍

				
			

			

				

					weixin_34208185的博客
				

				

					11-18
					
					332
					
				

			

		

		

			
				
作者：zhbzz2007 出处：http://www.cnblogs.com/zhbzz2007 欢迎转载，也请保留这段声明。谢谢！
0 起因
由于博主之前做了一些文本挖掘的项目，在项目中或多或少的用到了分词模块，对于中文分词，博主一般使用Python开发的jieba分词组件。最近，博主想阅读一些开源系统，就先从jieba开始，一是因为jieba实现了NLP的一些基础技术，例如分词、词性标注；二是...

			
		

	





	

		

			

				
					
Python中文文本处理利器--jieba分词库详解

				
			

			

				

					AI_dataloads的博客
				

				

					09-26
					
					1万+
					
				

			

		

		

			
				
jieba（结巴分词）是一个开源的中文分词工具，用于将中文文本切分成词语或词汇单位。它是一个 Python 库，广泛用于自然语言处理（NLP）和文本分析领域。中文分词：jieba 可以将中文文本按照词语切分，使得文本可以更容易地被处理和分析。分词是中文文本处理的基础步骤，对于词频统计、文本分类、情感分析等任务非常重要。多种分词模式：jieba 支持不同的分词模式，包括精确模式、全模式和搜索引擎模式。用户可以根据具体任务需求选择不同的模式。自定义词典：用户可以创建自定义词典，以确保特定词汇被正确切分。

			
		

	



		

			
		



	

		

			

				
					
java jieba addword_jieba库和Wordcloud的安装与使用

				
			

			

				

					weixin_42512936的博客
				

				

					02-24
					
					2685
					
				

			

		

		

			
				
jieba库一、安装进入命令行(win+R之后输入cmd，回车即可)输入：pip install jieba然而每次安装似乎总会发生错误，这次也不例外，提示响应时间过长有大神提示需要更改路径到python安装目录下的Scripts文件夹下(之前的文章里有写更改命令哦)改好后，输入pip install jieba，安装成功！二、使用1.三种模式：精确模式(将词语精确切开)、全模式(将所有可能的词语...

			
		

	





	

		

			

          精选资源
				
					
jieba分词详解和实践

				
			

			

				

					01-20
				

			

		

		

			
				
jieba分词是Python编程语言中广泛用于处理中文文本的分词工具，它以其高效、易用和丰富的功能，成为了中文自然语言处理领域的首选组件。本文将深入解析jieba分词的工作原理，并通过实例探讨其在实践中的应用。  首先...

			
		

	





	

		

			

          精选资源
				
					
jieba 中文分词服务 Go语言版.zip

				
			

			

				

					04-01
				

			

		

		

			
				
《jieba 中文分词服务 Go语言版》  在当今数字化时代，中文信息处理成为了一个不可或缺的领域，尤其是在自然语言处理（NLP）中，中文分词是基础性且至关重要的一步。jieba是一个广受欢迎的开源中文分词库，它为...

			
		

	





	

		

			

				
					
少年街霸游戏程序

				
			

			

				

					10-29
				

			

		

		

			
				
《少年街霸》游戏，曾是无数玩家童年时期的一大记忆符号。这不仅仅是一款游戏，它还是一代人共同的青春记忆，装载着笑声和汗水。在如今电子游戏百花齐放的今天，我们再次回顾《少年街霸》，不仅是为了重拾那段美好，...

			
		

	





	

		

			

				
					
Arcade Game - 经典游戏 - 街霸2

					
最新发布

				
			

			

				

					10-07
				

			

		

		

			
				
《街头霸王 2》（Street Fighter II）发布于 1991 年 2 月 6 日，是一款经典的格斗类电子游戏。它是《街头霸王》系列的第二部作品，普遍被认为是格斗游戏的先驱和该类作品中的经典。 角色设定 初始可选角色：有 8 名...

			
		

	





	

		

			

				
					
Ruby实现的街霸游戏教程与入门指南

				
			

			

				

					
				

			

		

		

			
				
接着，关于Ruby-fighter的入门操作，首先需要从GitHub上克隆该项目到本地目录，然后在该项目目录下运行bundle命令安装所有需要的Ruby宝石（gem），最后执行./bin/ruby-fighter来启动游戏。  在Ruby编程语言的应用上...

			
		

	





	

		

			

				
					
python jieba分词，一次性添加多个词

				
			

			

				

					Caiqiudan的博客
				

				

					10-28
					
					1335
					
				

			

		

		

			
				
https://blog.youkuaiyun.com/Caiqiudan/article/details/127571470?spm=1001.2014.3001.5502

			
		

	





	

		

			

				
					
机器学习 -- jieba库

				
			

			

				

					Leo的博客
				

				

					11-12
					
					1936
					
				

			

		

		

			
				
一. jieba库是什么？

1. jieba库是一个用于NLP，即自然语言分析的工具。

2. 中文是紧凑连接的，词与词之间不用空格来分割，而当我们进行自然语言处理或者语音识别，或者进行其他的文本操作时，在大部分情况下，词汇是文本的核心，是进行文本处理的前提。因此我们需要一个能把完整文本分解为具体的词的简单高效的工具，为文本处理做出更加准确的词库。这样的操作称为“分词”。jieba是一个对新手非...

			
		

	





	

		

			

				
					
jieba，为中文分词而生的Python库

				
			

			

				

					weixin_43790276的博客
				

				

					04-16
					
					6337
					
				

			

		

		

			
				
jieba，为中文分词而生的库

			
		

	





	

		

			

				
					
中文分词库——jieba库

				
			

			

				

					qazplmzyy的博客
				

				

					11-21
					
					2万+
					
				

			

		

		

			
				
使用jieba库，你可以轻松地进行中文文本的分词处理，并在自然语言处理、文本挖掘、信息检索等领域中应用它的功能。你可以通过安装jieba库并查阅官方文档来详细了解和使用其提供的功能和方法。PyCharm会连接到Python软件包索引。2.全模式（全文扫描切分）1.精确模式（精确切分）推荐使用后面几种，更方便调用。“Win + R”快捷键。对三国演义进行词频统计。根据需要添加自定义词汇。第三方中文分词函数库。

			
		

	





	

		

			

				
					
python中jieba库使用教程

				
			

			

				

					kaimMarch的博客
				

				

					09-23
					
					2万+
					
				

			

		

		

			
				
jieba是python的一个中文分词库，下面介绍它的使用方法。

安装


方式1：
pip install jieba

方式2：
先下载 http://pypi.python.org/pypi/jieba/
然后解压，运行 python setup.py install

功能

下面介绍下jieba的主要功能，具体信息可参考github文档：https://github.com/fxsjy/jieba

分词

jieba常用的三种模式：

精确模式，试图将句子最精确地切开，适合文本分析；
	全模式

			
		

	





	

		

			

				
					
Python常用中文分词库：jieba

				
			

			

				

					xiaolinyui的博客
				

				

					03-01
					
					1819
					
				

			

		

		

			
				
使用jieba分词时，分词结果需要与jieba的词典库进行匹配，才能返回到分词结果中。因此有些词需要用户自定义，才能识别到。jieba.add_word('铃儿响叮当')jieba.add_word('让世界充满爱')jieba.add_word('迅雷不及掩耳之势')print('[添加自定义词语]：', lcut_res)[添加自定义词语]： ['迅雷', '迅雷不及', '迅雷不及掩耳', '不及', '掩耳', '掩耳盗铃',

			
		

	





	

		

			

				
					
python之jieba库的使用，快速分词，词云必备

				
			

			

				

					qq_46292926的博客
				

				

					03-25
					
					2443
					
				

			

		

		

			
				
jieba库的三种分词模式

精确模式：将文本精确地切开，分词后无冗余，适合文本分词，最常用的分词模式。
全模式：把文本中所有可能成词的词语都扫描出来，速度快，不能解决歧义。
搜索引擎模式：在精确模式的基础上，对长词再次切分，提高回召回率。

jieba.cut(s)

...

			
		

	





	

		

			

				
					
Python jieba库的使用方法

				
			

			

				

					weixin_44468853的博客
				

				

					02-02
					
					3285
					
				

			

		

		

			
				
jieba库是一个python的第三方词库，是用来中文分词的这个库是需要下载的，我们需要在命令行输入pip install jieba来下载
pip install jieba


需要找到python安装路径的Scripts目录切换到该目录使用pip才有用，当然配了环境变量的是不需要的，如果使用的是pycharm也可以在pycharm的控制台直接使用该目录

我这是安装了，使用它显示了我的安装位...

			
		

	





	

		

			

				
					
Python:jieba库的介绍与使用

					
热门推荐

				
			

			

				

					weixin_61631131的博客
				

				

					04-19
					
					6万+
					
				

			

		

		

			
				
前言：

jieba是优秀的中文分词第三方库，由于中文文本之间每个汉字都是连续书写的，我们需要通过特定的手段来获得其中的每个词组，这种手段叫做分词，我们可以通过jieba库来完成这个过程。

目录：



一、jieba库基本介绍

(1)jieba库概述

①jieba是优秀的中文分词第三方库

②中文文本需要通过分词获得单个的词语③jieba是优秀的中文分词第三方库，需要额外安装  

④jieba库提供三种分词模式，最简单只需掌握一个函数

(2)jieba分词的原理

①分词...

			
		

	





	

		

			

				
					
小孩街霸6夺冠奖金

				
			

			

				

					08-26
				

			

		

		

			
				
首先，用户的问题是：“小孩街霸6夺冠奖金”，这看起来是中文。我需要理解这个问题。“小孩”可能指的是“小孩”，在游戏语境中，可能是指一个特定的玩家或昵称。“街霸6”应该是“街头霸王6”，即游戏《街头霸王6》...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

  
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值