安装PostgreSQL和中文分词器Zhparser

最新推荐文章于 2024-06-24 19:31:34 发布
最新推荐文章于 2024-06-24 19:31:34 发布
阅读量450 收藏
点赞数
CC 4.0 BY-SA版权
文章标签： postgresql 中文分词 数据库 PostgreSQL
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/XwlyVue/article/details/133024152
PostgreSQL 专栏收录该内容
123 篇文章 ¥59.90 ¥99.00
订阅专栏
本文详细介绍了如何在Linux和Windows系统中安装PostgreSQL数据库，并配置中文分词器Zhparser。首先，通过apt或下载安装程序安装PostgreSQL，接着创建数据库。然后，从GitHub获取Zhparser源码并编译安装，修改PostgreSQL配置文件并创建扩展。最后，创建测试表并使用Zhparser进行中文分词查询。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

PostgreSQL是一个流行的开源关系型数据库管理系统，它提供了强大的功能和灵活性。中文分词器是一种可以将中文文本分解成词语的工具，它在处理中文语言数据时非常有用。在本文中，我们将介绍如何安装PostgreSQL并配置中文分词器Zhparser。

  1. 安装PostgreSQL

首先，我们需要安装PostgreSQL数据库。以下是在Linux系统中使用apt包管理器进行安装的步骤：

sudo apt update
sudo apt install postgresql

在Windows系统中，可以从PostgreSQL官方网站（https://www.postgresql.org/）下载安装程序并按照提示进行安装。

  1. 配置PostgreSQL

安装完成后，我们需要进行一些配置。

2.1 启动服务

在Linux系统中，可以使用以下命令启动PostgreSQL服务：


                

                
                
        

    

  


        

            

                

                

                了解本专栏
                
                
                  
                订阅专栏 解锁全文
                 
            

        


    



                



	

		

			

				
					
PostgreSQL12 windows zhparser插件安装

				
			

			

				

					奇幻风云
				

				

					08-17
					
					2243
					
				

			

		

		

			
				
zhparser

https://github.com/amutu/zhparser

1、scws编译

因为zhparser需要使用scws进行中文分词先编译scws，zhparser的README有scws源码的下载地址(http://www.xunsearch.com/scws/down/scws-1.2.3.tar.bz2)，下载解压后win32目录有vs2008工程直接升级为vs2017，打开后里面包含两个工程我们需要的只是libscws工程(scws工程引用了php的东西 不用编译)，修改l

			
		

	



                

            
              



	

		

			

				
					
Postgresql中文分词扩展zhparser安装程序【windows&VS2008;环境】

				
			

			

				

					02-14
				

			

		

		

			
				
使用方法：打开scws-1.2.3\win32里的解决方案文件，里面包括了scws和zhparser，另外一个是scws的php扩展不用编译

zhparser是Postgresql中进行中文分词的常用扩展，网上的相关资料很多，安装的教程也不少，但大多数是linux的，并没有windows的安装介绍。原因有两个方面，一个是本身像这种数据库服务器一般都是linux系统的，另外一个比较致命，zhparser本身并没提供windows环境下的编译工程，连依赖库scws的readme里也建议在linux环境下使用，或者用cygwin或mingw一类工具。对于博主这种只使用windows环境（其实Postgresql也是刚接触），连makefile也搞不明白的真是头大。好在万变不离其中，编译环境只是工具，只要搞清楚个中原理（看代码），移植到windows+VS的环境应该也不是难事（当然这个也只是在轻量级的库下面适用）。下面进入正题：
干货在这里

① 编译scws：由于 zhparser是基于scws（scws是简易中文分词系统的缩写，它的原理其实很简单，基于词典，将文本中的内容按照词典进行分词，提取关键字等。）做的分词，因此先要编译scws，网上下载下来的源码有vs2008的版本，因此，直接编译，后来出现头文件无法加入的错误，将相关文件编码方式修改成unicode解决（利用notepad++ 编码->转换为UTF-8编码）。

② 编译zhparser：由于zhparser只提供了linux下面的makefile文件，想着用Mingw去编译，后来因为postgresql所在目录有空格，导致编译过程也失败。只好到vs2008里自建一个工程，建好工程后，首先把scws的头文件和库文件加进去，然后把postgresql的头文件和库文件加进去，设置项目属性为生成dll文件。

③ 扩展安装：编译成功以后，在postgresql下面运行：create extension zhparser; 提示找不到control文件，在下载的源码文件夹里找到该文件，放到指定目录，再次运行sql，提示找不到dll文件，将dll文件放到指定目录，再运行，提示找不到zhprs_start函数，看来是dll没有正常explort出函数，修改源代码中的相关函数声明，再次运行后，显示成功。但zhparser源文件下其实还有很多文件，包括一个词典文件和ini配制文件，还不知道应该放在何处。

④ zhparser运行环境配制：运行测试sql语句，发现并没有实现分词，想起来应该是词典位置不正确，到zhparser源码中去搜寻，发现如下代码，看来是放到tsearch_data目录下面，用同样的方法找到ini文件的目录，将它们都放进去，再次运行测试代码，得到正确结果。

测试代码：

REATE EXTENSION zhparser;

-- make test configuration using parser

CREATE TEXT SEARCH CONFIGURATION testzhcfg (PARSER = zhparser);

ALTER TEXT SEARCH CONFIGURATION testzhcfg ADD MAPPING FOR n,v,a,i,e,l WITH simple;

select to_tsvector('testzhcfg','南京市长江大桥');

			
		

	



              


  
              

                


	

		

			

				
					
postgresql中文分词插件安装

				
			

			

				

					yztezhl的专栏
				

				

					09-26
					
					813
					
				

			

		

		

			
				
- 就是需要给zhparser解析器取一个在sql里面可以使用的名称，一下“zh”则为名称 CREATE create text search configuration chinese (parser=zhparser);要使用 zhparser，首先需要安装 SCWS 分词库，SCWS 是 Simple Chinese Word Segmentation 的首字母缩写（即：简易中文分词系统）GitHub。作为解析器的全文搜索的配置。

			
		

	





	

		

			

				
					
PostgreSQL 中文分词zhparser插件在Windows上的编译安装

				
			

			

				

					vaingloryxing的博客
				

				

					06-24
					
					1795
					
				

			

		

		

			
				
最近工作上需要把pg数据库的中文分词zhparser插件安装在Windows使用，网上查询一番后，发现相关文章和解决办法很少，存在的资料多半是n年之前的了。在反复查阅参考资料以及自己不断试错后，最终还是成功解决了问题，现将经验分享如下。Windows 10 64位。

			
		

	



		

			
		



	

		

			

				
					
postgres中的中文分词zhparser

				
			

			

				

					weixin_33851429的博客
				

				

					04-09
					
					250
					
				

			

		

		

			
				
postgres中的中文分词zhparser
postgres中的中文分词方法
基本查了下网络，postgres的中文分词大概有两种方法：

Bamboo
zhparser

其中的Bamboo安装和使用都比较复杂，所以我选择的是zhparser
zhparse基于scws
scws是简易中文分词系统的缩写，它的原理其实很简单，基于词典，将文本中的内容按照词典进行分词，提取关键字等。github上...

			
		

	





	

		

			

				
					
PostgreSQL9.5 中文分词(zhparser)插件在windows上应用

					
最新发布

				
			

			

				

					09-12
				

			

		

		

			
				
此外，关于本插件安装部署的具体操作步骤，开发者和数据库管理员可以参考相关文章“PostgreSQL中文分词zhparser插件在Windows上的部署应用”。文章详细描述了从获取插件源代码、编译环境搭建，到插件编译、安装和...

			
		

	





	

		

			

				
					
PostgreSQL9.5 中文分词插件zhparser在Windows的部署

				
			

			

				

					
				

			

		

		

			
				
资源摘要信息: "PostgreSQL9.5 中文分词(zhparser)插件在windows上...通过以上步骤，便可以在Windows系统下的PostgreSQL 9.5数据库上成功安装并应用zhparser中文分词插件，从而增强数据库对中文文本数据的处理能力。

			
		

	





	

		

			

				
					
【PostgreSQL支持中文的全文检索插件(zhparser)】

				
			

			

				

					小怪兽的博客
				

				

					05-14
					
					3742
					
				

			

		

		

			
				
PostgreSQL本身是支持全文检索的，提供两个数据类型（tsvector,tsquery），并且通过动态检索自然语言文档的集合，定位到最匹配的查询结果。而一个tsvector的值是唯一分词的分类列表，把一话一句词格式化为不同的词条，在进行分词处理的时候tsvector会自动去掉分词中重复的词条，按照一定的顺序装入。要支持中文的全文检索需要额外的中文分词插件，zhparser就是其中一种，是基于Simple Chinese Word Segmentation(SCWS)中文分词库实现的一个PG扩展。

			
		

	





	

		

			

				
					
postgresql全文检索之zhparser编译及使用

				
			

			

				

					weixin_54233011的博客
				

				

					12-26
					
					1999
					
				

			

		

		

			
				
概述：Zhparser是一个PostgreSQL扩展，用于中文全文搜索。它实现了一个基于简单中文分词（SCWS）的中文解析器。SCWS 是 Simple Chinese Word Segmentation 的首字母缩写（即：简易中文分词系统）。这是一套基于词频词典的机械式中文分词引擎，它能将一整段的中文文本基本正确地切分成词。词是 中文的最小语素单位，但在书写时并不像英语会在词之间用空格分开，所以如何准确并快速分词一直是中文分词的攻关难点。一、下载zhparser分词词典文件scws。

			
		

	





	

		

			

				
					
PostgreSQL中文全文搜索zhparser.zip

				
			

			

				

					07-18
				

			

		

		

			
				
Zhparser 是一个 PostgreSQL 的扩展，用于中文的全文搜索。实现了一个中文解析器，基于 SCWS。
                        
                        
                            标签：zhparser

			
		

	





	

		

			

				
					
centos7 postgresql13 安装 zhparser，配置中文全文检索

				
			

			

				

					CN_Eden
				

				

					09-28
					
					3881
					
				

			

		

		

			
				
目录安装postgresql10数据库全文检索从表中查询字段安装中文检索组件问题总结
需求：使用postgresql13版本测试中文全文检索功能
安装postgresql10数据库
我这里是使用的docker容器安装测试的
1、创建一个centos7镜像容器
docker run -di --name postgres13 --privileged=true -p 5432:5432 centos:7 /usr/sbin/init

docker exec -it postgres13 bash

2、安装

			
		

	





	

		

			

				
					
centos7 postgresql10 安装 zhparser，配置中文全文检索

				
			

			

				

					CN_Eden
				

				

					09-28
					
					690
					
				

			

		

		

			
				
目录安装postgresql13数据库全文检索从表中查询字段
需求：使用postgresql13版本测试中文全文检索功能
安装postgresql13数据库
我这里是使用的docker容器安装测试的
1、创建一个centos7镜像容器
docker run -di --name postgres13 --privileged=true -p 5432:5432 centos:7 /usr/sbin/init

docker exec -it postgres13 bash

2、编辑数据库yum安装源
vi

			
		

	





	

		

			

				
					
PostgreSQL 中文全文检索 （使用zhparser）

				
			

			

				

					dakerKing
				

				

					04-30
					
					6934
					
				

			

		

		

			
				
前言：
PostgreSQL默认分词是按照空格及各种标点符号来分词，对于无中文类的文章是可以满足的，但是对于国内更多的是需要中文分词，不能使用默认的分词方式。检索了网上很多文章，发现使用最多的是zhparser，并且是开源的(很舒服)。并且按照之后完成能够满足检索需求。
前置：
centOS7
PostgreSQL11
(这里有个坑，因为环境在安装扩展时会出现编译问题，这个后面细说。如果你使用的是...

			
		

	





	

		

			

				
					
postgresql 分词_Postgres中文分词

				
			

			

				

					weixin_42393342的博客
				

				

					12-24
					
					407
					
				

			

		

		

			
				
环境CentOS Linux release 7.2.1511 (Core)安装Postgres安装postgres很简单yum安装sudo yum install postgresql-server postgresql-contrib postgresql-devel初始化数据库sudo postgresql-setup initdb配置密码和远程访问修改 /var/lib/pgsql/dat...

			
		

	





	

		

			

				
					
使用Postgresql进行中文分词

				
			

			

				

					珍惜时间
				

				

					11-19
					
					3270
					
				

			

		

		

			
				
使用Postgresql进行中文分词安装 postgresql 数据库解压tar -zxvf postgresql-9.6.6.tar.gz配置./configure可能会缺少这个依赖，安装readline开发包yum install readline-devel编译make安装make install添加postgres用户并加入到postgres用户组groupadd postgres 
use

			
		

	





	

		

			

				
					
postgresql 分词_使用Postgresql进行中文分词

				
			

			

				

					weixin_32819265的博客
				

				

					12-24
					
					780
					
				

			

		

		

			
				
使用Postgresql进行中文分词安装 postgresql 数据库解压tar -zxvf postgresql-9.6.6.tar.gz配置./configure可能会缺少这个依赖，安装readline开发包yum install readline-devel编译make安装make install添加postgres用户并加入到postgres用户组groupadd postgresuser...

			
		

	





	

		

			

				
					
[pg]postgresql的中文分词以及全文索引

				
			

			

				

					一名普通码农的菜地
				

				

					05-18
					
					5116
					
				

			

		

		

			
				
参考
使用PostgreSQL进行中文全文检索
摘录
前言
PostgreSQL 被称为是“最高级的开源数据库”，它的数据类型非常丰富，用它来解决一些比较偏门的需求非常适合。

前些天将 POI 点关键词查询的功能迁到了 PgSQL，总算对前文 空间索引 - 各数据库空间索引使用报告 有了一个交代。

由于 PgSQL 国内的资料较少，迁移过程踩了不少坑，这里总结记录一下，帮助后来的同学能顺利使用...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值