关于基于postgresQL的中文全文检索感受

最新推荐文章于 2024-05-14 17:31:55 发布
最新推荐文章于 2024-05-14 17:31:55 发布
阅读量2k 收藏
点赞数 1
CC 4.0 BY-SA版权
分类专栏： 搜索引擎 Postgresql 文章标签： postgresql 全文检索
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/chenyi8888/article/details/6991353
本文探讨了基于PostgreSQL的全文检索技术中遇到的问题，特别是针对中文分词的复杂性进行了详细讨论。通过实例分析，指出分词技术对于提高检索准确性的重要性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

最近一个多礼拜，通过对基于PostgreSQL的全文检索的安装和使用。发现一个问题：
就是中文分词技术还是很难的，包括分词的技巧和如何进行分词。例如：
“2011新款”这个词，使用bamboo时，该分词建立索引有两种形式分别为2011、新款；2011、新、款。
如果在查询时，这个"2011新款"词，将只能查出其中的一条记录。


待续……

使用PostgreSQL进行全文检索
XhClojure的博客
09-17 738
通过按照上述步骤安装、配置和使用PostgreSQL数据库服务器，并利用其内置的全文检索功能，我们可以轻松地在大量文本数据中进行快速和高效的全文检索。全文检索是一种强大的技术，可以帮助我们在大量文本数据中快速查找和匹配关键词。PostgreSQL是一种流行的开源关系型数据库管理系统，它提供了内置的全文检索功能，可以帮助我们有效地进行全文检索。安装完成后，需要创建一个数据库和相应的表来存储要进行全文检索的数据。本文将介绍如何在使用PostgreSQL数据库服务器时进行全文检索，并给出相应的源代码示例。
第一次postgresql使用经历
qq_20365437的博客
08-09 964
一、需求分析 有这么一个需求，就是给一个经纬度点。判断是否在海洋。如果在海洋中计算经纬度点到最近的海岸线或者海岛的距离。 之前是全球海岸线的shp文件，后来同事帮忙分离成了经纬度的点，我导入到mysql 中然后写了一个算法去计算。一般都需要10分钟吧。感觉效率很低。 后来天地图的哥们推荐说可以用postgresql，我就尝试了一下2秒就算出来了结果。惊呆了！！！故此记录一下使用过程。 二、安装postgresql 1、安装postgresql，这个就是按照文档来的https://www.runoo
PostgreSQL全文检索
风间琉璃zero
08-10 3588
PostgreSQL全文检索tsvectortsquery PostgreSQL全文检索 在日常的数据处理中，我们经常会有这样的需求：从一个文本中寻找某个字符串（比如某个单词）。 对这个需求，我们可以用类似这样的SQL完成： SELECT * FROM student WHERE text LIKE ‘%pgsql%’; （找到含有“pgsql”的文本）。 现在我们考虑一些特殊的情形： 需要查找的文本特别多，特别大； 不做单纯的字符串匹配，而是考虑自然语言的一些特性，比如匹配某一类字符串（域名、人名）.
使用PostgreSQL进行中文全文检索
weixin_34038652的博客
11-06 347
  前言 PostgreSQL 被称为是“最高级的开源数据库”，它的数据类型非常丰富，用它来解决一些比较偏门的需求非常适合。 前些天将 POI 点关键词查询的功能迁到了 PgSQL，总算对前文 空间索引 - 各数据库空间索引使用报告 有了一个交代。 由于 PgSQL 国内的资料较少，迁移过程踩了不少坑，这里总结记录一下，帮助后来的同学能顺利使用 PgSQL。而且目前在灰度测试刚布了一台...
Postgresql全文检索
djskl的专栏
07-17 3592
1 环境 Fedora 20 + Postgresql 9.3.4 + scws 1.2.2 + zhparser 2 安装 2.1 scws • wget -q -O - http://www.xunsearch.com/scws/down/scws-1.2.2.tar.bz2 • tar xjf - cd scws-1.2.1 • ./configure --prefix=/usr
PostgreSQL全文检索使用
qq_26990355的博客
07-09 442
https://www.jianshu.com/p/0dc2a8bf9631
Atitit 全文检索 pgsql 艾提拉总结 分词 全文索引的实现要靠 PgSQL 的 gin 索引。分词功能 PgSQL 内置了英文、西班牙文等，但中文分词需要借助开源插件 zhparser；
attilax的专栏
04-12 1042
Atitit 全文检索 pgsql  艾提拉总结 分词全文索引的实现要靠 PgSQL 的 gin 索引。分词功能 PgSQL 内置了英文、西班牙文等，但中文分词需要借助开源插件 zhparser；  SQL这样，再进行查询时就可以直接使用 SELECT * FROM table WHERE tsv_column @@ 'keyword' 了查询中我们可以使用最简单的 SELECT * FROM t...
基于php的Sphinx以及coreseek的全文搜索，中文分词的使用（一）
割le动脉he脉动
07-18 4796
基于php的Sphinx全文搜索,中文分词的使用 1.什么是sphinx Sphinx是一个基于SQL的全文检索引擎，可以结合MySQL,PostgreSQL做全文搜索，它可以提供比数据库本身更专业的搜索功能，使得应用程序更容易实现专业化的全文检索。Sphinx特别为一些脚本语言设计搜索API接口，如PHP,Python,Perl,Ruby等，同时为MySQL也设计了一个存储引擎插件。 ...
基于Vue的医药信息管理系统设计源码
10-02
系统的设计充分考虑了医药行业的特殊需求，比如药品信息的存储、检索、增删改查等功能。同时，为了提高用户体验，系统还可能包含了用户权限管理、药品分类浏览、库存监控等高级功能。 在前端方面，使用Vue框架构建...
基于SpringBoot的旅游网站的设计与实现.rar
最新发布
12-24
通过与数据库的深度整合，网站能够实现旅游产品信息的存储、检索、更新和删除等操作，保证数据的一致性和实时性。 在前后端分离的开发模式下，前端开发者可以使用如Vue.js、React等流行的JavaScript框架，与后端...
PostgreSQL中文全文检索
weixin_34198881的博客
10-23 419
一 安装必备软件 1.1 安装SCWS 下载scws：http://www.xunsearch.com/scws/down/scws-1.2.2.tar.bz2 #解压 [root@pg1 opt]# tar -jxvf scws-1.2.2.tar.bz2 #编译&安装 [root@pg1 op...
PostgreSQL 8.3.1 全文检索(Full Text Search)
Jason分享，共同进步
04-23 571
 PostgreSQL 8.3.1  全文检索 在postgreSQL 8.3自带支持全文检索功能，在之前的版本中需要安装配置tsearch2才能使用，安转配置tsearch2就不再多说了，主要介绍一下8.3中自带全文检索功能。 全文检索类型(Text Search Types) postgreSQL设计支持全文检索，提供两个数据类型（tsvector,tsquery），并且通过动态检索自然语言...
Postgresql 全文检索测试
高矮
05-26 1494
Postgresql:10.11 测试表数据量：3亿 测试使用8c 16g 服务器 创建一张表： create table nt_order ( id int PRIMARY KEY, order_id text, order_time timestamp without time zone, info jsonb ); CREATE SEQUENCE nt_order_id_seq START WITH 1 INCREMENT BY 1 NO MINVALUE NO MAXVALUE C
Postgresql杂谈 23——Postgresql中的全文检索
Hyman的博客
08-30 9432
今天我们来聊一下全文检索，想必做搜索相关业务朋友对这个概念不会陌生，尤其是做搜索引擎，或者类似优快云、知乎类的社区网站，全文检索是逃不开的业务。文，即文章、文档。全文搜索就是给定关键词，在所有的文档数据中找到符合关键词的文档。不管是哪种业务模式下的全文检索功能，其实大体的实现思路类似，如下所示： 使用文字进行描述，就是： （1）获取原始文档数据。 （2）对文档进行分析，分词（所为分词，就是按照分词符，如空格，将一句话分隔成若干的单词） （3）存档存入数据库，并通...
PostgreSQL全文检索简介
weixin_33921089的博客
04-24 710
2019独角兽企业重金招聘Python工程师标准>>> ...
PostgreSQL索引篇 | TSearch2 全文搜索
weixin_63800030的博客
03-11 2501
postgres中的全文搜索（文本搜索）提供了一种可以检索出满足某个查询条件的自然语言文档的能力，并且还可以根据文档的相关性对文档进行排序。最常见的搜索是找出所有包含给出的查询词的文档，并且以它们符合查询的程度排序输出。
【PostgreSQL支持中文的全文检索插件(zhparser)】
小怪兽的博客
05-14 3858
PostgreSQL本身是支持全文检索的，提供两个数据类型（tsvector,tsquery），并且通过动态检索自然语言文档的集合，定位到最匹配的查询结果。而一个tsvector的值是唯一分词的分类列表，把一话一句词格式化为不同的词条，在进行分词处理的时候tsvector会自动去掉分词中重复的词条，按照一定的顺序装入。要支持中文的全文检索需要额外的中文分词插件，zhparser就是其中一种，是基于Simple Chinese Word Segmentation(SCWS)中文分词库实现的一个PG扩展。
postgresql 分词_PostgreSQL全文检索使用
weixin_29041767的博客
01-14 1114
1. Psql 安装 (CentOS-7.x)采用yum安装psql是最简洁高效的# 更新一下yumyum update -y# 直接安装yum install postgresql-server -y# 初始化数据库postgresql-setup initdb# 加入linux的服务管理systemctl enable postgresql.service# 启动服务systemctl sta...
使用 PostgreSQL 创建全文搜索引擎1
xuejianxinokok的专栏
08-14 840
PostgreSQL 提供了必要的模块，可以组合和创建自己的全文搜索搜索引擎。让我们尝试一下。这是系列文章的第 1 部分，将要在其中探索 PostgreSQL 中的全文搜索功能，并研究我们可以完成多少典型的搜索引擎功能。在第 2 部分中，我们将比较 PostgreSQL 的全文搜索和 Elasticsearch。如果您想跟着并尝试示例查询（推荐这样做，这样会更有趣），代码示例将使用来自 Kaggle 的数据集。该数据集包含 34,000 个电影标题，CSV 格式大小约为 81 MB。
基于网页设计的图书管理系统开发
常用的关系型数据库管理系统（RDBMS）如MySQL、PostgreSQL等，可以有效地组织和管理这些数据。 七、后端技术 后端技术负责处理前端发送的请求，并与数据库进行交互。后端开发语言如PHP、Python、Java等，通常会与...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值