lucene学习笔记(2)---使用lucene实现索引库的创建

Educoder头歌答案:Lucene - 全文检索入门 Educoder头歌答案:Lucene - 全文检索入门。 阅读详情

一、下载lucene的开发包

Lucene是开发全文检索功能的工具包,从官方网站下载Lucene4.10.3,并解压。

官方网站:http://lucene.apache.org/ 

版本:lucene4.10.3

Jdk要求:1.7以上

需要导的包:

Lucene包:

lucene-core-4.10.3.jar

lucene-analyzers-common-4.10.3.jar

lucene-queryparser-4.10.3.jar

其它:

commons-io-2.4.jar

junit-4.9.jar

 

二、创建索引库
 

第一步:创建一个java工程,并导入jar包。

第二步:创建一个indexwriter对象。

  1. 指定索引库的存放位置Directory对象
  2. 指定一个分析器,对文档内容进行分析。

第二步:创建document对象。

第三步:创建field对象,将field添加到document对象中。

第四步:使用indexwriter对象将document对象写入索引库,此过程进行索引创建。并将索引和document对象写入索引库。

第五步:关闭IndexWriter对象。

 

  Field域的属性

是否分析:是否对域的内容进行分词处理。前提是我们要对域的内容进行查询。

是否索引:将Field分析后的词或整个Field值进行索引,只有索引方可搜索到。

比如:商品名称、商品简介分析后进行索引,订单号、身份证号不用分析但也要索引,这些将来都要作为查询条件。

是否存储:将Field值存储在文档中,存储在文档中的Field才可以从Document中获取

比如:商品名称、订单号,凡是将来要从Document中获取的Field都要存储。

 

是否存储的标准:是否要将内容展示给用户

 

Field类

数据类型

Analyzed

是否分析

Indexed

是否索引

Stored

是否存储

说明

StringField(FieldName, FieldValue,Store.YES))

字符串

N

Y

Y或N

这个Field用来构建一个字符串Field,但是不会进行分析,会将整个串存储在索引中,比如(订单号,姓名等)

是否存储在文档中用Store.YES或Store.NO决定

LongField(FieldName, FieldValue,Store.YES)

Long型

Y

Y

Y或N

这个Field用来构建一个Long数字型Field,进行分析和索引,比如(价格)

是否存储在文档中用Store.YES或Store.NO决定

StoredField(FieldName, FieldValue) 

重载方法,支持多种类型

N

N

Y

这个Field用来构建不同类型Field

不分析,不索引,但要Field存储在文档中

TextField(FieldName, FieldValue, Store.NO)

或

TextField(FieldName, reader)

 

字符串

或

流

Y

Y

Y或N

如果是一个Reader, lucene猜测内容比较多,会采用Unstored的策略.

 

三、具体代码实现:

/**
 * 
 * @author 阿荣
 *lucene入门
 */
public class demo{
	//创建索引
	@Test
	public void testIndex() throws IOException{
		//指定索引的生成位置
		Directory directory = FSDirectory.open(new File("D:\\lucene\\index"));
//		   创建一个indexwriter对象。
		  //创建索引分析器
		  StandardAnalyzer analyzer = new StandardAnalyzer();
		  //创建indexConfig配置对象
		  IndexWriterConfig config = new IndexWriterConfig(Version.LATEST, analyzer);
		  //创建一个indexwriter对象
		  IndexWriter indexWriter = new IndexWriter(directory, config);
//		指定索引库的源文件
		  File dir = new File("D:\\C盘迁移\\Desktop\\SSM框架\\Lucene&solr\\searchsource");
		  for(File f :dir.listFiles()){
			  // System.out.println(FileUtils.readFileToString(f));
			  //文件名
				String fileName = f.getName();
				//文件内容
				String fileContent = FileUtils.readFileToString(f);
				//文件路径
				String filePath = f.getPath();
				//文件的大小
				long fileSize  = FileUtils.sizeOf(f);
			  //将四项存入到索引域当中
				//创建文件名域
				//第一个参数:域的名称
				//第二个参数:域的内容
				//第三个参数:是否存储
				Field fileNameField = new TextField("filename", fileName, Store.YES);
				//文件内容域
				Field fileContentField = new TextField("content", fileContent, Store.YES);
				//文件路径域(不分析、不索引、只存储)
				Field filePathField = new StoredField("path", filePath);
				//文件大小域
				Field fileSizeField = new LongField("size", fileSize, Store.YES);
				//创建document对象
				Document document = new Document();
				document.add(fileNameField);
				document.add(fileContentField);
				document.add(filePathField);
				document.add(fileSizeField);
				//创建索引,并写入索引库
				indexWriter.addDocument(document);
		  }

//				 关闭IndexWriter对象。
		  	   indexWriter.close();
	}
}

 

四、通过IKAnalyzer2012FF_u1进行索引的分析

可知索引已经创建成功了,一共提取出了9579个题词(term)

 

Lucene应用实战(一)——索引创建与搜索 Lucene简介 Lucene是非常优秀的成熟的开源的免费的纯java语言的全文索引检索工具包。 Lucene是一个高性能、可伸缩的信息搜索(IR)库。 Information Retrieval (IR) library.它可以为你的应用程序添加索引和搜索能力。 Lucene是为软件开发人员提供一个简单易用的工具包,以方便的在目标系统中实现全文检索的功能,或者 是以此为基础建立起完整的全文检索引擎。由Apache软件基金会支持和提供,Lucene提供了一个简单却强 大的应用程序接口,能够做全文索引和搜索。 阅读详情

相关推荐

四足机械臂避坑指南:从URDF配置到逆运动学控制的完整流程

本文为四足机械臂(Loco-Manipulation)系统开发提供了一份详实的实战避坑指南。文章深入剖析了从URDF模型配置、核心控制循环设计到逆运动学(IK)求解与奖励函数构建的完整流程,重点讲解了如何避免关节命名错误、惯性参数设置不当、IK求解不稳定等常见陷阱,并强调了利用collision_bbox等可视化工具进行高效调试的方法,旨在帮助工程师构建稳定、高效的四足机械臂控制系统。

weixin_42509507的博客 192

Lucene学习--创建索引库

Lucene是全文检索,全文检索是计算机程序通过扫描文章中的每一个词,对每一个词建立索引,并指明该词在文章中出现的次数和位置。当用户查询时根据建立的索引进行查找,就好像我们使用字典的检索来查字一样。 Lucene的原理 先来讲一讲Lucene的原理 先是根据对象文件或数据创建索引库,索引库中是二进制形式的文件。索引库中分为目录区域和数据区域。 比如:   这个分词是根据所使用的分词...

Ysmbdjglww的博客 461

从零构建锂电池主动均衡系统:Simulink仿真中的Buck-Boost拓扑实战指南

本文详细介绍了如何在Simulink中从零构建基于Buck-Boost拓扑的锂电池主动均衡系统。通过仿真环境搭建、参数优化、控制策略设计和性能评估,为工程师提供了完整的实战指南,帮助快速验证和优化均衡算法,提升电池组一致性与寿命。

gitlab7runner的博客 899

Lucene创建索引库代码实现

创建索引库 使用indexwriter对象创建索引 实现步骤 第一步:创建一个java工程,并导入jar包。 第二步:创建一个indexwriter对象。 1)指定索引库的存放位置Directory对象 2)指定一个分析器,对文档内容进行分析。 第二步:创建document对象。 第三步:创建field对象,将field添加到document对象中。 第四步:使用indexwrite...

学亮编程手记 530

移动机器人底盘-四轮差速模型(四轮独立)

对于底盘的前轮和后轮来说,其速度是同步的,那么在理想条件下,可以将底盘运动视为以ICR为圆心做圆周运动,对于四个轮子来说,圆周运动的角速度是一致的,圆周运动圆心ICR始终位于底盘几何中心COG的y轴延长线上,ICR与COG之间的距离。有关,整个底盘的速度位于速度瞬心COM处,用。四轮差速底盘设定左轮、右轮得速度分别为。圆周运动的角速度公式如式1所示。受约束,约束与圆周运动的角速度。合成,设四个轮子的速度分别为。,设左轮和右轮之间的轴距为。为圆周运动角速度,线速度为。,其均由预设目标速度。

Moresweet 猫甜 1万+

MDK5 Debug调试方法总结

MDK5 Debug调试方法总结

m0_70748084的博客 2万+

基于Lucene创建索引库

使用indexwriter对象创建索引 1.1. 实现步骤 整体思想 :1.采集文件系统中的文档数据,放入Lucene的Document中 2.写入索引库()对文档(Document)进行分词创建索引(利用IndexWriter对象 )   第一步:创建一个java工程,并导入jar包。   第二步:创建一个indexwriter对象。     1)指定索引库的存放位置D...

weixin_34205826的博客 161

嵌入式工程师必学(9):USB 3.0协议理解

USB3.0和USB2.0相比,在线缆上从4根线(Vbus、GND、D+、D-)变为了8根线(Vbus、GND、D+、D-、SSRX+\SSRX-\SSTX+\SSTX-),可见增加的4根线都是和超速相关的,新增加的超速有两类,分别为:超速Gen1(5.0Gbps),超速+Gen2(10Gbps),还兼容USB2.0的3类速率:low-speed(1.5Mbps),full-speed(12Mbps),andhigh-speed(480Mbps)。从设计可以看出,USB3....

码农17年的博客 1万+

使用lucene创建索引库

最近在用elasticSearch比较多,但是elasticSearch底层是Lucene实现的,所以就尝试玩一下lucene。 首先看一下全文检索的概念(摘抄自别处,具体的地方找不到了,以前记的笔记): 将非结构化数据中的一部分信息提取出来,重新组织,使其变得有一定结构,然后对此有一定结构的数据进行搜索,从而达到搜索相对较快的目的。这部分从非结构化数据中提取出的然后重新组织的信息,我们称之索引。 例如:字典。字典的拼音表和部首检字表就相当于字典的索引,对每一个字的解释是非结构化的,如果字典没有音节表

wb785074651的博客 543

【华为OD机试】真题E卷-一种字符串压缩表示的解压(C++)

有一种简易压缩算法:针对全部为小写英文字母组成的字符串,将其中连续超过两个相同字母的部分压缩为连续个数加该字母,其他部分保持原样不变。例如:字符串aaabbccccd 经过压缩变成字符串 3abb4cd请您编写解压函数,根据输入的字符串, 判断其是否为合法压缩过的字符串若输入合法则输出解压缩后的字符串 否则输出字符串!error来报告错误。

u014481728的博客 895

[Unity3D]水族馆游戏教程四

文章目录0.接上篇1.速度控制器2.修改FishAI3.修改后的效果4.总结 0.接上篇 上一篇,实现了鱼AI的随机游动、自动转向,并且学习了如何分析调试过程中遇到的报错。 本篇将继续优化鱼AI。 1.速度控制器 上一篇虽然实现了鱼的随机游动,但是可以看到,鱼在转向的时候,会显得很突然。因此先要解决这个问题。 我们的思路是,让鱼在刚转向的时候,速度由慢到快,等到游动到快要到达目标点的时候,速度减慢...

延澈左的专栏 1039

Lucene创建和查询索引库的HelloWorld(含详细注释)

本案例使用的是Lucene-3.6.2版本,Lucene官方网站:http://lucene.apache.org/。 案例说明: 本例模拟了贴吧中检索帖子的功能,通过创建Article类来模拟帖子对象。用户输入检索信息,Lucene就可以根据检索信息来获取与之相关的Article对象,并返回给用户。

您已进入防沉迷系统... 3611

PCIE总线及其PCIE SWITCH的使用

PCIe总线与PCI最大的区别在工作原理上,PCIe是采用点到点的串行方式进行传输的,被称为“串行PCI”,由于采用了串行方式传输使得其工作频率可以达到2.5Ghz,大大增加了传输速率,同时采用全双工的通信方式,使得其传输速度提高了一倍,每一个PCIe总线设备与外部通信时有四根数据总线,分别有两个RX和TX,两根用于发送,两根由于接收。PCIe switch中文翻译为PCIe开关或PCIe交换机,主要作用将PCIe设备互联,PCIe switch芯片与其设备的通信协议都是PCIe;

zxm8513优快云博客 4736

Lucene建立索引库

问题?Lucene如何建立索引库,lucene所需要的jar包是那些  , lucene如何使用索引库,lucene的核心原理 一、Lucene是什么? 二、建立索引库 三、

Mr_li13的博客 6726

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

lwip-2.0.3

lwip是瑞典计算机科学院(SICS)的Adam Dunkels 开发的一个小型开源的TCP/IP协议栈。实现的重点是在保持TCP协议主要功能的基础上减少对RAM 的占用。

lucene创建索引库

使用lucene创建索引库需要的jar包: maven形式: <!-- https://mvnrepository.com/artifact/org.apache.lucene/lucene-core --> <dependency> <groupId>org.apache.lucene</groupId> ...

qq_26710557的博客 436

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

Lucene入门(1) | 创建索引库

Lucene 文章目录Lucene创建文档对象分析文档创建索引创建索引库实现步骤实操代码Field的属性 创建文档对象 获取原始内容的目的是为了索引,在索引前需要将原始内容创建成文档(Document),文档中包括一个一个的域(Field),域中存储内容。 这里我们可以将磁盘上的一个文件当成一个document,Document中包括一些Field(file_name文件名称、file_path文件路径、file_size文件大小、file_content文件内容),如下图: 注意:每个Document可

Sartin的博客 1548

迈瑞BS系列全自动生化分析仪LIS协议接口手册(内含HL7和ASTM)

迈瑞BS系列全自动生化分析仪LIS协议接口手册,内含HL7和ASTM)

Lucene-与索引库的交互

/** * 1、能不能设置很多个索引库 * 可以设置很多个索引库 * 2、索引库能不能合并起来 * 如果是内存索引库 * Directory ramDirectory = new RamDirectory(Directory d); * 这样就可以把一个索引库放入到内存索引库中 * 利用IndexWriter.addIndexesNoO

球球之家 974

Lucene之索引库CRUD

一、增加索引库 //创建索引 @Test public void testCreateIndex() throws Exception{ //指定索引库的存放位置Directory对象 Directory directory = FSDirectory.open(new File("D:\\长期数据\\index")); ...

绣花针 214

lucene索引库的维护

lucene索引库的维护 维护的方式 这里我们要先解释两个名词:分词与索引 分词:分词指的是我们索引库中所存储的关键字,通过索引我们可以从关键字找的文档中对应的内容; 索引:指的是分词(也就是关键字)与文档内容的关联,我们可以将分词和文档看成两个组,而索引就相当于是两个组之间的连线; 注意:我们对索引库进行维护时,并不会真正的对分词或者文档进行操作,而是对索引(也就是两者之间的关联)进行操作。 ...

Java全栈领域/离线地图/微服务 633

使用Lucene的api将索引创建到索引库中

import org.apache.commons.io.FileUtils; import org.apache.lucene.document.Document; import org.apache.lucene.document.Field; import org.apache.lucene.document.NumericDocValuesField; import or...

dengechuan3788的博客 187

【Lucene】索引库查询

6.Lucene 索引库查询 前言:本文是衔接上一篇文章来写的,详情看上一篇 【Lucene】索引库的维护 对于索引库我们最关心的就是查询,它能带给我们极好的体验,提高我们的搜索效率。 对要搜索的信息创建 Query 查询对象,Lucene 会根据 Query 查询对象生成最终的查询语法,类似关系数据库 Sql 语法一样 Lucene 也有自己的查询语法,比如:“name:lucene”表示查...

liu_sisi的博客 431

【Lucene】使用反射技术优化Lucene索引库的查询与创建

前面我们也使用用到了Lucene索引库的创建和查询,发现其代码太繁琐,有太多重复代码 例如: 1.获取Directory、Analyzer、MaxFieldLength、Version对象 2.将javabean对象封转成document对象 3.将document对象封转成javabean对象 接下来我们就创建一个LuceneUtil对索引库的创建和查询进行优化 packag

Evan_QB的博客 389

Lucene索引库的维护功能实现

索引库的维护 索引库的添加 步骤 向索引库中添加document对象。 第一步:先创建一个indexwriter对象 第二步:创建一个document对象 第三步:把document对象写入索引库 第四步:关闭indexwriter。 代码实现 //添加索引 @Test public void addDocument() throws Exception { //索引库存...

学亮编程手记 575

05Lucene索引库的添加

步骤 向索引库中添加document对象。 第一步:先创建一个indexwriter对象 第二步:创建一个document对象 第三步:把document对象写入索引库 第四步:关闭indexwriter。 代码实现 //添加索引 @Test public void addDocument() throws Exception { //索引库存放路径 Directory directo...

阿甘兄 876

Lucene索引库维护(CRUD操作)

  1.Lucene索引库维护 说明:数据保存在关系数据库,需要实现增删改查操作。索引数据保存在索引库,也需要实现增删改查操作。 1.1 添加索引 public class CrudTest { private IndexWriter indexWriter; @Before public void before() throws Exception{ ...

huangyh技术栈 728

【Lucene】索引库的维护

5.索引库的维护 前言:本文是衔接上一篇文章来写的,详情看上一篇 【Lucene】实现全文索引 索引库的维护不外乎 增、删、改,下面就一一介绍下 5.1.索引库的添加 5.1.1.Field 域的属性 是否分析: 是否对域的内容进行分词处理。前提是我们要对域的内容进行查询。 是否索引: 将Field分析后的词或整个Field值进行索引,只有索引方可搜索到。 比如:商品名称、商品简介分析后进行...

liu_sisi的博客 318
上一篇: lucene学习笔记(1)---lucene介绍及入门程序
下一篇: lucene学习笔记(3)---使用lucene实现索引库的读取
BoringRong
BoringRong 领域专家: 后端开发技术领域 领域专家: 后端开发技术领域
博客等级 码龄9年 2万+粉丝 386原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

BoringRong

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值