Solr的增量更新和全量更新介绍

最新推荐文章于 2024-08-29 22:33:34 发布

原创最新推荐文章于 2024-08-29 22:33:34 发布 · 448 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#solr

Solr的增量更新和全量更新介绍专栏收录该内容

1 篇文章

订阅专栏

本文详细介绍了Solr的全量更新和增量更新机制，包括配置solrconfig.xml、data-config.xml，以及如何设置数据源、实体查询和字段映射。增量更新部分重点讲解了deltaImportQuery、deltaQuery和deletedPkQuery的使用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Solr的增量更新和全量更新介绍

一、solr 的全量更新

1.core/conf 目录下的 solrconfig.xml，新增如下配置

<!--添加如下配置 增加resultHandler配置  -->
<requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler">
    <lst name="defaults"> 
    <str name="config">data-config.xml</str> 
    </lst> 
</requestHandler>

2 在core/conf 目录下的新建 data-config.xml 文件,新增如下配置

<dataConfig> 
    <!--数据源-->
    <dataSource type="JdbcDataSource"
                driver="com.mysql.jdbc.Driver"
                url="jdbc:mysql://192.168.2.10:3306/xt"
                user="root"
                password=""/>
    <document> 
        <entity name="solrTest" 
        query="SELECT fid,ftime,fcontent,ftitle,flastupdatetime FROM solrTest">
            <!--查询的数据和数据库索引意义对应column 是查询的字段name 是solr索引对应的字段-->
            <field column="fid" name="fid"/>
            <field column="ftitle" name="ftitle"/>
            <field column="fcontent" name="fcontent"/>
            <field column="flastupdatetime" name="flastupdatetime"/>
            <field column="ftime" name="ftime"/>
        </entity>
    </document> 
</dataConfig>

3.修改 managed-schema.xml 的文件，新增需要索引的列，

在这里插入图片描述

4.进入solr 的后台管理,启动项目进行全量更新

在这里插入图片描述

以上就是全量更新

二、solr 的增量更新

1.首先要弄懂几个必要的属性，以及数据库建表事项，和dataimporter.properties 、data-config.xml里面的数据

2.数据库配置注意事项

3.dataimporter.properties 这个配置文件很重要

4.增量更新就是在全量更新的基础上加上一些配置，配置如下：

<dataConfig> 
    <!--数据源-->
    <dataSource type="JdbcDataSource"
                driver="com.mysql.jdbc.Driver"
                url="jdbc:mysql://192.168.2.10:3306/xtjkqyfw"
                user="root"
                password="Biaopu8888"/>
    <document> 
        <entity name="solrTest" 
        query="SELECT fid,ftime,fcontent,ftitle,flastupdatetime FROM solrTest where flag = '0'"
        deltaImportQuery = "SELECT fid,ftime,fcontent,ftitle,flastupdatetime FROM solrTest where fid = '${dataimporter.delta.fid}'"
        deltaQuery = "SELECT fid FROM solrTest where flastupdatetime > '${dataimporter.last_index_time}' and flag = '0'"
        deletedPkQuery = "SELECT fid FROM solrTest where flag = '1'"
        >
       <!--查询的数据和数据库索引意义对应column 是查询的字段name 是solr索引对应的字段-->
            <field column="fid" name="fid"/>
            <field column="ftitle" name="ftitle"/>
            <field column="fcontent" name="fcontent"/>
            <field column="flastupdatetime" name="flastupdatetime"/>
            <field column="ftime" name="ftime"/>
        </entity>
</document> 
</dataConfig>