Solr 中 core 创建后的数据导入

C51编程25-应用篇(单片机与电脑端实现wifi通讯) 单片机使用ESP-01S wifi模块与电脑端进行数据通讯。 阅读详情

前言

在笔记1中,我们已经介绍了Solr下载及单节点启动和配置,以及如何创建core,但是如何进行数据导入却还没有介绍。这篇文章就将教你在创建core之后,应该如何进行相关配置并导入数据;

配置数据库

  1. 笔记1中,在创建core时,有一个solrconfig.xml文件,如下图所示:

  2. 打开该文件,并在文件的config标签中添加下列内容,添加后如图所示:

<requestHandler name="/dataimport"  class="solr.DataImportHandler"> 
      <lst name="defaults"> 
      <str name="config">data-config.xml</str> 
      </lst> 
    </requestHandler>

​

  1. 创建data-config.xml文件,如图所示;

  2. 在data-config.xml文件中添加如下内容;

<?xml version="1.0" encoding="UTF-8" ?>
<dataConfig> 
  <!--dataSource标签,配置数据库相关信息-->
  <dataSource name = "db_weibo" type="JdbcDataSource"   
    driver="com.mysql.jdbc.Driver"
    url="jdbc:mysql://127.0.0.1:3306/mwyq"
    user="root"
    password="123456"/>  

  <document>
    <!--以下的dataSource指定上边的dataSource标签中的name属性,并不是必须要加的,除非你配置了多个数据源,这里我是一个数据源,所以,下边的dataSource属性是可以去掉的,另外,pk属性指定的是manage-schema文件中的uniqueKey标签中的值,即主键-->  
    <entity name="weibo" dataSource="db_weibo"  PK="weibo_id"
        query="select weibo_id,weibo_content,weibo_author,weibo_emotion,weibo_time,weibo_lang from weibo" 
        deltaImportQuery="select weibo_id,weibo_content,weibo_author,weibo_emotion,weibo_time,weibo_lang from weibo where weibo_id= '${dih.delta.id}'"
                deltaQuery="select weibo_id,weibo_content,weibo_author,weibo_emotion,weibo_time,weibo_lang from weibo where weibo_time > '${dataimporter.last_index_time}'">


        <!--以下的字段column属性对应数据库中字段名称,name是对应solr这边配置的名称;
        注意id,默认名称即为id,表示solr这边一条数据的主键,为需要的字段建立索引关系
        如果数据库中的主键不是id,比如是objectId,那上边的query需要为它起一个别名为id即可-->
        <field column="weibo_id" name="id"/>
        <field column="weibo_id" name="weibo_id"/>
        <field column="weibo_content" name="weibo_content"/>
        <field column="weibo_author" name="weibo_author"/>
        <field column="weibo_emotion" name="weibo_emotion"/>
        <field column="weibo_time" name="weibo_time"/>
        <field column="weibo_lang" name="weibo_lang"/>
    </entity> 
  </document>  
</dataConfig>  

PS: solr有全局索引和增量索引,所以上述配置中有两次query操作;

  • 全局索引:对应上述配置query,即将所有要建立索引的数据均重新建立一般,当数据量很大时除开第一次导入数据之外不推荐,比较耗时;

  • 增量索引:对应上述配置deltaQuery,即将数据库中新增数据建立索引,加入solr查询中;

  • 数据库驱动包:因为配置中用到MySQL数据库,因此需要导入MySQL数据库驱动包,从网上找到驱动包后,将其放入solr-xxx/webapps/solr/WEB-INF/lib文件夹中;

  1. 配置managed-schema文件

    即在笔记1中创建core后所出现的schema.xml文件,该文件配置内容为solr索引中引入字段的类型设置,对应上一步data-config.xml中配置的field标签。打开schema.xml文件,添加如下配置;

     <!--  name属性为引入字段在solr中的名称。
           type表示类型,solr中会有很多类型,这个在managed-schema中你会看到很多的fieldType标签,都是solr中的类型
           indexed:表示是否建立索引,true为建立,如果为false,则该字段不能作为条件查询出来;
           stored:表示是在solr中显示,如果这里设置为false,将会在solr中查询不到。
           multiValued false:表示是否关联查询字段 
     -->
     <field name="weibo_id" type="pint" indexed="true" stored="true" required="true" multiValued="false" />
     <field name="weibo_content" type="text_general" indexed="true" stored="true" required="true" multiValued="false" />
     <field name="weibo_author" type="text_general" indexed="true" stored="true" required="true" multiValued="false" />
     <field name="weibo_emotion" type="string" indexed="true" stored="true" required="true" multiValued="false" />
     <field name="weibo_time" type="pdate" indexed="true" stored="true" required="true" multiValued="false" />
     <field name="weibo_lang" type="string" indexed="true" stored="true" required="true" multiValued="false" />
    
  2. 进入可视化访问界面,然后导入数据;

  3. 查看导入后的数据,进入访问界面,进入Query选项,直接Execute Query就可以查看刚才导入的数据,如下图所示;

  4. 条件查询,在上一步的Query中q选项中输入要查询的条件,然后直接Execute Query就可以符合查询条件的数据,如下图所说;
    在这里插入图片描述

    PS :进行条件查询时,需要修改solrconfig.xml中的默认检索,将其修改成你想要检索的字段,如下图;

ADS新手必看:用Filter DesignGuide快速搞定一个4GHz LC低通滤波器(附保姆级避坑指南) 本文为ADS新手提供了4GHz LC低通滤波器的完整设计流程,重点介绍了如何使用Filter DesignGuide避免参数设置陷阱、正确解读仿真结果以及解决实际电路与理论值的偏差问题。通过真实工程案例,详细讲解了工程创建、Filter DesignGuide配置、电路优化、仿真设置及实际工程中的进阶技巧,帮助工程师快速掌握LC滤波器设计。 阅读详情

相关推荐

如何点亮一颗sensor

要点亮一个sensor需要从,时钟、sensorI2C,供电,reset脚,mipi的配置几个方面一一确认。 reset脚拉高 给sensor的时钟有没有。(目前用到的常为24MHZ) 供电 查看sensor的数据手册,看有几个电源,用示波器量一下是否为手册规定的电压 比如:DVDD 数字电压: AVDD模拟电压 DOVDD芯片引脚出来的电压等为多少。 sensor的I2C能否抓到 将I2C的口对应上,用示波器量取i2c的波形。 检查有应答并且数据正确。读写地址是否正...

weixin_40787463的博客 3653

solr重建部分索引_【记录】删除重建Solr的core并重新导入数据建立索引

折腾:期间,虽然可以跑起来solr的server和client了,但是搜不到要的结果-》感觉本地导入数据有问题,所以后续solr搜索返回不到我们要的结果:input: say hifailed to find an answerinput:bye所以再去想办法,重写导入数据才行:所以重复之前的步骤:删除之前的qa➜solr git:(master) ✗ solr delete -helpUsa...

weixin_35523284的博客 656

OAI骨关节炎数据集申请与DICOM下载全流程避坑指南

医学影像分析中,DICOM格式是存储与交换CT、MRI等数据的通用标准,其元数据Tag承载着像素间距、层厚等关键物理信息,直接影响定量分析的准确性。在骨关节炎研究领域,OAI数据集因样本量大、随访时间长而成为高价值资源,但获取需通过NDA协议申请,并借助nda-tools命令行工具完成TB级影像的批量下载与断点续传。这一流程涉及浏览器环境配置、DICOM格式转换及Python预处理等工程环节,任一细节疏漏都可能导致数据读取异常或分析偏差。掌握从申请到落地的完整链路,能显著提升医学影像AI研究的效率与可复现性

weixin_30843121的博客 279

linux solr7.2.0 安装部署 创建core 添加数据

2019独角兽企业重金招聘Python工程师标准>>> ...

weixin_33777877的博客 417

20道SpringSecurity常见面试题汇总(超详细回答 !!!)

本文中,我们将探讨一些与 Spring Security 相关的面试问题。Spring Security 是一款流行的 Java 应用程序安全框架,它提供了一套全面且易于使用的安全解决方案。

小斜同学的博客 3076

单片机通识之UART通信协议(如何用汇编实现)

使用汇编实现UART通信

smart_num_1的博客 998

搜索引擎solr系列---core的创建及数据全量导入

  有关官方配置的步骤,我已经在这篇文章里写了,连接是官方配置solr步骤(一)—solr下载及单节点的启动、配置说明   大家都知道,solr是首先要将数据建立出索引,而建立成的索引文件就存放到solrHome里,因为一个solr服务器因为需求,将来会生成很多个不同的数据源索引,因此,solrHome里又以core来分别存储不同数据源的索引以及相关数据源链接信息等等。   solrH...

凌大大的博客 3706

手把手教你学PCIE(9.3)--pcie常见故障及原因:配置错误介绍

PCIe 设备的配置错误可能涉及操作系统设置、BIOS 设置、驱动程序设置和配置文件设置等多个方面。通过以上方法,可以有效地诊断和解决 PCIe 设备的配置错误。

MHD0815的博客 2441

solr6.6 创建一个core,并导入索引数据

1、什么是corecore是solr的一个索引库,可以理解为一个数据库,core可以根据需要,创建多个。2、创建core例如,创建一个core,名字叫mycore,就可以用一下命令: E:\solr-6.6.0\solr-6.6.0\bin>solr.cmd create -c mycore如果一个core创建成功之后,会有如下信息打印:然后会在solr后台看到:表示一个core已经创建成功!3、

xiejunjie1的专栏 1万+

搭建自己的MQTT服务器,实现设备上云(Ubuntu+EMQX)

这篇文章教大家在ECS云服务器上部署EMQX,搭建自己私有的MQTT服务器,配置EMQX实现设备上云,设备数据转发,存储;服务器我采用的华为云的ECS服务器,系统选择Ubuntu系统。

2万+

由JavaScript版迷宫游戏引出Java版迷宫地图生成器

Java案例:迷宫地图生成器 一、引入问题 本期18软件1班网页脚本实训项目是完成一个JavaScript版迷宫游戏。 迷宫地图是如何生成的呢?很简单,将一个正方形区域等分为若干行与若干列,比如25行25列,这样就有625个单元格,用一个二维数组map[25][25]就可以保存625个单元格信息,map[i][j] = 1表示该单元格要绘制砖,而map[i][j] = 0表示该单元格不绘制砖。 ...

howard2005的专栏 1473

Solr-7.2.1命令行创建Core导入数据

基于Solr-7.2.1版本 如果有权限限制,需要先设置全局的Solr验证 export SOLR_AUTHENTICATION_OPTS='-Dbasicauth=coinbull:EqAT2HNBDVLt1daT' export SOLR_AUTH_TYPE='basic 创建core bin/solr create -c [core_name] 修改core.proper...

CUG_ZG的专栏 1049

DeepSeek+Dify之一安装部署

DeepSeek添加知识库

yilvyangguang520的博客 1548

solr_创建core与数据导入

一、创建core5.5.3启动后默认有5个core。创建一个新的core,名字起为:harvewifi  需要自己创建一个目录,将把solrconfig.xml放进去。Solr提供了一个例子,/opt/solr-5.5.3/server/solr/configsets/sample_techproducts_configs因此只需要把此目录下的conf目录复制到/opt/solr-5.5.3/ha...

子龙修仙的博客 511

迈瑞BS系列全自动生化分析仪LIS协议接口手册(内含HL7和ASTM)

迈瑞BS系列全自动生化分析仪LIS协议接口手册,内含HL7和ASTM)

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

solr从mysql导入数据库_Solr 创建core 从MySql数据库中导入数据

一、创建数据表和数据在MySql数据中创建mysolrInfo表,创建字段id 主键,自动增加pname:姓名age :年龄addtime :增加时间增加几条数据二、创建core当Solr的服务器在独立模式下启动的配置称为核心,当它在SolrCloud模式启动的配置称为集合。方式一、命令首先启动solr:  solr start创建core:  solr create -c myfirst如下图...

weixin_42131798的博客 188

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

solr 配置多个entity_Solr笔记2-core创建后的数据导入

Solr笔记2-core创建后的数据导入前言在笔记1中,我们已经介绍了Solr下载及单节点启动和配置,以及如何创建core,但是如何进行数据导入却还没有介绍。这篇文章就将教你在创建core之后,应该如何进行相关配置并导入数据;配置数据库笔记1中,在创建core时,有一个solrconfig.xml文件,如下图所示: 2. 打开该文件,并在文件的config标签中添加下列内容,添加后如图所示:&l...

weixin_39649965的博客 197

STM32F407中文手册

STM32f407中文手册 本参考手册面向应用开发人员,提供有关使用 STM32F405xx/07xx、STM32F415xx/17xx、 STM32F42xxx 和 STM32F43xxx 微控制器存储器与外设的完整信息。STM32F405xx/07xx、STM32F415xx/17xx、STM32F42xxx 和 STM32F43xxx 构成一个微 控制器系列,各产品具有不同的存储器大小、封装和外设。有关订购信息以及器件的机械与电气特性,请参见数据手册。有关 ARM Cortex™-M4F 内核的信息,请参见《Cortex™-M4F 技术参考手册》。

solr创建core_Solr笔记2-core创建后的数据导入

Solr笔记2-core创建后的数据导入前言在笔记1中,我们已经介绍了Solr下载及单节点启动和配置,以及如何创建core,但是如何进行数据导入却还没有介绍。这篇文章就将教你在创建core之后,应该如何进行相关配置并导入数据;配置数据库笔记1中,在创建core时,有一个solrconfig.xml文件,如下图所示: 2. 打开该文件,并在文件的config标签中添加下列内容,添加后如图所示:&l...

weixin_39712455的博客 64

solr8.3.1创建核心(core)并导入mysql数据

1、 mkdir /data/solr/data/meta_db cp -R /usr/local/solr/solr/server/solr/configsets/_default/conf /data/solr/data/meta_db cd /data/solr/data/meta_db chown -R solr:solr conf 2、 3、

weixin_39684507的博客 404

使用 Solr 创建 Core 并导入数据库数据

1. 输入http://localhost:8080/solr/index.html 来到 Solr 的管理界面; 2. 点击左侧 Core Admin --> Add Core,然后输入自己想要的名字即可,输入完成点击 Add Core,如下图: 如果出现以下这种错误:Error CREATEing SolrCore 'log_core': Unable to create co...

weixin_30843605的博客 261

Solr 创建core 从MySql数据库中导入数据

     一、创建数据表和数据       在MySql数据中创建mysolrInfo表,       创建字段       id 主键,自动增加       pname :姓名       age :年龄       addtime :增加时间                       增加几条数据                二、创建core       ...

weixin_34191734的博客 155

docker solr 创建core

首先我们需要进入solr中 docker exec -it --user root solr /bin/bash 这里使用root用户进入,直接进入是solr用户,因为需要创建文件 所以使用root用户进入 下载vim apt-get update && apt-get -yq install vim cd server cd solr 创建文件夹 ...

Minstrel的博客 1048

solr7.4创建core,导入MySQL数据,中文分词

#solr版本:7.4.0 一、新建Core 进入安装目录下得server/solr/,创建一个文件夹,如:new_core 拷贝server/solr/configsets/_default/conf/下的solrconfig.xml、protwords.txt、synonyms.txt、stopwords.txt文件和lang文件夹,到刚刚创建的new_core文件夹下 拷贝se...

weixin_34281537的博客 168

solr创建core

文章目录前提1.创建core实例1.1.配置solr_home1.2.创建core 前提 创建core之前,要确保你的solr与tomcat已经整合好了,并且可以正常启动,如果没有请去看这篇文章配置solr https://blog.youkuaiyun.com/qq_42418169/article/details/112303147 1.创建core实例 1.1.配置solr_home 将solr安装包里面的contrib和dist文件夹复制到solr_home中 将solr安装包里面的server/s

qq_42418169的博客 1112

Solr入门实践-创建Core和控制台介绍

Solr入门实践-创建Core和控制台介绍 文章目录Solr入门实践-创建Core和控制台介绍创建Solr的CoreSolr的web控制台简单查询使用post.jar导入数据再次查询   这篇文章,主要是讲解如何使用命令行创建Core(核心),然后讲解启动Solr后,打开Web的控制台后,相应的控制台介绍和导入数据以及查询操作。Solr相关介绍可以参考:https://blog.youkuaiyun.com/...

莫负时光 917

38、Solr Integration(2)Install Solr

Install Solr

stiven46的博客 798

solr5.5 mysql_solr5.5安装,连mysql,导入数据

1、solr安装到tomcat7下solr解压为solr-5.5.0,在tomcat的server.xml配置文件中增加path="/solr5"docBase="D:\work\solr\solr-5.5.0\server\solr-webapp\webapp" // solr的解压后目录reloadable="true"privileged="true"antiResourceLocking=...

weixin_32736623的博客 157
上一篇: Solr 下载及单节点的启动和配置
下一篇: Windows 下 Node.js 的安装图文教程
村雨遥
村雨遥 优质创作者: Java技术领域 优质创作者: Java技术领域 领域专家: 算法与数据结构技术领域 领域专家: 算法与数据结构技术领域
博客等级 码龄9年 2万+粉丝 372原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

村雨遥

众筹一毛买键盘!

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值