solr
关注
分享
扫一扫
RayBreslin
大数据开发、设计企业应用
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Solr ：HttpSolrServer$RemoteSolrException: ERROR: [doc=sqoop_job_main.log] unknown field 'attr_meta'
一、问题描述1.环境solr4.10.3-cdh5.7.0（即使更高版本，如果问题类似，应该也是同样的问题）2.问题：在客户端代码发送solr服务器请求时，报错：Exception in thread "main" org.apache.solr.client.solrj.impl.HttpSolrServer$RemoteSolrException: ERROR: [doc...原创 2019-04-27 08:56:22 · 1093 阅读 · 0 评论 -
solr（十）:CDH集群配置solr cloud
一、目的CDH集群配置solr和单机虚拟配置solr还是非常不同的，烦人的目录是很令人头疼。在创建集群实例过程中碰了很多坑，好不容易搭建好，在此记录一下，以防下次采坑。二、环境1.CDH5.15.2三、配置步骤1.生成collection实例配置文件：指定配置文件临时目录solrctl instancedir --generate /opt/tmp2.上传文件到 ...原创 2019-05-11 00:20:50 · 2440 阅读 · 0 评论 -
上传文件到zookeeper报错：ERROR Could not read configuration file from URL [file:./log4j.properties]
一、问题描述CDH环境下，将solr配置文件上传到zookeeper时，遇见报错缺少log4j.properties文件# cd /opt/cloudera/parcels/CDH/lib/solr/bin# ./zkcli.sh -zkhost ip1:2181,ip2:2181,i3:2181/solr -cmd upconfig -confdir /opt/tmp/conf -c...原创 2019-05-11 00:37:53 · 2166 阅读 · 0 评论 -
solr（十一）:CDH创建solr collection实例
一、目的CDH搭建solrcloud集群，创建实例并且上传zookeeper管理。在此基础上，创建集合实例。二、环境1.Centos7.42.CHD5.15.2三、创建实例1.在某一个solr节点上创建默认配置文件（instancedir）solrctl instancedir --generate /var/lib/solr/test_conf2..创建实例并将配...原创 2019-05-28 09:33:47 · 2200 阅读 · 0 评论 -
solr（十二）:CDH创建solr 添加ik中文分词器
一、功能在cdh集群的solr环境中添加ik分词器，从而可以实现对中文的友好分词。二、环境1.centos7.42.cdh5.15.2三、步骤1.上传ik分词器jar包到cd /opt/cloudera/parcels/CDH/lib/solr/webapps/solr/WEB-INF/lib/IKAnalyzer2012FF_u1.jarchmod 777 IKA...原创 2019-05-28 09:50:53 · 776 阅读 · 0 评论 -
solr 错误：Caused by: org.wltea.analyzer.lucene.IKAnalyzer
一、 问题描述CDH5.15.2的solr集群下，创建ik分词器的实例，但是报错。Ik分词器的配置文件都已经上传各个节点solr对应目录下，但是还是报错：solrctl collection --create test_ik4 -s 2 -c test_ik -r 1 -m 3报错<?xml version="1.0" encoding="UTF-8"?> <...原创 2019-05-28 09:59:12 · 1926 阅读 · 0 评论 -
solrj连接cdh5.15.2，添加索引报错：CloudSolrServer$RouteException: org/apache/http/util/Args
一、问题描述solrj连接cdh5.15.2的solr集群，添加索引报错Exception in thread "main" org.apache.solr.client.solrj.impl.CloudSolrServer$RouteException: org/apache/http/util/Args at org.apache.solr.client.solrj.impl.Cl...原创 2019-07-08 23:27:02 · 922 阅读 · 0 评论 -
Key-Value Store Indexer（1）：实现solr对hbase中列簇进行二级索引
一、实现功能最近，因为hbase查询速度非常慢，尤其通过模糊搜索无法满足需求。所以，希望通过在solr中建立对应列簇的二级索引，进行模糊搜索。通过查找，使用CDH的Key-Value Store Indexer组件，对hbase指定表的指定列簇做监控，实现自动增量填充至solr指定字段，做模糊搜索。二、环境CDH5.15.2三、配置步骤1.在 HBase 指定列簇上启用复制，最...原创 2019-08-06 00:14:57 · 819 阅读 · 0 评论 -
solr（七）：solr cloud搭建
一、集群环境1.solr-4.10.32.zookeeper-3.4.63.apache-tomcat-8.5.124.jdk1.75.centos 6.4二、搭建zookeeper集群1.解压缩zookeepertar -zxvf zookeeper-3.4.6.tar.gz -C /opt/modules/solrcloud/2.修改zookeeper名称...原创 2019-05-01 16:10:59 · 504 阅读 · 0 评论 -
solr报错：ERROR org.apache.solr.cloud.Overseer – could not read the data org.apache.zookeeper.KeeperEx
一、问题描述基于CDH5.7.0的solr构建solr cloud1.准备配置solr-4.10.3-cdh5.7.0/zookeeper-3.4.5-cdh5.7.0/apache-tomcat-8.5.12/jdk1.72.配置好zookeeper集群后，开启tomcat1-4，发现tomcat1自动关闭，无法连接，查看日志报错：tail -f solrcloud/tomca...原创 2019-05-01 14:57:09 · 959 阅读 · 0 评论 -
Solr检索doc/xls/pdf报错：org.apache.tika.exception.TikaException: Error creating OOXML extractor
一、问题描述使用solr检索doc、xls、txt等文件的时候，报错：Exception in thread "main" org.apache.solr.client.solrj.impl.HttpSolrServer$RemoteSolrException: org.apache.tika.exception.TikaException: Error creating OOXML e...原创 2019-04-27 10:33:43 · 2641 阅读 · 0 评论 -
solr（二）：Solr配置中文分词器IKAnalyzer2012FF_u1
一、目的 通过使用比较高效的IKAnalyzer2012FF_u1分词器对中文内容进行检索分词，利于最终的全文检索。二、环境1.CentOS6.42.CDH5.7.03.solr-4.10.3-cdh5.7.0三、实现步骤1.下载ik分词器IKAnalyzer2012FF_u1https://download.youkuaiyun.com/download/u010886...原创 2019-04-27 11:22:38 · 596 阅读 · 0 评论 -
Solr（三）：数据库数据批量导入solr
一、实现功能将数据库中数据，批量导入solr，构建全文检索。二、环境1.CentOS6.42.CDH5.7.03.solr-4.10.3-cdh5.7.0三、步骤1.导入原始数据库2.依据业务修改schema.xmlvi solr-4.10.3-cdh5.7.0/solrhome/collection2/conf/schema.xml针对具体的业务需要...原创 2019-04-27 15:51:48 · 708 阅读 · 0 评论 -
solr（八）：管理solr cloud切片实例（增加和删除）
一、创建有两切片shard1/shard2的collection21.在浏览其中输入http://hadoop01:8080/solr/admin/collections?action=CREATE&name=collection2&numShards=2&replicationFactor=22.输入结果图形界面显示二、删除集群实例colle...原创 2019-05-01 17:06:09 · 942 阅读 · 0 评论 -
solr（九）：solrj操作solr cloud，实现数据单条以及批量从mysql导入数据
一、实现功能使用solrj实现对solrcloud的增删改查，从而使整个项目可以实现在项目中应用。二、环境1.solr-4.10.32.zookeeper-3.4.63.apache-tomcat-8.5.124.jdk1.75.centos 6.4三、具体代码1.添加依赖（1）solrj依赖<!--solr--><dependen...原创 2019-05-01 20:42:26 · 1212 阅读 · 0 评论 -
solr（四）：添加实例
一、目的隔离每个实例，清晰每个实例工作内容，利于项目管理，提高项目执行效率。二、环境1.CentOS6.42.CDH5.7.03.solr-4.10.3-cdh5.7.0三、步骤1.进入solrhome目录，默认是有collection1solrhome/collection1/2.复制collection1到collection2cp -r colle...原创 2019-04-27 16:11:08 · 471 阅读 · 0 评论 -
solr（五）：solrj实现对索引的增删改查
一、环境1.IDEA2.JDK1.83.CDH5.7.0二、构建开发环境1.创建Maven工程，引入solr相关包<!--solr--><dependency> <groupId>org.apache.solr</groupId> <artifactId>solr-solrj</artifactId&...原创 2019-04-27 21:50:41 · 391 阅读 · 0 评论 -
solr（一）：安装与配置solr-4.10.3-cdh5.7.0
一、相关软件下载（1）solr下载因为搭建Hadoop环境是使用CDH5.7.0版本，所以下载对应版本的solr：http://archive.cloudera.com/cdh5/cdh/5/，下载solr-4.10.3-cdh5.7.0.tar.gz。（2）JDK：jdk1.7.0_80，官网下载（3）Tomcat：apache-tomcat-8.5.12.tar.gz，下载...原创 2019-04-23 21:55:57 · 720 阅读 · 0 评论