solrConfig配置文件详解(4.10.x版本)

solrConfig配置文件详解(4.10.x版本)

solrconfig.xml 配置文件主要定义了 solr 的一些处理规则，包括索引数据的存放 位置，更新，删除，查询的一些规则配置。

1.1.datadir 节点

<dataDir>${solr.data.dir:d:/Server/Solr/data}</dataDir> 定义了索引数据和日 志文件的存放位置

1.2.luceneMatchVersion

<luceneMatchVersion>4.10.1</luceneMatchVersion> 表 示 solr 底 层 使 用 的 是 lucene版本

1.3.lib

<lib dir="../../../contrib/extraction/lib"regex=".*\.jar"/> 表示 solr 引用包的位置, 当 dir 对应的目录不存在时候，会忽略此属性 

1.4.directoryFactory

索引存储方案，共有以下存储方案

1、 solr.StandardDirectoryFactory,这是一个基于文件系统存储目录的工厂，它会试 图选择最好的实现基于你当前的操作系统和 Java 虚拟机版本。

2、 solr.SimpleFSDirectoryFactory,适用于小型应用程序，不支持大数据和多线程。

3、 solr.NIOFSDirectoryFactory,适用于多线程环境，但是不适用在 windows 平台 （很慢），是因为 JVM 还存在 bug。

4、 solr.MMapDirectoryFactory,这个是 solr3.1 到 4.0 版本在 linux64 位系统下默认 的实现。它是通过使用虚拟内存和内核特性调用 mmap 去访问存储在磁盘中 的索引文件。它允许 lucene 或 solr 直接访问 I/O 缓存。如果不需要近实时搜 索功能，使用此工厂是个不错的方案。

5、 solr.NRTCachingDirectoryFactory,此工厂设计目的是存储部分索引在内存中， 从而加快了近实时搜索的速度。

6、 solr.RAMDirectoryFactory,这是一个内存存储方案，不能持久化存储，在系统 重启或服务器 crash 时数据会丢失。且不支持索引复制

<directoryFactory class="${solr.directoryFactory:solr.NRTCachingDirectoryFactory}" name="DirectoryFactory">
  <strname="solr.hdfs.home">${solr.hdfs.home:}</str>
 <strname="solr.hdfs.confdir">${solr.hdfs.confdir:}</str> 
  <str name="solr.hdfs.blockcache.enabled">${solr.hdfs.blockcache.enabled:true}</str> 
  <strname="solr.hdfs.blockcache.global">${solr.hdfs.blockcache.global:true}</str> 
</directoryFactory>

1.5.codecFactory

编解码工厂允许使用自定义的编解码器。例如：如果想启动 per-fieldDocValues 格式, 可以在 solrconfig.xml 里面设置 SchemaCodecFactory： docValuesFormat=“Lucene42”: 这是默认设置，所有数据会被加载到堆内存中。 docValuesFormat=“Disk”: 这是另外一个实现，将部分数据存储在磁盘上。 docValuesFormat=“SimpleText”: 文本格式，非常慢，用于学习。

<codecFactoryclass="solr.SchemaCodecFactory"/> <schemaFactoryclass="ClassicIndexSchemaFactory"/>

1.6.indexconfig

用于设置索引的低级别的属性

1、//限 制 token 最大长度

2、1000//IndexWriter 等待解锁的最长时 间（毫秒）。

3、8//

4、false//solr 默认为 false。如果为 true, 索引文件减少,检索性能降低,追求平衡。

5、100//缓存

7、<mergePolicyclass=“org.apache.lucene.index.TieredMergePolicy”> <intname=“maxMergeAtOnce”>10 <intname=“segmentsPerTier”>10 //合并策略。

8、10//合并因子,每次合并多少个 segments。

9 、 //合并调度器。

10、${solr.lock.type:native}//锁工厂。

11、false//是否启动时先解锁。

12、128//Lucene loadsterms intomemory 间隔

13、true//重新打开,替代先关闭-再打开。

14、//提交删除策略,必须实现 org.apache.lucene.index.IndexDeletionPolicy

15、<strname=“maxCommitsToKeep”>1

16、<strname=“maxOptimizedCommitsToKeep”>0

17 、 30MINUTES OR 1DAY

18、 false//相当于把创建索 引时的日志输出。

<lockType>${solr.lock.type:native}</lockType> 

设置索引库的锁方式，主要有三种：

​ 1. single：适用于只读的索引库，即索引库是定死的，不会再更改

​ 2. native：使用本地操作系统的文件锁方式，不能用于多个 solr 服务共用同一个 索引库。Solr3.6 及后期版本使用的默认锁机制。

​ 3. simple：使用简单的文件锁机制

1.7.updateHandler

<updateLog> <strname="dir">${solr.ulog.dir:}</str> </updateLog> 设置索引库更新日志，默认路径为 solrhome 下面的 data/tlog。

随着索引库的频 繁更新，tlog 文件会越来越大，所以建议提交索引时采用硬提交方式 ，即批量提交。

<autoCommit>
 <maxTime>15000</maxTime> 
  <maxDocs>10000</maxDocs> 
  <openSearcher>false</openSearcher> 
</autoCommit>

自动硬提交方式:

​ maxTime：设置多长时间提交一次

​ maxDocs：设置达到多少文档 提交一次

​ openSearcher：文档提交后是否开启新的 searcher,如果 false，文档只是 提交到 index 索引库，搜索结果中搜不到此次提交的文档；如果 true，既提交到 index索引库，也能在搜索结果中搜到此次提交的内容。

<updateHandler class="solr.DirectUpdateHandler2">

    <!-- 允许事务日志 -->
    <updateLog>
      <str name="dir">${solr.ulog.dir:}</str>
    </updateLog>

    <!-- 在满足一定条件时自动提交。maxDocs/maxTime/openSearcher -->
    <autoCommit>
      <maxTime>15000</maxTime>
      <openSearcher>false</openSearcher>
    </autoCommit>

    <!--  软提交 VS 硬提交 -->
    <!--
      <autoSoftCommit> 
        <maxTime>1000</maxTime> 
      </autoSoftCommit>
     -->

    <!-- 更新相关事件监听器 
	postCommit-firedaftereverycommitoroptimizecommand postOptimize-firedaftereveryoptimizecommand -->
    <!-- The RunExecutableListener executes an external command from a
         hook such as postCommit or postOptimize.
         
         exe - the name of the executable to run
         dir - dir to use as the current working directory. (default=".")
         wait - the calling thread waits until the executable returns. 
                (default="true")
         args - the arguments to pass to the program.  (default is none)
         env - environment variables to set.  (default is none)
      -->
    <!-- This example shows how RunExecutableListener could be used
         with the script based replication...
         http://wiki.apache.org/solr/CollectionDistribution
      -->
    <!--
       <listener event="postCommit" class="solr.RunExecutableListener">
         <str name="exe">solr/bin/snapshooter</str>
         <str name="dir">.</str>
         <bool name="wait">true</bool>
         <arr name="args"> <str>arg1</str> <str>arg2</str> </arr>
         <arr name="env"> <str>MYVAR=val1</str> </arr>
       </listener>
      -->

  </updateHandler>

1.8.Query 查询

<maxBooleanClauses>1024</maxBooleanClauses>

设置 boolean 查询中，最大条件数。在范围搜索或者前缀搜索时，会产生大量的 boolean 条件，如果条件数达到这个数值时，将抛出异常，限制这个条件数，可 以防止条件过多查询等待时间过长。

<filterCache class="solr.FastLRUCache" size="512" initialSize="512" autowarmCount="0"/>

<queryResultCache class="solr.LRUCache" size="512" initialSize="512" autowarmCount="0"/>

<documentCache class="solr.LRUCache" size="512" initialSize="512" autowarmCount="0"/>

<queryResultMaxDocsCached>200</queryResultMaxDocsCached>

<maxWarmingSearchers>2</maxWarmingSearchers>

1.9.RequestDispatcher 请求转发器

<!--RequestDispatcher 主要是介绍当有请求访问 SolrCore 时 SolrDispatchFilter 如何处理。 handleSelect 是一个以前版本中遗留下来的属性,会影响请求的对应行为（比 如/select?qt=XXX）。 当 handleSelect="true"时导致 SolrDispatchFilter 将请求转发给 qt 指定的处理 器（前提是/select 已经注册）。 当 handleSelect="false"时会直接访问/select,若/select 未注册则为 404。 --> 

<requestDispatcherhandleSelect="false">

<!--RequestParsing：请求解析 这些设置说明 SolrRequests 如何被解析,以及对 ContentStreams 有什么 限制。
enableRemoteStreaming- 是否允许使用stream.file和stream.url参数来 指定远程 streams。 
multipartUploadLimitInKB- 指定多文件上传时 Solr 允许的最大的 size。
formdataUploadLimitInKB- 表单通过 POST 请求发送的最大 size --> 

<requestParsersenableRemoteStreaming="true" multipartUploadLimitInKB="2048000" formdataUploadLimitInKB="2048"/>

<!--HTTPCaching 设置 HTTP 缓存的相关参数。 --> 
<httpCachingnever304="true"/>

<!-<httpCachingnever304="true"> <cacheControl>max-age=30,public</cacheControl> </httpCaching> -->
<!-<httpCachinglastModifiedFrom="openTime" etagSeed="Solr"> <cacheControl>max-age=30,public</cacheControl> </httpCaching> -->