paip.ikanalyzer 重加载词库的方法.

最新推荐文章于 2018-11-01 14:56:26 发布
原创 最新推荐文章于 2018-11-01 14:56:26 发布 · 1.4k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍了一种使用paip.ikanalyzer进行词库重加载的方法,包括禁用旧词库和添加新词库的具体步骤。
paip.ikanalyzer 重加载词库的方法.


作者Attilax  艾龙，  EMAIL:1466519819@qq.com 
来源：attilax的专栏
地址：http://blog.youkuaiyun.com/attilax


if(WordsLibController.lastWordsLib!=null)
  {
  dictionary.disableWords(WordsLibController.lastWordsLib); 
 
  }
WordsLibController.lastWordsLib=allword;
dictionary.addWords(allword); // 自动添加自定义词
attilax
关注
IKAnalyzer实现扩展词库+动态更新词库的方法
weixin_34354173的博客
10-11 1560
为什么80%的码农都做不了架构师？>>> ...
paip.c++ 操作360浏览器总结..
attilax的专栏
09-22 3611
paip.c++ 操作360浏览器总结.. 作者Attilax ，  EMAIL:1466519819@qq.com  来源：attilax的专栏 地址：http://blog.csdn.net/attilax 主要是为例不个csdn文章分呱类..旧前一瓦文章马种类.. 流程是.  1.先网络编程,不个种类的html下载下来.. csdnCatGeto
java 站内搜索lucene 分词工具 IKAnalyzer，更新字典需要重启服务的解决
静艺的专栏
02-03 1468
IKAnalyzer 分词可以自定义词汇，jar包是2012版的。 问题： 1.在使用中发现词汇的第一行，也就是第一个词无法分词，是IKAnalyzer的bug。没有修改这个bug，第一行给个空行就行了。 2.发现新增词汇后，必须重新启动服务才可以。 以下是解决问题的方式，没有深研究问题解决了就行： 通过反编译源码发现，在 org.wltea.analyzer.dic 包下Diction
IK-Analyzer(5.3.1)动态配置自定义词典
weixin_34381687的博客
12-07 404
参考文献：http://blog.csdn.net/fatpanda/article/details/37911079 jar包： IK-Analyzer-extra-5.3.1.jar IKAnalyzer5.3.1.jar lucene-core-5.3.1.jar lucene-analyzers-common-5.3.1.jar 一、创建类自己的分词器配置类并实现I...
Ikanalyzer分词器动态自定义词库的方法
fatpanda的专栏
07-17 4404
IKanalyzer可通过配置Ikanalyzer.cfg.xml进行自定义词库，但有时在程序中需要动态进行
paip. c++ 调用.net dll 最好方式powershell 使用总结.
attilax的专栏
09-23 4068
paip. c++ 调用.net dll 最好方式powershell 使用总结. 作者Attilax ，  EMAIL:1466519819@qq.com  来源：attilax的专栏 地址：http://blog.csdn.net/attilax  c++ 调用.net dll ...有几个方法:  1.使用CLR HOST..不过麻烦, 以及只能调用static 方
squirrel-paip-v1.0.0-javadoc.jar
最新发布
10-18
squirrel-paip-v1.0.0-javadoc.jar
paip.c++ qt 图片处理 检测损坏的图片
attilax的专栏
09-19 5285
paip.c++ qt 图片处理 检测损坏的图片 作者Attilax ，  EMAIL:1466519819@qq.com  来源：attilax的专栏 地址：http://blog.csdn.net/attilax #include #include #include "helo.h" //#include //#include //#i
paip.c++ gcc 不能捕获exception异常的解决
attilax的专栏
09-30 7573
paip.c++ gcc 不能捕获exception异常的解决 作者Attilax ，  EMAIL:1466519819@qq.com  来源：attilax的专栏 地址：http://blog.csdn.net/attilax 现象: //////////// 不能捕获 "index out of range", 下标越界异常...经过测试,只能捕获手动th
基于ik动态词库分词实现--无需重启服务
11-09
基于ik动态词库分词实现--无需重启服务
ik-analyzer实现热加载扩展词典
高二千
08-06 1224
当初的产品需求是根据后台新增的扩展词及停止词三天更新到ik中，由于ik-analyzer，是一次加载所有类及配置文件的，所以解决这个问题的第一思路就是在类的初始化方法中写一个定时调度，每三天去读取数据库中扩展次及停止词。 由于小弟我也是刚刚接到需求后才开始看的ik-analyzer分词器，所以有很多不懂的地方如有大神刚好看见有其他更好的方式来解决这样的问题欢迎留言。 实体类： public...
Lucene使用IKAnalyzer动态扩展词库
09-24 1717
Luncene版本3.6.0 IKAnalyzer 版本2012_u6 最近在使用Luncene+IKAnalyzer做全文检索遇到了IKAnalyzer分词不能满足要求。通过查找资源发现有很多种方式可以扩展字典，下面我来介绍一下这两种方式： 第一种方式： 通过配置文件来扩展字典 在ｓｒｃ下面建立IKAnalyzer.cfg.xml xml version="1.0" enco
solr整合IKAnalyzer后动态添加词汇不需要重启解决方案
zpc15200790194的专栏
12-08 2108
当Lucene整合IKAnalyzer时，可以使用IKAnalyzer提供的API动态的添加词汇，并且不需要重启，但是使用solr时，在客户端(即使用solrj)也无法获得IK实例，所以在客户端向动态的添加词汇，可能性很小，现在想到一个解决方案如下             修改IKAnalyzer源码，在配置文件中多定义一个数据库连接的选项，我们将自定义词汇保存到数据库中，IK分词器内部去数据库
IK Analyzer ES使用
赵英超的博客
11-01 1391
https://github.com/medcl/elasticsearch-analysis-ik Analyzer: ik_smart , ik_max_word , Tokenizer: ik_smart , ik_max_word IK Analyzer是一个开源的，基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始， IKAnalyzer已经推出了4个大...
IKAnalyzer 分词
weixin_34375054的博客
07-15 208
IK Analyzer 3.0特性 采用了特有的"正向迭代最细粒度切分算法"，具有80万字/秒的高速处理能力 采用了多子处理器分析模式，支持：英文字母（IP地址、Email、URL）、数字（日期，常用中文数量词，罗马数字，科学计数法），中文词汇（姓名、地名处理）等分词处理。 优化的词典存储，更小的内存占用。支持用户词典扩展定义 针对Lucene全文检索优化的查询分析器IKQueryP...
paip
03-12
### PAIP编程珠玑中的示例代码解释 PAIP（Paradigms of Artificial Intelligence Programming）是一本深入探讨人工智能编程范式的书籍，其中包含了大量 Lisp 编写的程序实例。这些例子不仅展示了如何实现特定的人工智能算法，还提供了关于良好软件工程实践的重要见解。 #### 示例：通用求解器框架 书中介绍了一个名为 `defun` 的宏来定义函数，在构建通用问题解决器时非常有用[^1]： ```lisp (defun solve (problem) "Find a solution to the given problem." (let ((solution nil)) ;; Attempt to find a solution using backtracking. (labels ((try-next-option () (when (not solution) (if (no-more-options-p ()) (return-from try-next-option nil) (let* ((option (next-option))) (cond ((goal-reached-p option) (setf solution option)) (t (push-state option) (solve problem) (pop-state)))))))) (try-next-option) solution))) ``` 这段代码实现了回溯法解决问题的一般模式。通过递归调用自身并尝试不同的选项直到找到解决方案为止。如果当前路径无法通向目标，则会恢复之前的状态继续探索其他可能性。 此方法能够有效地处理许多复杂的组合优化类问题，并且由于其灵活性可以很容易地适应各种具体应用场景下的需求变化。 #### 示例：自然语言理解模块 另一个重要的部分涉及到了自然语言处理技术的应用案例——基于语法分析树结构来进行语义解析: ```lisp (defun parse-sentence (sentence) "Parse SENTENCE into its constituent parts and build an interpretation tree." (multiple-value-bind (subject verb-object) (split sentence 'verb) `(sentence :subject ,(parse-noun-phrase subject) :action ,verb-object))) (defun parse-noun-phrase (np-string) "Interpret NP-STRING as either a simple noun or compound phrase." ...) ``` 上述片段演示了如何将输入字符串分割成主谓宾成分，并进一步解析名词短语的具体含义。这种层次化的表示方式有助于后续更高级别的推理操作以及对话管理等功能的设计与实现。 #### 示例：专家系统规则引擎 最后值得一提的是书中对于专家系统的讨论，特别是有关于事实库管理和匹配机制的部分: ```lisp (defstruct fact id pattern bindings) (defun match-patterns (pattern facts) "Return all FACTS that unify with PATTERN, along with their BINDINGS." ...) (defun add-fact (kb new-fact) "Add NEW-FACT to knowledge base KB after checking consistency against existing rules." ...) ``` 这里展示了一种简单而有效的知识表达形式及其相应的查询接口设计思路。通过对模式进行统一化计算从而快速定位符合条件的事实条目；而在更新数据库前则需确保新加入的信息不会引起逻辑矛盾等问题的发生。 以上仅是从《Programming Pearls》一书摘取的一些精彩片段，实际上该著作涵盖了更为广泛的内容领域和技术细节等待读者去发掘学习。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值