SHOP++中文分词词库扩展

本文介绍如何扩展中文分词词库,包括编辑词典文件的方法及配置IKAnalyzer.cfg.xml的具体步骤。用户可通过增加自定义词典来提高分词准确率。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

中文分词词库扩展:

1. 编辑中文分词词库文件

词典文件编码格式:UTF-8(无 BOM)
每个中文词汇独立占一行,使用 \r\n 的 DOS 方式换行(请参考IKAnalyzer3.1.6GA.jar文件org.wltea.analyzer.dic包下的.dic文件)
词典文件应部署在 Java 的资源路径下


2. 在src目录下新增IKAnalyzer.cfg.xml文件(已部署项目请在WEB-INF/classes目录下新增IKAnalyzer.cfg.xml文件)

<?xml version="1.0" encoding="UTF-8"?>
<! DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd" >
在配置文件中,用户可一次配置多个词典文件。文件名使用 “ ; ” 号分隔。文件路径为相对 java 包的起始根路径。
<properties>
 <comment>IK Analyzer 扩展配置</comment>
 <!-- 扩展字典 -->
 <entry key="ext_dict">/mydict1.dic;/dic/mydict2.dic;</entry>
 <!-- 扩展停止词字典 -->
 <entry key="ext_stopwords">/ext_stopword.dic</entry>
</properties>

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值