4.5 KiB
4.5 KiB
ik-analyzer-solr7
ik-analyzer for solr7.x
简介
适配最新版本solr7,并添加动态加载字典表功能;
在不需要重启solr服务的情况下加载新增的字典。
- IKAnalyzer的原作者为林良益linliangyi2007@gmail.com,项目网站为http://code.google.com/p/ik-analyzer
- 该项目根据博主@星火燎原智勇的博客进行修改,其GITHUB地址为@liang68
使用说明
-
jar包下载地址:ik-analyzer-7.5.0.jar
-
历史版本:Central Repository
<!-- Maven仓库地址 --> <dependency> <groupId>com.github.magese</groupId> <artifactId>ik-analyzer</artifactId> <version>7.5.0</version> </dependency>
-
将jar包放入Solr服务的
Jetty
或Tomcat
的webapp/WEB-INF/lib/
目录下; -
将
resources
目录下的5个配置文件放入solr服务的Jetty
或Tomcat
的webapp/WEB-INF/classes/
目录下;① IKAnalyzer.cfg.xml ② ext.dic ③ stopword.dic ④ ik.conf ⑤ dynamicdic.txt
-
配置Solr的
managed-schema
,添加ik分词器
,示例如下;<!-- ik分词器 --> <fieldType name="text_ik" class="solr.TextField"> <analyzer type="index"> <tokenizer class="org.wltea.analyzer.lucene.IKTokenizerFactory" useSmart="false" conf="ik.conf"/> <filter class="solr.LowerCaseFilterFactory"/> </analyzer> <analyzer type="query"> <tokenizer class="org.wltea.analyzer.lucene.IKTokenizerFactory" useSmart="true" conf="ik.conf"/> <filter class="solr.LowerCaseFilterFactory"/> </analyzer> </fieldType>
-
启动Solr服务测试分词;
-
ik.conf
文件说明:files=dynamicdic.txt lastupdate=0
files
为动态字典列表,可以设置多个字典表,用逗号进行分隔,默认动态字典表为dynamicdic.txt
;lastupdate
默认值为0
,每次对动态字典表修改后请+1,不然不会将字典表中新的词语添加到内存中。lastupdate
采用的是int
类型,不支持时间戳,如果使用时间戳的朋友可以把源码中的int
改成long
即可;2018-08-23
已将源码中lastUpdate
改为long
类型,现可以用时间戳了。
-
dynamicdic.txt
为动态字典在此文件配置的词语不需重启服务即可加载进内存中;
更新说明
2018-10-10:
升级lucene版本为7.5.0
2018-09-03:
优化注释与输出信息,取消部分中文输出避免不同字符集乱码,现会打印被调用inform方法的hashcode2018-08-23:
- ⑴完善了动态更新词库代码注释;
- ⑵将ik.conf配置文件中的lastUpdate属性改为long类型,现已支持时间戳形式
2018-08-13:
更新maven仓库地址2018-08-01:
移除默认的扩展词与停用词2018-07-23:
升级lucene版本为7.4.0
BUG & 疑问 & 其它
如果您在使用过程中遇到了BUG,或者有不清楚的地方,请挂ISSUE或者联系作者:magese@live.cn