2018-10-10 22:55:34 -04:00
|
|
|
|
# ik-analyzer-solr7
|
|
|
|
|
|
ik-analyzer for solr7.x
|
|
|
|
|
|
<p>IKAnalyzer的原作者为林良益（linliangyi2007@gmail.com），项目网站为http://code.google.com/p/ik-analyzer/</p>
|
|
|
|
|
|
|
|
|
|
|
|
* 该项目根据博主[@星火燎原智勇](http://www.cnblogs.com/liang1101/articles/6395016.html)的博客进行修改，其GITHUB地址为[@liang68](https://github.com/liang68)
|
|
|
|
|
|
|
|
|
|
|
|
<h4>适配最新版solr7，并添加动态加载字典表功能；</h4>
|
|
|
|
|
|
<h4>在不需要重启solr服务的情况下加载新增的字典。</h4>
|
|
|
|
|
|
|
|
|
|
|
|
>更新说明
|
|
|
|
|
|
>* 2018-10-10: 升级lucene版本为7.5.0
|
|
|
|
|
|
>* 2018-09-03: 优化注释与输出信息，取消部分中文输出避免不同字符集乱码，现会打印被调用inform方法的hashcode
|
|
|
|
|
|
>* 2018-08-23:
|
|
|
|
|
|
<br> ⑴完善了动态更新词库代码注释；
|
|
|
|
|
|
<br> ⑵将ik.conf配置文件中的lastUpdate属性改为long类型，现已支持时间戳形式
|
|
|
|
|
|
>* 2018-08-13: 更新maven仓库地址
|
|
|
|
|
|
>* 2018-08-01: 移除默认的扩展词与停用词
|
|
|
|
|
|
>* 2018-07-23: 升级lucene版本为7.4.0
|
|
|
|
|
|
|
|
|
|
|
|
<hr>
|
|
|
|
|
|
<H2>使用说明：</H2><BR>
|
|
|
|
|
|
|
|
|
|
|
|
* jar包下载地址：[ik-analyzer-7.5.0.jar](https://search.maven.org/remotecontent?filepath=com/github/magese/ik-analyzer/7.5.0/ik-analyzer-7.5.0.jar)
|
|
|
|
|
|
* 历史版本：[Central Repository](https://search.maven.org/search?q=g:com.github.magese%20AND%20a:ik-analyzer&core=gav)
|
|
|
|
|
|
|
|
|
|
|
|
<pre>
|
|
|
|
|
|
<!-- Maven仓库地址 -->
|
|
|
|
|
|
<dependency>
|
|
|
|
|
|
<groupId>com.github.magese</groupId>
|
|
|
|
|
|
<artifactId>ik-analyzer</artifactId>
|
|
|
|
|
|
<version>7.5.0</version>
|
|
|
|
|
|
</dependency>
|
|
|
|
|
|
</pre>
|
|
|
|
|
|
<ul>
|
|
|
|
|
|
<li>
|
|
|
|
|
|
<p>1. 将jar包放入solr服务的jetty或tomcat的webapp/WEB-INF/lib/目录下；</p>
|
|
|
|
|
|
</li>
|
|
|
|
|
|
<li>
|
|
|
|
|
|
<p>2. 将resources目录下的5个配置文件放入solr服务的jetty或tomcat的webapp/WEB-INF/classes/目录下；</p>
|
|
|
|
|
|
<pre>
|
|
|
|
|
|
①IKAnalyzer.cfg.xml
|
|
|
|
|
|
②ext.dic
|
|
|
|
|
|
③stopword.dic
|
|
|
|
|
|
④ik.conf
|
|
|
|
|
|
⑤dynamicdic.txt
|
|
|
|
|
|
</pre>
|
|
|
|
|
|
</li>
|
|
|
|
|
|
<li>
|
|
|
|
|
|
<p>3. 配置solr的managed-schema，添加ik分词器，示例如下；</p>
|
|
|
|
|
|
<pre>
|
|
|
|
|
|
<!-- ik分词器 -->
|
|
|
|
|
|
<fieldType name="text_ik" class="solr.TextField">
|
|
|
|
|
|
<analyzer type="index">
|
|
|
|
|
|
<tokenizer class="org.wltea.analyzer.lucene.IKTokenizerFactory" useSmart="false" conf="ik.conf"/>
|
|
|
|
|
|
<filter class="solr.LowerCaseFilterFactory"/>
|
|
|
|
|
|
</analyzer>
|
|
|
|
|
|
<analyzer type="query">
|
|
|
|
|
|
<tokenizer class="org.wltea.analyzer.lucene.IKTokenizerFactory" useSmart="true" conf="ik.conf"/>
|
|
|
|
|
|
<filter class="solr.LowerCaseFilterFactory"/>
|
|
|
|
|
|
</analyzer>
|
|
|
|
|
|
</fieldType>
|
|
|
|
|
|
</pre>
|
|
|
|
|
|
</li>
|
|
|
|
|
|
<li>
|
|
|
|
|
|
<p>4. 启动solr服务测试分词；</p>
|
|
|
|
|
|
</li>
|
|
|
|
|
|
<li>
|
|
|
|
|
|
<p>5. ik.conf文件说明：</p>
|
|
|
|
|
|
<pre>
|
|
|
|
|
|
files=dynamicdic.txt
|
|
|
|
|
|
lastupdate=0
|
|
|
|
|
|
</pre>
|
|
|
|
|
|
<p>files为动态字典列表，可以设置多个字典表，用逗号进行分隔，默认动态字典表为dynamicdic.txt；</p>
|
|
|
|
|
|
<p>lastupdate默认值为0，每次对动态字典表修改后请+1，不然不会将字典表中新的词语添加到内存中。<s>lastupdate采用的是int类型，不支持时间戳，如果使用时间戳的朋友可以把源码中的int改成long即可；</s></p>
|
|
|
|
|
|
<p>2018-08-23 已将源码中lastUpdate改为long类型，现可以用时间戳了。</p>
|
|
|
|
|
|
</li>
|
|
|
|
|
|
<li>
|
|
|
|
|
|
<p>5-dynamicdic.txt 为动态字典，在此文件配置的词语不需重启服务即可加载进内存中；</p>
|
|
|
|
|
|
</li>
|
|
|
|
|
|
</ul>
|
|
|
|
|
|
<hr>
|
|
|
|
|
|
|
|
|
|
|
|
<p>有问题可以联系作者邮箱magese@live.cn；</p>
|
|
|
|
|
|
<p>欢迎大家一起交流~</p>
|
