如何优化分词效果与查询性能-solr配置ik

在当今大数据时代,搜索引擎技术已经成为企业信息检索和数据分析的重要工具，Solr 作为 Apache 软件基金会的一个开源搜索引擎，以其高性能、可扩展性和灵活性而受到广泛欢迎，而中文分词是中文搜索引擎中不可或缺的一环，IK 分词器作为一款优秀的中文分词工具，常被用于 Solr 配置中，本文将详细介绍如何在 Solr 中配置 IK 分词器，并分享一些配置技巧。

IK 分词器简介

IK 分词器是针对中文文本进行分词的工具，它能够将中文文本切分成具有实际意义的词语，IK 分词器分为两个版本：IK Analyzer 和 IK Smart，IK Analyzer 是一个基于词典的中文分词器，适用于对分词精度要求较高的场景；IK Smart 则是一个基于统计的中文分词器，适用于对分词速度要求较高的场景。

Solr 配置 IK 分词器

准备工作

在开始配置之前,请确保已经安装了 Solr 和 IK 分词器，以下是准备工作：

配置 Solr

在 Solr 的 solrCONfig.xml 文件中，需要添加以下配置：

配置词典

IK 分词器需要词典文件来支持分词，在 Solr 的目录下创建一个名为的文件夹，并将词典文件放置在该文件夹中，词典文件包括：

验证配置

在 Solr 的 solrconfig.xml 文件中，可以添加以下配置来验证分词效果：

在浏览器中访问 你好世界 ，可以看到分词结果。

配置技巧

问：如何在 Solr 中切换分词模式？

答：在 Solr 的 solrconfig.xml 文件中，可以通过修改和的属性来切换分词模式，将 class="www_kuidc_com org.wltea.analyzer.lucene.IKTokenizer" 修改为 class="www_kuidc_com org.wltea.analyzer.lucene.IKTokenizerSmart" 即可切换到 IK Smart 模式。

问：如何自定义词典？

答：在 Solr 的目录下创建一个新的词典文件，如 mydict.txt ，在文件中添加自定义词汇，并保存，在 solrconfig.xml 文件中添加以下配置：

mydict.txt

这样,Solr 就会使用自定义词典进行分词。

怎样做可以最大的提高电脑的性能

一、取消解压缩功能Windows XP可以自己解开Zip压缩文件，但你是不是更钟爱Winzip、WinRAR呢？那就把Windows XP默认的解压缩功能取消吧！按下“开始”→“运行”，输入“regsvr32 /u ”，然后确定。 接下来会弹出一个窗口，按确定，这样Windows XP的解压缩功能就被取消了。 二、去掉磁盘扫描的等待时间当Windows XP非正9关机时，重新开机需要等待10秒才会开始磁盘扫描。 如果你觉得这10秒钟太长，那就干脆让它变成0秒吧！按下“开始”→“所有程序”→“附件”→“命令提示符”，在提示符下键入“CHKNTFS /T:0”然后回车，这样下次就不用等待那漫长的10秒了。 三、加快下载速度Windows XP在默认情况下，A留了20%的连接带宽给支持QoS的程序，但是，大部分程序都不支持QoS服务，也不是所有的设备都提供QoS封包分流管理。 因此，释放这预留的20%的带宽，可以使下载速度提高不少。 按下“开始”→“运行”，输入“”，弹出组策略窗口，在窗口的左边依次点选“计算机配置”→“管理模块”→“网络”→“QoS数据包调度程序”，在右边的“限制可保留带宽”上点右键，选择属性，在弹出窗口的“设置”选项卡下选“已启用”，将“带宽限制”改为0%。 四、释放系统备份所占用的空间Windows XP在安装完毕后会自动备份一些重要的系统文件，如果你想把这些空间腾出来，那好，按下“开始”→“运行”，输入“sfc /purgecache”，然后确定，稍等片刻，你会发现硬盘空间又多出不少！五、删除预读文件以提升系统效能Windows XP有个专门储存安装过的软件的预读文件的文件夹，以便预先读取以加快软件运行速度，但Windows XP并不会自动将已卸载软件的预读文件删除，所以只有手动来删除了。 进入“X:WindowsPrefetch”(X表示Windows XP所在的分区)文件夹，删除除了“”以外的所有文件。 六、全方位地了解你的计算机想不想全面地了解你的计算机的软硬件信息和使用状况呢？Windows XP已经带有强大的系统信息收集程序。 按下“开始”→“帮助和支持”，弹出“帮助和支持中心”窗口，在右边选择“使用工具查看您的计算机信息并分析问题”，然后在左边的列表中选择“我的计算机信息”，好了，你可以在右边选择你想知道的信息了(比用得到的系统信息要直观得多！) 。 七、瞬间锁定计算机突然有事要离开片刻，但又不想关机，为了不让别人动你的电脑，你只需要按下Windows徽标键+L，即可快速锁定计算机，除非知道密码，谁也别想动！

中文分词中正向最大匹配算法的分词速度是多少？准确率大概为多少？

主要看你的词表结构了，最大词长的初始值，查词典的次数和匹配的次数，然后得出时间复杂度，原始hash算法复杂度没记错的话应该是2.89，11年看过一个文献，提出一种改进的算法时间复杂度是2.291……另外，分词算法并不是原封不动的，比如有些搜索引擎的词表结构就采用tire树结构，这样不用设置最大词长，不过内存空间方面就要有取舍，甚至还有采用减少查典次数增加匹配次数的搜索引擎……所以单纯的给你一个189.3m/M纯内存分词速度，但是这算法换个台更高配置的服务器却变成了497.6ms/M，这没有任何意义……记得哪个文献上有人说，分词本身不是目的，而是后续处理过程的必要阶段，所以，除非你是研究算法的，否则单纯追求这东西的速度和准确率没什么太大意义

如何能提升xp性能

Windows XP现在已经相当普及了，在使用它的过程中，你是否感觉在速度上很多地方还没有Windows 9x系统快呢？比如访问网上邻居、开机关机等，下面我们就来逐个提升它们的速度。 1、加速网上邻居在Windows XP中访问网上邻居是相当恼人的，系统会搜索自己的共享目录和可作为网络共享的打印机以及计划任务中和网络相关的计划任务，然后才显示出来，显然这样速度就会比Windows 9x中慢很多。 其实这些功能我们并没有使用上，与其不用还不如删除它们，这样速度就会明显加快。 打开注册表编辑器，找到 HKEY_LOCAL_MACHINE/sofeware/Microsoft/Windows/ Current Version/Explore/RemoteComputer/NameSpace，删除其下的{2227A280-3AEA-1069-A2DEBD}（打印机）和{D-4C6A-11CF8D87- 00AA0060F5BF}（计划任务），重新启动电脑，再次访问网上邻居，你会发现快了很多。 2、减少开机滚动条时间每次启动Windows XP，蓝色的滚动条都要走上好多次，其实这里我们也可以把它的滚动时间减少，以加快启动速度。 打开注册表编辑器，找到HKEY_LOCAL_MACHINESYSTEM\CurrentControlSet\Control\Session Manager\Memory ManagementPrefetchParameters，在右边找到EnablePrefetcher主键，把它的默认值3改为1，这样滚动条滚动的时间就会减少。 3、加快开机速度在XP中关机时，系统会发送消息到运行程序和远程服务器，告诉它们系统要关闭，并等待接到回应后系统才开始关机。 加快开机速度，可以先设置自动结束任务，首先找到HKEY_CURRENT_USER\Control Panel\Desktop，把AutoEndTasks的键值设置为1；然后在该分支下有个“HungappTimeout”，把它的值改为“4000（或更少），默认为；最后再找到HKEY_LOCAL_MACHINE\ System\CurrentControlSetControl\，同样把WaitToKillServiceTimeout设置为“4000”；通过这样设置关机速度明显快了不少。 4、去掉菜单延迟为了达到视觉上的真实感，Windows XP中的菜单在打开时会有滑出的效果，但这也会延缓打开速度。 我们可以在HKEY_CURRENT_USER\Control Panel\Desktop下找到“MenuShowDelay”主键，把它的值改为“0”就可以去掉菜单延迟效果。 5、提高宽带速度专业版的Windows XP默认保留了20%的带宽，其实这对于我们个人用户来说是没有什么作用的。 尤其让它闲着还不如充分地利用起来。 在“开始→运行”中输入，打开组策略编辑器。 找到“计算机配置→管理模板→网络→QoS数据包调度程序”，选择右边的“限制可保留带宽”，选择“属性”打开限制可保留带宽属性对话框，选择“禁用”即可。 这样就释放了保留的带宽，对于上网的朋友是非常有用的。