sorl 6.6.0 定时更新索引
来源:互联网 发布:js 什么时候使用链表 编辑:程序博客网 时间:2024/06/06 03:10
·solr 定时更新索引
– solr 6.6.0
– dataimport.scheduler
这里先重点说下,定时更新引用的org.apache.solr.handler.dataimport.scheduler.ApplicationListener不是sorl源码自带的,需要另外去下载,下载地址为:dataimport.scheduler,因为源码年久没人维护,所以并不兼容现有版本,需要做稍微的修改。
一、打开WEB-INF下的web.xml文件,在 <servlet>
前添加下面的配置,配置定时更新计划
<listener> <listener-class>org.apache.solr.handler.dataimport.scheduler.ApplicationListener</listener-class> </listener>
二、 打开solr对应的core下conf目录的data-config.xml文件,配置增量更新索引。
具体官网地址:delta-import。
这里说下其中比较重要的参数:
deletedPkQuery:是指增量更新的时候,要删除的document,查询只需要返回一个document的id即可,例如:Select id From Table Where Deleted=1
deltaQuery:同上,返回了修改或添加的document。solr会自己判断是否需要添加或修改document,依据是managed-schema文件里面配置的uniquekey,如果有相同的,那就替换旧的,不存在则添加。这里的返回结果会排除掉上面deletedPkQuery的id。另外,如果uniquekey 的field定义类型为整形的要注意下,千万不要用pint(6.6.0下定义的)这个类型,增量更新的时候会出现莫名其妙的问题,我搞了好久才发现这个uniquekey定义的是pint,改成int后就正常了。例子:`Select id From Table Where Updated=1 And UpdateAt>'${dih.last_index_time}'
deltaImportQuery:这个配置是增量更新的重点所在,它直接返回增量更新的数据(根据deletedPkQuery和deltaQuery返回的id),例子:Select * From DocumentTable Where ${dih.delta.id}
,
这里说下${dih.last_index_time}
,这个变量是core下的conf目录的dataimport.properties,上面记录了索引最近更新的时候,在执行查询的时候,solr会自动替换成配置文件里面记录的时间,${dih.delta.id}是deltaQuery里面返回的字段,这里是id,也可以是其他名字,如
deltaQuery="SELECT StudentID FROM Student Where Updated=1 And [UpdateTime] > '${dih.last_index_time}'" deltaImportQuery="SELECT * FROM Student Where StudentID=${dih.delta.StudentID}"
- sorl 6.6.0 定时更新索引
- sorl-5.5.3 mysql数据导入,索引更新,索引增量导入(三)
- solrj定时增量更新索引
- sorl
- solr6.0 -MySQL定时增量、全量更新索引
- sphinx 增量索引 实现定时更新
- sphinx 增量索引 实现定时更新
- Oracle定时更新全文索引脚本
- solr配置增量更新和定时更新数据库索引
- Luncene之三 使用Quartz 定时更新索引
- solr4.7.1定时实时重建索引和增量更新
- solr定时实时重建索引和增量更新
- solr定时实时重建索引和增量更新
- solr定时实时重建索引和增量更新
- solr定时实时重建索引和增量更新
- solr定时实时重建索引和增量更新
- solr6.6定时实时重建索引和增量更新
- solr定时实时重建索引和增量更新
- 内部类和内部接口
- leetcode 153. Find Minimum in Rotated Sorted Array
- mipi协议中文详解
- P1195 口袋的天空(并查集+Kruskal)
- 1999-逆序排列
- sorl 6.6.0 定时更新索引
- FZU 2150 Fire Game
- 去掉ueditor默认过滤转换机制
- AVR基础
- vxWorks系统任务tJobTask的实现及使用
- java线程池
- Flink 入门
- 【转载】Web移动端Fixed布局的解决方案
- trap or not 对于link 时产生的不同的错误信息