Solr4.7.1定時更新(apache-solr-dataimportscheduler)

本文轉載自查看原文 2019-12-25 16:08 899 solr

Solr官方提供了很強大的Data Import Request Handler，同時提供了一個簡單的 Scheduler，示例中的 Scheduler 只支持增量更新，不支持定期重做索引，因此我做了一個簡單的封裝，增加了重做索引的定時器。

1. 將 apache-solr-dataimportscheduler-1.0.jar 和solr自帶的 solr-dataimporthandler-4.7.1.jar、 solr-dataimporthandler-extras-4.7.1.jar 放到tomcat發布的webapps/solr/WEB-INF/lib目錄下面（或者放到solr.war的lib目錄下面）。
2.修改tomcat發布的webapps/solr/WEB-INF/web.xml（或者修改solr.war中WEB-INF/web.xml）, 在servlet節點前面增加:

<listener>
       <listener-class>org.apache.solr.handler.dataimport.scheduler.ApplicationListener</listener-class>
</listener>

3.將apache-solr-dataimportscheduler-1.0-source.jar 中 dataimport.properties 取出並根據實際情況修改,然后放到 solr.home/conf (不是solr.home/core/conf) 目錄下面，conf這個目錄不存在，需要自己手動創建該目錄即可（比如說實例放在solrHome目錄中，conf也建在solrHome中）。

4.重啟tomcat或者jboss 即可。

dataimport.properties 配置項說明

#################################################
#                                               #
#       dataimport scheduler properties         #
#                                               #
#################################################

#是否激活定時增量索引功能，1-激活，其他-不激活
syncEnabled=1

#需要定時增量索引的core，多core中間逗號隔開
syncCores=collection1,collection2

#solr服務器名或IP地址，默認localhost
server=localhost

#solr服務器端口，默認80
port=8090

#應用名
webapp=solr

#增量索引參數
params=/dataimport?command=delta-import&clean=ture&commit=true

#增量索引執行間隔(分鍾數)，如果為空，默認30
interval=1

#上面是solr官方支持的功能參數
#下面三個參數是別人為了實現重做索引而設置的參數，如果不需要重做索引，可以刪除
#重做索引的時間間隔(分鍾)，默認7200，即1天，為空,為0,或者注釋掉:表示永不重做索引
reBuildIndexInterval=2

#重做索引的參數
reBuildIndexParams=/dataimport&command=full-import&clean=true&commit=true

# 重做索引時間間隔的計時開始時間，第一次真正執行的時間=reBuildIndexBeginTime+reBuildIndexInterval*60*1000；
# 兩種格式：2012-04-11 03:10:00或者03:10:00，后一種會自動補全日期部分為服務啟動時的日期
reBuildIndexBeginTime=15:40:00

對於以上配置，發現兩個bug，一個是如果reBuildIndexBeginTime的值為空，則會導致interval強轉時報錯，另一個是請求solr服務器時返回的狀態碼永遠是415（對於當前請求的方法和所請求的資源，請求中提交的實體並不是服務器中所支持的格式，因此請求被拒絕。）

1、第一個bug