[solr] solr 增量导入数据、定时索引

一、引言

    1 https://blog.csdn.net/u014365862/article/details/107095161 中已经介绍如何全量导入MySQL的数据全量导入在数据量大的时候代价非常大,一般来说都会适用增量的方式来导入数据,下面介绍如何增量导入MYSQL数据库中的数据,以及如何设置 定时来做。

二、增量从MYSQL数据库导入数据:

    1、数据库表的更改:  添加UPDATATIME字段。

    前面已经创建好了一个UserInfo的表,这里为了能够进行增量导入,需要新增一个字段,类型为TIMESTAMP,默认值为CURRENT_TIMESTAMP。

[solr] solr 增量导入数据、定时索引_第1张图片

    有了这样一个字段,Solr才能判断增量导入的时候,哪些数据是新的。
    因为Solr本身有一个默认值last_index_time,记录最后一次做full import或者是delta import(增量导入)的时间,这个值存储在文件conf目录的dataimport.properties文件中。

 

2、data-config.xml中必要属性的设置:   

       
       
   

你可能感兴趣的:(MachineLP成长记,solr,solr,增量导入数据)