Elasticsearch 索引策略

Elasticsearch 7.6 索引生命周期

es的生命周期就对应了索引的策略,比如我们在使用elk的时候,由于数据量较大,时间比较久远的数据就没有那么有价值了,因此就需要定期的清除这些历史数据,所以我们在设置es的索引策略的时候就可以进行数据的冷热策略设置。
在es 7.6索引的生命周期分为4部分,不过最新版的已经更新为了5部分,本文介绍 7.6版本的生命周期:

  • Hot:正在积极更新和查询索引。
  • Warm:索引不再更新,但仍在查询中。
  • Cold:索引不再更新,很少被查询。信息仍然需要可搜索,但如果这些查询速度较慢也没关系。
  • Delete:不再需要索引,可以安全地删除。

每个阶段可以触发的动作:

image.png

在Kibana中进行配置

image.png

设置hot阶段的策略,这里我设置索引大小为20kb、文档数为3、30秒钟自动滚动,就是说只要达到其中一个条件就自动根据索引模板创建索引,设置删除阶段,6分钟之后删除索引数据

image.png
image.png

设置索引策略之后就去设置索引模板

image.png
image.png
image.png

image.png

设置完之后就去创建索引,使用kibana进行创建

点击查看代码

里创建的索引别名必须跟索引模板中创建索引策略时指定的别名一致,否则就会报以下错误:
illegal_argument_exception: index.lifecycle.rollover_alias [system-log] does not point to index [system-log-000001]
或者是:
index.lifecycle.rollover_alias [system-log] does not point to index [system-log-000001]

插入数据:

点击查看代码

执行后发现索引每隔30秒就会生成一个索引值,或者每插入3条数据就会生成一个索引

image.png

到此说明配置的索引策略生效了,这里默认的情况,生成的索引的自增是6位的,比如000001

等待6分钟之后你会发现,有些索引已经被删除了,前面的两个索引已经被删除了

花了三个月的时间总结出一份ES 资料,下面的仅是部分内容:

image.png

Elasticsearch权威指南(中文版)

image.png

Elasticsearch权威指南(中文版)

手写精简版

  • 介绍
  • ES概述
  • ES的安装
  • ES的基本操作(重点)
  • Java操作ES
  • ES的各种查询API

部分内容:

image.png

手写精简版

image.png

OK,今天关于 ElasticSearch 咱就唠嗑到这,以上所总结的3本 ES 的学习笔记:

  • ****图文彩印版文档****
  • ****Elasticsearch权威指南(中文版)****
  • ****手写精简版****

如果你觉得还不错,需要源文件参考学习一下,小编都有整理,分享便可!!

但请关注一下分享获取方式:点赞+评论后,点击这即可!!

你可能感兴趣的:(Elasticsearch 索引策略)