• Kibana7.9.2设置elasticsearch索引过期时间,到期自动删除


    目录
    一、背景
    二、设置索引生命周期策略(ILM)
    三、手动给索引设置删除策略
    四、查看结果
    五、自动给索引添加删除策略
    六、参考
    一、背景
    ELK系统里面存放了大量日志索引,只需要保留15天的日志索引,希望到期自动删除对应的索引;
    本文的解决方案是给索引添加生命周期策略,不需要手动设置定时器去调用api删除;

    二、设置索引生命周期策略(ILM)
    创建一个新的策略

    记得关掉热阶段的滚动更新

    开启删除阶段,设置过期时间,快照可以不用

    三、手动给索引设置删除策略
    如图

    四、查看结果
    如果过期时间比较短,像我这里测试是2分钟,会显示当前阶段是delete;
    如果过期时间比较长,例如15天,则会出现hot阶段,具体原因查看文章末尾的官方链接;
    到了delete阶段,过几分钟就会被删除了

    五、自动给索引添加删除策略
    但是实际项目中日志索引是自动生成的,那应该怎么自动添加删除策略呢?
    我这里使用的是logstash7.9.2把日志文件传到elasticsearch中,默认情况下logstash会有一个索引创建模板,如图

    默认情况下是没有ILM策略的,我们给它设置刚刚创建的策略,这样通过logstash传输创建的索引就会附带ILM策略;

    当然还有一种方法是在logstash的output模块中设置,感兴趣可以查看官方文档
    https://www.elastic.co/guide/en/logstash/current/plugins-outputs-elasticsearch.html#plugins-outputs-elasticsearch-ilm_enabled

    六、参考
    官方文档,大赞,写得很好很详细
    https://www.elastic.co/guide/en/elasticsearch/reference/7.9/index-lifecycle-management.html
    ————————————————
    版权声明:本文为CSDN博主「螺蛳粉不加葱」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
    原文链接:https://blog.csdn.net/qq_41631365/article/details/109773675

  • 相关阅读:
    P4315 月下“毛景树”
    P1505 [国家集训队]旅游
    P3258 [JLOI2014]松鼠的新家
    P4116 Qtree3
    P2580 于是他错误的点名开始了
    P3038 [USACO11DEC]牧草种植Grass Planting
    P3128 [USACO15DEC]最大流Max Flow
    P2146 [NOI2015]软件包管理器
    P2590 [ZJOI2008]树的统计
    P3384 【模板】树链剖分
  • 原文地址:https://www.cnblogs.com/ExMan/p/14972661.html
Copyright © 2020-2023  润新知