惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Blog — PlanetScale
Blog — PlanetScale
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
Vercel News
Vercel News
B
Blog
腾讯CDC
P
Proofpoint News Feed
Google DeepMind News
Google DeepMind News
N
Netflix TechBlog - Medium
L
LangChain Blog
F
Fortinet All Blogs
T
The Blog of Author Tim Ferriss
人人都是产品经理
人人都是产品经理
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
I
InfoQ
IT之家
IT之家
酷 壳 – CoolShell
酷 壳 – CoolShell
aimingoo的专栏
aimingoo的专栏
D
DataBreaches.Net
Stack Overflow Blog
Stack Overflow Blog
The Cloudflare Blog
Last Week in AI
Last Week in AI
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
博客园 - 三生石上(FineUI控件)
T
Tailwind CSS Blog

博客园 - 渺晓

2025年终总结2026展望 2024年终总结 centos7.9 升级openssh(9.7p1) 2023年终总结 docker+docker-compose部署rocketmq集群遇到的大坑 docker-compose部署rocketmq集群 centos7安装docker compose k8s部署jar包心得 kubernetes集群搭建2023 kubepi加入集群,生成token Windows11 Centos7 SSH Server配置 RSA公钥登录 免密登录 CentOS7 安装ElasticSearch8.9+Kibana8.9 windows服务器nginx和iis端口冲突问题 Linux(Centos7.6) 逻辑卷扩容 磁盘扩容 LVM扩容 LVM创建 逻辑卷挂载 2022年终总结 python pdf转图片 Windows搭建Mysql8 java基础 idea maven 私库 Window10启动Consul后页面UI卡住
ELK自动清理索引
渺晓 · 2023-12-27 · via 博客园 - 渺晓

由于ELK比较吃资源所以日志不能一直保留,必须有一个清理策略

利用索引的生命周期来实现

参考自:

https://www.cnblogs.com/wei325/p/16101258.html

https://www.5axxw.com/questions/content/g3xpeh

所有命令均在kibana的dev tools的console中执行

第一步 添加生命周期策略 (7d表示删除7天前的索引)

PUT _ilm/policy/生命周期策略名称
{
  "policy": {                       
    "phases": {
      "delete": {
        "min_age": "7d",           
        "actions": {
          "delete": {}              
        }
      }
    }
  }
}

第二步 创建索引模板(log-*表示匹配log-开头的索引)

PUT _template/索引模板名称
{
  "index_patterns": ["log-*"],                 
  "settings": {
    "index":{
      "lifecycle":{
        "name":"生命周期索引名称",
        "indexing_complete":true
      }
    }
  }
}

第三步测试(创建一个索引,看下索引是否自动跟上了生命周期策略)

以上是针对新建索引的方案,对于已存在的索引,需要手动设置一遍生命周期策略匹配到指定索引上

PUT log-*/_settings
{
  "index": {
    "lifecycle": {
      "name": "生命周期策略名称"
    }
  }
}