惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

量子位
云风的 BLOG
云风的 BLOG
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
The Hacker News
The Hacker News
Martin Fowler
Martin Fowler
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
U
Unit 42
F
Full Disclosure
H
Hackread – Cybersecurity News, Data Breaches, AI and More
Recorded Future
Recorded Future
Security Archives - TechRepublic
Security Archives - TechRepublic
阮一峰的网络日志
阮一峰的网络日志
T
Threatpost
P
Privacy International News Feed
GbyAI
GbyAI
Stack Overflow Blog
Stack Overflow Blog
MongoDB | Blog
MongoDB | Blog
I
Intezer
Recent Announcements
Recent Announcements
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
P
Privacy & Cybersecurity Law Blog
A
Arctic Wolf
博客园 - 聂微东
博客园 - 叶小钗
Cisco Talos Blog
Cisco Talos Blog
H
Help Net Security
S
Schneier on Security
Y
Y Combinator Blog
D
Darknet – Hacking Tools, Hacker News & Cyber Security
T
The Exploit Database - CXSecurity.com
T
Tor Project blog
月光博客
月光博客
NISL@THU
NISL@THU
A
About on SuperTechFans
Spread Privacy
Spread Privacy
Blog — PlanetScale
Blog — PlanetScale
D
DataBreaches.Net
雷峰网
雷峰网
C
CXSECURITY Database RSS Feed - CXSecurity.com
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
Cyber Security Advisories - MS-ISAC
Cyber Security Advisories - MS-ISAC
博客园 - 【当耐特】
G
Google Developers Blog
W
WeLiveSecurity
P
Palo Alto Networks Blog
The Last Watchdog
The Last Watchdog
K
Kaspersky official blog
博客园 - 司徒正美
L
LINUX DO - 热门话题
小众软件
小众软件

博客园_首页

Plist 二进制格式 Milvus 和 PGVector,哪个更好? OpenClaw 已过时?在 VS Code 中运行 Hermes Agent! 第30篇文章:一个大三计科生的自白 Manim如何在数学公式中完美显示中文? Docker 部署 RocketMQ 5 并发编程核心概念辨析 C#事务处理最佳实践:别再让“主表存了、明细丢了”的破事发生 CLI 是什么?为什么大厂突然集体卷命令行? 【从0到1构建一个ClaudeAgent】协作-自主Agent UIImageView 设置图片不生效的原因排查 最小二乘问题详解20:无先验约束下的增量式SFM自由网平差 痞子衡嵌入式:大话双核i.MXRT1180之XIP应用里借助MU实现可靠Flash IAP的方法 AI Chat 封装, SemanticKerne.AiProvider.Unified 已发布 Windows下右键编辑js文件无法打开记事本——在注册表中使用环境变量 在后台服务中使用 Scoped 服务,为什么总是报错? H200 安装驱动并使用sglang启动模型 wireshark 抓包Trap上报告警内容 我用 AI 辅助开发了一系列小工具(2):图片压缩工具 [A Primer On MC and CC] 2.1 Memory Consistency 1 - 指令重排序和 SC 模型 Oracle数据库SCN推进技术详解与实践指南 玩转控件:封装个带图片的Label控件 Claude Code 4.7 真正该升级的不是模型,而是你的工作流 前端小白一句话,AI 帮我做了个颜值拉满的桌面媒体播放器。当代码不再是门槛,一句话编程就是现实。 5. WorkBuddy: 小龙虾的灵魂三件套,让你的小龙虾不只是工具 SQLite 分片方案实战:三种分片策略的深度对比 告别简陋 UI!一款基于 Fluent Design 和基于 WinUI 的开源免费、现代化的 Avalonia UI 控件库 关于二进制排列组合枚举的总结 AI开发-python-LangGraph框架(3-27-LangGraph从零实现大模型智能决策工作流) ElasticSearch主分片和副本分片概念详解 【002】HTTPS 粗解:证书、TLS 握手与对后端配置的影响 Hermes Agent 一周暴涨五万 Star,但我劝你别急着追 明明连接的是Redis的DB0,为什么能查到DB3的数据? 【从0到1构建一个ClaudeAgent】协作-Agent团队 熟悉电子元器件之后,电子小白下一步该怎么走? MAF快速入门(23)通过C#类定义Skills .NET 高级开发 | 手写一个对象映射框架 FastAPI数据库ORM怎么选?我肝了三个Demo后,终于不再纠结了 mysqldump 参数拾遗:在遗忘与铭记之间 C# .NET 周刊|2026年3月5期 Claude code入门 - 陈彦斌 一文学习入门 ThingsBoard 开源物联网平台 GitHub 热门项目 | 2026年04月16日 如何为GIT设置全局勾子,为每次提交追加信息 Number.isFinite和isFinite与isNaN()和Number.isNaN的区别 PortSwigger SQL注入LAB2 推荐一个测试人必备的Skills,从功能到性能全搞定(附详细实操和安装下载方式) 筑基期:掌握Odoo基础核心知识点02(Odoo XML 开发方式详解) GLM模型这么火,咱们用vllm也咧一个呗! 深入理解 AbortController:从底层原理到跨语言设计哲学 字符串学习笔记 多租户系统框架的基础模块设计和分析设计 Apache SeaTunnel Zeta 为什么能做到“又快又稳”? AI开发-python-LangGraph框架(3-26-LangGraph基本概念及第一个简单样例) Vue 3 组件通信,别只会用 Props 和 Emits 了,这几个狠活儿你得看看 ElasticSearch7.X版本配置密码 用Manim实现动态交点计算--从一个动点问题说起 团结引擎+Addressable+Instant Game打包抖音小游戏 function call 实战:让 LLM 自动判断 pod 异常、调用日志工具并完成故障分析 bubseek —— 让 Agent 的足迹,变成团队的洞察 通过 C# 读取并导出 PDF 书签 如何用 GitHub Actions 实现 Steam 自动化发布 【从0到1构建一个ClaudeAgent】并发-后台任务 .NET 高级开发 | 定制 ASP.NET Core 框架 电子小白:什么是运算放大器(运放) zero2Agent:面向大厂面试的 Agent 工程教程,从概念到生产的完整学习路线 堆上的ORW HC32F460 USB CDC通信异常:非对齐访问异常排查 20260413-Hyperbridge 攻击事件:发生在默克尔山上的验证绕过 那些喊着AI 要淘汰你的人,正在靠你的焦虑赚大钱! 深度学习进阶(八)Swin Transformer 最小二乘问题详解19:带先验约束的增量式SFM优化与实现 SnapTranslate 3.0 正式发布:全局划词翻译 + 完整英语学习闭环,一站式搞定查词、记词、复习 工作的意义、工作的困难认知再思考 .NET + AI 进阶实战:基于类的技能开发 - 打造可治理的 Agent 能力模块 【从0到1构建一个ClaudeAgent】规划与协调-技能 上周热点回顾(4.6-4.12) 电子小白的工具三件套:面包板、杜邦线、万能板 单表五亿数据的查询优化 | Mysql、StarRocks 2. WorkBuddy:从“我是谁”到“帮我干活” C# 如何减少代码运行时间:7 个实战技巧 基于HelixToolkit.SharpDX 渲染3D模型 - 笺上知微 从零开始的双臂具身VLA起源及现阶段发展综述 - SkyXZ 记对 xonsh shell 的使用, 脚本编写, 迁移及调优 - pluvium27 受够了Vibe Coding的失控?换个起点,让AI事半功倍 从开始配置漏洞环境到漏洞复现流程 - 難しい 关于10年工作经验的程序员对OpenClaw的实战经验分享以及看法 - 虚无境 Any metadata 的内存布局 C# .NET 周刊|2026年3月2期 - InCerry 我帮你测过了,测试圈排名第二的 Skill 依然很牛逼 Skill Discovery | 无监督技能发现的经典工作总结 - MoonOut 上下文工程是什么?过时了么?一文讲明白! - 一枫说码 开了 TUN 模式还是直连?90% 的人都踩过这个坑 AScript扩展多种脚本语言 - rockey627 AI 学习笔记:Agent 的记忆机制 你能被装进一个文件里吗?——7 万人把同事"蒸馏"成了 AI - 我没有三颗心脏 Claude Code 通关手册(七):给 AI 装上技能包——Skills 完全指南 - 暮色之狐 在浏览器中快速编辑代码:VSCode Web 集成实践 - Newbe36524 蒸馏自己 skill?基于 Deepseek 的蒸馏器,丐版蒸馏方式,简单便捷 - To_Carpe_Diem Spring AI Aliababa和AgentScope,哪个更好? - 苏三说技术
ElasticSearch中的索引模板详解
huangSir-dev · 2026-04-23 · via 博客园_首页

概述

索引模板(Index Template)是Elasticsearch中预先定义的一组配置,在创建新索引时自动应用匹配规则的配置,无需每次手动指定。它可以帮助你统一管理索引的设置(settings)、映射(mappings)和别名(aliases)。

其核心作用如下:

  • 标准化配置:统一同一类索引的分片数、副本数、刷新间隔等设置
  • 自动映射:提前定义字段类型、分词器、是否索引等属性,避免动态映射产生错误
  • 简化操作:创建索引时自动应用配置,无需每次重复写参数
  • 生命周期管理:配合ILM(索引生命周期管理)实现索引的自动轮转、删除等操作

从Elasticsearch 7.8版本开始,引入了可组合索引模板(Composable Index Template) 和 组件模板(Component Template),同时兼容旧版模板(Legacy Index Template):

类型 版本支持 核心结构 优势 劣势
可组合模板(Composable) 7.8+(推荐) 组件模板 + 索引模板 配置复用、易维护、支持多租户、适配数据流 学习成本略高
旧版模板(Legacy) 7.x 兼容 单一配置结构 简单直接 无法复用、复杂场景难维护、8.x 逐步淘汰

⚠️ 注意:旧版模板在8.x版本中已经被移除,建议7.x版本开始使用新的可组合模板体系

为什么需要索引模板?
ES的索引创建默认会自动推断字段类型(动态mapping),但生产环境往往需要统一规范:

  • 所有日志类索引统一设置1分片1副本,不需要每次创建索引手动指定
  • 所有字符串类型字段默认同时创建text(全文检索)和keyword(精确匹配)两个类型
  • 所有时间字段统一用date类型,指定时间格式
  • 业务专有字段统一使用IK分词器如果不用模板,每次创建新索引都要手动写一遍配置,不仅麻烦还容易出错,尤其适合按时间滚动的索引场景(比如日志、监控指标,每天/每小时生成一个新索引:log-2026.04.20、metric-2026.04.20)。

旧版索引模板创建实战案例

旧版索引模板比较简单粗暴,它是直接为一类索引定义了一个模板,后续直接使用即可

创建一个日志场景的索引模板

# 请求
PUT _template/log_template_test
{
  "index_patterns": ["log-*"],
  "order": 1,
  "settings": {
    "number_of_shards": 3,
    "number_of_replicas": 1,
    "refresh_interval": "30s"
  },
  "mappings": {
    "properties": {
      "@timestamp": {
        "type": "date",
        "format": "yyyy-MM-dd HH:mm:ss||epoch_millis"
      },
      "message": {
        "type": "text",
        "analyzer": "ik_max_word",
        "search_analyzer": "ik_smart"
      },
      "level": { "type": "keyword" },
      "service_name": { "type": "keyword" }
    }
  },
  "aliases": {
    "logs_all": {}
  }
}

# 参数解析
log_template_test:索引模板名称
index_patterns:指定模板匹配规则,所有名字以 log- 开头的索引(比如 log-2025-01-01、log-app-123)自动应用这个模板
order:模板优先级,数字越大优先级越高。如果多个模板匹配同一个索引,order 大的覆盖小的
settings:指定索引设置
number_of_shards:索引主分片数量
number_of_replicas:索引副本分片数量
refresh_interval:数据写入后,30 秒后才可以被搜索到,调大提升写入性能,调小提升实时性
mappings:指定字段映射规则,定义每个字段的类型、分词、格式,相当于给数据建表结构
aliases:给所有匹配该模板的索引自动绑定别名,不用管索引是 log-2025-01 还是 log-2025-02,直接查询 logs_all 就能查所有日志

查看旧版本索引模板

# 查看索引的索引模板
GET _template

# 查看指定的索引模板
GET _template/log_template_test
# 响应
{
  "log_template_test" : {
    "order" : 1,
    "index_patterns" : [
      "log-*"
    ],
    "settings" : {
      "index" : {
        "number_of_shards" : "3",
        "number_of_replicas" : "1",
        "refresh_interval" : "30s"
      }
    },
    "mappings" : {
      "properties" : {
        "@timestamp" : {
          "format" : "yyyy-MM-dd HH:mm:ss||epoch_millis",
          "type" : "date"
        },
        "level" : {
          "type" : "keyword"
        },
        "service_name" : {
          "type" : "keyword"
        },
        "message" : {
          "search_analyzer" : "ik_smart",
          "analyzer" : "ik_max_word",
          "type" : "text"
        }
      }
    },
    "aliases" : {
      "logs_all" : { }
    }
  }
}

旧版本索引模板的删除和更新

// 更新模板:和创建语法一样,覆盖原有配置即可
PUT _template/log_template_test
{
  // 新的配置
}
// 删除模板
DELETE _template/log_template_test

创建索引测试

# 创建一个符合规则的索引测试
PUT log-2026.04.20

# 查看索引结构
GET log-2026.04.20
# 响应,能够看到符合我们的索引模板结构
{
  "log-2026.04.20" : {
    "aliases" : {
      "logs_all" : { }
    },
    "mappings" : {
      "properties" : {
        "@timestamp" : {
          "type" : "date",
          "format" : "yyyy-MM-dd HH:mm:ss||epoch_millis"
        },
        "level" : {
          "type" : "keyword"
        },
        "message" : {
          "type" : "text",
          "analyzer" : "ik_max_word",
          "search_analyzer" : "ik_smart"
        },
        "service_name" : {
          "type" : "keyword"
        }
      }
    },
    "settings" : {
      "index" : {
        "routing" : {
          "allocation" : {
            "include" : {
              "_tier_preference" : "data_content"
            }
          }
        },
        "refresh_interval" : "30s",
        "number_of_shards" : "3",
        "provided_name" : "log-2026.04.20",
        "creation_date" : "1776751447902",
        "number_of_replicas" : "1",
        "uuid" : "DPR1wHFMRJuOUdHs-ZI-Hw",
        "version" : {
          "created" : "7172699"
        }
      }
    }
  }
}

新版本索引模板实战案例

新版本索引模板是在ES7.8版本开始引入的,新版本索引模板又称为可组合索引模板,其主要有以下部分组成:

  • 组件模板
  • 可组合索引模板
  • 优先级规则

接下来我们一个一个讲解

组件模板

组件模板是可复用的配置单元,通常按功能拆分,比如:

  • 通用设置组件:配置分片数、副本数
  • 通用映射组件:配置的类型和分词器
  • 别名组件:配置统一的查询别名

创建各类型组件模板

  • 通用设置组件
PUT _component_template/settings-component-test
{
  "template": {
    "settings": {
      "number_of_shards": 3,
      "number_of_replicas": 1,
      "refresh_interval": "30s"
    }
  }
}

# 参数解析
settings-component-test:组件模板名称
number_of_shards:主分片数量
number_of_replicas:副本分片数量
refresh_interval:数据写入后,30 秒后才可以被搜索到,调大提升写入性能,调小提升实时性
  • 通用映射组件
PUT _component_template/mappings-component-test
{
  "template": {
    "mappings": {
      "properties": {
        "@timestamp": { "type": "date" },
        "message": { "type": "text", "analyzer": "standard" },
        "host": { "type": "keyword" },
        "level": { "type": "keyword", "index": false }
      }
    }
  }
}
  • 通用别名组件
PUT _component_template/aliases-component-test
{
  "template": {
    "aliases": {
      "all_logs": {}
    }
  }
}

组件模板其它运维操作

  • 查询组件模板
# 查询所有组件模板
GET _component_template

# 查询指定的组件模板
GET _component_template/settings-component-test
# 响应结果
{
  "component_templates" : [
    {
      "name" : "settings-component-test",
      "component_template" : {
        "template" : {
          "settings" : {
            "index" : {
              "number_of_shards" : "3",
              "number_of_replicas" : "1",
              "refresh_interval" : "30s"
            }
          }
        }
      }
    }
  ]
}
  • 删除组件模板
# 删除组件模板
DELETE _component_template/settings-component-test
  • 修改组件模板
# 修改组件模板
PUT _component_template/settings-component-test
{
  "template": {
    "settings": {
      "number_of_shards": 3,
      "number_of_replicas": 1,
      "refresh_interval": "20s"
    }
  }
}

可组合索引模板

可组合索引模板是真正给创建索引时使用的,其由三部分组成:

  • 匹配规则:index_patterns 定义哪些索引会匹配这个模板,支持通配符,比如"logs-*"
  • 优先级:priority 数值越大优先级越高,当多个模板匹配同一个索引时,高优先级的模板生效
  • 配置来源:
    • composed_of:引用的组件模板列表,按顺序叠加配置
    • template:直接在索引模板中定义的配置,优先级高于引用的组件模板

创建一个可组合索引模板

创建日志索引模板,匹配 logs-* 索引,组合上述组件模板,并补充个性化配置。

PUT _index_template/logs-template-test
{
  "index_patterns": ["logs-*"],
  "priority": 200,
  "composed_of": ["settings-component-test", "mappings-component-test", "aliases-component-test"],
  "template": {
    "mappings": {
      "properties": {
        "error_code": { "type": "integer" }
      }
    }
  },
  "version": 1,
  "_meta": {
    "description": "日志索引模板,组合通用组件模板,补充错误码字段"
  }
}

# 参数解析
index_patterns:匹配索引名称的通配符规则
priority:类似旧版本的order字段,模板优先级,数字越大优先级越高。如果多个模板匹配同一个索引,priority 大的覆盖小的,默认值100.
composed_of:引用的组件模板名称列表。
template:直接定义索引模板里的配置,与组件模板互为补充,但是其优先级比引用的组件模板高。
version:定义索引模板的版本
_meta:索引模板的元数据信息

查看新版本索引模板

# 查看所有的
GET _index_template

# 查看指定的
GET _index_template/logs-template-test
# 响应
{
  "index_templates" : [
    {
      "name" : "logs-template-test",
      "index_template" : {
        "index_patterns" : [
          "logs-*"
        ],
        "template" : {
          "mappings" : {
            "properties" : {
              "error_code" : {
                "type" : "integer"
              }
            }
          }
        },
        "composed_of" : [
          "settings-component-test",
          "mappings-component-test",
          "aliases-component-test"
        ],
        "priority" : 200,
        "version" : 1,
        "_meta" : {
          "description" : "日志索引模板,组合通用组件模板,补充错误码字段"
        }
      }
    }
  ]
}

新版本索引模板的删除和更新

// 更新模板:和创建语法一样,覆盖原有配置即可
PUT _index_template/logs-template-test
{
  // 新的配置
}
// 删除模板
DELETE _index_template/logs-template-test

创建一个索引测试

# 创建索引
PUT logs-20260423

# 查看索引
GET logs-20260423
# 响应
{
  "logs-20260423" : {
    "aliases" : {
      "all_logs" : { }
    },
    "mappings" : {
      "properties" : {
        "@timestamp" : {
          "type" : "date"
        },
        "error_code" : {
          "type" : "integer"
        },
        "host" : {
          "type" : "keyword"
        },
        "level" : {
          "type" : "keyword",
          "index" : false
        },
        "message" : {
          "type" : "text",
          "analyzer" : "standard"
        }
      }
    },
    "settings" : {
      "index" : {
        "routing" : {
          "allocation" : {
            "include" : {
              "_tier_preference" : "data_content"
            }
          }
        },
        "refresh_interval" : "20s",
        "number_of_shards" : "3",
        "provided_name" : "logs-20260423",
        "creation_date" : "1776913760315",
        "number_of_replicas" : "1",
        "uuid" : "x8sk4JoCQ4C4QFcQe0YnkQ",
        "version" : {
          "created" : "7172699"
        }
      }
    }
  }
}

动态模板

动态模板是自定义未知字段的映射规则,解决默认动态映射的不确定性(如字符串被自动设为 text + keyword,浪费资源)

创建动态模板示例

所有字符串字段自动映射为 keyword,以 env_ 开头的字段不索引,减少存储开销。

# 在索引模板的 mappings 中定义动态模板

PUT _index_template/dynamic-logs-template-test
{
  "index_patterns": ["logs-*"],
  "template": {
    "mappings": {
      "dynamic_templates": [
        {
          "string_as_keyword": {
            "match_mapping_type": "string",
            "mapping": { "type": "keyword" }
          }
        },
        {
          "env_fields": {
            "match": "env_*",
            "mapping": { "type": "keyword", "index": false }
          }
        }
      ],
      "properties": {
        "@timestamp": { "type": "date" }
      }
    }
  }
}

匹配规则说明:

匹配规则 说明 示例
match_mapping_type 匹配字段类型 match_mapping_type: "string"
match 匹配字段名前缀 / 后缀 match: "env_*"(匹配 env_name、env_type)
unmatch 排除字段名 unmatch: "env_desc"
path_match 匹配对象路径 path_match: "user.*"(匹配 user.name、user.age)
match_pattern 匹配模式(regex/wildcard) match_pattern: "regex", match: "user_[0-9]+"

索引模板与索引生命周期管理(ILM)集成

索引生命周期管理(ILM)详解

ILM(Index Lifecycle Management) 是 ES 7.x 用于自动管理时序类索引(日志、指标、事件) 从创建、写入、查询、归档到删除全流程的核心功能,核心价值是自动实现热温冷架构、节省存储成本、优化性能、免人工运维。

ILM 通过定义 生命周期策略(Policy),让 ES 自动判断索引 “年龄、大小、文档数”,驱动索引在不同阶段流转,并执行滚动、收缩、合并、迁移、删除等操作

适用于日志(logs-)、监控指标(metrics-)、事件(events-*)等只追加、少更新、查询热度随时间递减的数据。

ILM核心三要素:

  • 生命周期策略(Policy):ILM 的 “规则手册”,定义阶段、触发条件、执行动作。
  • 索引模板(Index Template):将 Policy 绑定到索引,新创建的匹配索引自动应用。
  • 索引 / 数据流(Data Stream):被管理的对象,数据流更适合时序场景(7.x 推荐)

ILM 五大生命周期阶段(Phases)详解

ILM把索引的生命周期分为五个阶段: Hot → Warm → Cold → Frozen → Delete 顺序流转,每个阶段有明确定位、触发条件和允许动作

每个阶段之间的流转是有固定规则的:

  • 流转依据:min_age(最小年龄),从 索引创建时间 或 Rollover 时间 计算。
  • 流转条件:当前阶段所有动作执行完成 + 达到下一阶段 min_age。
  • 顺序固定:只能按 Hot→Warm→Cold→Frozen→Delete 单向流转,不可回退

Hot阶段(热阶段)—— 核心写入 + 高频查询

这个阶段是索引刚创建完成且数据正在写入、实时高频查询,数据最活跃

  • 定位:索引正在写入、实时高频查询,数据最活跃。
  • 硬件:高性能 SSD 节点、高内存、高 CPU。
  • 默认触发:索引创建即进入(min_age: 0ms)。
  • 核心目标:保障写入性能、稳定查询、触发滚动(Rollover)。
  • 常用动作:
    • rollover(核心):索引达阈值自动切新索引
    • set_priority:设高优先级(如 100)
    • unfollow:跨集群复制场景取消跟随

Warm 阶段(温阶段)—— 只读 + 中频查询

这个阶段索引中数据不再写入,仅用于查询

  • 定位:停止写入、仍频繁查询,数据不再更新。
  • 硬件:普通 SATA/HDD 节点、中等配置。
  • 触发:Rollover 后或达到指定时长(如 7 天)。
  • 核心目标:优化存储、提升查询效率、降资源占用。
  • 常用动作:
    • readonly:设为只读,防误写
    • forcemerge:合并段文件,删删除标记
    • shrink:收缩主分片(如 5→1)
    • allocate:迁移到温节点、降副本数
    • set_priority:降优先级(如 50)

Cold 阶段(冷阶段)—— 极少查询 + 归档

这个阶段查询很少,但是数据仍需保留一段时间

  • 定位:不写、极少查询,需保留但允许慢查询。
  • 硬件:廉价大容量存储、低配置节点。
  • 触发:进入 Warm 后 N 天(如 30 天)。
  • 核心目标:极致省存储、最小化资源占用。
  • 常用动作:
    • allocate:迁冷节点、副本数设 0
    • freeze:冻结索引(卸载内存、只读)
    • searchable_snapshot:转为可搜索快照(7.10+)
    • set_priority:最低优先级(如 0)

Frozen 阶段(冻结阶段,7.7+)—— 超冷归档

  • 定位:几乎不查询、必须留存,查询极慢也可接受。
  • 硬件:对象存储 / 远程仓库,几乎不占本地资源。
  • 触发:进入 Cold 后 N 天(如 60 天)。
  • 核心动作:searchable_snapshot(基于快照搜索,本地几乎不占资源)

Delete 阶段(删除阶段)—— 数据销毁

  • 定位:数据过期、无需留存,安全删除。
  • 触发:进入前一阶段后 N 天(如 90 天)。
  • 核心动作:delete:永久删除索引 + 数据。
  • 可选:wait_for_snapshot:先备份快照再删

实战案例

创建ILM策略

描述:
Hot:50GB 或 7 天 Rollover
Warm:Rollover 后 1 天进入,缩分片、合并段
Cold:Warm 后 30 天进入,降副本、迁冷节点
Delete:Cold 后 60 天删除(总留存 90 天)

PUT _ilm/policy/logs_ilm_policy
{
  "policy": {
    "phases": {
      // 1. Hot 阶段:写入+滚动
      "hot": {
        "min_age": "0ms",
        "actions": {
          "set_priority": { "priority": 100 }, // 高优先级
          "rollover": {
            "max_primary_shard_size": "50gb", // 主分片达50GB滚动
            "max_age": "7d"                   // 或7天滚动
          }
        }
      },
      // 2. Warm 阶段:只读+优化
      "warm": {
        "min_age": "1d", // Rollover后1天进入
        "actions": {
          "set_priority": { "priority": 50 },
          "readonly": {}, // 设为只读
          "shrink": { "number_of_shards": 1 }, // 主分片缩为1
          "forcemerge": { "max_num_segments": 1 }, // 合并为1段
          "allocate": {
            "require": { "node_type": "warm" } // 迁到温节点
          }
        }
      },
      // 3. Cold 阶段:归档
      "cold": {
        "min_age": "30d", // 进入Warm后30天
        "actions": {
          "set_priority": { "priority": 0 },
          "allocate": {
            "require": { "node_type": "cold" },
            "number_of_replicas": 0 // 冷数据无副本
          },
          "freeze": {} // 冻结索引
        }
      },
      // 4. Delete 阶段:删除
      "delete": {
        "min_age": "60d", // 进入Cold后60天
        "actions": {
          "delete": {}
        }
      }
    }
  }
}

创建可组合索引模板

  • 创建组件模板
// 组件模板1:Settings(含ILM)
PUT _component_template/logs_settings
{
  "template": {
    "settings": {
      "number_of_shards": 3,
      "number_of_replicas": 1,
      "index.lifecycle.name": "logs_ilm_policy", // 绑定ILM策略
      "index.lifecycle.rollover_alias": "logs-app-write" // 写入别名
    }
  }
}

// 组件模板2:Mappings
PUT _component_template/logs_mappings
{
  "template": {
    "mappings": {
      "properties": {
        "@timestamp": { "type": "date" },
        "message": { "type": "text" },
        "app": { "type": "keyword" },
        "level": { "type": "keyword" }
      }
    }
  }
}
  • 创建可组合索引模板
// 可组合索引模板
PUT _index_template/logs_app_template
{
  "index_patterns": ["logs-app-*"],
  "composed_of": ["logs_settings", "logs_mappings"],
  "priority": 200,
  "version": 1,
  "_meta": { "description": "应用日志索引模板,绑定ILM策略" }
}

ILM常用管理命令

  • 查看ILM
# 查看指定策略
GET _ilm/policy/logs_ilm_policy

# 查看所有策略
GET _ilm/policy
  • 查看索引 ILM 状态
# 查看单个索引ILM详情
GET logs-app-000001/_ilm/explain

# 查看所有索引ILM状态
GET /*/_ilm/explain?human=true
  • 手动触发 Rollover
# 手动触发滚动
POST logs-app-write/_rollover
  • 删除 ILM 策略
DELETE _ilm/policy/logs_ilm_policy