惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

S
Secure Thoughts
Recent Commits to openclaw:main
Recent Commits to openclaw:main
H
Heimdal Security Blog
SecWiki News
SecWiki News
H
Hacker News: Front Page
N
News | PayPal Newsroom
L
LINUX DO - 最新话题
N
News and Events Feed by Topic
TaoSecurity Blog
TaoSecurity Blog
AI
AI
C
Cybersecurity and Infrastructure Security Agency CISA
Scott Helme
Scott Helme
PCI Perspectives
PCI Perspectives
S
Securelist
Exploit-DB.com RSS Feed
Exploit-DB.com RSS Feed
Cyberwarzone
Cyberwarzone
A
Arctic Wolf
Forbes - Security
Forbes - Security
T
Tor Project blog
Spread Privacy
Spread Privacy
WordPress大学
WordPress大学
I
Intezer
Martin Fowler
Martin Fowler
Help Net Security
Help Net Security
P
Proofpoint News Feed
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
Cisco Talos Blog
Cisco Talos Blog
Latest news
Latest news
博客园 - 司徒正美
W
WeLiveSecurity
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
V
V2EX
P
Palo Alto Networks Blog
Google DeepMind News
Google DeepMind News
IT之家
IT之家
阮一峰的网络日志
阮一峰的网络日志
V
Vulnerabilities – Threatpost
Jina AI
Jina AI
S
Security Affairs
Hacker News - Newest:
Hacker News - Newest: "LLM"
Simon Willison's Weblog
Simon Willison's Weblog
Project Zero
Project Zero
T
Threatpost
P
Privacy International News Feed
人人都是产品经理
人人都是产品经理
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
Application and Cybersecurity Blog
Application and Cybersecurity Blog
博客园 - Franky
Hugging Face - Blog
Hugging Face - Blog
Apple Machine Learning Research
Apple Machine Learning Research

陈少文的网站

巨变与机遇的未来十年 Kubernetes 平台管理软件压力测试方案 使用镜像部署 Hexo 静态页面 终于等到你 - GitHub 镜像仓库服务(ghcr.io) 一起来学 Go --(6)Interface 一起来学 Go --(5)Goroutine 和 Channel 什么是函数式编程 如何在 Kubernetes 集群集成 Kata 柯里化与偏函数 使用 PyGithub 自动创建 Label 软件产品是团队能力的输出 Helm 2 、Helm 3 比较 IoT 变现 Kubernetes 中的 DNS 服务 国内的 Helm 镜像源 Harbor 使用自签证书支持 Https 访问 DevOps 工具链之 Prow 如何使用 kfctl 安装 Kubeflow VS Code 无法下载 Go 插件的工具包 工程师更应具有服务精神 你不知道的 Docker 使用技巧 使用 Docker 运行 Tensorflow 论中国 什么是左移 如何清空 Git 仓库全部历史记录 一禅小和尚 有风吹过厨房 时间的玫瑰 如何在 CentOS 安装 GPU 驱动 开发 Tips(19) 使用 Velero 备份 Kubernetes 集群 Kubernetes Cheat Sheet 开发 Tips(18) 如何构建一个 Java 工程 开发 Tips(17) KubeSpray 安装 Kubernetes 报错 ip in ansible_all_ipv4_addresses 基于 Kubernetes 和 Jenkins 搭建自动化测试系统 在 Kubernetes 上动态创建 Jenkins Slave 使用 Jenkins 进行服务拨测 开发 Tips(16) Kubernetes 签发 Ingress 证书及日常故障运维 Kubernetes 中 Deployment 的基本操作 Kubernetes 中的证书 如何使用 KubeBuilder 开发一个 Operator Kubernetes 1.6.0 安装问题汇总 镜像管理工具 -- Harbor 开发 Tips(15) Docker 如何拉取镜像 开发 Tips(14) 使用 Helm 安装 harbor 开发 Tips(13) 使用 S2I 构建云原生应用 在 Kubernetes 中使用 emptyDir、hostPath、localVolume 开发 Tips(12) 开发 Tips(11) 代码质量分析工具 SonarQube 使用 Kubeadm 安装 Kubernetes 集群 一起来学 Go --(4)常用函数 Kubernetes 中的 Ceph Kubernetes 之 Volumes Kubernetes 之 Labels、Selectors 开发 Tips(10) 开源正在重构商业模式 Kubernetes 之网络 Kubernetes 之 API 使用 Helm 和 Operator 快速部署 Prometheus Kubernetes 复杂有状态应用管理框架 -- Operator Kubernetes 的包管理器 -- Helm 一起来学 Go --(3)Go Modules 如何一步一步地优化博客方案 kubectl 实用指南 Kubernetes 中的基本概念 搭建远程 Kubernetes 开发环境 大公司和小公司的 ToB 思路 开发 Tips(9) Go 入门指南 一起来学 Go --(2)数据与逻辑结构 如何预防 Web 富文本中的 XSS 攻击 django-xss-cleaner 云工作时代 一起来学 Go --(1)背景与特点 SaaS 开发团队的不同阶段 你不知道的 Git 使用技巧 输出既服务 微服务设计 继续奔跑 开发 Tips(8) 从账户安全到二次验证 Django 性能之数据库查询优化 Django 性能之分库分表 敏捷开发之研发流程 打造一致性的团队 开发 Tips(7) Pytest 进阶学习之 Mock PaaS 部署之 buildpack Go 开发配置 领域输出才是 PaaS 的核心竞争力 Pytest 入门学习 开发 Tips(6) 如何使用 Jenkins、Docker、GitLab 搭建 Django 自动化部署流程
Istio 中的 EnvoyFilter 配置
微信公众号 · 2023-11-12 · via 陈少文的网站

Please enable Javascript to view the contents

1. EnvoyFilter 是什么

EnvoyFilter 是 Istio 的 CRD 资源,它允许用户修改 Envoy 的配置,以满足用户针对不同场景的定制需求。

1
2
3
4
5
6
7
8
9
kubectl get envoyfilter -A

NAMESPACE            NAME                                              AGE
istio-system         add-request-id-into-ingressgateway                54d
istio-system         compression-gzip                                  18d
istio-system         custom-access-log                                 3d
istio-system         ingressgateway-settings                           52d
istio-system         preserve-request-header-us-test-ingress-gateway   95d
istio-system         preserve-x-request-id                             54d

通常在使用 istio 时,或多或少都会用到一些 EnvoyFilter。

EnvoyFilter 提供的功能是基于 Envoy 已有的内置功能和扩展机制来实现的,主要包括:

  • 修改网络请求和响应
  • 限流和熔断
  • 重试
  • 修改路由规则
  • 增加额外的监控指标
  • 访问黑白名单控制
  • 执行 lua 脚本

能够满足大部分的四层、七层的需求,如果满足不了,可以上 WasmPlugin,之前写过一篇 使用 tinygo 开发 Istio WasmPlugin
可以参考。

2. EnvoyFilter 注意事项

不正确的配置可能会破坏整个网格的稳定性,使用 EnvoyFilter 需要十分谨慎。

EnvoyFilter 生效的范围:

  • 全局生效,根命名空间中的 EnvoyFilter。根命名空间在配置文件中有,默认 rootNamespace: istio-system
  • 指定命名空间生效,创建在指定命名空间中的 EnvoyFilter

EnvoyFilter 优先级:

  • 根命名空间中的配置 > 其他命名空间中的配置

EnvoyFilter 生效顺序:

  • 按照创建时间依次应用

3. EnvoyFilter 配置字段

先看一个例子,给经过 Istio Gateway 的 Reponse 进行 Gzip 压缩。

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
apiVersion: networking.istio.io/v1alpha3
kind: EnvoyFilter
metadata:
  name: compression-gzip
  namespace: istio-system
spec:
  workloadSelector:
    labels:
      app: istio-ingressgateway
  configPatches:
    - applyTo: HTTP_FILTER
      match:
        context: GATEWAY
        listener:
          filterChain:
            filter:
              name: "envoy.filters.network.http_connection_manager"
              subFilter:
                name: "envoy.filters.http.router"
      patch:
        operation: INSERT_BEFORE
        value:
          name: envoy.filters.http.compressor
          typed_config:
            "@type": type.googleapis.com/envoy.extensions.filters.http.compressor.v3.Compressor
            response_direction_config:
              common_config:
                min_content_length: 256
                content_type:
                  - application/atom+xml
                  - application/javascript
                  - application/x-javascript
                  - application/json
                  - application/rss+xml
                  - application/vnd.ms-fontobject
                  - application/x-font-ttf
                  - application/x-web-app-manifest+json
                  - application/xhtml+xml
                  - application/xml
                  - font/opentype
                  - image/svg+xml
                  - image/x-icon
                  - text/css
                  - text/javascript
                  - text/plain
                  - text/x-component
            compressor_library:
              name: text_optimized
              typed_config:
                "@type": type.googleapis.com/envoy.extensions.compression.gzip.compressor.v3.Gzip
                memory_level: 3
                compression_level: COMPRESSION_LEVEL_6

简单说下关键字段

  • applyTo

应用的过滤层,这里指向的是 HTTP 层的过滤

  • workloadSelector

指定了生效的 Pod,如果没有设置 workloadSelector,则对整个命名空间生效。

  • match.context

有四个可选值 ANY 全局生效、SIDECAR_INBOUND sidecar 入站生效、SIDECAR_OUTBOUND sidecar 出站生效、GATEWAY 网关生效。

  • listener.filterChain.filter

指定了过滤器链中的过滤器,这里指向的是 Envoy 的 HTTP 过滤器。

相关的字段可以参考下图:

4. EnvoyFilter 相关的指标监控

在 Sidecar 或者 Gateway 中,本地会暴露一些指标,可以配置 Prometheus 来采集这些指标。

如果需要访问相关指标,可以通过如下接口:

1
curl 127.0.0.1:15020/stats/prometheus

但此时,不一定有你需要的指标,因为 Istio 仅启用了 Envoy 小部分的指标,以避免采集端负担过重。如果要启用更多的指标,可以通过修改相关配置来实现。

4.1 三种规则匹配模式

Istio 提供了三种过滤指标的规则:

  • inclusionRegexps, 启用正则匹配的指标
  • inclusionPrefixes, 启用前缀匹配的指标
  • inclusionSuffixes, 启用后缀匹配的指标

4.2 两个配置级别

  • 全局级别

修改 istio ConfigMap 中的 mesh 字段

1
kubectl edit cm istio -n istio-system
 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
kind: ConfigMap
apiVersion: v1
metadata:
  name: istio
  namespace: istio-system
data:
  mesh: |-
    defaultConfig:
      proxyStatsMatcher:
        inclusionRegexps:
          - ".*http.*"
      gatewayTopology:
        numTrustedProxies: 1    

启用所有 HTTP 相关的指标,重启 Istio Gateway 生效。在测试环境中,Metrics 采集的数据从 90MB 一下就升到了 140 MB。

  • Pod 级别
1
2
3
4
5
6
7
8
9
apiVersion: v1
kind: Pod
metadata:
  name: test
  annotations:
    proxy.istio.io/config: |-
      proxyStatsMatcher:
        inclusionRegexps:
          - ".*http.*"      

这种就只对注入了 sidecar 的 pod 生效。

5. 总结

本篇主要是介绍了 EnvoyFilter 的基本概念和使用方法,以及 EnvoyFilter 相关的指标监控。

6. 参考


微信公众号