惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Know Your Adversary
Know Your Adversary
博客园 - 叶小钗
量子位
大猫的无限游戏
大猫的无限游戏
freeCodeCamp Programming Tutorials: Python, JavaScript, Git & More
博客园 - 【当耐特】
博客园 - Franky
有赞技术团队
有赞技术团队
博客园 - 聂微东
腾讯CDC
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
Jina AI
Jina AI
Last Week in AI
Last Week in AI
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
Cloudbric
Cloudbric
WordPress大学
WordPress大学
W
WeLiveSecurity
V2EX - 技术
V2EX - 技术
博客园_首页
S
Security @ Cisco Blogs
The Last Watchdog
The Last Watchdog
Recent Commits to openclaw:main
Recent Commits to openclaw:main
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
Security Latest
Security Latest
L
Lohrmann on Cybersecurity
T
Threat Research - Cisco Blogs
Forbes - Security
Forbes - Security
宝玉的分享
宝玉的分享
The Register - Security
The Register - Security
The Hacker News
The Hacker News
B
Blog RSS Feed
C
CXSECURITY Database RSS Feed - CXSecurity.com
Schneier on Security
Schneier on Security
T
Troy Hunt's Blog
The GitHub Blog
The GitHub Blog
Hacker News: Ask HN
Hacker News: Ask HN
Spread Privacy
Spread Privacy
Hugging Face - Blog
Hugging Face - Blog
博客园 - 三生石上(FineUI控件)
GbyAI
GbyAI
cs.CV updates on arXiv.org
cs.CV updates on arXiv.org
罗磊的独立博客
Blog — PlanetScale
Blog — PlanetScale
M
MIT News - Artificial intelligence
T
Tor Project blog
S
Security Affairs
Security Archives - TechRepublic
Security Archives - TechRepublic
NISL@THU
NISL@THU
P
Proofpoint News Feed
C
Cyber Attacks, Cyber Crime and Cyber Security

郑文峰的博客

使用dify对接飞书多维表格 使用n8n对接飞书多维表格 服务启动时出现 OOM 一次服务升级时pg表DDL执行超时失败 Go语言高效IO缓冲技术详解 Go语言延迟初始化(Lazy Initialization)最佳实践 Go语言字符串拼接性能对比与优化指南 Go语言结构体内存对齐完全指南 Go语言空结构体:零内存消耗的高效编程 Go语言堆栈分配与逃逸分析深度解析 Go语言原子操作完全指南 Go语言内存预分配完全指南 Go语言不可变数据共享:无锁并发编程实践 Go语言零拷贝技术完全指南 Go语言遍历性能深度解析:从原理到优化实践 Go语言Interface Boxing原理与性能优化指南 Go协程池深度解析:原理、实现与最佳实践 使用etcd分布式锁导致的协程泄露与死锁问题 基于pre-commit的Python代码规范落地实践 初识 MCP Server pulsar阻塞导致logstash无法接入日志 django-prometheus使用及源码分析 kube-proxy源码分析 kubernetes service如何通过iptables转发 tcp缓存引起的日志丢失 django-apschedule定时任务异常停止 理解calico容器网络通信方案原理 理解flannel的三种容器网络方案原理 理解Linux IPIP隧道 理解VXLAN网络 理解Linux TunTap设备 快速了解iptables kafka中listener和advertised.listeners的作用 django rest_framework 分页 django后端服务、logstash和flink接入VictoriaMetrics指标监控 python中import原理 docker容器单机网络 手动实现docker容器bridge网络模型 mysql之MVCC原理 mysql之日志 使用java开发logstash的filter插件 使用python实现单例模式的三种方式 redis之缓存 redis之分片集群 redis之哨兵机制 redis之主从库同步 redis之持久化 redis之五种基本数据类型 go中如何处理error ddt源码分析 python装饰器的使用方法 读书笔记:如何阅读一本书 使用ddt实现unittest的参数化测试 使用kubeadm安装k8s 优化gin表单的错误提示信息 gin中validator模块的源码分析 go简单使用grpc python简单使用grpc k8s之PV、PVC和StorageClass k8s之StatefulSet k8s之DaemonSet k8s之Job和CronJob k8s之ConfigMap和Secret k8s之Service k8s之Pod k8s之Deployment 容器的本质 docker容器 python迭代器与生成器 python元编程 python垃圾回收机制 python上下文管理器 django rest_framework使用jwt django rest_framework异常处理 django rest_framework 自定义文档 django压缩文件下载 django rest_framework使用pytest单元测试 django restframework choice 自定义输出数据 django Filtering 使用 django viewset 和 Router 配合使用时报的错 django model的序列化 django中使用AbStractUser django.core.exceptions.ImproperlyConfigured Application labels aren't unique, duplicates users django 中 media配置 django 外键引用自身和on_delete参数 django 警告 while time zone support is active Flask使用flask_socketio实现websocket flask结合mongo tornado 文件上传 tornado 使用jwt完成用户异步认证 tornado 用户密码 bcrypt加密 tornado 结合wtforms使用表单操作 tornado finish和write区别 tornado 使用peewee-async 完成异步orm数据库操作 pyspark streaming简介 和 消费 kafka示例 使用hue创建ozzie的pyspark action workflow count的性能优化 django rest_framework Authentication django celery 结合使用 网站
pod中将代码与运行环境分离
zhengwenfeng · 2022-11-14 · via 郑文峰的博客

# 0. 前言

我们在创建一个 python 的 web 服务的镜像时,一般的做法是,将 python 环境与代码打包成一个镜像,然后将这个镜像进行发布。

现在有个需求就是将 python 环境和代码分别构造成两个镜像,让他们进行解耦,并且将他们编排在一个 pod 中。

本文介绍如何将 pod 中的代码与运行的环境进行拆分。

# 1. 思路

首先我们将代码打包成镜像 A,再将 python 运行环境打包成镜像 B,通过编排在 Pod 中的 InitContainer 设置为镜像 A,并将其内的代码拷贝到挂载的 emptyDir 存储卷中,然后在镜像 B 中挂载相同的存储卷,在使用运行环境中的 python 去执行存储卷中拷贝过来的代码即可。

# 2. 案例

# 2.1 创建代码镜像

先创建一个简单的 python web 程序 main.py

from flask import Flask

app = Flask(__name__)


@app.route("/")
def hello_world():
    return "Hello, World!"

app.run(host="0.0.0.0")

1
2
3
4
5
6
7
8
9
10

我们再创建包含代码镜像的 Dockerfile,做的事情是将 main.py 文件拷贝到镜像的根目录下,文件命名为Dockerfile_code

FROM busybox:latest
COPY main.py /

1
2

我们通过 docker build 开始创建镜像,镜像名称为 demo_code,默认 tag为 latest

docker build . -t "demo_code" -f Dockerfile_code

1

这个时候我们的代码镜像创建好了。

# 2.2 创建 python 运行环境

我们开始创建 python 运行环境镜像的 Dockerfile,以 python3 的镜像为基础,并安装 flask 库,文件名为 Dockerfile_runtime

FROM python:3
RUN pip install flask

1
2

再构建一下这个镜像,镜像名为 demo_runtime,默认 tag 是 latest

docker build . -t "demo_runtime" -f Dockerfile_runtime

1

这个时候,两个镜像都已准备好

# 2.3 容器编排

创建 deployments.yaml 文件,在 Pod 中的 initContainers 中配置代码镜像, 然后挂载临时存储卷,将代码复制到存储卷中。

然后再配置应用容器 python 运行环境,挂载上面相同的临时存储卷,然后再使用 python 将代码运行。

apiVersion: apps/v1
kind: Deployment
metadata:
  name: demo
  labels:
    app: demo
spec:
  selector:
    matchLabels:
      app: demo
  template:
    metadata:
      labels:
        app: demo
    spec:
      initContainers:
        - image: demo_code:latest
          name: code
          imagePullPolicy: IfNotPresent
          volumeMounts:
          - mountPath: /opt/demo
            name: app-volume
          command: ["cp", "/main.py", "/opt/demo/"]
      containers:
        - name: runtime
          image: demo_runtime:latest
          imagePullPolicy: IfNotPresent
          ports:
            - containerPort: 5000
              hostPort: 5000
              protocol: TCP
              name: http
          volumeMounts:
            - mountPath: /opt/demo
              name: app-volume
          command: ["python", "/opt/demo/main.py"]
      volumes:
      - name: app-volume
        emptyDir: { }

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39

我们通过 kubectl apply 创建 deployments

kubectl apply -f deployments.yaml

1

我们通过 kubectl get pods 可以看到 pod 已经创建成功,然后找到 pod 所在的节点。通过节点 ip+端口即可访问到容器的中接口。

[root@k8s-master-07rf9 test]# kubectl get pods -o wide
NAME                    READY   STATUS    RESTARTS   AGE     IP               NODE               NOMINATED NODE   READINESS GATES
demo-6f49db5d6c-25vss   1/1     Running   0          4m58s   10.244.132.130   k8s-master-07rf9   <none>           <none>


[root@k8s-master-07rf9 test]# curl 10.65.132.187:5000
Hello, World!

1
2
3
4
5
6
7

# 3. 总结

本文的编排方式只是 pod 的设计模式的一种。有兴趣的可以了解更多。

通过这种方式可以让代码与运行环境解耦,当我们更新代码时,并不会影响到运行环境。