惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

AI
AI
G
Google Developers Blog
T
Tailwind CSS Blog
大猫的无限游戏
大猫的无限游戏
量子位
月光博客
月光博客
美团技术团队
阮一峰的网络日志
阮一峰的网络日志
罗磊的独立博客
T
The Exploit Database - CXSecurity.com
C
CXSECURITY Database RSS Feed - CXSecurity.com
Latest news
Latest news
P
Privacy International News Feed
www.infosecurity-magazine.com
www.infosecurity-magazine.com
WordPress大学
WordPress大学
博客园 - 三生石上(FineUI控件)
TaoSecurity Blog
TaoSecurity Blog
Hacker News: Ask HN
Hacker News: Ask HN
Hugging Face - Blog
Hugging Face - Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
C
Cisco Blogs
Project Zero
Project Zero
Security Latest
Security Latest
Exploit-DB.com RSS Feed
Exploit-DB.com RSS Feed
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
人人都是产品经理
人人都是产品经理
Scott Helme
Scott Helme
S
Securelist
有赞技术团队
有赞技术团队
T
Threat Research - Cisco Blogs
N
News | PayPal Newsroom
博客园 - 聂微东
小众软件
小众软件
S
SegmentFault 最新的问题
D
Darknet – Hacking Tools, Hacker News & Cyber Security
K
KPMG report finds enterprise disconnect between AI and its ROI | CIO
P
Privacy & Cybersecurity Law Blog
博客园 - Franky
Cyberwarzone
Cyberwarzone
Cisco Talos Blog
Cisco Talos Blog
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
Spread Privacy
Spread Privacy
A
Arctic Wolf
S
Security @ Cisco Blogs
The Hacker News
The Hacker News
腾讯CDC
博客园 - 【当耐特】
T
Troy Hunt's Blog
NISL@THU
NISL@THU
爱范儿
爱范儿

jobcher on 打工人日志

2023-12-21 打工人日报 2023-12-20 打工人日报 2023-12-19 打工人日报 2023-12-18 打工人日报 2023-12-17 打工人日报 2023-12-16 打工人日报 2023-12-15 打工人日报 2023-12-14 打工人日报 2023-12-13 打工人日报 2023-12-12 打工人日报 2023-12-11 打工人日报 2023-12-10 打工人日报 2023-12-09 打工人日报 2023-12-08 打工人日报 2023-12-07 打工人日报 2023-12-06 打工人日报 2023-12-05 打工人日报 2023-12-04 打工人日报 2023-12-03 打工人日报 2023-12-02 打工人日报 2023-12-01 打工人日报 2023-11-30 打工人日报 2023-11-29 打工人日报 2023-11-28 打工人日报 2023-11-27 打工人日报 2023-11-26 打工人日报 2023-11-25 打工人日报 2023-11-24 打工人日报 2023-11-23 打工人日报 2023-11-22 打工人日报 2023-11-21 打工人日报 2023-11-20 打工人日报 2023-11-19 打工人日报 2023-11-17 打工人日报 2023-11-16 打工人日报 2023-11-15 打工人日报 2023-11-14 打工人日报 2023-11-13 打工人日报 2023-11-12 打工人日报 2023-11-11 打工人日报 2023-11-10 打工人日报 2023-11-09 打工人日报 2023-11-08 打工人日报 2023-11-07 打工人日报 2023-11-06 打工人日报 2023-11-05 打工人日报 2023-11-04 打工人日报 2023-11-03 打工人日报 2023-11-02 打工人日报 2023-11-01 打工人日报 2023-10-31 打工人日报 2023-10-30 打工人日报 2023-10-29 打工人日报 2023-10-28 打工人日报 2023-10-27 打工人日报 2023-10-26 打工人日报 2023-10-25 打工人日报 2023-10-24 打工人日报 2023-10-23 打工人日报 2023-10-22 打工人日报 2023-10-21 打工人日报 2023-10-20 打工人日报 2023-10-19 打工人日报 2023-10-18 打工人日报 2023-10-17 打工人日报 2023-10-16 打工人日报 2023-10-15 打工人日报 2023-10-14 打工人日报 2023-10-13 打工人日报 2023-10-12 打工人日报 2023-10-11 打工人日报 2023-10-10 打工人日报 2023-10-09 打工人日报 2023-10-07 打工人日报 2023-10-06 打工人日报 2023-10-05 打工人日报 2023-10-04 打工人日报 2023-10-03 打工人日报 2023-10-02 打工人日报 2023-10-01 打工人日报 2023-09-30 打工人日报 2023-09-29 打工人日报 2023-09-28 打工人日报 2023-09-27 打工人日报 2023-09-26 打工人日报 2023-09-25 打工人日报 2023-09-24 打工人日报 2023-09-23 打工人日报 2023-09-22 打工人日报 2023-09-21 打工人日报 2023-09-20 打工人日报 2023-09-19 打工人日报 2023-09-18 打工人日报 2023-09-17 打工人日报 2023-09-16 打工人日报 2023-09-15 打工人日报 2023-09-14 打工人日报 2023-09-13 打工人日报 2023-09-12 打工人日报 2023-09-11 打工人日报
Kubernetes — Rook云存储介绍和部署
2022-10-11 · via jobcher on 打工人日志

Rook 云存储介绍和部署

Rook 分布式存储软件转变为自我管理自我缩放自我修复存储服务。它通过自动化部署,引导、配置、供应、扩展、升级、迁移、灾难恢复、监控和资源管理来实现。 Rook 使用基础的云原生容器管理、调度和编排平台提供的功能来履行其职责。

Rook 利用扩展点深入融入云原生环境,为调度、生命周期管理、资源管理、安全性、监控和用户体验提供无缝体验。

部署

使用 helm 部署

1helm init -i jimmysong/kubernetes-helm-tiller:v2.8.1
2helm repo add rook-alpha https://charts.rook.io/alpha
3helm install rook-alpha/rook --name rook --namespace rook-system

直接使用 yaml 文件部署

1kubectl apply -f rook-operator.yaml

不论使用那种方式部署的 rook operator,都会在 rook-agent 中看到 rook-agent 用户无法列出集群中某些资源的错误,可以通过为 rook-agent 的分配 cluster-admin 权限临时解决,详见 Issue 1472

使用如下 yaml 文件创建一个 ClusterRoleBinding 并应用到集群中。

 1kind: ClusterRoleBinding
 2apiVersion: rbac.authorization.k8s.io/v1beta1
 3metadata:
 4  name: rookagent-clusterrolebinding
 5subjects:
 6  - kind: ServiceAccount
 7    name: rook-agent
 8    namespace: rook-system
 9roleRef:
10  kind: ClusterRole
11  name: cluster-admin
12  apiGroup: ""

部署 rook cluster

创建完 rook operator 后,我们再部署 rook cluster

 1apiVersion: v1
 2kind: Namespace
 3metadata:
 4  name: rook
 5---
 6apiVersion: rook.io/v1alpha1
 7kind: Cluster
 8metadata:
 9  name: rook
10  namespace: rook
11spec:
12  versionTag: v0.6.2
13  dataDirHostPath: /var/lib/rook
14  storage:
15    useAllNodes: true
16    useAllDevices: false
17    storeConfig:
18      storeType: bluestore
19      databaseSizeMB: 1024
20      journalSizeMB: 1024

注意:需要手动指定 versionTag,因为该镜像 repo 中没有 latest 标签,如不指定的话 Pod 将出现镜像拉取错误。

1kubectl apply -f rook-cluster.yaml

rook 集群运行在rook namespace 下,查看 rook 集群中的 pod:

 1$ kubectl -n rook get pod
 2NAME                             READY     STATUS    RESTARTS   AGE
 3rook-api-848df956bf-q6zf2        1/1       Running   0          4m
 4rook-ceph-mgr0-cfccfd6b8-cpk5p   1/1       Running   0          4m
 5rook-ceph-mon0-t496l             1/1       Running   0          6m
 6rook-ceph-mon1-zcn7v             1/1       Running   0          5m
 7rook-ceph-mon3-h97qx             1/1       Running   0          3m
 8rook-ceph-osd-557tn              1/1       Running   0          4m
 9rook-ceph-osd-74frb              1/1       Running   0          4m
10rook-ceph-osd-zf7rg              1/1       Running   1          4m
11rook-tools                       1/1       Running   0          2m

部署 StorageClass

StorageClass rook-block 的 yaml 文件(rook-storage.yaml)如下:

 1apiVersion: rook.io/v1alpha1
 2kind: Pool
 3metadata:
 4  name: replicapool
 5  namespace: rook
 6spec:
 7  replicated:
 8    size: 1
 9  # For an erasure-coded pool, comment out the replication size above and uncomment the following settings.
10  # Make sure you have enough OSDs to support the replica size or erasure code chunks.
11  #erasureCoded:
12  #  dataChunks: 2
13  #  codingChunks: 1
14---
15apiVersion: storage.k8s.io/v1
16kind: StorageClass
17metadata:
18  name: rook-block
19provisioner: rook.io/block
20parameters:
21  pool: replicapool
22  # Specify the Rook cluster from which to create volumes.
23  # If not specified, it will use `rook` as the name of the cluster.
24  # This is also the namespace where the cluster will be
25  clusterName: rook
26  # Specify the filesystem type of the volume. If not specified, it will use `ext4`.
27  # fstype: ext4

工具

部署 Rook 操作工具 pod,该工具 pod 的 yaml 文件(rook-tools.yaml)如下:

 1apiVersion: v1
 2kind: Pod
 3metadata:
 4  name: rook-tools
 5  namespace: rook-system
 6spec:
 7  dnsPolicy: ClusterFirstWithHostNet
 8  serviceAccountName: rook-operator
 9  containers:
10    - name: rook-tools
11      image: rook/toolbox:master
12      imagePullPolicy: IfNotPresent
13      env:
14        - name: ROOK_ADMIN_SECRET
15          valueFrom:
16            secretKeyRef:
17              name: rook-ceph-mon
18              key: admin-secret
19      securityContext:
20        privileged: true
21      volumeMounts:
22        - mountPath: /dev
23          name: dev
24        - mountPath: /sys/bus
25          name: sysbus
26        - mountPath: /lib/modules
27          name: libmodules
28        - name: mon-endpoint-volume
29          mountPath: /etc/rook
30  hostNetwork: false
31  volumes:
32    - name: dev
33      hostPath:
34        path: /dev
35    - name: sysbus
36      hostPath:
37        path: /sys/bus
38    - name: libmodules
39      hostPath:
40        path: /lib/modules
41    - name: mon-endpoint-volume
42      configMap:
43        name: rook-ceph-mon-endpoints
44        items:
45          - key: endpoint
46            path: mon-endpoints

ConfigMapSecret 中的配置项内容是自定义的。 使用下面的命令部署工具 pod

1kubectl apply -f rook-tools.yaml

这是一个独立的 pod,没有使用其他高级的 controller 来管理,我们将它部署在 rook-systemnamespace 下。

1kubectl -n rook exec -it rook-tools bash

使用下面的命令查看 rook 集群状态。

 1$ rookctl status
 2OVERALL STATUS: OK
 3
 4USAGE:
 5TOTAL       USED       DATA      AVAILABLE
 637.95 GiB   1.50 GiB   0 B       36.45 GiB
 7
 8MONITORS:
 9NAME             ADDRESS                IN QUORUM   STATUS
10rook-ceph-mon0   10.254.162.99:6790/0   true        UNKNOWN
11
12MGRs:
13NAME             STATUS
14rook-ceph-mgr0   Active
15
16OSDs:
17TOTAL     UP        IN        FULL      NEAR FULL
181         1         1         false     false
19
20PLACEMENT GROUPS (0 total):
21STATE     COUNT
22none
23
24$ ceph df
25GLOBAL:
26    SIZE       AVAIL      RAW USED     %RAW USED
27    38861M     37323M        1537M          3.96
28POOLS:
29    NAME     ID     USED     %USED     MAX AVAIL     OBJECTS

示例

官方提供了使用 Rook 作为典型的 LAMP(Linux + Apache + MySQL + PHP)应用 Wordpress 的存储后端的示例的 yaml 文件 mysql.yamlwordpress.yaml,使用下面的命令创建。

1kubectl apply -f mysql.yaml
2kubectl apply -f wordpress.yaml

清理

如果使用 helm 部署,则执行下面的命令:

1helm delete --purge rook
2helm delete daemonset rook-agent

如果使用 yaml 文件直接部署,则使用 kubectl delete -f 加当初使用的 yaml 文件即可删除集群。