惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

爱范儿
爱范儿
Simon Willison's Weblog
Simon Willison's Weblog
K
Kaspersky official blog
P
Palo Alto Networks Blog
Google DeepMind News
Google DeepMind News
www.infosecurity-magazine.com
www.infosecurity-magazine.com
AI
AI
G
GRAHAM CLULEY
O
OpenAI News
Application and Cybersecurity Blog
Application and Cybersecurity Blog
Help Net Security
Help Net Security
L
LINUX DO - 热门话题
S
Schneier on Security
P
Privacy International News Feed
L
Lohrmann on Cybersecurity
SecWiki News
SecWiki News
C
Cybersecurity and Infrastructure Security Agency CISA
T
Threatpost
C
Cyber Attacks, Cyber Crime and Cyber Security
A
Arctic Wolf
C
Cisco Blogs
V2EX - 技术
V2EX - 技术
有赞技术团队
有赞技术团队
Apple Machine Learning Research
Apple Machine Learning Research
月光博客
月光博客
Latest news
Latest news
人人都是产品经理
人人都是产品经理
Schneier on Security
Schneier on Security
Last Week in AI
Last Week in AI
Webroot Blog
Webroot Blog
美团技术团队
N
News and Events Feed by Topic
大猫的无限游戏
大猫的无限游戏
Security Archives - TechRepublic
Security Archives - TechRepublic
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
博客园 - 三生石上(FineUI控件)
The Cloudflare Blog
Project Zero
Project Zero
博客园_首页
Cloudbric
Cloudbric
IT之家
IT之家
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
雷峰网
雷峰网
罗磊的独立博客
Hacker News: Ask HN
Hacker News: Ask HN
The Last Watchdog
The Last Watchdog
cs.CV updates on arXiv.org
cs.CV updates on arXiv.org
T
Tenable Blog
Scott Helme
Scott Helme

膨胀自留地

使用CloudFlare标记管理功能优雅的使用谷歌分析 四天轻松版北京旅游攻略 Adsense税务居住地证明申请教程:如何申请中国税收居民身份证明以及Google Adsense更新新加坡税务信息教程 常见的 VPS 优化措施 HTML实现table表格移动端自动转为卡片样式 个人网站接入 Google 登录 如何从 GitHub 永久删除泄露的 .env 文件 Cloudflare设置www的域名跳转到不带www的域名 顶级iOS神器!全面解开App Store限制,AssPP Pro保姆级教程 BroadcastChannel将你的 Telegram Channel 转为微博客 Medama开源轻量级网站统计(分析)系统 白嫖一个网站监控面板:uptime-kuma 部署TraffMonetizer利用闲置VPS挂机赚钱 Counterscale-使用CloudflareWorkers部署的免费网站数据统计工具,界面类似umami 封装一个最简单的Axios,避免过度封装! 如何使用Cloudflare Email Routing创建域名邮箱免费发送邮件 使用Cron定时更新Hosts解决Gihub无法访问问题 容器化MariaDB/Mysql实现定时备份 JetBrains全家桶许可证服务器怎么找,JetBrains激活教程 图片加速接口:缓存图片,加速访问,解决防盗链 MySQL模糊查询再也不用like+%了,全文索引介绍及使用简介 为什么这么多人推荐你办理流量卡?流量卡怎么赚钱?怎么避坑? 借助Cloudflare Worker实现Google Analytics反代加速,规避广告屏蔽插件的拦截 Grafana在linux下安装和基本使用入门 Prometheus介绍、安装和基本功能快速入门 无需加速器,油猴插件解锁xbox云游戏 阿里云盘自动每日签到,无需部署,无需服务器 自定义VSCode终端主题样式 一行 CSS 代码实现响应式布局 – 使用 Grid 实现的响应式布局 加不加「/」?Nginx location 路径与 proxy_pass 的规律 Mac上Git多账户SSH配置 python 脚本命令行调用 cloudflare Wokers AI 对话示例 使用acme.sh自动申请Let's Encrypt泛域名证书 centos离线(内网环境无外网)安装docker 什么是ChatGPT API公益水龙头? Mysql8主从复制实现过程记录 纯绿色无需安装软件,10行代码即可长期关闭Windows系统更新 使用 Vercel 部署 Umami,从零开始搭建一个免费的个人博客数据统计 JS | JS实现Web应用或网站发送浏览器Notification通知 Go | 使用rsrc给golang打包的exe文件添加程序图标 Go | 基于最新的 ChatGPT API 实现命令行版 ChatGPT JS | 原生js仿ElementUI消息提示组件,含生命周期钩子 Go | 包依赖管理工具go mod使用详解 Go | 解决低版本Goland调试问题:Version of Delve is too old for this version 薅京东羊毛必备抓取Cookies教程 使用Nginx反向代理解决 Google Analytics 访问问题 Typecho纯代码生成sitemap站点地图 Lazysizes.js图片懒加载的使用 typecho使用文件缓存加快打开速度 白嫖移动,联通,电信手机短信通知 MacOS上使用可视化界面给ESP8266烧录MicroPython教程 Fail2Ban安装使用及常用配置教程 通用的检测到广告屏蔽插件进行弹窗提示实现方法 如何在 ESP 单片机上选用合适的引脚 如何找回微信已过期文件教程 一键脚本安装的 HASSIO 如何卸载呢 SqliteAdmin 宝塔面板sqlite数据库可视化管理(简单版) PostToBingIndexNow插件实现typecho发布文章自动推送到Bing站长平台 javascript | 原生JS多语言切换简单实现 Mysql8安全清理mysql.slow慢查询日志和general_log文件 NUC8黑苹果更新OpenCore引导教程,黑苹果EFI分区空间占满处理方法 局域内网的服务器利用个人电脑做跳板机访问互联网 ssh-chat- SSH命令行下聊天摸鱼服务 Python小技巧之不用GUI,照样实现图形界面 Linux下防御/减轻DDOS攻击工具DDoS deflate安装配置教程 据传宝塔面板后台会上传服务器上运行的网站信息 如何定位Mysql中CPU占用高的查询语句 python使用多线程threading模块长期循环运行内存泄漏问题解决 Linux系统VI方向键、删除键按出来是字母解决方法 python | 协程与多进程的完美结合 新安装Debian系统常用设置 MAC系统制作ubuntu启动U盘教程 利用树莓派打造时间机器 TimeMachine MAC游戏 | 公路救赎 Road Redemption May 2020 Mac摩托车竞速暴力游戏中文破解版 MAC游戏 | 笨拙英雄 Clunky Hero 0.92 Mac手绘风格的类银河战士恶魔城动作冒险游戏破解版 MAC游戏 | 拉力赛艺术Art of Rally 1.0.4b Mac卡通风格的赛车竞速游戏破解版 MAC游戏 | Len's Island 1.0 Mac 破解版 开放世界农场模拟探索游戏 MAC游戏 | 洛基Röki3.2_Mac点击型冒险游戏中文破解版 typecho聚合全文输出feed设置仅输出摘要自动截取正文前200个字符 树莓派开启Samba共享(smb) 为什么网站知道我的爬虫使用了代理? 给Edge大声朗读同源的微软tts增加下载音频按钮(tampermonkey脚本) 为了了解女朋友的小心思,我用 python 爬了榜姐微博下 70000 个女生小秘密! MAC外接屏幕亮度调节工具——BrightnessE mysql8利用CTE特性实现递归查询 漫威宇宙时间线观看顺序(持续更新) Typecho 评论弹幕插件下载及食用教程 反爬虫的极致手段,几行代码直接炸了爬虫服务器 教你轻松拥有无限个邮箱 核弹级教程:手把手教你白嫖上百个订阅节点 部署 Monit 来监控服务 「工具」Windows 卸载软件,这一个就够了 闲置服务器薅京东的羊毛—青龙面板部署与京东签到 捡垃圾8.5元智能wifi插座拆解,刷ESPHome接入HomeAssistant-超低价ESP8266开关 RS1.ES 免费Linux云服务器,单次使用3小时,不限次数! Typecho 启用 Service Workers 浏览器缓存加速首屏访问 Waiting for table metadata lock问题处理 关于a标签target_blank使用rel=noopener 宝塔默认站点泄漏源站IP,使用CDN后censys.io出现源站IP泄漏解决方法 百度云加速提示:502网关错误,解决办法以及如何添加百度云加速节点IP白名单教程
etcd入门之在Centos上安装部署
2024-01-31 · via 膨胀自留地

#编程技术 2024-01-31 13:41:00 | 全文 2063 字,阅读约需 5 分钟 | 加载中... 次浏览

👋 相关阅读


etcd 是什么

etcd 是一个分布式的、高可用的、一致的 key-value 存储数据库,基于 Go 语言实现,主要用于共享配置和服务发现。

为什么需要 etcd

在分布式系统中,各种服务配置信息的管理共享和服务发现是一个很基本也是很重要的问题。etcd 可集中管理配置信息,服务端将配置信息存储于 etcd,客户端通过 etcd 得到服务配置信息,etcd 监听配置信息的改变,发现改变通知客户端。

为了防止单点故障,还可启动多个 etcd 组成集群。etcd 集群使用 raft 一致性算法处理日志复制,保证多节点数据的强一致性。

单点部署

首先确认一下 linux 操作系统内核版本,版本号需要大于 3.10

$ uname -a
Linux  4.14.0_1-0-0-45 #2 SMP Tue Oct 19 18:27:28 CST 2021 x86_64 x86_64 x86_64 GNU/Linux

直接从官网下载相应的二进制文件包 etcd-v3.5.11-linux-amd64.tar.gz,并建立相应的工作目录结构

https://github.com/etcd-io/etcd/releases/tag/v3.5.11

$ mkdir etcd
$ cp etcd-v3.5.11-linux-amd64.tar.gz ./etcd
$ cd ./etcd
$ tar -xzf etcd-v3.5.11-linux-amd64.tar.gz
$ mkdir -p bin conf log data
$ cp etcd-v3.5.11-linux-amd64/etcd ./bin && cp etcd-v3.5.11-linux-amd64/etcdctl ./bin && cp etcd-v3.5.11-linux-amd64/etcdutl ./bin

查看一下 etcd 的版本

$ ./bin/etcd --version
etcd Version: 3.5.11
Git SHA: 946a5a6f2
Go Version: go1.20.12
Go OS/Arch: linux/amd64

启动

只是简单临时测试试用,可以直接启动

$ ./bin/etcd

也可以指定启动参数, –name 为节点取一个名字,–log-level 指定打印日志的级别

$ ./bin/etcd --name=etcd-cnlab0 --log-level=info

启动参数也可以放到配置文件中进行统一管理,然后通过 –config-file 启动参数指定启动的配置文件

$ cat conf/etcd.yaml

# 节点名字
name: etcd-cnlab0
# etcd数据存储目录
data-dir: ./data
# 日志存储路径
log-outputs: ['./log/etcd.log']
# 接收客户端连接的服务端点
listen-client-urls: http://0.0.0.0:2379
./bin/etcd --config-file=./conf/etcd.yaml

后台启动

$ nohup ./bin/etcd --config-file=conf/etcd.yaml 2>&1 1>log/etcd.log &

访问:http://你的服务器IP:2379/version 可以返回 ETCD 的版本

systemd 服务启动

简单测试时上面两种方式启动非常方便快捷,线上生产环境倾向于配置成系统服务

制作一个 etcd.service 文件:

$ sudo su -
# cd /usr/lib/systemd/system
# vim etcd.service

[Unit]
Description=Etcd Server
# 启动etcd服务后,需要启动network.target服务
After=network.target

[Service]
# 服务类型
Type=simple
# 工作目录
WorkingDirectory=/home/work/etcd
# 服务启动目录
ExecStart=/home/work/etcd/bin/etcd --config-file=/home/work/etcd/conf/etcd.yaml
# 服务启动用户名
User=root
# 服务启动组
Group=root
PIDFile=/home/work/etcd/etcd.pid
# 服务失败后重启服务
Restart=on-failure
# 服务运行打开的文件句柄数
LimitNOFILE=65536

[Install]
# 系统以多用户模式启动时自动启动本服务
WantedBy=multi-user.target

然后可以使用 systemctl 系统命令管理了 etcd 服务了

# 查看文件内容
# systemctl cat etcd.service

# 服务还未使能
# systemctl list-unit-files --type=service | grep etcd
etcd.service                                  disabled

# 重新加载服务文件
# systemctl daemon-reload

# 使能自启动
# systemctl enable etcd.service

# 启动服务
# systemctl start etcd.service

其他的几个管理命令

# 关闭服务
# systemctl stop etcd.service

# 重启服务
# systemctl restart etcd.service

# 显示服务的状态
# systemctl status etcd.service

# 在开机时不启动服务
# systemctl disable etcd.service

# 查看服务是否开机启动
# systemctl is-enabled etcd.service

# 查看启动失败的服务
# systemctl --failed | grep etcd

配置 logrotate

logrotate 是 centos 自带命令,其他 linux 操作系统可能需要自行安装,用来进行日志切割和定期删除,简单来说就是将某个日志文件按照时间或大小分割成多份,删除时间久远的日志。

配置 logrotate,对 etcd 日志文件进行切割,并限制日志文件最大大小

在 /etc/logrotate.d/ 目录下创建 etcd 服务的 logrotate 的配置文件:

vi /etc/logrotate.d/etcd

/home/work/etcd/log/*.log {
        # 切割周期为天
        daily
        # 最多保留10个文件
        rotate 10
        # 切割后的文件名添加日期后缀
        dateext
        # 日期格式
        dateformat -%Y%m%d
        # 切割后文件的后缀
        extension log
        # 如果日志文件不存在,不报错
        missingok
        # 日志文件大小为50M,超过50M后进行切割
        size 50M
        compress
        delaycompress
        notifempty
        # 文件权限,user,group
        create 0644 work work
        sharedscripts
        # 切割后执行的命令,让etcd重新加载配置
        postrotate
            /usr/bin/killall -HUP etcd
        endscript
}

验证

查看启动的进程和端口

# ps -ef | grep etcd
work      3000 25754  0 15:14 pts/0    00:00:00 ./bin/etcd --name=etcd-cnlab0 --log-level=info

# lsof -i :2379
COMMAND  PID USER   FD   TYPE     DEVICE SIZE/OFF NODE NAME
etcd    3000 work    8u  IPv4 2434566770      0t0  TCP localhost:2379 (LISTEN)
etcd    3000 work   13u  IPv4 2434581997      0t0  TCP localhost:59605->localhost:2379 (ESTABLISHED)
etcd    3000 work   14u  IPv4 2434569656      0t0  TCP localhost:2379->localhost:59605 (ESTABLISHED)

# lsof -i :2380
COMMAND  PID USER   FD   TYPE     DEVICE SIZE/OFF NODE NAME
etcd    3000 work    7u  IPv4 2434566767      0t0  TCP localhost:2380 (LISTEN)

查看服务端点状态

$ ./bin/etcdctl endpoint status --cluster -w table
+-----------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+
|       ENDPOINT        |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS |
+-----------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+
| http://localhost:2379 | 8e9e05c52164694d |   3.5.0 |   20 kB |      true |      false |         2 |          4 |                  4 |        |
+-----------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+

查看服务端点健康情况

$ ./bin/etcdctl endpoint health --cluster -w table
+-----------------------+--------+------------+-------+
|       ENDPOINT        | HEALTH |    TOOK    | ERROR |
+-----------------------+--------+------------+-------+
| http://localhost:2379 |   true | 2.059608ms |       |
+-----------------------+--------+------------+-------+

查看成员

$ ./bin/etcdctl member list
8e9e05c52164694d, started, etcd-cnlab0, http://localhost:2380, http://localhost:2379, false

写入和读取数据

$ ./bin/etcdctl put key1 hello
OK
$ ./bin/etcdctl --endpoints=http://127.0.0.1:2379 get key1
key1
hello

集群部署

假设集群有三个节点,服务 ip 分别为 10.131.21.11、10.131.21.12、10.131.21.13,为这三个节点分别创建相应的配置文件

节点配置

节点1(10.131.21.11)配置文件内容:

$ cat conf/etcd.yaml

# 节点名字,集群内唯一
name: etcd-cnlab0

# 数据存储目录
data-dir: ./data

# 日志文件配置
# logger: zap
log-outputs: ['./log/etcd.log']
# log-level: info

# 客户端连接相关配置
# 服务监听端点
listen-client-urls: http://0.0.0.0:2379
# 向客户端发布的服务端点
advertise-client-urls: http://10.131.21.11:2379

# 集群相关配置
# 监听集群其他节点连接的端点
listen-peer-urls: http://0.0.0.0:2380
# 向集群其他节点发布的服务端点
initial-advertise-peer-urls: http://10.131.21.11:2380
# 集群成员的名字以及服务端点列表,名字与每个节点配置的name字段值对应
initial-cluster: etcd-cnlab0=http://10.131.21.11:2380,etcd-cnlab1=http://10.131.21.12:2380,etcd-cnlab2=http://10.131.21.13:2380
# 集群标识token,可以认为是集群名字
initial-cluster-token: etcd-cnlab
# 创建一个新的集群。如果data-dir目录下的数据属于另外一个集群,则无法启动
inital-cluster-state: new

节点 2(10.131.21.12)配置文件内容:

$ cat conf/etcd.yaml

name: etcd-cnlab1
data-dir: ./data
listen-client-urls: http://0.0.0.0:2379
advertise-client-urls: http://10.131.21.12:2379
listen-peer-urls: http://0.0.0.0:2380

initial-advertise-peer-urls: http://10.131.21.12:2380
initial-cluster: etcd-cnlab0=http://10.131.21.11:2380,etcd-cnlab1=http://10.131.21.12:2380,etcd-cnlab2=http://10.131.21.13:2380
initial-cluster-token: etcd-cnlab
inital-cluster-state: new

节点 3(10.131.21.13)配置文件内容:

$ cat conf/etcd.yaml

name: etcd-cnlab2
data-dir: ./data
listen-client-urls: http://0.0.0.0:2379
advertise-client-urls: http://10.131.21.13:2379
listen-peer-urls: http://0.0.0.0:2380

initial-advertise-peer-urls: http://10.131.21.13:2380
initial-cluster: etcd-cnlab0=http://10.131.21.11:2380,etcd-cnlab1=http://10.131.21.12:2380,etcd-cnlab2=http://10.131.21.13:2380
initial-cluster-token: etcd-cnlab
inital-cluster-state: new

启动三个节点

$ ./bin/etcd --config-file=conf/etcd.yaml

验证

$ ./bin/etcdctl endpoint health --cluster -w table
+--------------------------+--------+------------+-------+
|         ENDPOINT         | HEALTH |    TOOK    | ERROR |
+--------------------------+--------+------------+-------+
| http://10.131.21.11:2379 |   true | 1.405365ms |       |
| http://10.131.21.12:2379 |   true | 2.106704ms |       |
| http://10.131.21.13:2379 |   true | 2.257057ms |       |
+--------------------------+--------+------------+-------+

$ ./bin/etcdctl member list
2d3298f7865acc32, started, etcd-cnlab1, http://10.131.21.12:2380, http://10.131.21.12:2379, false
71e4f8695d490d37, started, etcd-cnlab0, http://10.131.21.11:2380, http://10.131.21.11:2379, false
c2a413a1e752b148, started, etcd-cnlab2, http://10.131.21.13:2380, http://10.131.21.13:2379, false

$ ./bin/etcdctl endpoint status --cluster -w table
+--------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+
|         ENDPOINT         |        ID        | VERSION | DB SIZE | IS LEADER | IS LEARNER | RAFT TERM | RAFT INDEX | RAFT APPLIED INDEX | ERRORS |
+--------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+
| http://10.131.21.12:2379 | 2d3298f7865acc32 |   3.5.0 |   20 kB |     false |      false |         2 |         10 |                 10 |        |
| http://10.131.21.11:2379 | 71e4f8695d490d37 |   3.5.0 |   20 kB |      true |      false |         2 |         10 |                 10 |        |
| http://10.131.21.13:2379 | c2a413a1e752b148 |   3.5.0 |   20 kB |     false |      false |         2 |         10 |                 10 |        |
+--------------------------+------------------+---------+---------+-----------+------------+-----------+------------+--------------------+--------+

VIA

etcd入门之安装部署 - 简书 https://www.jianshu.com/p/56df66161488

Install | etcd https://etcd.io/docs/v3.5/install/

etcd简单介绍 - 疯一样的狼人 - 博客园 https://www.cnblogs.com/wujuntian/p/12837926.html


×