惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

爱范儿
爱范儿
WordPress大学
WordPress大学
博客园 - 【当耐特】
The Cloudflare Blog
B
Blog
Last Week in AI
Last Week in AI
小众软件
小众软件
量子位
S
SegmentFault 最新的问题
V
Visual Studio Blog
博客园 - 叶小钗
美团技术团队
阮一峰的网络日志
阮一峰的网络日志
Hugging Face - Blog
Hugging Face - Blog
钛媒体:引领未来商业与生活新知
钛媒体:引领未来商业与生活新知
宝玉的分享
宝玉的分享
A
About on SuperTechFans
雷峰网
雷峰网
J
Java Code Geeks
Microsoft Azure Blog
Microsoft Azure Blog
腾讯CDC
MongoDB | Blog
MongoDB | Blog
酷 壳 – CoolShell
酷 壳 – CoolShell
Martin Fowler
Martin Fowler

任霏博客

我将关闭服务器:AI彻底掐死了奄奄一息的个人博客 - 博客文章 - 任霏的个人博客网站 Vibe Coding 实现本地模型 Token 自由 IntelliJ IDEA + LM Studio + LM Link + Continue - 博客文章 - 任霏的个人博客网站 1Password涨价后,别急着退订1Password,这个操作能帮你省25% - 博客文章 - 任霏的个人博客网站 我,吃饱了撑的注册了个域名,Cloudflare账号没了,不建议将域名放在Cloudflare - 博客文章 - 任霏的个人博客网站 临时邮箱:保护隐私与免骚扰的新方式 - 博客文章 - 任霏的个人博客网站 价值4100万美元SOL被盗SwissBorg在Solana上遭遇安全事件超200万枚ETH排队退出质押 - 博客文章 - 任霏的个人博客网站 注意 Web3 钱包遭遇 NPM 超大规模供应链攻击投毒事件 - 博客文章 - 任霏的个人博客网站 我受到以太坊ERC-20假代币地址投毒攻击记录一下大家谨防上当受骗 - 博客文章 - 任霏的个人博客网站 在2025年使用显卡 NVIDIA RTX 2080 Ti 挖矿收益记录和分析还能不能挖矿 - 博客文章 - 任霏的个人博客网站 分享我是如何成功戒烟的经验(包含失败的经验) - 博客文章 - 任霏的个人博客网站 在 OpenWRT 中配置 PassWall2 插件的教程记录 - 博客文章 - 任霏的个人博客网站 Office Professional Plus 2019 VL 版下载与 KMS 激活 - 博客文章 - 任霏的个人博客网站 最近几天我的 CDN 流量受到来自电信[山东烟台]、[江苏扬州]两地家庭宽带的攻击 - 博客文章 - 任霏的个人博客网站 自建AI服务器使用PVE配置显卡直通虚拟机安装驱动、CUDA和cuDNN运行LLM大模型进行AI炼丹 - 博客文章 - 任霏的个人博客网站 各代英特尔Intel芯片组主板适配兼容的CPU和DDR内存数据统计 - 博客文章 - 任霏的个人博客网站 GitLab Global 国际站将在60天内删除中国大陆、香港、澳门地区的账号 - 博客文章 - 任霏的个人博客网站 Github Copilot Free 开放免费版所有人均可使用 OpenAI GPT-4o、Anthropic Claude 3.5 AI 代码生成服务 - 博客文章 - 任霏的个人博客网站 Cloudflare 更新了订阅协议明确禁止优选IP和搭建梯子的行为 - 博客文章 - 任霏的个人博客网站 Linux(systemd)手动离线安装二进制(binary)MairaDB数据库指定版本 - 博客文章 - 任霏的个人博客网站 流程引擎 Flowable/Activiti 无法启动报错:liquibase - Waiting for changelog lock.... - 博客文章 - 任霏的个人博客网站 Spring Boot 全局异常捕获 ControllerAdvice 无法捕获 过滤器(Filter)和拦截器(Interceptor)中的异常 - 博客文章 - 任霏的个人博客网站 Freenom 收回了全部免费域名(.tk/.cf/.gq/.ga/.ml) - 博客文章 - 任霏的个人博客网站 Alibaba Druid 数据库连接池 takeLast() AQS 死锁导致程序无响应 - 博客文章 - 任霏的个人博客网站 你的网站加入 HSTS preload 预加载列表了吗 - 博客文章 - 任霏的个人博客网站 我的博客网站接入使用 Cloudflare 的架构分享 - 博客文章 - 任霏的个人博客网站 在 Ubuntu 上的 Nginx 高并发配置实践 - 博客文章 - 任霏的个人博客网站 技术分析黑客敲诈勒索站长的新手法百度对此也无能为力 - 博客文章 - 任霏的个人博客网站 百度站长平台快速收录权限和sitemap提交权限被全部收回 - 博客文章 - 任霏的个人博客网站 极狐 GitLab 免费时代结束不升级付费账号将禁止登陆 - 博客文章 - 任霏的个人博客网站 免费.ml域名10年委托合同到期被马里共和国收回域名经营权 - 博客文章 - 任霏的个人博客网站
Zookeeper入门教程(一):Zookeeper简介与安装教程 - 博客文...
任霏 · 2021-03-25 · via 任霏博客

教程索引目录请访问:《大数据技术入门级系列教程

ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。

它可以接受观察者的注册订阅,当数据发生改变时就可以通知观察者,你可以理解为 ZooKeeper = 文件系统+通知机制。

ZooKeeper 是由一个领导者(Leader)和多个跟随者(Follower)注册的集群,只要有半数以上的节点存活,就可以正常提供服务,同时还可以保证全局数据一致性、请求顺序执行、更新原子性等特点。

它的数据结构和 Unix 系统很像,由根开始,下面有子节点,像文件夹一样一级一级的排列下去,每个Node节点默认能存储 1MB 的数据。

Zookeeper官网:https://zookeeper.apache.org

Zookeeper本地安装教程

必要条件

在开始之前,需要先安装 Java 运行环境 JDK,此处不在赘述,默认大家已经配置好了 JDK,这个是基础内容,如果不会的同学请先搜索安装 JDK 的教程。下载Zookeeper并解压到本地文件夹。

修改配置

我在我自己电脑上已经下载Zookeeper并解压到了/Users/renfei/apache-zookeeper-3.6.2-bin,配置文件就在 apache-zookeeper-3.6.2-bin/conf 里面,复制 zoo_sample.cfg 文件为 zoo.cfg,这个 zoo.cfg 就是我们要修改的配置文件了。

主要修改数据目录地址:dataDir=/Users/renfei/apache-zookeeper-3.6.2-bin/zkData,这个改成你自己的本地路径。

其他配置说明

  • tickTime =2000:通信心跳数,Zookeeper服务器与客户端心跳时间,单位毫秒。服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个tickTime时间就会发送一个心跳,并且设置最小的session超时时间为两倍心跳时间。

  • initLimit =10:LF初始通信时限。集群中的Follower跟随者服务器与Leader领导者服务器之间初始连接时能容忍的最多心跳数(tickTime的数量),用它来限定集群中的Zookeeper服务器连接到Leader的时限。

  • syncLimit =5:LF同步通信时限。集群中Leader与Follower之间的最大响应时间单位,假如响应超过syncLimit * tickTime,Leader认为Follwer死掉,从服务器列表中删除Follwer。

  • clientPort =2181:客户端连接端口

启动Zookeeper

执行:

bin/zkServer.sh start

启动客户端

bin/zkCli.sh

Zookeeper分布式安装教程

必要条件

在前面的系列教程中《Hadoop入门教程(四):Hadoop 完全分布式集群环境》我们已经搭建了集群,我们现在就往集群中安装Zookeeper,所以搭建集群的相关事项就不再赘述了。同样是下载Zookeeper到集群并解压到集群机器的本地文件夹。

修改配置

与本地运行不同的是,这里我们需要先建立好数据文件夹,例如:mkdir /Users/renfei/apache-zookeeper-3.6.2-bin/zkData,然后再创建一个 myid 文件:touch myid,然后在这个文件中写入服务器的编号。

同样复制 apache-zookeeper-3.6.2-bin/conf/zoo_sample.cfg 文件为 zoo.cfg,这个 zoo.cfg 就是我们要修改的配置文件了。

修改数据目录:dataDir=/Users/renfei/apache-zookeeper-3.6.2-bin/zkData,这个改成你自己的本地路径。然后增加如下配置,请根据你的集群环境修改:

server.1=n1.renfei.net:2888:3888
server.2=n2.renfei.net:2888:3888
server.3=n3.renfei.net:2888:3888

格式是:server.A=B:C:D

  • A是一个数字,表示这个是第几号服务器。集群模式下配置一个文件myid,这个文件在dataDir目录下,这个文件里面有一个数据就是A的值,Zookeeper启动时读取此文件,拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。

  • B是这个服务器的地址;

  • C是这个服务器Follower与集群中的Leader服务器交换信息的端口;

  • D是万一集群中的Leader服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口。

启动Zookeeper

在集群环境中,我们需要分别启动各个节点的 Zookeeper:bin/zkServer.sh start

客户端命令行

命令基本语法功能描述
help显示所有操作命令
ls path [watch]使用 ls 命令来查看当前znode中所包含的内容
ls2 path [watch]查看当前节点数据并能看到更新次数等数据
create普通创建
-s含有序列
-e临时(重启或者超时消失)
get path [watch]获得节点的值
set设置节点的具体值
stat查看节点状态
delete删除节点
rmr递归删除节点

对于程序员 Linux 操作应该不用多说了吧,按照上面的语法或者官方文档就可以操作了,大多数情况下咱们都是编程操作 ZK,这个就不多说了。