美文网首页
ZooKeeper集群搭建

ZooKeeper集群搭建

作者: QuoVadis_k | 来源:发表于2020-07-25 17:10 被阅读0次

单机启动

下载

https://zookeeper.apache.org/releases.html#download

解压下载下来的压缩包

tar -zxvf apache-zookeeper-3.6.1-bin.tar.gz

修改配置文件

cd conf/
mv zoo_sample.cfg zoo.cfg

这里单机启动我们就使用默认的配置文件,改个名即可

配置中的 dataDirclientPort 可以根据自己的需求改,dataDir 默认是在 /tmp 路径下的,一般是要修改的,这里演示就不做修改了 ,clentPort 可以根据自己的需要修改,默认是 2181端口

启动zk

 ./bin/zkServer.sh start

测试客户端连接zk

./bin/zkCli.sh -server 127.0.0.1:2181

输入 help 可以查看zkCli的命令,这里使用几条命令测试一下

[zk: 127.0.0.1:2181(CONNECTED) 2] ls /
[zookeeper]

[zk: 127.0.0.1:2181(CONNECTED) 15] create /test sample
Created /test

[zk: 127.0.0.1:2181(CONNECTED) 16] get /test
sample

[zk: 127.0.0.1:2181(CONNECTED) 17] set /test bar

[zk: 127.0.0.1:2181(CONNECTED) 20] get /test
bar

[zk: 127.0.0.1:2181(CONNECTED) 21] delete /test

[zk: 127.0.0.1:2181(CONNECTED) 23] ls /
[zookeeper]

集群搭建

准备工作

  • 3个节点 ,这里使用了3个虚拟机节点 ,我这里分别准备了 192.168.199.238 192.168.199.239 192.168.199.240 3个节点
  • 将zk传到每个节点上
  • 开放服务器的 2888 3888 端口

解压压缩包

tar -zxvf apache-zookeeper-3.6.1-bin.tar.gz

3个节点都执行一遍

修改配置文件

到随便一个节点上修改,之后scp到其他几点即可。我这里到238节点上改。

vim conf/zoo.cfg
image-20200725162308471

上面框起来的两处配置项要注意

  • dataDir 这里在上面单机启动时没有修改,这里我们修改一下,可以根据自己的习惯设置 ,不在tmp下就行 ,这里设置了 /data/zookeeper

  • server.x 这里是设置zk每个几点的host 和 开放通讯的端口 ,格式为 server.x=host:port1:port2 ,为什么需要两个端口呢,这里引用官网的解释:(简而言之,就是其中一个端口负责正常通讯,另一个端口要去选举leader)

    Finally, note the two port numbers after each server name: " 2888" and "3888". Peers use the former port to connect to other peers. Such a connection is necessary so that peers can communicate, for example, to agree upon the order of updates. More specifically, a ZooKeeper server uses this port to connect followers to the leader. When a new leader arises, a follower opens a TCP connection to the leader using this port. Because the default leader election also uses TCP, we currently require another port for leader election. This is the second port in the server entry.

配置文件改好后,我们还需要新建 myid 文件表示这个节点是 server.x 的哪个:到我们上面配置的 dataDir 目录下 (/data/zookeper) ,新建一个 myid 的 文件,写入 server.xx

cd /data/zookeeper
echo 1 > myid

另外两个节点也执行相同的操作,写入对应的 x :

// 192.168.199.239
cd /data/zookeeper
echo 2 > myid

// 192.168.199.240
cd /data/zookeeper
echo 3 > myid

启动zk

每个节点都执行启动命令:

./bin/zkServer.sh start

使用 jps 查看进程:

[root@localhost apache-zookeeper-3.6.1-bin]# jps
29372 Jps
29245 QuorumPeerMain

QuorumPeerMain 就是 zk 的进程了

3个节点都起来后,我们查看一下集群状态,验证是否成功启动了:

238 :

[root@localhost apache-zookeeper-3.6.1-bin]# ./bin/zkServer.sh status
/usr/bin/java
ZooKeeper JMX enabled by default
Using config: /opt/servers/apache-zookeeper-3.6.1-bin/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost.
Mode: follower

239:

[root@localhost apache-zookeeper-3.6.1-bin]# ./bin/zkServer.sh status
/usr/bin/java
ZooKeeper JMX enabled by default
Using config: /opt/servers/apache-zookeeper-3.6.1-bin/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost.
Mode: follower

240:

[root@localhost apache-zookeeper-3.6.1-bin]# ./bin/zkServer.sh status
/usr/bin/java
ZooKeeper JMX enabled by default
Using config: /opt/servers/apache-zookeeper-3.6.1-bin/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost.
Mode: leader

可以看到 ,现在 240节点是 leader ,其他两个节点是follower , 集群已经启动成功了。

测试客户端连接zk

我们使用 zkCli 连到 240 (主节点)验证是否可以正常使用

./zkCli.sh -server 192.168.199.240:2181

[zk: 192.168.199.240:2181(CONNECTED) 0] ls /
[zookeeper]
[zk: 192.168.199.240:2181(CONNECTED) 1] create /foo bar
Created /foo
[zk: 192.168.199.240:2181(CONNECTED) 2] ls /
[foo, zookeeper]
[zk: 192.168.199.240:2181(CONNECTED) 3] get /foo
bar

总结

ZooKeeper 作为一个基础的分布式协调服务,在很多地方都有使用 ,如 dubbo kafka solr 等 。

总的来说,整个搭建过程还是很简单的。对zk的学习还需要更多的实践到项目中,加深对其的理解和使用。


参考 :

ZooKeeper Getting Started Guide

相关文章

  • centos7 搭建kafka集群

    搭建kafka集群,需要先搭建zookeeper集群,搭建zookeeper集群,依赖于jdk 1.下载安装jdk...

  • 多台虚拟机搭建zookeeper集群

    zookeeper集群搭建 kafka是把状态保存在zookeeper中的,首先要搭建zookeeper集群。尽管...

  • Zookeeper相关的命令

    Zookeeper集群的搭建参考:zookeeper单机、集群搭建 配置集群的zoo.cfg的配置:server....

  • zookeeper简介(整理)

    zookeeper单机模式搭建Zookeeper集群及伪集群模式搭建 简介 ZooKeeper 是一个开源的分布式...

  • Zookeeper目录

    Zookeeper(windows)伪集群搭建 Zookeeper简介

  • Docker搭建kafka集群

    搭建zookeeper集群 zookeeper集群搭建 拉取kafka镜像 运行容器 主机一: 主机二: 主机三:

  • Kafka集群

    Kafka集群是把状态保存在Zookeeper中的,首先要搭建Zookeeper集群。Zookeeper集群部署请...

  • Zookeeper docker 集群搭建

    zookeeper docker 集群搭建 本地创建三个虚拟机,搭建docker容器的zookeeper集群 首先...

  • 大数据集群搭建2

    大数据集群搭建 本文档将搭建以下集群 hadoop 集群 zookeeper 集群 hbase 集群 spark ...

  • 大数据集群搭建

    大数据集群搭建 本文档将搭建以下集群 hadoop 集群 zookeeper 集群 hbase 集群 spark ...

网友评论

      本文标题:ZooKeeper集群搭建

      本文链接:https://www.haomeiwen.com/subject/cydmlktx.html