您好,欢迎来到海洋目录网!网站收录,值得选择!长期招友情链接 QQ10212321

快审
当前位置:海洋目录网 » 站长资讯 » 站长资讯 » 文章详细 订阅RssFeed

zookeeper(单机、伪集群、集群)部署

来源:网站目录 浏览:50次 时间:2020-09-27

ZooKeeper是一个分布式的、开源的分布式应用程序协调服务,可以在分布 式环境中实现应用配置管理、统一命名服务、状态同步服务等功能。
ZooKeeper是一种为分布式应用所设计的高可用、高性能的开源协调服务,它提供了一项基本服务:分布式锁 服务。由于ZooKeeper开源的特性,在其分布式锁实现的基础上,又被摸索出了其它的功用,譬如:配置维 护、组服务、分布式消息队列等等。 ZooKeeper维护了一个类似文件系统的数据结构,其内部每个子目录都被 称作znode(目录节点),与文件系统一样,我们可以自由的增删改查znode。ZooKeeper集群适合搭建在奇数 台机器上。只要集群中半数以上主机处于存活,那么服务就是可用的。 ZooKeeper在配置文件中并没有指定 master和slave,但是,ZooKeeper在工作时,只有一个节点为leader,其余节点为follower,leader是通过内部 的选举机制临时产生的。

ZooKeeper特点
1、顺序一致性:以zxid来保证事务的顺序性。
2、原子性:以zab保证原子操作,要么成功,要么失败。
3、单一视图:客户获取到的数据始终是一致的。
4、可靠:以版本实现"写入校验",保证了数据写入的正确性。

ZooKeeper有三种安装方式:单机模式 & 伪集群模式 & 集群模式
单机模式:ZooKeeper以单实例的形式运 行在一台服务器上,适合测试环境。
伪集群模式:在一台服务器上跑多个ZooKeeper实例。
集群模式: ZooKeeper运行在多台服务器上,适合生产环境。
所需软件包(提取码:mqtp )

一、开始部署

1、单机安装Zookeeper

#安装JDK环境[root@zookeeper ~]# tar zxf jdk-8u211-linux-x64.tar.gz -C /usr/local/[root@zookeeper ~]# vim /etc/profile            # 编辑Java变量..........................export JAVA_HOME=/usr/local/jdk1.8.0_211export JRE_HOME=/usr/local/jdk1.8.0_211/jreexport CLASSPATH=$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jarexport PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH[root@zookeeper ~]# source /etc/profile           # 执行使配置生效[root@zookeeper ~]# java -version                # 查看是否安装成功java version "1.8.0_211"Java(TM) SE Runtime Environment (build 1.8.0_211-b12)Java HotSpot(TM) 64-Bit Server VM (build 25.211-b12, mixed mode)
#安装zookeeper[root@zookeeper ~]# tar zxf zookeeper-3.4.14.tar.gz -C /usr/local/[root@zookeeper ~]# vim /etc/profileexport ZOOKEEPER_HOME=/usr/local/zookeeper-3.4.14export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$ZOOKEEPER_HOME/bin:$PATH                          # 加入Java配置的PATH中[root@zookeeper ~]# source /etc/profile[root@zookeeper ~]# cd /usr/local/zookeeper-3.4.14/conf/[root@zookeeper conf]# cp zoo_sample.cfg zoo.cfg[root@zookeeper conf]# mkdir -p /usr/local/zookeeper-3.4.14/data                           # 创建数据目录[root@zookeeper conf]# sed -i "s/dataDir=\/tmp\/zookeeper/dataDir=\/usr\/local\/zookeeper-3.4.14\/data/g" zoo.cfg [root@zookeeper conf]# zkServer.sh start             # 启动服务[root@zookeeper conf]# netstat -anput | grep 2181           # 确定端口在监听tcp6       0      0 :::2181                 :::*                    LISTEN      4903/java   

1)客户端命令操作

[root@zookeeper ~]# zkCli.sh                # 后面不加任何参数默认连接localhost本机的2181端口Connecting to localhost:2181[zk: localhost:2181(CONNECTED) 0] help         # 显示客户端支持的命令[zk: localhost:2181(CONNECTED) 1] ls /          # 查看当前zk中所包含的内容[zookeeper][zk: localhost:2181(CONNECTED) 2] ls2 /        # 查看当前zk中的内容及详情[zookeeper]cZxid = 0x0ctime = Thu Jan 01 08:00:00 CST 1970mZxid = 0x0mtime = Thu Jan 01 08:00:00 CST 1970pZxid = 0x0cversion = -1dataVersion = 0aclVersion = 0ephemeralOwner = 0x0dataLength = 0numChildren = 1[zk: localhost:2181(CONNECTED) 3] create /test1 neirong             # 创建一个节点Created /test1[zk: localhost:2181(CONNECTED) 4] ls /          # 可以看到已经多了一个test1[zookeeper, test1][zk: localhost:2181(CONNECTED) 5] get /test1        # huo获取节点信息,需写绝对路径neirong                            # 节点数据信息 cZxid = 0x2                      # 节点创建时额zxid ctime = Sat Apr 04 16:15:30 CST 2020               # 节点创建的时间 mZxid = 0x2mtime = Sat Apr 04 16:15:30 CST 2020                    # 节点最近一次更新的时间 pZxid = 0x2cversion = 0                   # 子结点数据更新次数 dataVersion = 0                 # 本节点数据更新次数 aclVersion = 0                 # 节点ACL的更新次数 ephemeralOwner = 0x0dataLength = 7               # 节点数据长度 numChildren = 0                # 子结点的数量 [zk: localhost:2181(CONNECTED) 6] set /test1 "gengxin"         # 更新节点数据[zk: localhost:2181(CONNECTED) 7] get /test1           # 可以看到已经更改为新的数据gengxin[zk: localhost:2181(CONNECTED) 8] history         # 列出zui最近所使用的命令0 - help1 - ls /2 - ls2 /3 - create /test1 neirong4 - ls /5 - get /test16 - set /test1 "gengxin"7 - get /test18 - history[zk: localhost:2181(CONNECTED) 9] delete /test1         # 删除节点,但是无法删除拥有子节点的 节点[zk: localhost:2181(CONNECTED) 11] rmr /test1           # rmrk可以删除带有子节点的节点

关于zoo.cfg配置参数说明可参考官方文档

2、zookeeper单机伪集群部署
在一台主机上跑多个zk实例,每个zk实例对应一个独立的配置文件;但是每个配置文件的clientPort & dataDir & dataLogDir绝对不能相同,还需要在dataDir中创建myid文件来指定该dataDir对应的zk实例。
环境如下:
这里在一台物理服务器上,部署3个zk实例
zookeeper(单机、伪集群、集群)部署
1)安装zookeeper

#安装好JDK,可参考之前单机安装[root@zookeeper ~]# java -version java version "1.8.0_211"Java(TM) SE Runtime Environment (build 1.8.0_211-b12)Java HotSpot(TM) 64-Bit Server VM (build 25.211-b12, mixed mode)
#安装zookeeper[root@zookeeper ~]# tar zxf zookeeper-3.4.14.tar.gz -C /usr/local/[root@zookeeper ~]# vim /etc/profileexport ZOOKEEPER_HOME=/usr/local/zookeeper-3.4.14export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$ZOOKEEPER_HOME/bin:$PATH                          [root@zookeeper ~]# source /etc/profile
#创建数据目录[root@zookeeper ~]# mkdir -p /usr/local/zookeeper-3.4.14/{data_0,data_1,data_2}#创建myid文件,并填入ID值[root@zookeeper ~]# echo 0 > /usr/local/zookeeper-3.4.14/data_0/myid[root@zookeeper ~]# echo 1 > /usr/local/zookeeper-3.4.14/data_1/myid[root@zookeeper ~]# echo 2 > /usr/local/zookeeper-3.4.14/data_2/myid#创建事务日志目录,官方建立尽量给事务日志作单独的磁盘或挂载点,这会极大的提高zk性能[root@zookeeper ~]# mkdir -p /usr/local/zookeeper-3.4.14/{logs_0,logs_1,logs_2}#配置server0[root@zookeeper ~]# cd /usr/local/zookeeper-3.4.14/conf/[root@zookeeper conf]# cp zoo_sample.cfg zoo_0.cfg[root@zookeeper conf]# egrep -v "^$|^#" zoo_0.cfg          # 修改配置文件为如下tickTime=2000initLimit=10syncLimit=5dataDir=/usr/local/zookeeper-3.4.14/data_0/clientPort=2180dataLogDir=/usr/local/zookeeper-3.4.14/logs_0/server.0=127.0.0.1:2287:3387 server.1=127.0.0.1:2288:3388 server.2=127.0.0.1:2289:3389 #配置server1[root@zookeeper conf]# cp zoo_0.cfg zoo_1.cfg           # 复制之前的配置文件,修改个别参数[root@zookeeper conf]# vim zoo_1.cfgdataDir=/usr/local/zookeeper-3.4.14/data_1/clientPort=2181dataLogDir=/usr/local/zookeeper-3.4.14/logs_1/#配置server2[root@zookeeper conf]# cp zoo_0.cfg zoo_2.cfg[root@zookeeper conf]# vim zoo_2.cfgdataDir=/usr/local/zookeeper-3.4.14/data_2/clientPort=2182dataLogDir=/usr/local/zookeeper-3.4.14/logs_2/[root@zookeeper conf]# zkServer.sh start zoo_0.cfg             # 我这里是在conf目录下,所以后面直接接着配置文件,如果不在conf下,则需写全路径#启动各实例[root@zookeeper conf]# zkServer.sh start zoo_1.cfg [root@zookeeper conf]# zkServer.sh start zoo_2.cfg [root@zookeeper conf]# netstat -anput | grep java tcp6       0      0 :::2180                 :::*                    LISTEN      9251/java           tcp6       0      0 :::2181                 :::*                    LISTEN      9291/java           tcp6       0      0 :::2182                 :::*                    LISTEN      9334/java    #列出JVM[root@zookeeper conf]# jps9377 Jps9251 QuorumPeerMain9334 QuorumPeerMain9291 QuorumPeerMain#各实例都启动之后就可以使用客户端进行连接了[root@zookeeper conf]# zkCli.sh -server 127.0.0.1:2180     # 例

关于多个server的配置说明: 这些server表单服务器的条目。列出组成ZooKeeper服务的服务器。当服务器启动 时,它通过在数据目录中查找文件myid来知道它是哪个服务器。该文件包含服务器号。 最后,注意每个服务器 名后面的两个端口号:“2287”和“3387”。对等点使用前一个端口连接到其他对等点。这样的连接是必要的,以便 对等点可以通信,例如,就更新的顺序达成一致。更具体地说,ZooKeeper服务器使用这个端口将追随者连接 到leader。当一个新的领导者出现时,追随者使用这个端口打开一个TCP连接到领导者。由于默认的领导人选举 也使用TCP,我们目前需要另一个端口的领导人选举。这是服务器条目中的第二个端口。

3、 ZooKeeper多机集群部署
为了获得可靠的zk服务,应该在多台服务器上部署多个zk,只要集群中大多数的zk服务启动了,那么总的zk服 务将是可用的。 在多台主机上搭建ZooKeeper集群的方式,与伪集群几乎是差不多的。
环境如下:
zookeeper(单机、伪集群、集群)部署
三台服务器上都需要执行如下操作

#安装好JDK[root@zookeeper01 ~]# java -version java version "1.8.0_211"Java(TM) SE Runtime Environment (build 1.8.0_211-b12)Java HotSpot(TM) 64-Bit Server VM (build 25.211-b12, mixed mode)#安装好zookeeper[root@zookeeper01 ~]# tar zxf zookeeper-3.4.14.tar.gz -C /usr/local/[root@zookeeper01 ~]# vim /etc/profileexport ZOOKEEPER_HOME=/usr/local/zookeeper-3.4.14export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$ZOOKEEPER_HOME/bin:$PATH                          # 加入Java配置的PATH中[root@zookeeper01 ~]# source /etc/profile

server0配置

[root@zookeeper01 ~]# mkdir -p /usr/local/zookeeper-3.4.14/{data,logs}[root@zookeeper01 ~]# echo 0 > /usr/local/zookeeper-3.4.14/data/myid[root@zookeeper01 ~]# cd /usr/local/zookeeper-3.4.14/conf/[root@zookeeper01 conf]# cp zoo_sample.cfg zoo.cfg[root@zookeeper01 conf]# egrep -v "^$|^#" zoo.cfg          # 修改配置文件为如下tickTime=2000initLimit=10syncLimit=5dataDir=/usr/local/zookeeper-3.4.14/data/clientPort=2181dataLogDir=/usr/local/zookeeper-3.4.14/logsserver.0=192.168.171.134:2288:3388server.1=192.168.171.135:2288:3388server.2=192.168.171.140:2288:3388[root@zookeeper01 conf]# zkServer.sh start          # 启动实例[root@zookeeper01 conf]# netstat -anput | grep java     # 确定端口在监听tcp6       0      0 :::43542                :::*                    LISTEN      40355/java          tcp6       0      0 192.168.171.134:3388    :::*                    LISTEN      40355/java          tcp6       0      0 :::2181                 :::*                    LISTEN      40355/java        

server1配置

[root@zookeeper02 ~]# mkdir -p /usr/local/zookeeper-3.4.14/{data,logs}[root@zookeeper02 ~]# echo 1 > /usr/local/zookeeper-3.4.14/data/myid[root@zookeeper02 ~]# cd /usr/local/zookeeper-3.4.14/conf/[root@zookeeper02 conf]# scp root@192.168.171.134:/usr/local/zookeeper-3.4.14/conf/zoo.cfg ./[root@zookeeper02 conf]# zkServer.sh start[root@zookeeper02 conf]# netstat -anput | grep java  tcp6       0      0 192.168.171.135:3388    :::*                    LISTEN      40608/java          tcp6       0      0 :::2181                 :::*                    LISTEN      40608/java 

server2配置

[root@zookeeper03 ~]# mkdir -p /usr/local/zookeeper-3.4.14/{data,logs}[root@zookeeper03 ~]# echo 2 > /usr/local/zookeeper-3.4.14/data/myid[root@zookeeper03 ~]# cd /usr/local/zookeeper-3.4.14/conf/[root@zookeeper03 conf]# scp root@192.168.171.134:/usr/local/zookeeper-3.4.14/conf/zoo.cfg ./[root@zookeeper03 conf]# zkServer.sh start[root@zookeeper03 conf]# netstat -anput | grep javatcp6       0      0 192.168.171.140:3388    :::*                    LISTEN      12769/java          tcp6       0      0 :::2181                 :::*                    LISTEN      12769/java   

查看各zk节点的状态

[root@zookeeper01 /]# zkServer.sh status ZooKeeper JMX enabled by defaultUsing config: /usr/local/zookeeper-3.4.14/bin/../conf/zoo.cfgMode: follower[root@zookeeper02 /]# zkServer.sh status           # 02服务器为leaderZooKeeper JMX enabled by defaultUsing config: /usr/local/zookeeper-3.4.14/bin/../conf/zoo.cfgMode: leader[root@zookeeper03 /]# zkServer.sh status ZooKeeper JMX enabled by defaultUsing config: /usr/local/zookeeper-3.4.14/bin/../conf/zoo.cfgMode: follower

推荐站点

  • At-lib分类目录At-lib分类目录

    At-lib网站分类目录汇集全国所有高质量网站,是中国权威的中文网站分类目录,给站长提供免费网址目录提交收录和推荐最新最全的优秀网站大全是名站导航之家

    www.at-lib.cn
  • 中国链接目录中国链接目录

    中国链接目录简称链接目录,是收录优秀网站和淘宝网店的网站分类目录,为您提供优质的网址导航服务,也是网店进行收录推广,站长免费推广网站、加快百度收录、增加友情链接和网站外链的平台。

    www.cnlink.org
  • 35目录网35目录网

    35目录免费收录各类优秀网站,全力打造互动式网站目录,提供网站分类目录检索,关键字搜索功能。欢迎您向35目录推荐、提交优秀网站。

    www.35mulu.com
  • 伍佰目录伍佰目录

    伍佰网站目录免费收录各类优秀网站,全力打造互动式网站目录,提供网站分类目录检索,关键字搜索功能。欢迎您向伍佰目录推荐、提交优秀网站。

    www.wbwb.net