1、Zookeeper实战（开发重点）

集群规划


 服务器hadoop102 服务器hadoop103 服务器hadoop104
Zookeeper Zookeeper Zookeeper Zookeeper

1.1 分布式安装部署

1）集群规划
在hadoop102、hadoop103和hadoop104三个节点上部署Zookeeper。
2）解压安装
（1）解压Zookeeper安装包到/opt/module/目录下

  1. [root@hadoop102 software]$ tar -zxvf zookeeper-3.5.7.tar.gz -C /opt/module/

（2）修改/opt/module/apache-zookeeper-3.5.7-bin名称为zookeeper-3.5.7

  1. [root@hadoop102 module]$ mv apache-zookeeper-3.5.7-bin/ zookeeper-3.5.7

（3）同步/opt/module/zookeeper-3.5.7目录内容到hadoop103、hadoop104

  1. [root@hadoop102 module]$ xsync zookeeper-3.5.7/

3）配置服务器编号
（1）在/opt/module/zookeeper-3.5.7/这个目录下创建zkData

  1. [root@hadoop102 zookeeper-3.5.7]$ mkdir zkData

（2）在/opt/module/zookeeper-3.5.7/zkData目录下创建一个myid的文件

  1. [root@hadoop102 zkData]$ vi myid

添加myid文件，注意一定要在linux里面创建，在notepad++里面很可能乱码
在文件中添加与server对应的编号：

  1. 2

（3）拷贝配置好的zookeeper到其他机器上

  1. [root@hadoop102 zkData]$ xsync myid

并分别在hadoop103、hadoop104上修改myid文件中内容为3、4
4）配置zoo.cfg文件
（1）重命名/opt/module/zookeeper-3.5.7/conf这个目录下的zoo_sample.cfg为zoo.cfg

  1. [root@hadoop102 conf]$ mv zoo_sample.cfg zoo.cfg

（2）打开zoo.cfg文件

  1. [root@hadoop102 conf]$ vim zoo.cfg

修改数据存储路径配置

  1. dataDir=/opt/module/zookeeper-3.5.7/zkData

增加如下配置

  1. #######################cluster##########################
  2. server.2=hadoop102:2888:3888
  3. server.3=hadoop103:2888:3888
  4. server.4=hadoop104:2888:3888

（3）同步zoo.cfg配置文件

  1. [root@hadoop102 conf]$ xsync zoo.cfg

（4）配置参数解读

  1. server.A=B:C:D。

A是一个数字，表示这个是第几号服务器；
集群模式下配置一个文件myid，这个文件在dataDir目录下，这个文件里面有一个数据就是A的值，Zookeeper启动时读取此文件，拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。
B是这个服务器的地址；
C是这个服务器Follower与集群中的Leader服务器交换信息的端口；
D是万一集群中的Leader服务器挂了，需要一个端口来重新进行选举，选出一个新的Leader，而这个端口就是用来执行选举时服务器相互通信的端口。
5）集群操作
（1）分别启动Zookeeper

  1. [root@hadoop102 zookeeper-3.5.7]$ bin/zkServer.sh start
  2. [root@hadoop103 zookeeper-3.5.7]$ bin/zkServer.sh start
  3. [root@hadoop104 zookeeper-3.5.7]$ bin/zkServer.sh start

（2）查看状态

  1. [root@hadoop102 zookeeper-3.5.7]# bin/zkServer.sh status
  2. JMX enabled by default
  3. Using config: /opt/module/zookeeper-3.5.7/bin/../conf/zoo.cfg
  4. Mode: follower
  5. [root@hadoop103 zookeeper-3.5.7]# bin/zkServer.sh status
  6. JMX enabled by default
  7. Using config: /opt/module/zookeeper-3.5.7/bin/../conf/zoo.cfg
  8. Mode: leader
  9. [root@hadoop104 zookeeper-3.4.5]# bin/zkServer.sh status
  10. JMX enabled by default
  11. Using config: /opt/module/zookeeper-3.5.7/bin/../conf/zoo.cfg
  12. Mode: follower

1.2 客户端命令行操作

命令基本语法 功能描述
help 显示所有操作命令
ls path 使用 ls 命令来查看当前znode的子节点
-w 监听子节点变化
-s 附加次级信息
create 普通创建
-s 含有序列
-e 临时（重启或者超时消失）
get path 获得节点的值
-w 监听节点内容变化
-s 附加次级信息
set 设置节点的具体值
stat 查看节点状态
delete 删除节点
deleteall 递归删除节点

1）启动客户端

  1. [root@hadoop103 zookeeper-3.5.7]$ bin/zkCli.sh

1.3ZK集群启动停止脚本

1）在hadoop102的/root/bin目录下创建脚本

  1. [root@hadoop102 bin]$ vim zk.sh

在脚本中编写如下内容

  1. #!/bin/bash
  3. case $1 in
  4. "start"){
  5.     for i in hadoop102 hadoop103 hadoop104
  6.     do
  7.         echo ---------- zookeeper $i 启动 ------------
  8.         ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh start"
  9.     done
  10. };;
  11. "stop"){
  12.     for i in hadoop102 hadoop103 hadoop104
  13.     do
  14.         echo ---------- zookeeper $i 停止 ------------    
  15.         ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh stop"
  16.     done
  17. };;
  18. "status"){
  19.     for i in hadoop102 hadoop103 hadoop104
  20.     do
  21.         echo ---------- zookeeper $i 状态 ------------    
  22.         ssh $i "/opt/module/zookeeper-3.5.7/bin/zkServer.sh status"
  23.     done
  24. };;
  25. esac

2）增加脚本执行权限

  1. [root@hadoop102 bin]$ chmod u+x zk.sh

3）Zookeeper集群启动脚本

  1. [root@hadoop102 module]$ zk.sh start

4）Zookeeper集群停止脚本

[root@hadoop102 module]$ zk.sh stop