（四）Hadoop HA高可用集群的配置-Zookeeper的安装

喜欢ヅ旅行 2023-06-19 15:25 25阅读 0赞

**目录**

一、目的及要求：

二、环境要求：

三、操作步骤：

项目一：Zookeeper的基本安装配置

项目二：Zookeeper完全分布模式配置（在admin用户下进行）

项目三：同步安装和配置

项目四：配置Zookeeper 节点标识文件（在admin）用户下进行

项目五：Zookeeper完全分布模式启动和验证（所有主机的admin用户下进行）

四、可能会遇到的问题：

--------------------

# 一、目的及要求： #

**实验目的：**

**    掌握完全分布模式的整合平台中 Zookeeper的完全分布模式的安装和验证**

**实验要求：**

1.  **完成 Zookeeper的完全分布模式的安装**
2.  **Zookeeper****服务能够正常启动和连接**
3.  **Zookeeper****控制台能够正常进入**
4.  **Zookeeper控制台命令能够正常使用**

1.  **五台独立的虚拟机**
2.  **主机之间有有效的网络连接，并已完成网络属性配置**
3.  **每台主机内存2G以上，磁盘50G**
4.  **所有主机上已安装Centos 7.4\_64操作系统**
5.  **所有主机已安装JDK**

# 二、环境要求： #

**集群规则：至少有3个以上服务节点，且服务节点总数为奇数时为最有效的配置       **

**主机1   192.168.10.111   Cluster-01**

**主机2   192.168.10.112   Cluster-02**

**主机3   192.168.10.113   Cluster-03**

**主机4   192.168.10.114   Cluster-04**

**主机5   192.168.10.115   Cluster-05**

**以上主机均为Zookeeper服务**

**软件版本：选用Zookeeper的3.4.9版本，软件包名为Zookeeper-3.4.9.tar.gz**

# 三、操作步骤： #

## **项目一：Zookeeper的基本安装配置** ##

1.  **该项操作在专门用于集群的用户admin下进行**
2.  **此项只在一台主机主机操作，然后同步安装和配置给其他主机**

**1****：创建存放Zookeeper相关文件的目录，并把软件包解压到该目录下**

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA_size_16_color_FFFFFF_t_70][]

![20191207095218959.jpeg][]

**2****：进入 .bash\_profile文件配置Zookeeper相关的环境变量。**

![20191207095218964.jpeg][]

![20191207095218969.jpeg][]

**3****：使新配置的环境变量生效，查看环境变量是否设置成功，以及环境变量值是否正确。**

![20191207095218995.jpeg][]

## **项目二：Zookeeper完全分布模式配置（在admin用户下进行）** ##

**1****：在Zookeeper目录下创建存放数据文件的data目录和存放日志文件的logs目录，进入配置文件所在目录，拷贝生成Zookeeper的配置文件。**

![20191207095259206.jpeg][]

![20191207095259236.jpeg][]

**2****：进入zoo.cfg修改配置文件**

![20191207095259288.jpeg][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA_size_16_color_FFFFFF_t_70 1][]

## **项目三：同步安装和配置** ##

**1****：将Zookeeper目录和.bash\_profile发送给集群中的其他主机**

![20191207095352670.jpeg][]

![20191207095355256.jpeg][]![20191207095355265.jpeg][]![20191207095355283.jpeg][]

**2****：在每台主机上生效新配置的环境变量，并查看新添加和修改的环境变量是否设置成功，以及环境变量的值是否正确。**

**Cluster-02**

![20191207095355285.jpeg][]

![20191207095351668.jpeg][]

**Cluster-03**

![20191207095355301.jpeg][]

![20191207095352735.jpeg][]

**Cluster-04**

![20191207095355314.jpeg][]

![20191207095355324.jpeg][]

**Cluster-05**

![20191207095355326.jpeg][]![20191207095350843.jpeg][]

## **项目四：配置Zookeeper 节点标识文件（在admin）用户下进行** ##

**1****：在所有主机上创建Zookeeper的节点标识文件**

**Cluster-01**

![20191207095355339.jpeg][]

**Cluster-02**

![20191207095355347.jpeg][]

**Cluster-03**

![20191207095355351.jpeg][]

**Cluster-04**

![20191207095351728.jpeg][]

**Cluster-05**

![20191207095355357.jpeg][]

## **项目五：Zookeeper完全分布模式启动和验证（所有主机的admin用户下进行）** ##

**1****：关闭防火墙**

**Cluster-01**

![20191207095355374.jpeg][]

**Cluster-02**

![20191207095355381.jpeg][]

**Cluster-03**

![20191207095355402.jpeg][]

**Cluster-04**

![20191207095355417.jpeg][]

**Cluster-05**

![20191207095355430.jpeg][]

**2****：启动Zookeeper服务的脚本，显示“STARTED”则表示启动成功。**

**Cluster-01**

![20191207095355440.jpeg][]

**Cluster-02**

![20191207095351817.jpeg][]

**Cluster-03**

![20191207095352887.jpeg][]

**Cluster-04**

![20191207095355463.jpeg][]

**Cluster-05**![20191207095355474.jpeg][]

**3****：查看Java进程信息，有一个名为QuorumPeerMain的进程则Zookeeper服务启动成功。**

**Cluster-01**

![20191207095355474.jpeg][]

**Cluster-02**

![20191207095350991.jpeg][]

**Cluster-03**

![20191207095355490.jpeg][]

**Cluster-04**

![20191207095355498.jpeg][]

**Cluster-05**

![20191207095355496.jpeg][]

**4****：查看该节点Zookeeper服务当前的状态，若集群中有一个leader节点，其余均为follower节点，则集群的工作状态正常。**

**Cluster-01**

![20191207095351881.jpeg][]

**Cluster-02**

![20191207095355506.jpeg][]

**Cluster-03**

![20191207095352942.jpeg][]

**Cluster-04**

![20191207095355525.jpeg][]

**Cluster-05**

![20191207095355532.jpeg][]

**5****：连接Zookeeper集群，显示CONNECTED则表示连接正常**

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA_size_16_color_FFFFFF_t_70 2][]

![20191207095355579.jpeg][]

![20191207095355593.jpeg][]

# 四、可能会遇到的问题： #

**1、Zookeeper****启动报错，状态查看不正常。**

**解决方法：检查五个虚拟机是否同时启动，经过检查，由于疏忽没有同时开启五个虚拟机。开启后正常运行。**

**2****、在容错能力相同的情况下，奇数台更节省资源。leader选举，要求可用节点数量 > 总节点数量/2  。**

**举两个例子：**

1.  **假如zookeeper集群1 ，有3个节点，3/2=1.5 ,  即zookeeper想要正常对外提供服务（即leader选举成功），至少需要2个节点是正常的。换句话说，3个节点的zookeeper集群，允许有一个节点宕机。**
2.  **假如zookeeper集群2，有4个节点，4/2=2 , 即zookeeper想要正常对外提供服务（即leader选举成功），至少需要3个节点是正常的。换句话说，4个节点的zookeeper集群，也允许有一个节点宕机。那么问题就来了， 集群1与集群2都有允许1个节点宕机的容错能力，但是集群2比集群1多了1个节点。在相同容错能力的情况下，本着节约资源的原则，zookeeper集群的节点数维持奇数个更好一些。**

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20191207095214462.jpeg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA==,size_16,color_FFFFFF,t_70
[20191207095218959.jpeg]: https://img-blog.csdnimg.cn/20191207095218959.jpeg
[20191207095218964.jpeg]: https://img-blog.csdnimg.cn/20191207095218964.jpeg
[20191207095218969.jpeg]: https://img-blog.csdnimg.cn/20191207095218969.jpeg
[20191207095218995.jpeg]: https://img-blog.csdnimg.cn/20191207095218995.jpeg
[20191207095259206.jpeg]: https://img-blog.csdnimg.cn/20191207095259206.jpeg
[20191207095259236.jpeg]: https://img-blog.csdnimg.cn/20191207095259236.jpeg
[20191207095259288.jpeg]: https://img-blog.csdnimg.cn/20191207095259288.jpeg
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA_size_16_color_FFFFFF_t_70 1]: https://img-blog.csdnimg.cn/20191207095259369.jpeg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA==,size_16,color_FFFFFF,t_70
[20191207095352670.jpeg]: https://img-blog.csdnimg.cn/20191207095352670.jpeg
[20191207095355256.jpeg]: https://img-blog.csdnimg.cn/20191207095355256.jpeg
[20191207095355265.jpeg]: https://img-blog.csdnimg.cn/20191207095355265.jpeg
[20191207095355283.jpeg]: https://img-blog.csdnimg.cn/20191207095355283.jpeg
[20191207095355285.jpeg]: https://img-blog.csdnimg.cn/20191207095355285.jpeg
[20191207095351668.jpeg]: https://img-blog.csdnimg.cn/20191207095351668.jpeg
[20191207095355301.jpeg]: https://img-blog.csdnimg.cn/20191207095355301.jpeg
[20191207095352735.jpeg]: https://img-blog.csdnimg.cn/20191207095352735.jpeg
[20191207095355314.jpeg]: https://img-blog.csdnimg.cn/20191207095355314.jpeg
[20191207095355324.jpeg]: https://img-blog.csdnimg.cn/20191207095355324.jpeg
[20191207095355326.jpeg]: https://img-blog.csdnimg.cn/20191207095355326.jpeg
[20191207095350843.jpeg]: https://img-blog.csdnimg.cn/20191207095350843.jpeg
[20191207095355339.jpeg]: https://img-blog.csdnimg.cn/20191207095355339.jpeg
[20191207095355347.jpeg]: https://img-blog.csdnimg.cn/20191207095355347.jpeg
[20191207095355351.jpeg]: https://img-blog.csdnimg.cn/20191207095355351.jpeg
[20191207095351728.jpeg]: https://img-blog.csdnimg.cn/20191207095351728.jpeg
[20191207095355357.jpeg]: https://img-blog.csdnimg.cn/20191207095355357.jpeg
[20191207095355374.jpeg]: https://img-blog.csdnimg.cn/20191207095355374.jpeg
[20191207095355381.jpeg]: https://img-blog.csdnimg.cn/20191207095355381.jpeg
[20191207095355402.jpeg]: https://img-blog.csdnimg.cn/20191207095355402.jpeg
[20191207095355417.jpeg]: https://img-blog.csdnimg.cn/20191207095355417.jpeg
[20191207095355430.jpeg]: https://img-blog.csdnimg.cn/20191207095355430.jpeg
[20191207095355440.jpeg]: https://img-blog.csdnimg.cn/20191207095355440.jpeg
[20191207095351817.jpeg]: https://img-blog.csdnimg.cn/20191207095351817.jpeg
[20191207095352887.jpeg]: https://img-blog.csdnimg.cn/20191207095352887.jpeg
[20191207095355463.jpeg]: https://img-blog.csdnimg.cn/20191207095355463.jpeg
[20191207095355474.jpeg]: https://img-blog.csdnimg.cn/20191207095355474.jpeg
[20191207095350991.jpeg]: https://img-blog.csdnimg.cn/20191207095350991.jpeg
[20191207095355490.jpeg]: https://img-blog.csdnimg.cn/20191207095355490.jpeg
[20191207095355498.jpeg]: https://img-blog.csdnimg.cn/20191207095355498.jpeg
[20191207095355496.jpeg]: https://img-blog.csdnimg.cn/20191207095355496.jpeg
[20191207095351881.jpeg]: https://img-blog.csdnimg.cn/20191207095351881.jpeg
[20191207095355506.jpeg]: https://img-blog.csdnimg.cn/20191207095355506.jpeg
[20191207095352942.jpeg]: https://img-blog.csdnimg.cn/20191207095352942.jpeg
[20191207095355525.jpeg]: https://img-blog.csdnimg.cn/20191207095355525.jpeg
[20191207095355532.jpeg]: https://img-blog.csdnimg.cn/20191207095355532.jpeg
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA_size_16_color_FFFFFF_t_70 2]: https://img-blog.csdnimg.cn/20191207095355609.jpeg?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl8zOTMyOTc1OA==,size_16,color_FFFFFF,t_70
[20191207095355579.jpeg]: https://img-blog.csdnimg.cn/20191207095355579.jpeg
[20191207095355593.jpeg]: https://img-blog.csdnimg.cn/20191207095355593.jpeg