Zookeeper之介绍和安装环境准备

梦里梦外; 2022-02-01 07:09 248阅读 0赞

## zookeeper概述 ##

ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。  
  Zookeeper是一个分布式协调服务；就是为用户的分布式应用程序提供协调服务

<table> 
 <thead> 
  <tr> 
   <th>序号</th> 
   <th>功能</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>1</td> 
   <td>为别的分布式程序服务的</td> 
  </tr> 
  <tr> 
   <td>2</td> 
   <td>本身就是一个分布式程序</td> 
  </tr> 
  <tr> 
   <td>3</td> 
   <td>主从协调 服务器节点动态上下线 统一配置管理 分布式共享锁 一名称服务</td> 
  </tr> 
  <tr> 
   <td>4</td> 
   <td>管理(存储，读取)用户程序提交的数据 并为用户程序提供数据节点监听服务</td> 
  </tr> 
 </tbody> 
</table>

## Zookeeper的集群机制 ##

zookeeper是为其他分布式程序提供服务的，所以本身自己不能随便就挂了，所以zookeeper自身的集群机制就很重要。zookeeper的集群机制采用的是半数存活机制，也就是整个集群节点中有半数以上的节点存活，那么整个集群环境可用。这也就是说们的集群节点最好是奇数个节点。

## zookeeper集群节点的角色 ##

## Leader ##

Leader服务器是Zookeeper集群工作的核心，其主要工作如下

事务请求的唯一调度和处理者，保证集群事务处理的顺序性。  
集群内部各服务器的调度者。

## Follower ##

Follower是Zookeeper集群的跟随者，其主要工作如下

处理客户端非事务性请求（读取数据），转发事务请求给Leader服务器。
    参与事务请求Proposal的投票。
    参与Leader选举投票。

## 集群环境准备 ##

## 准备3个节点 ##

## 配置ip地址（其他两个如此参上） ##

删除 HWADDR这行信息  
![在这里插入图片描述][20190513191953232.png]  
![在这里插入图片描述][20190513191904546.png]

## 节点的映射关系 ##

其他两个节点也这样配置  
![在这里插入图片描述][20190513191728272.png]  
![在这里插入图片描述][2019051319170098.png]  
删除一个文件  
![在这里插入图片描述][20190513192024567.png]  
三个节点修改主机名  
![在这里插入图片描述][20190513192248130.png]  
![在这里插入图片描述][20190513192241934.png]  
重启

## 配置免密登录 ##

ssh-keygen

四次回车即可  
然后四次回车就可以了，然后就可以在当前登录用户的主目录下可以查看到.ssh目录，公钥和私钥就保存在该目录中  
![在这里插入图片描述][20190513192447177.png]

## 发送公钥给需要免密登录的节点 ##

ssh-copy-id zek00
    ssh-copy-id zek01
    ssh-copy-id zek02

![在这里插入图片描述][20190513192604799.png]  
分别发送给各个节点，自身也需要发送。  
然后在其他两个节点上重复此步骤

## 关闭防火墙 ##

重启后生效(永久关闭)  
开启： chkconfig iptables on  
关闭： chkconfig iptables off

即时生效，重启后失效  
开启： service iptables start  
关闭： service iptables sto

## zookeeper集群搭建 ##

下载地址:[http://mirror.bit.edu.cn/apache/zookeeper/][http_mirror.bit.edu.cn_apache_zookeeper]  
linux下载命令

wget http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.14/zookeeper-3.4.14.tar.gz

解压缩命令

tar -zxvf zookeeper-3.4.14.tar.gz

## 配置文件 ##

![在这里插入图片描述][20190513192930238.png]  
修改的地方有两处:

修改zookeeper存储数据的位置
    添加集群节点信息

# The number of milliseconds of each tick
    tickTime=2000
    # The number of ticks that the initial 
    # synchronization phase can take
    initLimit=10
    # The number of ticks that can pass between 
    # sending a request and getting an acknowledgement
    syncLimit=5
    # the directory where the snapshot is stored.
    # do not use /tmp for storage, /tmp here is just 
    # example sakes.
    dataDir=/root/zookeeper/zkdata
    dataLogDir=/root/zookeeper/zklog
    # the port at which the clients will connect
    clientPort=2181
    # the maximum number of client connections.
    # increase this if you need to handle more clients
    #maxClientCnxns=60
    #
    # Be sure to read the maintenance section of the 
    # administrator guide before turning on autopurge.
    #
    # http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
    #
    # The number of snapshots to retain in dataDir
    #autopurge.snapRetainCount=3
    # Purge task interval in hours
    # Set to "0" to disable auto purge feature
    #autopurge.purgeInterval=1
    #zookeeper配置端口
    server.1=zek00:2888:3888
    server.2=zek01:2888:3888
    server.3=zek02:2888:3888

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMwOTg0NTYx_size_16_color_FFFFFF_t_70]

## myid配置 ##

在 zookeeper的数据的存储目录中创建 myid文件，本文既是zkData目录下，这个myid中的内容只有一行信息，即表示我们集群节点的标示，范围在1~255之间。每个节点中的myid的数字和我们在zoo.cfg中的server.数字=host…对应，  
创建这块Data目录:

mkdir zkData
    echo 3 > zkData/myid

![在这里插入图片描述][2019051319331612.png]

## 分发安装文件 ##

将我们hadoop-node01上安装配置的环境分发到hadoop-node02和hadoop-node03两个节点相同的目录下:  
![在这里插入图片描述][20190513193458603.png]  
确认分发成功后分别修改zek00和zek01上的myid的值分别为1，2

## 配置环境变量 ##

![在这里插入图片描述][20190513193614486.png]  
![在这里插入图片描述][20190513193638302.png]  
用上面分发文件的方法：（scp 参数 目的地主机名 路径）  
发送给其他两个节点，此配置不用在安装根目录下启动

## 启动 ##

zkServer.sh start

查看状态，分别在每个节点上执行

./bin/zkServer.sh status

zek00  
![在这里插入图片描述][20190513193901673.png]  
zek01  
![在这里插入图片描述][20190513193921185.png]  
zek02  
![在这里插入图片描述][20190513193933459.png]  
说明启动成功

[20190513191953232.png]: /images/20220201/40929c14b2494f9e9a6f9a3807a54fc5.png
[20190513191904546.png]: /images/20220201/809a20533d0a4db3b6595baa5df006f1.png
[20190513191728272.png]: /images/20220201/06589eb028c74ba99f6193d47eb9cc1b.png
[2019051319170098.png]: /images/20220201/dda6895ec81f4dcfad04a623a8164bcb.png
[20190513192024567.png]: /images/20220201/cf8e6ab9a28f47228b1826d1c46f8841.png
[20190513192248130.png]: /images/20220201/7f68ba0c0ac4457894b40ee5c0bcf488.png
[20190513192241934.png]: /images/20220201/fa3c49532b7641d79e7be2d6e627dca2.png
[20190513192447177.png]: /images/20220201/b51a8094e96a4bc69365a9bee98d17f1.png
[20190513192604799.png]: /images/20220201/d206d0fd3c7246a38f80605d713ed95d.png
[http_mirror.bit.edu.cn_apache_zookeeper]: http://mirror.bit.edu.cn/apache/zookeeper/
[20190513192930238.png]: /images/20220201/99a6bcc6aff8492cb9c063ab166c9560.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMwOTg0NTYx_size_16_color_FFFFFF_t_70]: /images/20220201/fa8d016ac26a4d72965ca3ddc1fc43d5.png
[2019051319331612.png]: /images/20220201/5e6e145aa0df4ed0905306ed71a8a528.png
[20190513193458603.png]: /images/20220201/c6724abd6b6a4726b0836dee2d808c6a.png
[20190513193614486.png]: /images/20220201/5412404f54624d1982f2586c41d83329.png
[20190513193638302.png]: /images/20220201/677daedf68de40a89f73cd8aaab35bad.png
[20190513193901673.png]: /images/20220201/8bf15d04ba764e798bc72b9c2dfccb4f.png
[20190513193921185.png]: /images/20220201/eba345f1d2464c49b549f829135c5123.png
[20190513193933459.png]: /images/20220201/601b14e0ccc5417389c689005d91e6aa.png