- “动物管理员”
- 官网: zookeeper.apache.org/
- 介绍:Apache ZooKeeper致力于开发和维护开源服务器,实现高度可靠的分布式协 调。
- ZooKeeper是一种集中式服务,用于维护配置信息,命名,提供分布式同步和提供组服务。所有这些类型的服务都以分布式应用程序的某种形式使用。每次实施它们都需要做很多工作来修复不可避免的错误和竞争条件。由于难以实现这些类型的服务,应用程序最初通常会吝啬它们,这使得它们在变化的情况下变得脆弱并且难以管理。即使正确完成,这些服务的不同实现也会在部署应用程序时导致管理复杂性。
(2)zookeeper作用
- 存储+监听
(3)Zookeeper角色
- 主从结构
- 1)Leader领导者->主
- 2)Follower追随者->从
- 3)zookeeper由一个领导者多个追随者组成
- **zookeeper集群中只要有半数以上的节点存活,zookeeper集群就能正常工作。(高可用)**所以搭建zk集群最好搭建奇数台(3,5,11)。
4)zookeeper功能
- 大数据中使用zookeeper业务:
- 1)做统一的配置管理
- 2)做统一的命名服务
- 3)做统一的集群管理
- 4)做服务器的动态上下线感知(代码)
2. 准备工作
(1)集群规划
- hadoop01、hadoop02和hadoop03三个节点上部署ZooKeeper。
- 上传安装包zookeeper-3.4.10.tar.gz
- 具备 java 环境
3. 安装流程
(1)单节点安装——hadoop01
- 解压zookeeper安装包到目标目录下: $ tar -zxvf zookeeper-3.4.10.tar.gz -C 目标目录
- 在zookeeper的根目录zookeeper-3.4.10/下创建zkData: $ mkdir -p zkData
- 重命名zookeeper-3.4.10/conf目录下的zoo_sample.cfg为zoo.cfg作为配置文件: $ mv zoo_sample.cfg zoo.cfg
(2)配置zoo.cfg文件
-
修改dataDir路径为创建的zkData路径: dataDir=/XXXXXX/zookeeper-3.4.10/zkData
-
增加集群信息:
#######################cluster########################## server.1=hadoop01:2888:3888 server.2=hadoop02:2888:3888 server.3=hadoop03:2888:3888 复制代码
- 2888:zookeeper服务之间通信端口
- 3888:zookeeper选举机制端口
- 2181:zookeeper客户端用于连接zookeeper服务器
(3)配置参数解读
- Server.A=B:C:D。
- A是一个数字,表示这个是第几号服务器;
- B是这个服务器的ip地址;
- C是这个服务器与集群中的Leader服务器交换信息的端口;
- D是万一集群中的Leader服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口。
- 集群模式下配置一个文件myid,这个文件在dataDir目录下,这个文件里面有一个数据就是A的值,Zookeeper启动时读取此文件,拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。
(4)集群操作
- 在zookeeper-3.4.10/zkData目录下创建一个myid的文件: touch myid
- 编辑myid文件: (注意myid除编号外不能有任何多余内容,包括空格和空行) vi myid 在文件中添加与server对应的编号:如1
- 拷贝配置好的zookeeper到其他机器上 scp -r zookeeper-3.4.10/ hadoop02: PWD
- 分别修改myid文件中内容为2、3
4. 命令行操作
(1)配置环境变量:
- 修改配置文件: vi /etc/profile
- 增加以下内容: export ZOOKEEPER_HOME=zookeeper安装路径 export PATH= ZOOKEEPER_HOME/bin
- 声明环境变量:source /etc/profile
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网
猜你喜欢:本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
Python基础教程
[挪] Magnus Lie Hetland / 袁国忠 / 人民邮电出版 / 2018-2-1 / CNY 99.00
本书包括Python程序设计的方方面面:首先从Python的安装开始,随后介绍了Python的基础知识和基本概念,包括列表、元组、字符串、字典以及各种语句;然后循序渐进地介绍了一些相对高级的主题,包括抽象、异常、魔法方法、属性、迭代器;此后探讨了如何将Python与数据库、网络、C语言等工具结合使用,从而发挥出Python的强大功能,同时介绍了Python程序测试、打包、发布等知识;最后,作者结合......一起来看看 《Python基础教程》 这本书的介绍吧!