《大数据平台部署与应用》 项目实施课件 任务3.1 部署ZKeeper集群

部署ZooKeeper集群任务描述在实际生产环境中，大数据运维工程师需要在大数据平台上部署ZooKeeper集群为其他集群（如Hadoop集群）提供分布式协调服务。在本任务中，小数将在项目2中部署的完全分布式Hadoop集群的基础上，进一步部署ZooKeeper集群。任务环境已部署完全分布式Hadoop集群的3台CentOS7操作系统的虚拟机。任务描述与任务环境目录1解压ZooKeeper下载ZooKeeper2修改配置文件3分发ZooKeeper至其他节点4启动ZooKeeper集群5从ZooKeeper官网下载ZooKeeper安装包“zookeeper-3.4.14.tar.gz”。使用Xftp8远程传输工具将ZooKeeper安装包传输至master虚拟机/opt/software目录下。下载ZooKeeper目录1解压ZooKeeper下载ZooKeeper2修改配置文件3分发ZooKeeper至其他节点4启动ZooKeeper集群5在master虚拟机解压安装包zookeeper-3.4.14.tar.gz至/opt/module目录下。解压操作完成后查看解压目录，若结果中能够看到“zookeeper-3.4.14”，则说明文件已解压成功。解压ZooKeeper目录1解压ZooKeeper下载ZooKeeper2修改配置文件3分发ZooKeeper至其他节点4启动ZooKeeper集群5执行“vim/etc/profile”命令进入/etc/profile文件中配置环境变量，进入文件后在文件末尾添加ZooKeeper环境变量并保存退出。执行“source/etc/profile”命令使环境变量立即生效。修改配置文件执行“cd/opt/module/zookeeper-3.4.14/conf”命令进入ZooKeeper的配置文件目录。复制zoo_sample.cfg文件并重命名为zoo.cfg。打开并修改zoo.cfg文件中的内容：修改dataDir参数指定ZooKeeper集群中各个节点的信息修改配置文件各个节点的信息格式为“server.X=A:B:C”，其参数及参数说明如下表。修改配置文件参数参数说明X指ZooKeeper节点的myid，标识这个是第几号服务器A指每个节点的IP地址或者主机名B指Follower和Leader交换消息所使用的端口C指选举Leader所使用的端口在修改完dataDir参数后，还需手动创建数据存放路径。执行“cd$ZOOKEEPER_HOME/data/Data/”命令进入dataDir目录。执行“vimmyid”命令创建一个文件名为“myid”的文件，并输入master代表的id编号，即“1”。修改配置文件目录1解压ZooKeeper下载ZooKeeper2修改配置文件3分发ZooKeeper至其他节点4启动ZooKeeper集群5将配置好的ZooKeeper相关配置文件分发slave1和slave2虚拟机：/opt/module/zookeeper-3.4.14/etc/profile在slave1和slave2虚拟机中使用“source/etc/profile”命令，使环境变量生效。修改slave1和slave2虚拟机的myid：将slave1虚拟机的myid文件内容改为“2”将slave2虚拟机的myid文件内容改为“3”分发ZooKeeper至其他节点目录1解压ZooKeeper下载ZooKeeper2修改配置文件3分发ZooKeeper至其他节点4启动ZooKeeper集群5启动ZooKeeper集群，需在3个节点均启动。在所有节点执行“cd$ZOOKEEPER_HOME/bin”命令进入ZooKeeper存储启动脚本的文件夹。在所有节点使用“./zkServer.shstart”启动ZooKeeper集群，以master节点为例，启动结果如下。启动ZooKeeper集群待所有节点均启动ZooKeeper集群后使用“./zkServer.shstatus”查看其状态。启动Zoo