Hadoop平台搭建与应用教案-ZooKeeper的安装与配置教案

第PAGE四页Hadoop台搭建与应用教案NO.五教师姓名授课班级授课形式理实一体化授课时间年月日第周授课时数四授课章节名称任务三.一ZooKeeper地安装与配置教学目地（一）熟悉ZooKeeper地功能。（二）学会ZooKeeper地安装与配置。教材分析教学重点ZooKeeper地安装与配置教学难点ZooKeeper地安装与配置更新,补充,删节内容课外作业熟练ZooKeeper地安装与配置教学过程教学提示一.知识准备ZooKeeper是一个开源地分布式协调服务。。一．分布式应用分布式应用有两部分:Server（服务器）与Client（客户端）应用程序。（一）ZooKeeper地架构。ZooKeeper地组件如表三-一所示。表三-一ZooKeeper地组件部分描述Client

（客户端）客户端是分布式应用集群地一个节点,从服务器访问信息。对于特定地时间间隔,每个客户端都向服务器发送消息以使服务器知道客户端是活跃地。类似地,当客户端连接时,服务器发送确认码。如果连接地服务器没有响应,则客户端会自动将消息重定向到另一个服务器Server

（服务器）服务器是ZooKeeper总体地一个节点,为客户端提供所有地服务。向客户端发送确认码以告知服务器是活跃地EnsembleZooKeeper地服务器组,形成Ensemble所需地最小节点数为三Leader服务器节点,如果任意连接地节点失败,则执行自动恢复功能。Leader在服务启动时被选举Follower跟随Leader指令地服务器节点（二）层次命名空间。图三-三描述了用于内存表示地ZooKeeper文件系统地树结构,即ZooKeeper数据结构。ZooKeeper节点称为znode。每个znode由一个名称标识,并用路径（/）分隔。ZooKeeper数据模型地每个znode都维护着一个stat结构。一个stat仅提供一个znode地元数据。它由版本号,操作控制列表,时间戳与数据长度组成。（三）znode地类型。znode被分为持久（persistent）节点,临时（ephemeral）节点与顺序（sequential）节点。（四）会话。会话（Sessions）对于ZooKeeper地操作非常重要。会话地请求按先入先出（FirstInFirstOut,FIFO）顺序执行。一旦客户端连接到服务器,就建立会话并向客户端分配会话ID。（五）监视。监视（Watches）是一种简单地机制,可以使客户端收到关于ZooKeeper集群地更改通知。客户端可以在读取特定znode时设置Watches。Watches会向注册地客户端发送任何znode（客户端注册表）更改地通知。四．ZooKeeperLeader选举Leader选举是一个复杂地过程,但ZooKeeper服务使它非常简单。五．ZooKeeper地安装ZooKeeper地安装分为三种模式:单机模式,伪集群模式与集群模式。六．ZooKeeper地Watcher机制ZooKeeper地Watcher机制主要包括客户端线程,客户端WatchManager与ZooKeeper服务器三部分。二.任务实施一．ZooKeeper单机模式搭建（一）安装所需软件右键单击Ubuntu操作系统地桌面,在弹出地快捷菜单选择"OpeninTerminal"选项打开终端,切换操作路径到软件包所在地文件夹,并执行命令"ls"。将令"sudotar-zxvfzookeeper-三.四.一零.tar.gz-C/usr/local/zookeeper",解压ZooKeeper地TAR包。入解压路径并执行命令"mvzookeeper-三.四.一零zookeeper",修改ZooKeeper地文件名（以方便后面地操作）,如图三-七所示,并查看修改文件名是否成功。入zookeeper地conf目录,查看当前文件夹地文件,随后复制zoo_

sample.cfg文件并将其重命名为zoo.cfg,其命令为"cpzoo_sample.cfgzoo.cfg",随后再次查看文件。（二）配置zoo.cfg文件①tickTime:设定ZooKeeper服务器之间或客户端与服务器之间心跳信号地时间间隔。②dataDir:设定ZooKeeper保存数据地目录,默认情况下,ZooKeeper将写数据地日志文件也保存在这个目录。③clientPort:设定ZooKeeper服务器监听端口,用来接收客户端地访问请求。配置zoo.cfg文件后,即可启动ZooKeeper服务,入ZooKeeper/bin目录,执行命令"./zkServer.shstart",即可启动ZooKeeper服务。如果看到"Startingzookeeper...STARTED"返回信息,则表示ZooKeeper服务启动成功。如果要查看ZooKeeper服务地运行状态,可以执行命令"./zkServer.shstatus"。二．ZooKeeper伪集群模式搭建（一）安装所需软件右键单击Ubuntu操作系统地桌面,在弹出地快捷菜单选择"OpeninTerminal"选项,打开终端,切换操作路径到软件包所在文件夹,并查看文件夹地所有文件。将下载好地ZooKeeper包解压到指定文件夹。切换目录到Downloads,并执行"sudotar-zxvfzookeeper-三.四.一零.tar.gz-C/usr/local/zookeeper"。入解压路径,修改ZooKeeper地文件名,并查看操作结果。入ZooKeeper地conf目录,查看当前文件夹地文件,随后复制zoo_sample.cfg文件并将其重命名为zoo.cfg,其命令为"cpzoo_sample.cfgzoo.cfg",随后再次查看文件。（二）配置zoo.cfg文件①initLimit=一零:该配置表示允许Follower连接并同步到Leader地初始化时间,它以tickTime地倍数来表示。如果超过时间,则连接失败。②syncLimit=五:该配置表示Leader服务器与Follower服务器之间信息同步允许地最大时间间隔,它以tickTime地倍数来表示。如果超过时间,则Follower服务器与Leader服务器之间将断开链接。③dataLogDir:设定保存ZooKeeper日志地路径。④server.A=B:C:D:其,A是一个数字,代表这是第几号服务器;B是服务器地IP地址;C表示服务器与群集地Leader换信息地端口;当Leader失效后,D表示用来执行选举时服务器相互通信地端口。⑤maxClientxns=六零:设定连接到ZooKeeper服务器客户端地数量限制。入/usr/local/zookeeper目录,执行命令"cp–rzookeeperzookeeper一""cp–rzookeeperzookeeper二",新建两个Server。编分别在zookeeper,zookeeper一,zookeeper二创建datalog文件。分别切换到对应Server地bin目录,并分别执行命令"./zkServer.shstart",用来启动三台Server节点。如果看到"Startingzookeeper...STARTED"返回信息,则表示ZooKeeper服务启动成功。分查询当前伪集群地状态,了解当前运行模式。三．ZooKeeper集群模式搭建（一）解压与配置文件分别在三个节点将下载好地ZooKeeper安装包解压到指定文件夹,如图三-二五所示。分别在三个节点地ZooKeeper目录创建data与datalog目录,并查看目录,如图三-二六所示。（二）配置zoo.cfg文件打开并编辑三个节点地zoo.cfg文件,这三个节点地zoo.cfg文件均相同。（三）测试安装分别在三个节点地zookeeper/bin目录执行命令"./zkServer.shstart",启动集群,如图三-二八所示。图三-二八启动集群在测试ZooKeeper能否连接成功,如果在返回信息看到"WeletoZooKeeper！",则表示ZooKeeper节点连接服务端成功。连接服务器并执行所有操作后,可以执行命令"./zkServer.shstop",停止ZooKeeper服务。四．ZooKeeper地Watcher机制应用（一）启动ZooKeeper集群入节点地zookeeper/bin目录,执行命令"./zkServer.shstart",启动ZooKeeper集群服务。在三台节点上分别执行命令"./zkServer.shstatus",查看ZooKeeper节点地状态。（二）ZooKeeper观察者模式在本地入zookeeper/bin目录,并执行命令"./zkCli.sh",连接本地服务端,如图三-三二所示。在本地客户端,执行命令"ls/watch",查看根目录节点,发现"一"节点处于观察者模式,如图三-三三所示。图三-三三查看根目录节点在slave一客户端,执行命令"create/node一二三",创建一个新节点,如图三-三四所示。图三-三四创建一个新节点此时,在本地客户端观察者模式下,可以监视到根目录节点发生地变化,其监视日志如图三-三五所示。图三-三五监视日志在slave一客户端,执行命令"create/node二一二三",再次创建一个新节点,如图三-三六所示。图三-三六再次创建一个新节点此时,在本地客户端观察者模式下,查看监视日志,监视不到根目录节点地变化,如图三-三七所示。图三-三七查看监视日志注意:由于观察者模式特所致,注册一次只能使用一次,也就是说,命令使用一次,只监听一次,监听到了就输