课件zookeeper分布式服务框架

1、基于Greenplum Hadoop 分布式平台的大数据解决方案Greenplum Hadoop讲师：迪伦（北风网 )ZooKeeper分布式服务框架(1) ZooKeeper工作原理 ZooKeeper设计目标 ZooKeeper的数据结构 ZooKeeper的安装课程目标ZooKeeper工作原理ZooKeeper是有一组ZooKeeper服务器构成的系统。一台Leader服务器，其他都是Follower当且仅当一半以上的Follower的状态和Leader状态同步后，才代表Leader选举完成，服务开启如果Leader失去响应，那么原有的Follower将选举一个新的Leader来协调工

2、作ZooKeeper的设计目标简单化ZooKeeper通过共享体系的命名空间来协调，它由一些数据寄存器(Znode)组成。数据存放在内存中。健壮性只要大部分的服务器可用，那么ZooKeeper服务就可用。如果连接到某服务器的TCP链接断开，客户端将连接到其他的服务器上。有序性ZooKeeper可以为每次更新操作赋予一个版本号，此版本号是全局有序的速度在读取主要负载时尤其快。ZooKeeper应用程序在上千台机器的节点上运行ZooKeeper的数据结构与组成ZooKeeper的结构类似于树，树中的节点成为ZnodeZnode负责数据的管理，并且执行协调更新操作ZooKeeper存在临时节点，这些

3、节点与session同时存在可以为每个节点添加一个“监控”(Watcher)，当节点的状态发生改变时，用“监控”触发某个事件ZooKeeper的目录结构ACL访问控制列表ZooKeeper每个节点都会带一个ACL的列表，用于决定用户可以操作的类型ACL依赖于ZooKeeper的客户端身份验证机制。ZooKeeper也可以集成第三方的身份验证系统ZooKeeper的算法ZooKeeper的实现主要采用了原子广播(ZooKeeper Atomaic Broadcast，简称Zab)协议原子广播客户端所有的写请求都被转发给LeaderLeader将请求通过广播的形式发送给所有Follower超过半数

4、的Follower修改数据，Leader才会提交这个更新过程要么全部成功，要么全部失败ZooKeeper中服务器的状态LOOKING表示初始化状态，等待参与Leader的投票LEADING表示领导者状态，统一管理系统中其他的服务器FOLLOWING表示跟随着状态，除了Leader外，剩下的服务器都处于这个状态ZooKeeper领导者选举ZooKeeper领导者的选举过程核心思想：由某个新加入集群的服务器发起一次选举，如果该服务器获得n/2+1个票数，那么它将成为LeaderZooKeeper领导者选举的实现方式LeaderElectionFastLeaderElectionZooKeeper的特性会话客户端连接到ZooKeeper服务器时，建立一个会话每个会话都存在一个有效时间在真实的系统环境中，通过Ping请求保持会话不过期版本号版本号是一种乐观加锁的机制，使客户端能检测出对节点的修改冲突监控当节点的状态发生变化时，监控(Watcher)机制可以让客户端得到通知Z