集群与分布式

1、集群与分布式We Can Do It 概念v什么是集群v什么分布式v分布式集群v优势集群集群是一组相互独立的、通过高速网络互联的计算机，构成的一个组，并以单一系统的模式加以管理。集群中的各节点都具有相同的业务逻辑，有多个同类任务时，可以并行处理。集群是通过提高单位时间内执行的任务数来提升效率分布式分布式系统是建立在网络之上的软件系统。分布式系统中的各计算单元都处理不同的子任务，最终协同完成整个任务。分布式是以缩短单个任务的执行时间来提升效率的分布式集群如果用集群来做为分布式的处理单元，就形成了分布式集群。它可以将任务切分成多个不同的子任务，然后由集群对处理子任务，从而大大提高了任务的执行效率。

2、通过集群，又可以完成负载均衡、故障转移等功能，提高可靠性和稳定性。优势1 1 提高性能提高性能一些计算密集型应用，如：天气预报、核试验模拟等，需要计算机要有很强的运算处理能力，现有的技术，即使普通的大型机器计算也很难胜任。这时，一般都使用计算机集群技术，集中几十台甚至上百台计算机的运算能力来满足要求。提高处理性能一直是集群技术研究的一个重要目标之一。2 2 降低成本降低成本通常一套较好的集群配置，其软硬件开销要超过几百万RMB。但与价值上千万的专用超级计算机相比已属相当便宜。在达到同样性能的条件下，采用计算机集群比采用同等运算能力的大型计算机具有更高的性价比。3 3 提高扩展性提高扩展性用户若

3、想扩展系统能力，不得不购买更高性能的服务器，才能获得额外所需的CPU 和存储器。如果采用集群技术，则只需要将新的服务器加入集群中即可，对于客户来看，服务无论从连续性还是性能上都几乎没有变化，好像系统在不知不觉中完成了升级。4 4 增强可靠性增强可靠性集群技术使系统在故障发生时仍可以继续工作，将系统停运时间减到最小。集群系统在提高系统的可靠性的同时，也大大减小了故障损失。集群技术服务发现负载均衡故障转移水平扩展与动态均衡服务发现大家有玩过联机游戏吗？他们是怎么联系起来的呢？服务发现服务发现基本功能：获知集群上所有服务的地址服务发现三种方式： 手动预配每台服务实例配置文件中都手动配置好了其它服务的

4、IP和端口 服务发现服务每台服务实例向平台注册自已地址，同时可以获知其它服务地址 广而告之服务实例主动在网域内广播，收到广播的服务可与之建立互信服务发现心跳机制u服务发现的最大难题识别失效节点u服务需要定时刷新它在服务列表中的状态租约，以证明自己还活着。u基本上高可用集群都有一套心跳机制，专业的服务发现服务（如：Zookeeper、Eureka）也都有这样一套。u而一些集群（如:Helix,Hadoop等)，也会实现另一套心跳机制，同时在心跳请求上附加信息(比如任务信息、资源信息等)来提高心跳的价值。负载均衡l 所谓负载均衡(Load Balance)，就是将任务分摊到多个操作单元上进行执行l 集群中经常需要使用负载均衡来分派任务，以达到最佳的使用效率l Solr的负载均衡故障转移l 故障转移（Failover），即活动的服务或应用意外终止时，快速启用冗余或备用的服务器、系统、硬件或者网络接替它们工作。l 故障转移离不开主、备机的搭建，备份策略的选择以及主、备选举策略。l Solr的主备机制水平扩展与动态均衡一致性HashHash槽更多分布式技术分布式锁多服务实例竞争同一资源时，需要有个机制分配资源，同时需要在服务失效时主动回收资源。分布式事务一项任务需要每个服务实例都完成，才算真的完成