分布式存储平台有哪些-分布式存储平台龙头介绍_第1页
分布式存储平台有哪些-分布式存储平台龙头介绍_第2页
分布式存储平台有哪些-分布式存储平台龙头介绍_第3页
分布式存储平台有哪些-分布式存储平台龙头介绍_第4页
分布式存储平台有哪些-分布式存储平台龙头介绍_第5页
已阅读5页,还剩1页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

分布式存储平台有哪些_分布式存储平台龙头介绍1.分布式存储平台有哪些分布式存储是指多个路由器协作共同完成存储,这样有助于提高缓存效率,保持更多的信息。分布式存储平台就是分布式存储服务的运行平台。目前比较有名的分布式存储平台主要有HDFS、

Ceph、GFS、GlusterFS及Swift等。同时,随着云计算、大数据等技术的不断发展,更多新的分布式存储技术及平台仍在涌现。2.分布式存储平台龙头(1)CephCeph:经过多年的发展,受到众多存储和云计算厂商的重视,成为了应用最

广泛的开源分布式存储平台。Ceph利用存储节点计算能力,计算得出该数据存储的位置,将数据分布均衡。同时,Ceph采用了CRUSH、HASH

等算法,杜绝了传统的单点故障问题,实现水平扩展的性能。Ceph的特点如下:1)Ceph支持对象存储、块存储和文件存储服务;2)采用CRUSH等算法,数据分布均衡,并行度高;

3)支持多个副本,并保持多副本间的强一致性;4)去中心化,MDS之间地位相同,无固定的中心节点。(2)GFSGFS(GoogleFileSystem):适用于大量的顺序读取和顺序追加,注重大文件

的持续稳定带宽。2013年,Google公布了Colossus项目,作为下一代的Google

文件系统,与前一代的GFS相比,Colossus增加了主控服务器集群,重新平衡了旧的冷数据,并在磁盘上进行新数据的分发。GFS的特点如下:1)适合大文件场景的应用以及适数据访问延时不敏感的搜索类业务;2)

中心化架构,只有1个master处于工作状态,Colossus有改进后,将单一主控服务器改造为多主控服务器构成的集群,将所有管理数据进行

数据分片后分配到不同的主控服务器上,增加可用性;3)缓存和预取,通过在client端缓存元数据,尽量减少与master的交互,

通过文件的预读提升并发性能;(3)HDFSHDFS(HadoopDistributedFileSystem):是适用于硬件上的分布式文件系统。作为是Hadoop

的核心子项目,HDFS具备海量数据存储、高容错性以及大文件存储的优势。HDFS的特点如下:1)适用于大文件、大数据处理,处理数据达到GB、TB、甚至PB级别的数据;2)HardLoop1.X版本支持

NameNode及SecondaryNameNode,Secondary

NameNode会周期性的将fsimage和edits合并,然后将最新的fsimage推送给NameNode;3)HardLoop2.0版本支持

StandbyNameNode,采用主从备份架构,对ActiveNameNode进行热备份;4)多副本保护提高容错性;5)

不支持并发,同一时刻只允许一个写入者或追加者。(4)GlusterFSGlusterFS(GlusterFileSystem):是一种Scale-out的文件存储系统,

具具备强大的横向扩展能力,支撑数PB存储容量以及处理数千应用客户端的优势。GlusterFS的特点如下:1)采用无中心对称式架构,不存在元数据服务器瓶颈,元数据存在于文件的属性和扩展属性中;2)

采用弹性哈希算法,具有很好的可扩展性;3)采用模块化堆栈架构,可实现灵活配置。(5)SWIFT:SWIFT最初是由Rackspace公司开发的分布式对象存储服务,采用完全对称、面向资源的分布式系统架构设计,所有组件都具备扩展性,降低因单点失效而影响整个系统的可用性的效率,主要用于解决非结构化数据存储问题。SWIFT的特点如下:1)原生的对象存储,不支持实时的文件读写、编辑功能;2)

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论