国内外主要集群NAS产品对比

1、国内外主要集群NAS产品对比武汉大学计算机学院一、什么是集群 NAS在大数据时代 ,非结构化数据目前呈现快速增长趋势， IDC 研究报告分析指出，到 2012 年非结构化数据将占到数据存储总量的80%以上。集群NAS是一种横向扩展(Scale-out )存储架构，具有容量和性能线性扩展的优势，已经得到全球市场的认可。从EMC对Isilon 、HP 对 IBRIX、DELL 对 Exa net、Compelle nt 等收购事件，以及 IBM 推出 SONAS NetApp 发布 Data ONTAP 8，都可以看出集群 NAS已经成为主流存储技术之一。在国内，我们也看到 UIT UFS、龙存L

2、oongStore、达沃时代 YeeStor、九州初志 CZSS 美地森YFS等集群NAS解决方案。集群 NAS的未来潜在市场巨大，在高性能计算 HPC广电 IPTV、视频监控、云存储等行业领域将逐步得到广泛应用。高性能、高容量以及可扩展性是集群存储得以发展的最得人心的特征。我们主要关注的是具有 Scale-Out特性的集群NAS产品。传统NAS扩张很容易带来以下问题：1. 系统管理。即便是NAS系统管理比SAN存储管理简便很多， 但仍然需要花费时间和资 源来管理。2. 管理客户端和应用对数据的访问。能够访问的前提是 NAS系统必须挂载在对应的服务器或者工作站上。 挂载会中断应用的访问， 所以

3、在挂载的时候需要预留好服务器上应用的宕 机时间。挂载了越多的 NAS系统，带来的是更多的宕机时间。3. 文件位置。关于定义文件存放位置的策略应该是基于性能， 可访问性， 文件创建时间，访问频率， 存储成本， 可用性，数据保护等诸多方面因素决定的。 策略的设定本身不会太难， 但事实上，要将文件移动到合适的 NAS系统上是一个耗时间的手工数据迁移过程。而且，随着NAS系统越来越庞大，其复杂性也越来越高。集群( Cluster )是由多个节点构成的一种松散耦合的计算节点集合，协同起来对外提 供服务。集群 NAS是指协同多个节点提供高性能、高可用或高负载均衡的NAS( NFS/CIFS)服务。 Sca

4、le Out NAS 通过将数据分布到集群中各节点的存储方式，提供单一的使用接口与 界面，使用户可以方便地对所有数据进行统一使用与管理。 集群中所有磁盘设备整合到单一 的共享存储池中提供给前端的应用服务器，利于访问，同时提高了磁盘利用率。Scale-out 横向扩展架构的升级通常是以节点为单位，每个节点往往将包含容量、处理 能力和 I / O 带宽。一个节点被添加到存储系统，系统中的三种资源将同时升级。Storage SystemStorage SystemStorageControllerScaleOutDevicesStorage ControllerControllerDevicesDe

5、vices从上面的图例可见，容量增长和性能扩展（即增加额外的控制器）是同时进行。而且，Scale-out架构的存储系统在扩展之后，从用户的视角看起来仍然是一个单一的 系统，这一点与我们将多个相互独立的存储系统简单的叠加在一个机柜中是完全不同的。所以scale out方式使得存储系统升级工作大大简化，用户能够真正实现按需购买，降 低TCO、集群NAS的核心是集群/并行文件系统集群NAS的横向扩展（Scale-ou）是指可在文件系统级进 行存储扩展，而集群 NAS的核 心工作都是通过集群文件系统或并行文件系统完成。传统NASScale Out NAS,storage pg煽一shared inte

6、grated disk_ 一 _ _TT _ J_ - -集群文件系统是指协同多个节点提供高性能、高可用或负载均衡的文件系统，它是分布式文件系统的一个子集，消除了单点故障和性能瓶问题。对于客户端来说集群是透明的，它看到是一个单一的全局命名空间，用户文件访问请求被分散到所有集群上进行处理。在元数据管理方面，可以采用专用的服务器，也可以采用服务器集群，或者采用完全对等分布的无专用元数据服务器架构。目前典型的集群文件系统有SONAS, Isilon, IBRIX, NetAPP-GX,Loon gStore, YeeStor 等。并行文件系统是应用于多机环境的网络文件系统，单个文件的数据采用分条等形

7、式存放于不同的存储设备上，支持多机多个进程的并发存取，同时支持元数据和数据的分布存放， 并提供单一的名字空间。通常SAN共享文件系统都是并行文件系统，如GPFS StorNext、BWFS集群文件系统大多也是并行文件系统，如Lustre, Panasas等。目前市场上的集群 NAS产品，不管核心是集群文件系统还是并行文件系统，大多具有 以下几个特点：1. 统一名字空间统一名字空间是指每一个文件和目录在文件系统中都有一个统一的、唯一的名字， 在所有的应用服务器上，用户都可以用相同的名字来访问该文件或者目录而无需关 心文件的实际存储位置和给其提供服务的元数据服务器的位置。当用户要访问的文件从一个存

8、储位置迁徙到另一个新的位置以后，用户无需知道，他仍然可以继续用原来的名字来访问此文件或者目录。统一名字空间主要涉及元数据的管理模型，目前大致有集中式元数据模型（如Lustre、GFS等）、分布式元数据模型 （如Isilon、GPFS Ceph等）和无元数据模型（Glustefs） 三种。2. 高扩展性前面已经说明，集群 NAS具有横向扩展特性，容量和性能能够同时扩展。而且大 多数产品都能够实现在线扩容，即在不停止服务的情况下向集群添加和删除节点或 者磁盘，做到即插即用，且自带负载均衡机制。3. 高可用性集群NAS的集群架构特点，消除了单点故障，确保了系统的可用性。在数据高可用方面，大多产品均提

9、供跨节点的数据冗余备份，能够支持部分存储设备出现故障时，数据仍然可用。4. 性能优异对于大多数集群文件系统或并行文件系统而言，通常将元数据与数据两者独立开来，即控制流与数据流进行分离，这种方式也称为元数据带外访问模式，从而获得更高的系统扩展性和I/O并发性。采用带外模式能够提高整体存储的访问效率，因为在文件访问中，对于元数据的查询占文件操作的60%以上，每次读取的数据少而且应对的访问压力大，这和数据读取的访问操作是不同的，因此带外模式便于提高系统性能。另外，在性能提升上，有的产品采用高性能的硬件（如Panasas 3PAR或者利用InifiniBand高速网络（如Isilon、YeeStor）

10、,大多数产品还会采用文件存储条带化、 智能预取、数据缓存等软件机制来提升性能。三、各种厂商对比一览表近年来，市场上出现了很多集群 NAS的存储产品，不仅有自创小品牌在努力奋进，目前更是加入了很多著名厂商，整个市场呈现出一片红火景象。以下是市场上主要厂商的集群NAS产品的对比情况，可以看到国外的大多数自创品牌如今已被大厂商收购，目前仅剩下Pan asas，而国内的龙存，达沃时代，中科蓝鲸也开始大展拳脚了。公司情况核心市场技术特点主要卖点备注Panasas1999 年成立，独 立厂商高性能计 算并行文件系统，后 端存储为OSD结 构，区分控制刀片和存储刀片高性能面向对象存储 pNFS协议的倡导 者

11、特有的硬件使得性 能较好，但是价格 太过昂贵Isilo n2001 年成立，2010 年 被EMC收购面向大数 据和非结 构化数据集群文件系统，不 区分元数据和数据节点；针对企业应用的 各种软件功能；性 能、容量等定位扩 展的硬件节点被EMC收购后，作 为大数据战略方向 上的重头兵Ibrix2000 年 立,2009 年被HP收购企业级文 件服务软 件集群文件系统，高 度可扩展软件产 品Ibrix 的横向扩 展NAS平台和Ibrix Fusi on能够极大地扩展性 能、容量和管理能 力惠普推出基于Ibrix的 X9000scale-out 文件存 储系统3PAR1999 年成立，2010 年

12、被HP收中咼端存储SAN集群、采用了 ASIC硬件 加速芯片，使其系 统能够有出色的自动精简配置整 合进 ASIC ;In Spire 体系架 构（网状控制器结自动精简配置ThinProvisi oning由3PAR公司开创，改 变以前需要提前分购性能。构，可达8个）等， 硬件上的改进设 计非常有特色。配容量的问题，做 到即写分配，提高 存储利用率。Compelle nt2002 年成立，2011 年 被 Dell 收购中端市场SAN集群、同3PAR有近似， 但性能不及，且只 能允许两个SAN聚合，而3PAR能 够实现8个SAN 聚合。流动数据架构，存 储可直接根据业 务需求动态进行 调整。可

13、节约整体成本借助分层架构，SAS 或固态硬盘等高性 能硬盘能够处理公 司最关键的数据， 而将很少使用的数 据自动迁移到容量 大、但速度低的 SATA硬盘上的技 术。IBMSONAS2010 年推出的产 品中大型企业以GPFS为核心， 以X86平台为硬 件基础，推出的集群NAS产品2011年4月升级：改进的信息生命周期管理（ILM）、层次化存储管理 （HSM）以及简便 的部署和防病毒 集成存储（TB/PB） 和 服务器（接口、 I/O 和带宽）放在单独 的模块化组件中， 它们可以独立地升 级。分别对应于SONAS的存储单元 和接口节点。BlueArc1998 年成立，2011 年 被HDS收 购

14、中咼端存储，HDS 自2006年 一直 OEM 其产品文件级集群、一个是高端Titan系列，一个是入门级Mercury 系列硬件加速文件管 理器供应商， 主要生产用于场 内可编程门阵列（FPGA）的硬件加 速文件管理器，加 快文件管理器的运行速度Silico nFS 文件系统不同于用服务器 和定制操作系统实 现的文件系统，它 基于专门的硬件芯 片 FPGA存储模块体现实现 面向对象概念、支持pNFS协议龙存起步较 早，在国 内市场有 一定知名 度高性能计 算、互联 网集群存储产品采用通用服务器 做为存储与兀数 据节点， 整体性价比高达沃时代YeeStor基础研究 非常早，2010 年正式成立

15、公司集群存储 （包括高性能计 算）、虚拟 化（包括 虚拟服务 器、虚拟 桌面）、云 存储集群文件系统、面向对象存储YeeStor 文件系统+X86服务器， 性价比高；具有集群结构、数 据备份、元数据快 照等多项高可用机制；Web UI可 用性好已有教育台“学习 超市”、CNGI国家 科学数据共享平台 等多个成功案例中科蓝鲸研究比较早，2007年正式成立网络存储 产品和解 决方案供 应商SAN文件系统同时支持 FC(4Gb 8Gb)、以 太网(1Gb 10Gb) 接入在数字媒体、视频 监控等方面有一些 案例美地森2007 年成立集群存储 系统软硬 件服务提 供商USS集群存储系 统YFS 和 I

16、silon 的 On eFS功能近似， 集合了文件系统、 卷管理和RAIDb美地森也推出了WSSB存储、WHSB 主机。创新科UIT2001 年成立，2009 年， 与 Intel进行了战 略研发合作，2011年获得In tel注资。数据存储 解决方案 提供商和 海量信息 存储专家做IP SAN起家， 再做NAS后面通 过收购获得FCSAN技术，目前推 行统一存储，另外 在云存储概念上 推出了几款产品。大量的通用服务 器，元数据和存储 数据分离UIT参加展销会比 较多，所有宣传稿 也较多。主要展示 其云监控、云媒资、 办公云、IPTV等多 个行业的云解决方 案，以及SV5000G2 等自主创新

17、产品； 另外面向个人、家 庭用户也有应用产 品。从近两年的各种收购事件来看，集群存储市场已经从小的独立厂商时代转向了大厂商竞争时代，IBM、HP Dell等大型综合存储方案厂商的加入，一方面是看到了非结构化数据爆 炸式增长带来的市场规模扩张，另一方面，也使得集群存储领域的竞争进一步加剧。IBM:作为综合存储方案供应商， IBM在集群存储方面同样有自己的策略。在SAN集群方面，IBM收购了 XIV，经过有效的整合后，XIV已经成为IBM高端存储产品线 的有力补充，在针对非结构化数据的 Scale out NAS市场，IBM则将一套由来已久的分 布式文件系统方案 GPFS重新包装，推出了 NAS集

18、群产品SoNAS在战略层面，IBM的公共云就采用了 SONA喋构。HDS收购BlueArc，它拥有数据分级的技术，它的产品可以在8节点群集中提供文件存储虚拟化功能， 将群集容量提高到16PB运行在群集上的软件是SiliconFS文件系统，可以提供 NFS和 CIFS文件存取以及iSCSI SAN存取等功能。BlueArc主要 生产硬件加速的 Titan和Mercury产品，这些产品均运行有SiliconFS 软件系统。7.0版本的SiliconFS把文件的元数据放在固态硬盘或SAS驱动器上，而将文件数据放置于运行速度较慢但是相对便宜的驱动器上，可提供文件访问速度。EMC与倡导统一存储的 Net

19、App不同，EMCf上去仍像是多家公司的组合。EMC旗下曾经有过 Avamar、Data Domain、DMX Clariion 、Celerra，以及 Isilon 等，还 需要更好的融合和统一。EMC在 7年里收购了 53家公司，走大而全的路线。战略上推行大数据解决方案，Isilon 应该是其宣传侧重点。 从Isilon 被收购的两三年来看，确 实是背靠大树好乘凉，EMC勺多套方案中均有Isilo n 的身影，每次大会都有些宣传， 相比其老对手Panasas, Isilon 现在的发展势头很不错，应用范围越来越宽。NetApp核心系统依赖于一个单一的操作系统，无论是SAN NAS高端、低端

20、、主存储还是二级存储，都是基于核心的操作系统ONTAP这是和其他厂商最大的区别。这也是其在并购方面考虑较多的原因。但NetApp的集群NAS产品Data ONTAFGX并不给力。GX来源于NetApp收购的Spinaker ， 是一家做 Single Namespace的文件系统的厂商，所以GX系列只是一个 Single PathImage模式的架构，类似于微软的 DFS将多个独立文件系统，从路径上加一次虚拟， 多个文件系统（控制器机头）之间依然采用松耦合方式。GX并没有从骨子里表现为一个 Single File system Image 的集群或者分布式文件系统，所以市场认同度不高。HP HP最近三年内收购了 LeftHand（增强了其存储虚拟化和iSCSI能力）、Ibrix （横向扩展NAS和Fusion管理软件）、以及3PAR（中高端的SAN集群以及Thin概念的 各种功能），包装推出了可恒星扩展的P4000G2和X9000,以及提供基于3