大数据云计算存储管理大趋势

大数据

存储管理大趋势TheDigitalUniverse2010年数据1.2ZETTABYTES1,200,000,000,000,000,000,0002020年将达到35ZETTABYTES35,000,000,000,000,000,000,000大数据正在改变企业存储来源:IDC基于文件:60.7%CAGR基于块:21.8%CAGREXABYTES到2012年,80%存储空间用于基于文件的数据大数据来源

文件，非结构化数据….“大数据”Video&

GraphicsGenetic

SequencingSatellite

PhotosComputer

ModelingSeismic

ExplorationMusic/AudioPDFsMedical

Imaging纵向扩展技术不适合大数据扩展性性能管理可靠性成本SCALEupSCALEup存储网络服务器垂直扩展与横向存储性能容量峰值存储设备性能低峰值存储设备性能中峰值存储设备性能中高峰值存储设备性能高痛苦的系统迁移复杂的系统管理重复的系统投资如何满足大数据需求:无与伦比的容量和性能扩展性.存储大数据架构的转变—横向扩展扩展性性能管理可靠性成本10GbE网络10X性能SCALEoutSCALEout集群计算&服务器虚拟化横向扩展

存储架构StorageNetworkServer垂直存储与横向存储性能容量单一系统线性扩展性能扩展适合快速增长单一文件系统

单一系统管理

灵活双向扩展海量数据存储传统统存存储储与与集集群群存存储储传统统存存储储集群群存存储储Faster………………………………………………………………………………………………………………………….Slower………………………………………………………………………………………………………………………….TRAINSTOPS!!!!!!!!!!!!TRAINKEEPSGOING!!平衡性能和容量X200企业级特性数据保护强劲分析能力新EMCIsilon横向向扩扩展展解解决决方方案案极速性能S200(可选第二个交换机)IsilonIQ存储层内部Infiniband万兆互联层服务器客户/应用层NFS,CIFS,FTP,HTTP(可选第二个交换机)标准千兆以太网层服务器服务器IsilonIQ网络络架架构构向IsilonIQ集群群写写入入一一个个文文件件（可选第二个交换机）（可选第二个交换机）服务器NFS,CIFS,FTP,HTTP（可选第二个交换机）服务器服务器向IsilonIQ集群群写写入入一一个个文文件件(可选第二个交换机)WorkVert-Specific向IsilonIQ集群群写写入入一一个个文文件件(可选第二个交换机)服务器NFS,CIFS,FTP,HTTP(optional2ndswitch)服务器服务器(可选第二个交换机)从IsilonIQ集群群读读取取一一个个文文件件从IsilonIQ集群群读读取取一一个个文文件件(optional2ndswitch)服务器NFS,CIFS,FTP,HTTP(可选第二个交换机)服务器服务器最大大的的可可扩扩展展文文件件系系统统传统统文文件件系系统统100倍的的扩扩展展性性OneFS™单个个文文件件系系统统可可从从18TB扩展展到到15.5PB60秒完完成成扩扩展展，，无无停停机机无需需修修改改客客户户端端设设定定世界界最最快快的的扩扩展展速速度度AutoBalance:节点点间间自自动动数数据据均均衡衡减少少了了存存储储扩扩容容的的成成本本、、复复杂杂程程度度和和风风险险最大大的的可可扩扩展展文文件件系系统统AutoBalance可以以在在线线将将生生产产环环境境中中的的数数据据均均衡衡到到新新的的存存储储节节点点不需需要要手手动动参参与与，，不不需需要要重重新新配配置置，，不不需需要要修修改改服服务务器器或或客客户户端端的的挂挂载载点点以以及及应应用用程程序序配配置置空空空空空满满满满均衡衡均衡衡均衡衡均衡衡均衡衡最可可靠靠的的存存储储系系统统(可选选第第二二个个交交换换机机)高可可用用集集群群架架构构使用用N+1保护护时时，如如果果单单个个驱驱动动器器或或者者节节点点不不可可用用，，数数据据100%可用用Isilon提供供业业界界最最快快的的驱驱动动器器重重建建时时间间———一小小时时之之内内！！当使使用用N+2,N+3,和N+4保护护级级别别时时,数据据在在多多个个磁磁盘盘或或者者节节点点不不可可用用时时仍仍然然100%可用用100%可用性故障100%可用性100%可用性100%可用性100%可用性100%可用性100%可用性100%可用性故障具有有最最高高可可用用性性的的存存储储虚拟拟热热备备能够够使使用用集集群群全全部部剩剩余余空空间间重重建建数数据据不像像传传统统系系统统受受限限于于卷卷和和RAID的重重建建X失效SMARTPOOLI/OPOLICYPROTECTIONPOLICYGloballyCoherentCacheVDMKData

LatencyGloballyCoherentCache大数数据据单单一一文文件件系系统统保护护级级别别灵灵活活和和数数据据自自动动分分层层S200Random+1

X200Sequential+2

NLInherited+4HPCData

I/OpsFileData

MB/sArchiveSelectSelectSelectS200-SSDS200-SASX200NLI/OsThroughputArchiveRandomSequentialInherited+1+2+3+42xS200-SSDRandom2xFileData

MB/sFileData

MB/sFileData

MB/sSmartConnect高级级版版配配置置IP地址址池池地地址址会会被被指指定定的的网网络络接接口口使使用用\\\ifsSmartConnectZone（区区域域））名名称称是是客客户户端端要要访访问问的的全全名名可以以在在4种连连接接均均衡衡策策略略中中选选择择RoundRobin（轮轮流流））CPUUtilization（CPU使用用率率））ConnectionCounting（连连接接数数））AggregateThroughput（吞吞吐吐量量））地址址池池必必须须制制定定SmartConnect服务务子子网网，，子子网网上上也也必必须须配配置置SmartConnect服务务IPOneFS6.5操作系统增强企业级的的访问和安全全增强验证支持CIFS协议支持NFS4.0协议Kerberized

NFSv3supportSmartQuotas概览SmartQuotas是授权的软件件模块可以让管理员员在存储利用用方面有更大大的控制力配额可以针对对用户，组或或者目录/文件夹强制型和记账账型配额都支支持根据配额的类类型，支持多多种提示方法法IsilonSnapShotIQ概览可以与备份解解决方案整合合当创建point-in-time型快照时效果果更好可以与MicrosoftShadowCopyService整合支持新版本的的Microsoft操作系统快照中只保存存变更的数据据块SnapshotIQ使用Point-in-Time(PIT)和Copy-on-Write(COW)方式来生成快快照大多数快照都都是使用其中中一种方式生生成的OneFS会根据写入操操作的不同动动态选择生成成快照的方式式PIT用于大型持续续写入操作COW用于小文件改改变SyncIQ概览SyncIQ是异步文件复复制模块需要购买的授授权模块从Isilon集群复制数据据到其他Isilon集群参与集群的大大小和型号不不必相同通过任何IP链路复制WAN（广域网）或或者LAN（局域网）SyncIQ3.0复制数据块，，而不是新的的/修改过的文件件。SmartLock经济高效地防防范意外、过过早或恶意地地删除或修改改数据InsightIQ1.5业界领先的横横向扩展综合合分析扩展节点平台节点大数据横向扩扩展存储解决决方案S-seriesX-seriesNL-seriesAcceleratorandbackupacceleratorIsilonexNodes硬件应用软件操作系统Isilon特性业界证明的云云存储解决方方案领先者，，国内外最大大容量的集群群存储系统，，APPLE（12PB），华大基因因（4PB）,金山软件（2.8PB）。单一分布式文文件系统，最最大可扩展到到15.5PB全