大数据存储管理大趋势isilon.ppt

大数据存储管理大趋势 TheDigitalUniverse 2010年数据1 2ZETTABYTES 1 200 000 000 000 000 000 000 2020年将达到35ZETTABYTES 35 000 000 000 000 000 000 000 大数据正在改变企业存储 大数据来源 文件 非结构化数据 大数据 纵向扩展技术不适合大数据 扩展性性能管理可靠性成本 SCALEup SCALEup 垂直扩展与横向存储 性能 容量 痛苦的系统迁移复杂的系统管理重复的系统投资 如何满足大数据需求 无与伦比的容量和性能扩展性 存储大数据架构的转变 横向扩展 扩展性性能管理可靠性成本 10GbE网络 10X性能 SCALEout SCALEout 集群计算 服务器虚拟化 横向扩展存储架构 垂直存储与横向存储 性能 容量 单一系统线性扩展 性能扩展 适合快速增长单一文件系统单一系统管理灵活双向扩展海量数据存储 传统存储与集群存储 传统存储 集群存储 Faster Slower TRAINSTOPS TRAINKEEPSGOING 新EMCIsilon横向扩展解决方案 IsilonIQ网络架构 向IsilonIQ集群写入一个文件 向IsilonIQ集群写入一个文件 Work Vert Specific 向IsilonIQ集群写入一个文件 从IsilonIQ集群读取一个文件 从IsilonIQ集群读取一个文件 最大的可扩展文件系统传统文件系统100倍的扩展性 OneFS 单个文件系统可从18TB扩展到15 5PB60秒完成扩展 无停机无需修改客户端设定世界最快的扩展速度 AutoBalance 节点间自动数据均衡减少了存储扩容的成本 复杂程度和风险 最大的可扩展文件系统 AutoBalance可以在线将生产环境中的数据均衡到新的存储节点不需要手动参与 不需要重新配置 不需要修改服务器或客户端的挂载点以及应用程序配置 空 空 空 空 空 满 满 满 满 均衡 均衡 均衡 均衡 均衡 最可靠的存储系统 可选第二个交换机 高可用集群架构 使用N 1保护时 如果单个驱动器或者节点不可用 数据100 可用 Isilon提供业界最快的驱动器重建时间 一小时之内 当使用N 2 N 3 和N 4保护级别时 数据在多个磁盘或者节点不可用时仍然100 可用 具有最高可用性的存储虚拟热备 能够使用集群全部剩余空间重建数据不像传统系统受限于卷和RAID的重建 SMARTPOOLI OPOLICYPROTECTIONPOLICY 大数据单一文件系统 保护级别灵活和数据自动分层 SelectSelectSelect S200 SSDS200 SASX200NL RandomSequentialInherited 1 2 3 42x S200 SSD Random 2x FileDataMB s FileDataMB s FileDataMB s SmartConnect高级版配置 IP地址池地址会被指定的网络接口使用 ifsSmartConnectZone 区域 名称是客户端要访问的全名可以在4种连接均衡策略中选择RoundRobin 轮流 CPUUtilization CPU使用率 ConnectionCounting 连接数 AggregateThroughput 吞吐量 地址池必须制定SmartConnect服务子网 子网上也必须配置SmartConnect服务IP OneFS6 5操作系统 增强企业级的访问和安全 SmartQuotas概览 SmartQuotas是授权的软件模块可以让管理员在存储利用方面有更大的控制力配额可以针对用户 组或者目录 文件夹强制型和记账型配额都支持根据配额的类型 支持多种提示方法 IsilonSnapShotIQ概览 可以与备份解决方案整合当创建point in time型快照时效果更好可以与MicrosoftShadowCopyService整合支持新版本的Microsoft操作系统快照中只保存变更的数据块SnapshotIQ使用Point in Time PIT 和Copy on Write COW 方式来生成快照大多数快照都是使用其中一种方式生成的OneFS会根据写入操作的不同动态选择生成快照的方式PIT用于大型持续写入操作COW用于小文件改变 SyncIQ概览 SyncIQ是异步文件复制模块需要购买的授权模块从Isilon集群复制数据到其他Isilon集群参与集群的大小和型号不必相同通过任何IP链路复制WAN 广域网 或者LAN 局域网 SyncIQ3 0复制数据块 而不是新的 修改过的文件 SmartLock 经济高效地防范意外 过早或恶意地删除或修改数据 InsightIQ1 5 业界领先的横向扩展综合分析 扩展节点 平台节点 大数据横向扩展存储解决方案 S SERIES X SERIES NL SERIES ACCELERATORANDBACKUPACCELERATOR ISILONEXNODES 硬件 应用软件 操作系统 Isilon特性 业界证明的云存储解决方案领先者 国内外最大容量的集群存储系统 APPLE 12PB 华大基因 4PB 金山软件 2 8PB 单一分布式文件系统 最大可扩展到15 5PB全局单一命名空间访问仅由模块化存储节点组成 内部Infiniband高速互联 完全横向扩展 完全对称架构 无需管