智能存储系统

1、信息存储与管理国家天文台（科技处）信息与计算中心概述v 关键性的业务应用对性能、可用性、安全性以及可扩展性都有很高的要求。v 硬盘是存储的核心组成部分，决定了存储系统的性能。v RAID技术的出现很大程度提升了存储系统的性能和可靠性。然而，单靠硬盘仍然无法满足应用需求。v 智能存储系统是一种功能丰富的RAID阵列，提供了高度优化的I/O处理能力。智能存储系统的组成v 四个核心部分：前端、缓存、后端、物理磁盘v 一个来自主机的I/O请求首先到达前端端口，然后经过缓存和后端的处理，最终在物理磁盘上存储或获取数据。如果被请求的数据已经保存在缓存中，那么请求可以直接在缓存中完成。前端v 前端提供了存储

2、系统与主机之间的接口v 它由两部分组成：前端端口和前端控制器 每个前端端口都拥有相应传输协议的处理逻辑，这些协议包括： SCSI、FC、iSCSI等 为了获取更高的可用性，一般在前端提供冗余的端口v 前端控制器通过内部数据总线把数据传入缓存或从缓存传出数据v 当缓存收到写入的数据后，控制器向主机发出一个应答消息。控制器用命令队列算法来优化I/O处理。前端命令队列v前端命令队列在前端控制器上实现v控制器对收到的命令的执行顺序进行决策，以减少不必要的驱动器磁头移动，改善磁盘性能。v有了命令队列，就可以根据数据在磁盘上的组织方式并发的执行命令，而不是按照这些命令的达到顺序执行。命令队列算法v 先进先

3、出算法（First In First Out, FIFO） 从性能角度看它是最差的v 寻道时间优化算法v 访问时间优化算法高速缓存v 缓存是智能存储系统用来提高I/O性能的重要环节v 缓存是半导体存储器v 为了减少完成主机I/O请求所需的时间，数据被暂存在缓存中v 物理磁盘是智能存储系统中最慢的组件，缓存可以将主机与磁盘的机械延迟隔离开，从而提升系统的性能带有缓存的读操作v 每当主机发出一个读请求，前端控制器会通过查询请求的数据是否保存在缓存中。 如果在缓存中找到请求的数据，则发生一次读缓存命中，数据被直接送到主机，无需任何磁盘操作。 如果没有在缓存中找到请求数据，称为发生了一次缓存未命中，数

4、据必须从硬盘读取。带有缓存的读操作v后端控制器负责访问相应的磁盘并读取请求的数据。随后，数据被保存到缓存中并最终通过前端控制器送到主机。v缓存未命中增加了I/O响应时间。Pre-readv如果读请求是顺序的，可以采用预取或者称为预读的算法。v这一过程显著的减少了主机的响应时间读命中率的提高带来性能上的提升带有缓存的写操作v带有缓存的写操作提供了比直接写磁盘更好的性能。v一个I/O被写入缓存并得到响应比直接写入磁盘所用的时间要少得多。v多个小的顺序写操作可以被合并成大的写操作，在有缓存的情况下使得我们有机会对顺序写操作做优化。带有缓存的写操作的实现v回写缓存数据被存入缓存，主机立即得到响应。一段

5、时间后多个写操作的数据被一起提交到磁盘。如果遇到故障，未被提交的数据有丢失的风险v直接写缓存数据被存入缓存并立即写到磁盘中因为需要磁盘操作，写响应时间比较长跳过缓存写的情况v 在特定的情况下缓存可以被跳过 比如要写入极大量的数据时。这时，如果一个I/O请求的大小超过了预先定义的值（称为写旁入大小），写入操作被直接发送到磁盘以防这些写入占用大量的缓存区域。v 有限的缓存要用在小的、随机的I/O访问中，这样才更有效。 好钢用在刀刃上缓存实现v 缓存实现分为专用缓存和全局缓存 专用缓存：读操作和写操作分别使用单独的内存 全局缓存：读写操作都可以使用任意空闲的内存v 全局缓存的管理更有效率，因为只需管

6、理一组全局的地址缓存管理v缓存是昂贵、有限的资源，需要合适的管理v缓存管理算法最近最少访问算法（Least Recently Used, LRU） 假设：如果一个页面刚刚被访问过了，它就不太可能再被访问最近最多访问算法（Most Recently Used, MRU） 假设：如果一个页面刚刚被访问过了，它还可能被经常访问缓存数据保护v缓存是易失性存储器，电源故障或者其他缓存故障都会使得还没有来得及保存到磁盘上的数据丢失。v保护方法电池供电：将缓存中的数据保存到磁盘缓存镜像：在互相独立的内存条不同位置保存两份缓存跳跃：用一组物理硬盘在停电时转存缓存中的数据。恢复供电时，数据从转存磁盘读到缓存，再

7、写回对应的磁盘中。后端v后端提供了缓存和物理磁盘之间的接口两部分组成：后端端口和后端控制器后端控制器在做读写操作时与磁盘进行交流，同时也提供有限的、临时的数据存储。v磁盘端口冗余可以进一步增强可靠性情况罕见物理磁盘vSCSIvFCvIDE/ATAvSASvSATA固态驱动器v 固态硬盘的存储介质分为两种 一种是采用闪存（FLASH芯片）作为存储介质 另外一种是采用DRAM作为存储介质(需要独立电源来保护数据安全)v 没有机械运动部件v 带来了更短的响应时间和更低的电量消耗 在阵列中，闪存存储器存储1TB的数据消耗的能量比传统磁盘驱动器少38% 30个15K转速的FC盘才能达到一个闪存驱动器的性

8、能 在性能相同的情况下，闪存驱动器能节能98%SSDv固态硬盘的优点固态硬盘的优点启动快不用磁头，快速随机读取，读延迟极小相对固定的读取时间基于DRAM的固态硬盘写入速度极快无噪音能耗和发热量较低内部不存在任何机械活动部件，不会发生机械故障，也不怕碰撞、冲击、振动工作温度范围更大体积小、重量轻v固态硬盘的缺点固态硬盘的缺点成本高。每单位容量价格是传统硬盘的510倍（基于闪存），甚至200300倍（基于DRAM）。容量低易受到某些外界因素的不良影响。如断电（基于DRAM的固态硬盘尤甚）、磁场干扰、静电等。写入寿命有限（基于闪存）数据损坏后难以恢复1.基于DRAM的固态硬盘在任何时候的能耗都高于传

9、统硬盘逻辑单元编号v 逻辑单元编号：Logical Unit Number, LUNv 物理驱动器或一组RAID保护的驱动器可以被分为若干个逻辑卷，这些逻辑卷用LUN统一寻址。v 一个逻辑设备实际上是RAID组中的一个分区，但却被主机看作是一个物理磁盘。v 在RAID情况下，这些逻辑设备是RAID组的一部分，分布在所有属于该RAID组的磁盘上。v LUN的使用提高了磁盘的利用率。LUN屏蔽v LUN屏蔽是一种数据访问控制，它决定主机可以访问哪些LUN。v LUN屏蔽功能一般在前端控制器上实现。v LUN屏蔽保证了服务器的卷访问得到适当的控制，防止在分布式环境中的未授权访问和意外访问。智能存储阵

10、列v高端存储阵列活动活动式阵列 主机可以利用任何可用的路径去访问它的LUNv中档存储阵列活动被动式阵列 主机只能通过到该LUN的控制器的路径进行访问活动被动式阵列实例vEMC CLARiiON功能功能优点CLARiiON FAST自动实现存储分层，可降低成本，提高服务级别。闪存驱动器闪存驱动器通过建立新的第 0 层来扩展分层能力，从而实现超高性能。UltraFlex? 技术技术利用灵活的连接选项、在线扩展和集成未来技术的能力。光纤通道光纤通道/iSCSI 连接连接利用 8 个 4 Gb/s 光纤通道和 4 个 1 Gb/s iSCSI 主机端口实现灵活部署。虚拟资源调配虚拟资源调配提高容量利用

11、率；简化并加速跨存储阵列层分配存储容量的过程。支持虚拟化的支持虚拟化的管理管理使用端到端映射和报告功能实时、动态查看虚拟环境。虚拟虚拟 LUN 技术技术通过在阵列内无中断迁移数据，方便地管理分层存储部署。三年三年“增强增强”支持支持获得无限时在线自助服务、主动预防性远程支持、软件升级、24x7 呼叫中心响应和 9x5 现场支持。CX4 120/240/480/960vEMC Symmetrix为业界提供了性能和容量的最高标准活动活动式阵列实例功能功能优点最高可达最高可达 1 PB 的无缝可扩展性的无缝可扩展性选择适合您需要的容量和性能 从 96 到 2,400 个驱动器。以信息为中心的安全性以信息为中心的安全性获得内置而非外加的高级 RSA 安全技术，以让您的数据保持安全，降低风险，并改进法规遵从性。具有服务质量具有服务质量 (QoS) 的分层存储的分层存储 利用闪存、光纤通道和串行高级技术连接 (SATA) 驱动器提高服务级别，降低成本。数据移动性数据移动性通过在存储层、平台和站点之间方便快捷地复制和移动数据，让您的信息保持高度的可移动性。系统管理系统管理利用 EMC Symmetrix Management Console（一个基于浏览器的直观界面）来管理配置和复制任务