存储基础知识(RAID及磁盘技术).ppt

1、存储基础知识,RAID技术,RAID基本概念定义,RAID （Redundant Array of Independent Disks）即独立磁盘冗余阵列，RAID技术将多个单独的物理硬盘以不同的方式组合成一个逻辑硬盘，从而达到提升存储容量、读写性能和数据安全性的目的。根据不同的组合方式可以分为不同的RAID级别,可靠性,未使用 RAID,一旦硬盘损坏，资料将丢失! 作业将停顿!,资料仍然存在!,使用 RAID,RAID出现原因 一,提高容量,未使用 RAID,使用 RAID,硬盘容量,单块硬盘 容量,硬盘容量,= 单块硬盘容量 x N,RAID出现原因 二,一旦硬盘损坏，资料将丢失! 作业将

2、停顿!,提升速度,速度 N x,单块硬盘的速度,Total request execution time,Software setup Access Time Data Transfer Software Completion,RAID出现原因 三,CPU运算速度飞速提高，数据读写速度不应该成为计算机系统处理的瓶颈,RAID基本概念 条带,分条,条带,硬盘0,硬盘2,硬盘1,硬盘3,大数据块写入RAID时会被分成多个数据块并行写入多块硬盘，这些大小一致的数据块就称为条带。同时数据读取时会并行从多块硬盘读取条带数据，最后完整输出。 条带无疑会大幅度提升整体读写效率。,RAID基本概念 重建（Re

3、build）,数据盘,A1,P,A0,A1,P,XOR,故障,数据盘,校验盘,A2,A2,XOR,数据盘,更换,某块硬盘出现故障后，一旦将其更换为正常硬盘，RAID便会通过其他硬盘数据计算出坏盘上原有的数据，再将数据重建回新添硬盘上。,RAID基本概念物理卷和逻辑卷,RAID10,RAID5,RAID由几块硬盘（物理卷）组成 RAID可以多个硬盘按照指定容量创建一个或多个逻辑卷，便通过LUN（Logic Unit Number）来标识。一个逻辑卷对于主机来说就是一块硬盘（物理卷）,物理卷,物理卷,逻辑卷,逻辑卷,多个物理卷上创建1个逻辑卷,多个物理卷上创建2个逻辑卷,LUN2,LUN3,RAI

4、D 0 条带存储(Striping),原理：又称数据分条，即把数据分成若干 相等大小的小块，并把它们写到阵列上不 同的硬盘上，这种技术又称“Stripping” （即将数据条带化），RAID0在读写时是以并行的方式对各硬盘同时进行操作。,优点 磁盘空间利用率最高 在所有的级别中，RAID 0的速度是最快的,缺点 无冗余功能，如果一个磁盘损坏，则所有的数据都无法使用 不适合关键业务,应用 媒体编辑 图像编辑 需要高带宽的应用,RAID 1 镜像/双工,优点 数据安全性相对其它RAID级，是最好的 缺点 磁盘利用率只有50%，是所有RAID上磁盘利用率最低的一个级别,原理：即每个工作盘都有一个镜像

5、盘，每次写数据时必须同时写入镜像盘，读数据时只从工作盘读出，一旦工作盘发生故障立即转入镜像盘，从镜像盘中读出数据。当更换故障盘后，数据可以重构，恢复工作盘正确数据,应用 财务 金融 需要高数据可用性的应用,RAID 3 (条带分布+专用盘校验),原理：使用至少三块硬盘配置，在其中的一块硬盘上存贮专用的校验数据，当某块硬盘出现故障时，其它硬盘可以通过校验数据将有故障的硬盘的数据重新恢复出来。 特点：数据以位或字节的方式存于各盘（分散记录在组内相同扇区的各个硬盘上）,优点 高可用性 磁盘利用率较高(N-1) 并行I/O传输，顺序读性能较高 缺点 校验盘成为性能瓶颈 每次读写牵动整个组，每次只能完成

6、一次I/O,应用 流媒体服务器 图像编辑 视频编辑,RAID 5 (条带技术+分布式校验),原理：RAID5 将所有校验的数据分别存贮在所有的硬盘上,每一个硬盘的不同地方既存贮数据，也存贮校验数据。当某块硬盘出现故障时，其它硬盘可以通过校验数据将故障的硬盘的数据重新恢复出来。,优点 高可用性 磁盘利用率较高(N-1),没有固定的校验盘，奇偶校验信息均匀分布在阵列所属的所有磁盘中 随机读写性能高允许在同一组内并发进行多个写操作 缺点 异或较验影响存储性能,应用 文件及应用服务器 数据库服务器 Web, E-mail 局域网服务器,RAID6（Double parity drive）高级数据保护,

7、特点：较高的数据冗余性能；超强的数据保护能力，可以应付多颗盘同时出错； 优点：允许在同一组内并发进行多个写操作 缺点：计算校验地址占用较多的处理时间；较低的写入速率。,RAID6 P+Q,RAID6 P+Q会根据公式计算出P和Q的值，当有两个数据同时丢失时，仍可以计算出原数据,RAID 级别比较,其中RAID3与RAID5的区别为：RAID3更适合于顺序存取，RAID5更适合于随机存取。需要根据具体的应用情况决定使用那种RAID级别。,RAID性能比较,DAS NAS SAN,存储体系架构介绍,Direct Attached Storage(DAS)直接外挂存储 服务器直接后挂存储设备，最经济

8、的一种结构。 Network Attached Storage (NAS)网络连接存储 网络上直接挂接的存储设备，相当于一个网络文件共享服务器。 Storage Area Network (SAN)存储区域网络应用光纤技术的SAN网络，传输介质为光纤，性能最高，目前使用较广 ISCSI(IP-SAN) iSCSI-利用TCP/IP协议连接存储设备,可以理解为SCSI over IP,是将SCSI命令封装到TCP/IP数据包中,通过IP网络传输SCSI数据。,DAS-直连存储,Client 2,Server AApplication A,Server BApplication B,Server

9、CApplication C,Disks for Server A,Disks for Server B,Disks for Server C,Client 3,Client 1,Local Area Network,SAN- 存储局域网络,Client 2,Client 3,Client 1,Server AApplication A,Server BApplication B,Server CApplication C,Disks for Server A,Disks for Server B,Disks for Server C,SAN,Local Area Network,Disk A

10、rray,NAS-网络附加存储,Disks for File System A,Disks for File System B,NAS Device AFile System A,NAS Device BFile System B,Internal/External connectivityto disks or arrays,Server AFile System A,Server BFile System B,Client 1,Client 2,Client 3,Local Area Network,SAN、iSCSI、NAS的特点,NAS 为解决数据共享问题和优化文件（File）存储而产

11、生的存储技术 文件管理系统在存储设备端，是文件服务+IP的一种技术 多应用于非结构化数据（文件） SAN 为解决DAS的问题而产生的存储技术 是DAS+网络的一种技术 多应用于OLTP系统（如：ERP） iSCSI iSCSI也叫IP SAN 多应用于PC服务器平台、Windows（SQL Server、Exchange）、Linux、小型数据库,应用系统,NAS,SAN/iSCSI,操作系统,文件管理系统,RAID控制,磁盘读写,应用系统IO调用模式,存储架构适用分类,SAN: 提供可用性、可管理性和扩展性 目标应用: 数据库/ERP/OLTP 灾难恢复 数据仓储,NAS: 易于安装和管理，

12、低价位, 目标应用: 文件服务器集中/更换 PDM/CAD 文件共享,DAS: 只适用于小型商务,IP-SAN与FC-SAN比较,IP-SAN适用环境：异地间的数据交换及容灾，备份，非关键应用的集中存储。 FC-SAN适用环境：关键应用的集中存储、备份及容灾。,DAS 优点: 成本低，对于小型用户来说，易于维护 缺点: 性能不高，系统停机多，资源无法共享，多系统环境下的管理成本增加 NAS 优点: 方便，文件级的数据共享，集中化管理 缺点: 需要贡献文件系统，安全性无法保障，性能一般，磁盘级数据无法共享集中，复杂系统的成本大，维护难，扩容受限 SAN 优点: 集中化的管理，高性能，减少停机时间

13、，安全保障高 缺点: 成本昂贵、系统复杂。磁盘阵列的兼容性限制了设备选择空间及资源共享。,机械硬盘,机械式硬盘结构,主轴马达 (Spindle Motor),磁头,基座(Base Plate),磁头停放区 (Parking Zone),盘片 (Media),传动部件,接口,容量：指硬盘能存储的数据量大小，以字节为基本单位 单碟容量：硬盘都是由一个或几个盘片组成的，单碟容量就是指包括正反两面在内的单个盘片的总容量 转速：即主轴马达转动速度，单位为RPM（Round Per Minute)，即每分钟盘片转动圈数 缓存：是硬盘控制器上的一块内存芯片，具有极快的存取速度，它是硬盘内部盘片和外部接口之间

14、的缓冲器,机械式硬盘主要指标（一）,平均访问时间：硬盘磁头找到目标数据所需的平均时间 平均寻道时间：磁头寻找目标数据所在磁道所需的平均时间 平均潜伏时间：当磁头移动到数据所在的磁道后，等待指定的数据扇区转动到磁头下方的时间 数据传输率： 内部数据传输率：数据从盘片表面传输到硬盘的缓存的速率 外部数据传输率：数据从硬盘的缓存读出到外部总线的速率,机械式硬盘主要指标（二）,硬盘的读写速度同硬盘的转速成正比 更高的转速可缩短硬盘的实际读写时间 硬盘缓存的大小直接影响硬盘的整体性能,转速和缓存对硬盘性能的影响,硬盘接口类型,硬盘容量发展,硬盘对比,FC磁盘、SAS磁盘、企业级SATA磁盘的性能对比,A

15、TA/IDE接口硬盘简介,ATA（Advanced Technology Attachment）硬盘是传统的桌面级硬盘，主要应用于个人PC机，也经常称为IDE硬盘 ATA接口为并行ATA技术，下一代的产品是串行ATA（SATA） 最高速度133M/S，已达性能极性。,SATA接口硬盘介绍,SATA：串行ATA (Serial AdvancedTechnologyAttachment ) SATA硬盘采用点对点连接方式，支持热插拔，即插即用 SATA采用串行方式进行数据传输，第二代（SATA ）300MB/s接口硬盘目前仍是主流，SATAD目前已经商用，速率为600MB/s,SCSI接口硬盘介绍

16、,SCSI (Small Computer System Interface )小型计算机系统接口 SCSI硬盘并发处理性能优异，常应用于企业级存储领域 SCSI硬盘采用并行接口，接口速率目前发展到320MB/s，基本已经达到极限，已被其串行版本SAS硬盘完全替代,SAS接口硬盘介绍,SAS(Serial Attached SCSI) 串行SCSI 接口 SAS是一种点对点、全双工、双端口的接口 SAS专为满足高性能企业需求而设计，并且兼容SATA硬盘，为企业用户带来前所未有的灵活性 接口速率为300MB/S，600MB/S（SAS）,FC接口硬盘介绍,FC-AL(fibre channel

17、arbitrated loop)是一种双端口的串行存储接口 FC-AL利用类似SATA/SAS所用的4芯连接，提供一种单环拓扑结构，一个控制器能访问126个硬盘 4Gb/S的硬盘接口速率,Services,固态硬盘 Solid State Disk,固态硬盘的定义,固态硬盘，是由控制单元和固态存储单元（DRAM或FLASH芯片）组成的硬盘, 简单的说就是用固态电子存储芯片通过阵列的形式而够成的硬盘。其内部存储单元利用固态电子存储芯片阵列取代了传统HDD硬盘的磁碟组。固态硬盘的接口规范定义、功能及使用方法均与普通硬盘完全相同,在产品外形和尺寸上也完全与普通硬盘一致,包括3 . 5 英寸、2 .

18、5 英寸、1 . 8 英寸多种类型。,固态硬盘的存储介质分为两种： 采用闪存（FLASH芯片）作为存储介质 采用DRAM作为存储介质,固态硬盘的类型,SLC更昂贵，但也更可靠，速度快，且写次数更高（只是容量小）。 SLC和MLC SLC和MLC两者的差异在于每单元存储的数据量（密度），MLC的存储容量比SLC大，但是SLC更简单可靠，SLC读取和写入的速度都比MLC更快，而且SLC比MLC更耐用，MLC每单元可擦除1万次至5万次，而SLC可擦除10w次以上，所以，企业级的闪存产品一般都选用SLC，这也是为什么企业级产品比家用产品贵很多的原因。,SSD单层单元与多层单元,数据存取速度快。固态硬盘没有传统硬盘复杂的机械结构，既没有磁碟，也不存在磁头，它无需花费较长的时间寻道，读取速度更不会受到转速的限制。 防震抗摔。SSD固态硬盘内部不存在任何机械部件，这样即使在高速移动甚至伴随翻转倾斜的情况下也不会影响到正常使用。 没有噪音，发热低。由于与传统硬盘物理结构不同，SSD 固态硬盘不存在磁头臂寻道的声音和盘片高速旋转的噪音，也没有机械马达和风扇，工作噪音值为0分贝。,固态硬盘优点,四工作温度范围大。机械硬盘只能在555摄氏度范围内