




版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、存储基础知识存储基础知识培训材料培训材料Contents1.您所熟悉的数据存储3.数据备份技术5.信息生命周期2.存储基础知识4.主机高可用技术6.其他知识这是一个大数据时代!根据IDC发布的全球数据总量研究报告(Digital Universe)显示,在接下来的8年中,我们所产生的数据量将超过40 ZB(估计是地球上所有海滩上砂砾数量的57倍),这相当于地球上每个人产生5200GB的数据。数据存储的方式数据存储您所面临的疑惑?多媒体数据的电子化,使得数据容量增长速度越来越快。数据与是如何被管理起来?从磁盘层面时候可以保障数据的安全性稳定性?Internet的发展使得数据在网络传播在网络传播,
2、怎么实现的?有哪些高可用方案保障数据的写入、读取?业务运行时的数据一致性如何保障?在发生灾难时,数据是否可以提供做好复制容灾措施?数据是否有生命周期?请思考数据存储的知识领域。Contents1.您所熟悉的数据存储3.数据备份技术5.信息生命周期2.存储基础知识4.主机高可用技术6.其他知识2.1存储介质基础存储介质-HDDHDD(Hard Disk Drive,硬盘驱动器)构成:介质磁头接口p IDC(Integrated Dive Electronics)p ATA(AT attachment)p SATA(Serial ATA)p SCSIp FCp SASHDD属于物理机械结构,比较容
3、易坏,却好恢复数据。存储介质-SSDSSD属于半导体结构,一般不易坏,难以恢复数据。SSD(Solid State Drives,固态硬盘)主要有主控、内存、缓存、固件四大部分组成,其中前三者属于硬件部分,固件属于软件程序部分,用于控制主控的读写操作。新一代固态硬盘普遍采用SATA-2接口、SATA-3接口、SAS接口、MSATA接口、PCI-E接口、NGFF接口、CFast接口和SFF-8639接口。HDD与SSD比较固态硬盘(SSD)机械硬盘(HDD)容 量较小大价 格贵便宜随机存取极快一般写入次数SLC:10万次/MLC:1万次无限制磁盘阵列可极难工作噪音运转宁静普遍存在声音工作温度极低
4、较为明显发热情况发热较少有一定发热情况存在防震能力很好较差数据读取读取性能佳读取性能远低于SSD数据恢复难容易2.2接口、协议、主机、操作系统及数据库硬盘接口硬盘接口SCSIFC(光纤通道)SAS接口IDCSATA常见接口常见接口协议协议SCSI小型计算机系统接口(Small Computer System Interface)的简称,于1979首次提出,是为小型机研制的一种接口技术,现在已完全普及到了小型机,高低端服务器以及普通PC上。目前SCSI的主流是Ultra 640(640MB/s)SCSI是在存储产品中应用最广泛的主机接口类型,大部分的中低端盘阵都采用SCSI主机接口以太网口在存储
5、设备中的以太网接口主要用于两种用途:NAS和IP-SANNAS是一种网络文件服务器IP-SAN是将SCSI的数据流通过IP网络进行传输,构成类似于FC-SAN的存储专用网络,目前主要的IP-SAN类型是iSCSI在iSCSI设备总一般都采用GBE,即千兆以太网卡FC(Fiber Channel,光纤通道)是一种主要使用光纤介质的数据传输技术,用于计算机设备之间的数据传输,连接距离可到10KM(不用中继设备)FC通道的主流速度为2Gb/s和4Gb/s光纤通道的主要特性有:热插拔、高速带宽、远程连接、连接设备数量大等是构成FC-SAN结构的基础,目前高端的存储系统大多超过FC设备。iSCSI(互联
6、网小型计算机系统接口)是一种在TCP/IP上进行数据块传输的标准。iSCSI可以实现在IP网络上运行SCSI协议,使其能够在诸如高速千兆以太网上进行快速的数据存取备份操作。iSCSIiSCSI协议协议l iSCSI是互联网小型计算机系统接口(Internet Small Computer System Interface)的简称,是一种在TCP/IP上进行数据块传输的标准。可以理解为SCSI over IP。l iSCSI实现在IP网络上运行SCSI协议,使其能够在诸如高速千兆以太网进行快速的数据存取备份操作。可用于构成基于IP的SAN,为用户提供高速、低价、长距离的存储解决方案。l iSCS
7、I是将SCSI命令封装到TCP/IP数据包中,使I/O数据块可通过IP网络传输。数据校验(若有)数据校验(若有)以太网头以太网头(14)IP头头(20)TCP头头(20)iSCSI(TCP数据)数据)FCS源端口源端口目的端口目的端口序列号序列号确认号确认号首部首部长度长度保留保留U A P R S F窗口大小窗口大小校验和校验和紧急指针紧急指针iSCSI的知名端口是:的知名端口是:3260基本报头段基本报头段(BHS,48字节字节)附加报头段(若有)附加报头段(若有)头部校验(若有)头部校验(若有)数据段(若有)数据段(若有)FCFC协议协议Fibre Channel是光纤通道的简称,用于服
8、务器共享存储设备的连接,存储控制器和驱动器之间的内部连接。FC是一种高性能的串行连接标准,其接口传输速率目前有1G、2G、4Gbit/S几种标准。传输介质可以选择铜缆或光纤,支持多种互联网拓扑结构。像TCP/IP一样,FC协议集同样具备TCP/IP和以太网中的很多概念,例如:FC交换机、FC路由器、SPF算法等。你完全可以将FC协议理解为SAN中的TCP/IP,因为他们都遵循OSI模型。服务器主机架构服务器主机架构X86体系架构RISC体系架构采用AMD的Opteron和Intel的Xeon/ Itanium等处理芯片,支持标准的Windows和Linux操作系统。基于专有的64位RISC芯片
9、体系系统架构。 由各厂商自己开发芯片和操作系统,各家产品互不兼容,也不兼容大量x86平台上的软件,一般采用UNIX操作系统。一般都称为小型机。像美国Sun、日本Fujitsu等公司的小型机是基于SPARC处理器架构,而美国HP公司的则是基于PARISC架构,Compaq公司是Alpha架构,IBM和SGI等的也都各不相同;其中IO总线也不相同,Fujitsu是PCI,Sun是SBUS,等等, 这就意味着各公司小型机机器上的插卡,如网卡、显示卡、SCSI卡等可能也是专用的。机架式主要主机厂商主要主机厂商刀片塔式机柜式国内主机厂商联想、华为、浪潮、宝德、华硕、中科曙光、长城国外主机厂商IBM、DE
10、LL、HP、SUN、Cisco、富士通常见操作系统常见操作系统操作系统:是计算机系统中的管理软件,负责管理计算机系统中的所有资源.主要用于管理主机的进程管理与协作、内存管理、文件系统与输入输出、系统保护与安全等一般来说. 操作系统操作系统(服务器版本)服务器版本)Windows系列Unix系列Linux系列常见关系型数据库系统常见关系型数据库系统OracleIBMMicrosoftOracle能在所有主流平台上运行。完全支持所有的工业标准。采用完全开放策略。几乎覆盖了当前所有流行的硬件和操作系统平台:AIX、windows 2008、Red Hat等仅能在Windows平台下运行支持AIX、F
11、reeBSD、HP-UX、Linux、Solaris、Windows等多种操作系统。支持多用户,大事务量的事务处理 。数据安全性和完整性控制 。提供对于数据库操作的接口。支持分布式事务处理 。可移植性,可兼容性和可连接性 。具有很好的并行性。DB2把数据库管理扩充到了并行的、多节点的环境。数据库分区是数据库的一部分,包含自己的数据、索引、配置文件、和事务日志。数据库分区有时被称为节点安全性。 图形化用户界面,使系统管理和数据库管理更加直观、简单,丰富的编程接口工具为用户进行程序设计提供了更大的选择余地。SQL Server与Windows NT完全集成,利用了NT的许多功能,如发送和接受消息,
12、管理登录安全性等。开源软件,版本更新较快。性能很出色。价格便宜。SAP能在所有主流平台上运行,Unix、Linux、Windows。一种高性能的数据库。采用了客户/服务器结构,应用被分在了多台机器上运行。Sybase数据库,不只是简单地提供了预编译,而且公开了应用程序接口DB-LIB,鼓励第三方编写DB-LIB接口。2.3文件系统基础什么是文件系统?磁盘是由很多个扇区(Sector)组成的,如果扇区之间不建立任何的关系,写入其中的文件就无法访问,因为无法知道文件从哪个扇区开始,文件占多少个扇区,文件有什么属性。为了访问磁盘中的数据,就必需在扇区之间建立联系,也就是需要一种逻辑上的数据存储结构。
13、建立这种逻辑结构就是文件系统要做的事情,在磁盘上建立文件系统的过程通常称为“格式化”。文件系统:定义了把文件存储于磁盘时所必须的数据结构及磁盘数据的管理方式。举个通俗的比喻,一块硬盘就像一个块空地,文件就像不同的材料,我们首先得在空地上建起仓库(分区),并且指定好(格式化)仓库对材料的管理规范(文件系统),这样才能将材料运进仓库保管。FAT文件系统FAT(File Allocation Table)是“文件分配表”的意思。顾名思义,就是用来记录文件所在位置的表格,它对于硬盘的使用是非常重要的,假若丢失文件分配表,那么硬盘上的数据就会因无法定位而不能使用了。微软在Dos/Windows系列操作系
14、统中共使用的一种文件系统的总称,FAt12、FAT16、FAT32均是Fat文件系统。不同的操作系统所使用的文件系统不尽相同。操作系统根据表现整个磁盘空间所需要的簇数量来确定使用多大的FAT。FAT12FAT16FAT32分区大小16MB2GB32GB单个文件大小-2GB=2)可用容量总的磁盘容量磁盘容量的50%磁盘容量的(N-1)/N磁盘容量的(N-1)/N磁盘容量的50%2.5网路存储主要技术存储分类存储分类存储分类封闭式的存储开放系统的存储外挂存储内置存储Direct-Attached Storage直接附加存储(DAS)Fabric-Attached Storage网络存储(FAS)S
15、torage Area Storage网络存储区域网络(SAN)Network-Attached Storage网络接入存储(NAS)DAS-Direct Attached StorageDAS-Direct Attached Storage直接附加存储是指将存储设备通过SCSI接口直接连接到一台服务器上使用。DAS购置成本低,配置简单,使用过程和使用本机硬盘并无太大差别,对于服务器的要求仅仅是一个外接的SCSI口,因此对于小型企业很有吸引力。DAS存在诸多问题:有限的扩展性SCSI总线的距离最大为25米;最多15个设备专属的连接空间资源无法与其他服务器共享对于存在多个服务器的系统来说,设备分
16、散,不便管理。同时多台服务器使用DAS时,存储空间不能在服务器之间动态分配,可能造成相当的资源浪费硬件失败将导致更高的恢复成本数据备份操作复杂Application ServerSCSI or FCSSCSI or FCSSCSI ProtocolSAN-Storage Area StorageSAN-Storage Area StorageSAN(Storage Area Network )存储区域网络,是一种通过网络方式连接存储设备和应用服务器的存储构架,这个网络专用于主机和存储设备之间的访问。当有数据的存取需求时,数据可以通过存储区域网络在服务器和后台存储设备之间高速传输。SAN组成:服
17、务器,后端存储系统(SAN控制器和磁盘系统构成),SAN连接设备。SANSAN优点优点实现存储介质的共享非常好的扩展性基于数据备份和恢复实现备份磁带共享LAN Free和Server Free高性能支持服务器集群技术容灾手段低的TCOSANSAN缺点缺点成本较高 需要专用的连接设备,如FC交换以及HBASAN孤岛技术较为复杂 需要专业技术人员维护FC SANFC SAN与与iSCSI SANiSCSI SAN对比对比Application ServerFibre ChannelSCSI ProtocolSANSAN AttachedIPNetworkiSCSI ProtocoliSCSI Ap
18、plianceBlock IOApplicationiSCSI AttachedIP SAN优点:部署成本低共享网络(IP网络复用,提高网络利用率)维护简便适合远距离传输IP SAN缺点:传输效率低(正常IP网络利用率不足50%)传输安全性低传输延时无保障一般占用大量主机资源FC SAN优点:传输效率高传输安全性高传输延时极小占用主机资源少技术成熟应用范围最广的专业存储架构FC SAN缺点:部署成本高需要专属网络NAS-Network Attached StorageNAS-Network Attached StorageNAS(Network Attached Storage网络附加存储),
19、是一种文件共享服务。拥有自己的文件系统,通过NFS或CIFS对外提供文件访问服务。NAS包括存储器件(例如硬盘驱动器阵列、CD或DVD驱动器、磁带驱动器或可移动的存储介质)和专用服务器。专用服务器上装有专门的操作系统,通常是简化的unix/linux操作系统,或者是一个特殊的win2000内核。它为文件系统管理和访问做了专门的优化。专用服务器利用NFS或CIFS,充当远程文件服务器,对外提供文件级的访问。NAS的缺点:NAS设备与客户机通过企业网进行连接,因此数据备份或存储过程中会占用网络的带宽。NAS的可扩展性受到设备大小的限制。增加另一台NAS设备非常容易,但是要想将两个NAS设备的存储空
20、间无缝合并并不容易,因为NAS设备通常具有独特的网络标识符,存储空间的扩大上有限。NAS访问需要经过文件系统格式转换,所以是以文件一级来访问。不适和Block级的应用,尤其是要求使用裸设备的数据库系统。NAS的优点:NAS可以即插即用。NAS通过TCP/IP网络连接到应用服务器,因此可以基于已有的企业网络方便连接。专用的操作系统支持不同的文件系统,提供不同操作系统的文件共享。经过优化的文件系统提高了文件的访问效率,也支持相应的网络协议。即使应用服务器不再工作了,仍然可以读出数据。 IPNetworkFile Protocol(CIFS,NFS,HTTP,FTP,etc)NAS Applianc
21、eNetwork Attached Storage存储技术对比存储技术对比DASNASFC SANIP SAN(iSCSI)表现形式DVR,服务器内/外挂的SCSI、SATA、1394扩展柜等基于以太网的存储设备,提供文件级服务基于光纤网络的存储设备,提供块设备级服务基于以太网的存储设备,提供块设备级服务容量可扩展性低较高高高共享能力低高高高距离可扩展性低高中高集中式存储、管理否是是是配置的周边设备SCSI卡,1394卡等以太网卡以太网交换机光纤通道卡光纤通道交换机以太网卡以太网交换机价格低中低高中低数据传输通道数据传输通道GE CardiSCSI HBA CardSCSI HBA CardF
22、C HBA Card主机iSCSI 磁盘阵列以太网线SCSI 磁盘阵列FC磁盘阵列SCSI线缆光纤线缆NASNAS与与SANSAN结合结合SAN针对海量、面向数据块的数据传输,而NAS则提供文件级的数据访问和共享服务。NAS和SAN不仅各有应用场合,也相互结合,许多SAN部署于NAS后台,为NAS设备提供高性能海量存储空间。IPNetworkOver EthernetSANNFSOrCIFSNASFileSystemNAS GatewayFile IO ProtocolsBlock IO ProtocolsShared StorageClients & Servers2.7数据容灾与备份复制数
23、据一致性数据一致性数据一致性是指关联数据之间的逻辑关系是否正确和完整。问题可以理解为应用程序自己认为的数据状态与最终写入到磁盘中的数据状态是否一致。分布式系统中数据一致性存在的问题 高度并行带来的问题本机内多任务并行带来的困难多级并行带来的困难网络延迟不可预测 多副本带来的问题系统存在多个副本,数据的修改通常会在不同的副本上进行。数据一致性数据一致性类型类型Cache引起的数据一致性引起数据一致性问题的一个主要原因是位于数据I/O路径上的各种Cache或Buffer(包括数据库Cache、文件系统Cache、存储控制器Cache、磁盘Cache等)。由于不同系统模块处理数据IO的速度是存在差异
24、的,所以就需要添加Cache来缓存IO操作,适配不同模块的处理速度。这些Cache在提高系统处理性能的同时,也可能会“滞留”IO操作,带来一些负面影响。时间不同步引起的数据一致性文件共享中的数据一致性关闭Cache或创建快照(Snapshot)。对相关联的多个数据卷进行操作(如备份、复制)时,在时间上不同步。比如一个Oracle数据库的数据库文件、Redo日志文件、归档日志文件分别存储在不同的卷上,如果在备份或复制的时候未考虑几个卷之间的关联,分别对一个个卷进行操作,那么备份或复制生成的卷就一定存在数据不一致问题。建立“卷组(Volume Group)”把多个关联数据卷组成一个组,在创建快照时
25、同时为组内多个卷建立快照,保证这些快照在时间上的同步。通常所采用的双机或集群方式实现同构和异构服务器、工作站与存储设备间的数据共享,主要应用在非线性编辑等需要多台主机同时对一个磁盘分区进行读写。在NAS环境,可以通过网络共享协议N FS或CIFS来做到数据的共享。非NAS环境下,可以通过使用数据共享软件装在多台主机上来实现磁盘分区的共享。快照创建过程快照创建过程存储控制器快照代理要为数据卷X创建快照,请配合一切准备就绪,可以创建了快照创建完成准备创建快照创建快照应用进入Backup模式Flush Cache应用进入Normal模式数据灾难定义数据灾难定义国务院信息化办公室在2005年发布了重要
26、信息系统灾难恢复指南,用于指导信息系统的使用和管理单位的灾难恢复规划工作,以及对信息系统灾难恢复规划项目的审批和监督管理。指南给灾难下了一个清晰的定义:“由于人为或自然的原因,造成信息系统运行严重故障或瘫痪,使信息系统支持的业务功能停顿或服务水平不可接受、达到特定的时间的突发性事件”。灾难恢复具有的技术与管理等级灾难恢复具有的技术与管理等级数据备份系统备用数据处理系统备用网络系统备用基础设施技术支持运行维护支持灾难恢复预案IT技术范畴管理和服务范畴数据备份系统面向的对象是数据,目的是实现数据的冗余备份。常用技术有数据备份和数据复制等。备用数据处理系统面向的对象是应用服务器,目的是在主要数据处理
27、系统发生故障时候,可以利用数据备份系统产生的冗余数据来恢复应用,常用的技术有双击热备、服务器集群等。备用网络系统面向的是网络连接,目的是保证备用数据处理系统与其客户端、不同备用数据处理系统之间的网络,以便整个实现业务系统的恢复。灾难恢复应具有的技术和管理支持分为6个等级,每个级别都包括数据备份系统、备用数据处理系统、备用网络系统、备用基础设施、技术支持、运行维护支持和灾难恢复预案这7个要素。容容灾的技术指标灾的技术指标RTO(Recovery Time Object,恢复时间目标)指“将信息系统从灾难造成的故障或瘫痪状态恢复到可正常运行状态,并将其支持的业务功能从灾难造成的不正常状态恢复到可接
28、受状态”所需时间,其中包括备份数据恢复到可用状态所需时间、数据处理系统切换时间、以及备用网络切换时间等,该指标用以衡量容灾方案的业务恢复能力。RPO(Recovery Point Time,恢复点目标)RPO是指业务系统所允许的灾难过程中的最大数据丢失量(以时间来度量),这是一个与数据备份系统所选用的技术有密切关系的指标,用以衡量灾难恢复方案的数据冗余备份能力。容灾半径容灾半径是指生产中心和灾备中心之间的直线距离,用以衡量容灾方案所能防御的灾难影响范围。投入产出比投入产出比ROI(Return of Investment,投入产出比)也是用户需要重点关注的,它用以衡量用户投入到容灾系统的资金与
29、从中所获得的收益的比率。直接和间接成本,包括:l 关键任务数据损坏l 停机时间对企业生产效率的影响l 设备及其他资产的损坏l 检测和修复系统和核心业务过程的成本l 法律和法规的影响,包括诉讼辩护费用l 关键利益相关者之间失去的信心和信任l 市场的品牌和声誉的损失数据中心电力中断的平均成本增长示意图数据备份数据备份数据备份是容灾的基础,是指为防止系统出现操作失误或系统故障导致数据丢失,而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。传统的数据备份主要是采用内置或外置的磁带机进行冷备份。但是这种方式只能防止操作失误等人为故障,而且其恢复时间也很长。随着技术的不断发展,数据的
30、海量增加,不少的企业开始采用网络备份。网络备份一般通过专业的数据存储管理软件结合相应的硬件和存储设备来实现。定期磁带数据库网络数据远程镜像LAN 备份、LAN Free备份和SAN Server-Free备份三种。LAN 备份针对所有存储类型都可以使用, LAN Free备份和SAN Server-Free备份只能针对SAN架构的存储。完全备份、差异备份、增量备份差别完全备份、差异备份、增量备份差别数据复制数据复制数据复制(Replication)是指利用复制软件(如EMC的SRDF、H3C同步异步镜像等)把数据从一个磁盘复制到另一个磁盘,生成一个数据副本。2.8存储连接设备FC HBAiSC
31、SI HBA光纤信道主机总线适配器的缩写,主要用于主机与FC设备之间的连接。FC HBA卡使用的传输介质可以分为光缆和铜缆两种;光缆分为单模长波和多模短波两种,单模长波最大传输距离十公里,多模短波最大传输距离500米(直径50微米)、175米(直径62.5微米)iSCSI主机总线适配器的缩写,将硬件iSCSI initiator集成到板卡上,利用 TCP/IP卸载引擎在适配卡上完成数据处理,作用在于减轻主机CPU负载,也提供了高可用环境下硬件多通道功能和服务器远程引导功能接口类型与以太网原有接口完全相同大多数iSCSI HBA卡都具有TOE功能TOE(TCP/IP Offload Engine
32、):TCP/IP卸载引擎的缩写,TOE网卡将TCP/IP处理脱离主机CPU,在TOE网卡上由专用芯片完成TCP/IP处理和数据包创建,减轻主机CPU的负载。随着iSCSI产品的普及,目前大多数iSCSI HBA也同时具备TOE功能,把二者的优点整合在一起存储连接设备存储连接设备-HBA-HBA卡卡主机总线适配器(Host Bus Adapter,HBA)是一个在服务器和存储装置间提供输入/输出(I/O)处理和物理连接的电路板和/或集成电路适配器。因为HBA减轻了主处理器在数据存储和检索任务的负担,它能够提高服务器的性能。一个HBA和与之相连的磁盘子系统有时一起被称作一个磁盘通道。FCFC连接设
33、备连接设备类似以太网HUB,内部为仲裁环拓扑(Arbitrated Loop),所有连接到FC HUB上的设备共享全部总线带宽,由于自身协议的原因,最多支持127个地址。FC交换机,内部为Fabric拓扑,每端口独占带宽,理论上可以连接1600万个设备。多 端 口 、 高 带 宽 网 络 的Switch,用于提供最高的可用性,一般用于FC骨干网中多 个 S A N 之 间 的 连 接 。Director中的每个部件的失灵不会影响正常应用,具有全冗余、热插拔部件,能将宕机时间最小化。结合IP和FC交换技术的存储网络平台,配置以太网端口和FC通信端口,通过逻辑单元号( L U N ) 映 射 实
34、现iSCSI和FC之间的协议转换。Contents1.您所熟悉的数据存储3.数据备份技术5.信息生命周期2.存储基础知识4.主机高可用技术6.其他知识数据备份数据备份将正常时刻的数据以某种格式和方式加以保存备份数据的根本目的是数据恢复,在数据遭受破坏或其他特定情况下能够快速、正确、方便地恢复数据,才是备份系统的真正价值所在备份工作是系统的一个“额外负担”,备份系统的选择和优化工作至关重要备份窗口:一个工作周期内留给备份系统进行备份的时间长度备份策略:为所有具有相似备份要求的客户机组配置的执行备份的方式和时间备份系统:由备份服务器、备份软件和备份介质组成的备份系统星期天 周一 周二 周三 周四
35、周五 周六全备份星期天全备份备份策略备份策略差量备份:备份自上次全备份后被修改过的文件增量备份:对上次全备份或者增量备份后被修改了的文件做备份全备份:每次都把所有数据完全备份应用服务器LAN应用服务器应用服务器 备份设备 备份设备 备份设备数据备份方式数据备份方式- -本地备份本地备份备份服务器LAN应用服务器应用服务器 备份设备 备份设备数据流数据流数据备份方式数据备份方式- -网络备份网络备份Storage network数据备份方式数据备份方式-LAN Free-LAN Free备份服务器LAN应用服务器应用服务器 主设备 备份设备指令流Storage network数据备份方式数据备份
36、方式-Server-Less-Server-Less备份服务器LANLAN应用服务器应用服务器 主设备 备份设备指令流快照卷生产卷Storage networkStorage network传统磁带库的局限传统磁带库的局限l 备份速度慢,备份窗口冗长l 磁带的恢复速度很慢l 磁带介质受灰尘、温度、湿度影响很大,难以保证已经离线保存的磁带在需要的时候可以正常工作l 磁带库的机械手等物理设备的故障率和磨损率相对电子元件较高D2D2TD2D2TD2D(Disk to Disk)和D2D2T(Disk to Disk to Tape) 使用磁盘代替磁带作为备份介质 备份数据首先保存在性价比较高的SAT
37、A磁盘阵列中,然后定期将磁盘备份的数据保存到磁带上(D2D2T) 提高数据备份与恢复的速度,缩小备份窗口 解决磁带介质的固有问题 利用RAID技术保证数据可靠性 需要备份软件支持VLTVLT与传统备份的关系与传统备份的关系VTL设备位于备份服务器和传统磁带库之间,弥补了传统备份模式备份/恢复速度慢和可靠性的不足。传统磁带设备可以继续发挥支持数据离线归档保存的优势。典型存储架构:两地三中心FC链路IP链路局域网LANFC SAN生产阵列生产中心生产中心异地灾备阵列异地异地灾备中心灾备中心LANFC SAN同城灾备阵列同同城灾备中心城灾备中心同步复制异步复制WANWDMWDM裸光纤Contents
38、1.您所熟悉的数据存储3.数据备份技术5.信息生命周期2.存储基础知识4.主机高可用技术6.其他知识双双机热备机热备在双机热备份方式中,主服务器运行应用,备份服务器处于空闲状态,但实时监测主服务器的运行状态。一但主服务器出现异常或故障,备份服务器立刻接管主服务器的应用。也就是目前通常所说的active/standby 方式,主要通过纯软件方式实现双机容错。磁盘阵列心跳连接Internet客户端ActiveStandby服务器A服务器B应用应用A双主机通过一条TCP/IP网络线以及一条RS-232电缆线相联 双主机各自通过一条SCSI电缆线与RAID相联 主机NT1为active,主机NT2为s
39、tandby主机NT1处理作业和数据,主机NT2作为热备份机 主机NT1故障后,主机NT2自动接管主机NT1的作业和数据 主机NT2同时接管NT1的主机名(Host)及网络地址(IP) 主机NT1的作业将在主机NT2上自动运行 主机NT1的客户(client)可继续运行,无需重新登录 主机NT1修复后,自动接管原来的作业和数据,主机NT2继续作备份机在这种方式中,没有主服务器和备份服务器之分,两台主机互为备份。主机各自运行不同应用,同时还相互监测对方状况。当任一台主机宕机时,另一台主机立即接管它的应用,以保证业务的不间断运行。也就是目前通常所说的Active/Active方式,主要通过纯软件方
40、式实现双机容错。通常情况下,支持双机热备的软件都可以支持双机互备份方式,当前应用最广泛的双机互备软件主要有LifeKeeper,Rose HA, DataWare和MSCS。双双机互备机互备磁盘阵列心跳连接Internet客户端ActiveActive服务器A服务器B应用应用A应用B双主机通过一条TCP/IP网络线以及一条RS-232电缆线相联双主机各自通过一条SCSI电缆线与RAID磁盘阵列相联双主机各自运行不同的作业,彼此独立,并相互备援主机A故障后,主机B自动接管主机A运行主机A的作业将在主机B上自动运行主机A的客户(client)要在主机B上重新登录主机A修复后,主机B将把A的作业自动
41、交还主机A 主机B故障时,主机A接管主机B的作业和数据集群技术集群技术所谓群集(Cluster)技术就是一个域内包含多台拥有共享存储空间的服务器,各服务器通过内部局域网相互通信,群集内的任一服务器上运行的业务都可被所有的客户所使用。当一台服务器发生故障时,它所运行的应用将由其他服务器自动接管,这就实现了负载均衡和互为备份。三种集群技术高性能集群(High Performance Cluster)负载均衡集群(Loading Balance Cluster)高可用性集群(High Availability Cluster)对存储系统要求对存储系统要求群集并发存取方式:1.并发处理能力:多个群集节
42、点的数据访问是并发的、无规律的,因此就要求存储设备具有很强的处理并发数据访问能力,以使群集应用发挥最高的性能。2.数据共享能力:多个节点的处理器能够方便地共享相关的数据,这就要求存储系统具备安全而高效的共享能力。3.大规模与可扩展性:如何实现在线升级、平滑过渡、现有用户及素材的透明化处理,是存储产品必需的功能。4.可管理性:一是管理操作分安全级别;二是提供清晰明确的管理界面,方便操作。避免人为误操作,要求存储系统的管理界面简单明了,管理操作流程设计合理。5.高可用性:高性能群集的时效性很强,因此要求网络系统具有极高的可靠性。首先要求有较高的容错级别,例如控制器要求高可用容错,存储子系统要求容错
43、冗余等;其次故障恢复时间要短,尽可能做到不宕机的在线恢复。双机热备方式:系统运行时,只有主服务器与存储系统进行数据交换。当发生主机故障切换时,要求存储系统能与备份服务器快速建立数据通道,以支持业务的快速切换。双机互备方式:系统运行时,两台主机需要同时对磁盘阵列进行读写操作,这要求存储系统具备良好的的并发读取操作和一定的负载均衡功能。Contents1.您所熟悉的数据存储3.数据备份技术5.信息生命周期2.存储基础知识4.主机高可用技术6.其他知识信息生命周期信息生命周期信息生命周期是STK、EMC等公司于2003年提出的概念,不同厂商对信息生命周期的定义都会有相同,但是其目的是统一的:适应信息
44、在其生命周期不同阶段内价值的变化,利用网络存储技术将数据自动保存于适当的介质中,实现资源优化、投资保护、法规遵从等要求,直接或简介为适应业务和应用的变化提供保障。信息生命周期的实现信息生命周期的实现一切数字化的信息最终都要保存于存储系统中,因此信息生命周期管理的实现与存储系统的关系密不可分,ILM的实现需要经过三个阶段:l 统一存储资源管理:首先实现存储系统的整合,消除Internal存储和DAS存储方式,解决异构存储系统的互操作和统一管理问题。l 针对不同应用系统分别实现ILM:根据不同应用系统的特点实现该系统所属数据的分级存储,在存储资源统一管理的前提下实现数据的自动分级存储(在线、近线、
45、离线、归档)。l 在整个组织范围内实现ILM:在第二步基础上,以整个应用系统为核心,实现存储系统资源化,自动适应应用变化的需求,降低管理成本,保护原有投资。ISO文档的文档的生命周期生命周期管理管理审核创建培训&发布修订回收归档废止l 管理生命周期业务策略l 从创建到消亡自动分级l 通过手动和自动工作流来驱动l 动态安全、法规遵从和策略保持l ISO、GMP等各类质量体系的应用起草在线编辑模板创建编号管理审核审批流程电子签章通知消息培训/发布培训记录发布签收打印管理修订归档到期提醒关联修订旧版回收归档管理权限变更状态变更通知消息状态变更废止审批管理策略设置状态变更通知消息与信息生命周期相关的存
46、储技术与信息生命周期相关的存储技术文档管理文档管理Contents1.您所熟悉的数据存储3.数据备份技术5.信息生命周期2.存储基础知识4.主机高可用技术6.其他知识存储管理存储设备存储交换设备VeritasStoreAgeFalconStorDataCoreJBOD厂商BrocadeVixelCiscoNishanMcDataInrangeEMCHDSIBMSUNSANRADDotHillStoneFlyFibreStreamHPSTKADICFujitonLSIDellRAID 厂商NetAppPROCOM其他品牌HBATAPE 厂商DotHillEDI国内品牌国内存储厂商一览国内存储厂商一览常见存储厂家常见存储厂家主流备份软件厂商主流备份软件厂商 VERITAS NetBackup DataCenter Backup Exec Legato NetWorker BakBone NetVault CA BrightStor Tivoli Storage Manager HP OmniBack数据迁移(
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2025老地基转让协议合同样本
- 2025专利技术许可合同
- 2025标准借款合同范本2
- 2025电子产品买卖合同书范本
- 2025年混凝土浇筑工程的施工合同
- 2025钢筋工劳务分包合同
- 2025年工程瑞雷波仪项目合作计划书
- 2025铝合金型材购销合同范本
- 2025年科学与工程计算软件合作协议书
- 2025年窄带无线接入网(用于电话)项目合作计划书
- 《基于嵌入式Linux的农业信息采集系统设计与研究》
- 外科创伤处理-清创术(外科课件)
- 小型手推式除雪机毕业设计说明书(有全套CAD图)
- 《城市级实景三维数据规范》
- 2024年中国酸奶袋市场调查研究报告
- 合同到期不续签的模板
- 搬迁服务项目 投标方案(技术标)
- 2005室外给水管道附属构筑物阀门井05S502
- 浙江省宁波市镇海中学2025届高三数学下学期适应性考试试题含解析
- “双新”背景下高中信息技术单元整合教学实践
- 广东省佛山2024年中考一模数学试卷(含答案)
评论
0/150
提交评论