数据保护概述- 信息存储理论与技术.ppt

1 数据保护 数据信息的可用性 Availability MillionsofUSDollarsperHourinLostRevenue 6 5 3 6 2 8 2 6 2 0 1 6 1 6 1 5 1 3 1 2 1 1 Retailbrokerage Pointofsale Energy Creditcardsalesauthorization Telecommunications Calllocation Manufacturing Financialinstitutions Informationtechnology Insurance Retail SourceMetaGroup 2005 数据丢失的原因 用户误操作 系统错误 电力故障 灾难事故 介质故障 5 数据丢失原因统计 人为错误 应用软件故障 计算机病毒 场地灾害 系统硬件故障 32 44 3 7 14 source Ontrack adataavailabilityserviceprovider 隔离的 实时的数据复制 6 建立容灾高可用环境的必要性 降低关键业务运行风险最大限度地保护业务数据的实时性 完整性和一致性增强数据中心的可用性和业务规划的灵活性增强企业的核心竞争能力 7 数据保护的基本原则 信息冗余设备级RAID1RAID2 RAID3 RAID4 系统级备份 本地 远程 快照连续数据保护 信息冗余空间上RAID1RAID2 RAID3 RAID4 软件镜像时间上备份 本地 远程 快照连续数据保护 名词术语 RPO RecoveryPointObjectives恢复点目标 指能把数据恢复到过去的那一个时间点 RTO RecoveryTimeObjectives恢复时间目标 指在出现问题后 什么时候 可以恢复数据 DataReplication数据复制 将数据拷贝到另外一个或多个不同的物理站点上 从而保持源数据与目标数据的一致性 分同步 异步复制 CDP ContinuousDataProtect 持续数据保护 TapeBackup PeriodicReplication RecoveryPointObjective RPO Wks Days Hrs Mins Secs RecoveryPoint RecoveryTime RecoveryPoint RecoveryTime TapeBackup PeriodicReplication AsynchronousReplication AsynchronousReplication SynchronousReplication SynchronousReplication Secs Mins Hrs Days Wks RecoveryTimeObjective RTO RecoveryTimeincludes FaultdetectionRecoveringdataBringingappsbackonline GlobalCluster Wks Days Hrs Mins Secs Secs Mins Hrs Days Wks RecoveryPoint RecoveryTime RecoveryPoint RecoveryTime GlobalCluster ManualMigration ManualMigration TapeRestore TapeRestore 传统数据保护方案 备份与恢复 低廉费时 费力安全性 12 介质变革 磁盘vs 磁带 磁带离线顺序访问容量大速度慢价格低 磁盘在线随机访问容量 速度快 价格 更适宜构建系统 13 BackupandRecovery Why DisasterrecoveryArchivalOperationalrequirementsPhysicaldamageofastoragedeviceSoftwarefailuresVirusattacks 14 DesignGoals ConsistentbackupQuickrestoreofdataAlowercostwithminimumresources 15 SomeConsiderations RetentionperiodBackupmediatypeGranularityofbackupsWhentoperformabackupLocationandtimeoftherestoreoperationFilecharacteristicsanddatacompression 16 ReviewRPOandRTO RPOtheamountofdatalossabusinesscanendureRTOtheamountofdowntimethatabusinesscanendure andsurvive 备份的粒度 全备份 FullBackup 累积 差分 备份 Cumulative Differential 增量备份 Incremental Full Cumulative Incremental 18 Restoringfromanincrementalbackup 19 Restoringfromacumulativebackup 数据备份方法 热备份 HotBackup 应用服务不中断 冷备份 ColdBackup 应用服务被中断 一般通过备份代理管理备份不同类型的数据 结构化数据 suchasdatabases 半结构化数据 suchasemail 非结构化数据 filesystems 21 Bare MetalRecovery BMR Abackupinwhichallmetadata systeminformation andapplicationconfigurationsareappropriatelybackedupforafullsystemrecovery DifferentHardware 22 BackupProcess 23 RestoreProcess 24 LocalReplication ReplicatingdatawithinthesamearrayorthesamedatacenterSourceandTargetUsesofLocalReplicasAlternatesourceforbackupFastrecoveryDecision supportactivitiessuchasreportingTestingplatform 25 DataConsistency ProblemFilesystemsanddatabasesbufferdatainthehostSolutionbuffersmustbeflushedtoensuredataconsistencyonthereplica priortoitscreation 26 Host BasedLocalReplication LVM BasedReplication Limitations 27 Host BasedLocalReplication FileSystemSnapshot CopyonFirstWrite CoFW BitmapBlockmap 28 StorageArray BasedReplication full volumemirroring pointer basedfull volumereplication andpointer basedvirtualreplication 29 一种常用的数据保护技术 快照 snapshot 30 为什么 快照 1 2 1K 1M 1G 1T 我们是否愿意等待 快 解决批量数据备份中的长时间窗口问题 照 至少在逻辑上生成独立冗余数据 解决硬件故障以外的本地数据保护问题 31 为什么 快照 2 2 存储网络工业协会 SNIA 对快照的定义 快照 snapshot 为一个数据对象产生完全可用的副本 它包含对该数据对象在某一时间点的映象 快照在快照时间点对数据对象进行逻辑复制操作 产生数据对象在该时间点的一致性数据副本 但实际的部分或全部物理复制过程可能在复制时间点之外的某些时间进行 快照可以在非常短的时间内完成数据对象逻辑副本的创建 其数量级通常为几秒 因此也称为零时间复制 快照技术可以最大限度减小复制操作对上层应用的影响 同时保证复制操作语义的原子性 分层与虚拟化 快照背后的思想 1 2 零时间复制 产生一致性数据副本 意味着什么 独立的逻辑数据视图关联的物理数据分布 完全可用 的副本意味着什么 逻辑的副本具备可用性 分层与虚拟化 快照背后的思想 2 2 快照技术的主要策略 分离镜像 1 3 IsitRAID1 快照技术的主要策略 分离镜像 2 3 快照技术的主要策略 分离镜像 3 3 优 安全性高 响应快 对系统性能影响小缺 空间效率低 可扩展性差 快照不适合写 37 快照技术的主要策略 写时拷贝 1 3 快照技术的主要策略 写时拷贝 2 3 快照技术的主要策略 写时拷贝 3 3 优 空间效率高 快照可读写 可扩展性好 易改进缺 COW操作影响系统性能 快照技术的主要策略 写重定向 1 3 快照技术的主要策略 写重定向 2 3 快照技术的主要策略 写重定向 3 3 优 空间效率高 快照可读写 响应快 可扩展缺 物理数据交叠 映射关系维护复杂 连续数据