工商银行上海数据中心备份方案解析.doc

一、中国工商银行上海数据中心数据备份和恢复的需求中国工商银行上海数据中心(以下简称上海数据中心)，每天需要对VSE/ESA生产主机和OS/390生产系统上的生产和系统数据进行备份，包括批处理前和批处理后的数据备份。上海数据中心每天需要从8个VSE/ESA系统和8个OS/390系统上的数百个3390-3型磁盘卷上备份大量VSAM文件(业务数据) 和备份磁盘卷的整卷数据。现在，每个VSE/ESA生产系统的每天的数据备份量达200盘3490E 磁带，其中有60盘左右为对磁盘卷的备份。为了不间断业务运行，缩短批处理时间，不影响生产运行。上海数据中心对数据备份操作的要求是： 确保数据安全性和完整性。 缩短备份时间，减少由于备份对业务的中断。 如果需要进行数据恢复时，恢复操作要准确、迅速，时间短。 备份和恢复操作要简捷，便于操作员的日常使用。为了将数据备份时间缩短到最小，上海数据中心希望利用磁盘快速复制技术，或者虚 拟磁带系统来快速完成备份操作。上海数据中心最终备份的的数据是VSAM文件。单个文件的数据量不大，但是文件数量众多。对这种类型数据的备份和恢复，虚拟磁带系统(VTS)技术将是最好的解决方案。上海数据中心最终利用StorageTek公司 的、运行在OS/390操作系统上的HSC和VTCS软件，配合以运行在VSE/ESA操作系统上的、MT Consultant公司的LMS/VSE软件来完成这些备份任务的。、方案介绍由于上海数据中心需要备份的数据量庞大，将来的备份磁带数量一定很多。因此，上海数据中心应该采用自动磁带库来管理备份磁带。并采用物理磁带及和虚拟磁带机相结合的数据备份和恢复技术，来提高数据备份的效率和存储空间的利用率。9490磁带机与3490E磁带机完全兼容，采用IDRC压缩和3490E E-cart，单盘磁带的容量为2.4GB。由于上海数据中心的磁盘卷大多数为3390-3 型，容量为2.89GB，将占用2盘3490E E-cart磁带。上海中心采用9490磁带机EE-tape功能，一盘磁带的容量可以高达4.8 GB (压缩后)。对于OS/390磁盘卷整卷的备份，上海数据中心采用StorageTek 9310自动磁带库和9840高性能、大容量磁带机。如果配合StorageTek exHPDM软件，可以将数个磁盘卷同时备份到一盘9840磁带上。将能充分发挥9840磁带机的性能和充分利用9840磁带的容量。根据工商银行上海数据中心对数据备份和恢复的要求，采用StorageTek公司9310自动磁带库加StorageTek公司的VSM(虚拟存储系统)的综合磁带解决方案。VSM主要处理大量小文件的备份和恢复，如VSAM文件、CICS日志、数据库增量备份等。而对大型文件备份和恢复，则直接使用9310自动磁带库中磁带驱动器，如对磁盘卷的整卷备份、数据库的全备份等操作。本方案涉及的硬件和软件产品 1套StorageTek 9310自动磁带库系统 1套StorageTek VSM虚拟存储系统 8套HSC(主机软件部件)软件 1套VTCS(虚拟磁带控制软件) 8套LMS/VSE软件及8套5193磁带库管理网关 磁带管理软件在OS/390系统上采用CA公司的CA-1/TMS磁带管理软件。在VSE/ESA系统上采用CA公司的DYNAM/T磁带管理软件。磁带库和VSM系统硬件连接方案若要实现虚拟磁带卷的迁移和回迁，VSM至少需要9310磁带库中的2台9840物理磁带驱动器与其相连接。如果迁移和回迁的工作量比较大，则需要更多的磁带机驱动器。由于VSM主要用于处理大量小文件的备份和恢复。而对大型文件的备份和恢复仍需要直接使用9310自动磁带库中9840磁带驱动器。因此9310自动磁带库必须要有 直接(或通过ESCON通道转接器)连接到OS/390主机上的磁带机驱动器。如果主机上同时提交了多个大型文件的备份或恢复作业，则需要有多个磁带机驱动器。否则，将会有作业因没有可用的磁带驱动器而等待。如果将9310中的多个磁带驱动器给VSM专用，再将另一些磁带驱动器给主机专用，则需要更多的磁带驱动器。直连的优点是，日常操作比较简便。但是，这样做投资 比较大，而且磁带驱动器不能得到充分的利用。这样如何充分、有效地利用磁带库 中磁带驱动器，则是需要解决的问题。上海中心每个VSE系统每天的数据备份量平均为200盘3490E磁带。不含磁盘卷的备份磁带。按照实际存储在每盘磁带上的数据量平均为100MB，那么8个VSE系统每天的备份数据总量为160 GB。如果这些备份数据驻留在VSM的时间为1天，那么VSM的容量至少为160GB。如果这些备份数据的保留时间为30天，则总的数据容量为9.6TB。自动磁带库中将 需要至少120盘9840磁带来保留这些备份磁带。如果将每天每个VSE系统的备份数据迁移到一盘3490E磁带中，30天则需要240盘3490磁带。如果OS/390系统的备份的数据量与VSE/ESA系统的相近，则对VSM容量的要求将 与以上分析大体相近。三、方案技术要点虚拟磁带存储管理是对磁带和自动磁带库解决方案的重大革新。它是自从磁带库出现以来，第一个为批量处理而发明的新技术。虚拟磁带使现有的技术能够得到充分地利用。虚拟磁带技术将批处理中的磁带操作变得更加有效，使高密度介质、高性能磁带机和高速通道得以充分利用。VSM虚拟磁带系统所带来的最大利益是极大地提高了批处理的性能，这是用户可以直接感受到的虚拟磁带技术所带来的影响。其带来的间接利益还有很多，包括：充分利用现有的磁带机和磁带资源，解决磁带驱动器紧张的问题，简化了磁带管理。对于小型批处理文件的备份，装带和卸带时间占整个磁带操作时间(占用磁带机驱动器的时间)的很大一部分。利用虚拟磁带技术，将没有装带和卸带的时间，所以整个磁带操作时间将显著降低。 这将带来两大好处：第一，批处理作业将运行地更快，从而缩小批处理窗口;第二， 虚拟磁带机驱动器的利用率更高，减少作业等待驱动器的时间，降低了对驱动器数量的需求。再加上虚拟磁带系统提供的虚拟磁带驱动器数量很多，使系统可以同时