Symantec容灾测试报告(vvr).doc

VVR测试报告目录1.测试目的22.测试环境23.实施过程简述：24.实施过程总结：45.实施过程详细描述45.1.检查和安装VxVM软件包45.1.1.检查操作系统，确认是64位 HP-UX 11.11操作系统45.1.2.确认已经安装以下Foundation 3.5 for HP需要的补丁45.1.3.检查VxVM 3.5 for HP目前情况55.1.4.安装VxVM 3.5 U4 for HP-UX65.1.5.在一个磁盘上创建Volume Manager rootdg，将VxVM初始化65.2.进行VG到DG的转换85.2.1.确定Oracle使用的vg85.2.2.使用vxvmconvert进行分析和转换95.2.3.建立LVM对VxVM的设备映射105.2.4.确认数据转换后，数据库能够启动105.3.配置卷复制115.3.1.主机ywcs01上配置卷复制115.3.2.主机ywcs02上配置卷复制125.3.3.实现数据初始化同步125.3.4.监控数据同步效率135.3.5.增量数据同步145.4.容灾切换演习151. 测试目的通过Symantec 远程容灾解决方案（Storage Foundation+Volume Replicator）在测试环境中的实施，模拟对Oracle数据库实现远程容灾，实现：1. 从主机到备机的全数据全同步；2. 从主机到备机在线数据同步；3. 数据库服务器主机、备机的切换，实现数据的反向同步，完成容灾切换；评估：1. 方案实施，保证主、备服务器上Oracle 数据库数据，在整个过程中的数据一致性；2. 方案实施时，数据库停机时间；3. 数据同步效率；4. 整个方案实施难易程度；2. 测试环境 主机名与IPywcs01（3）ywcs02（8）备注主备系统主系统备份系统连接存储型号XP128 （22*14GB）XP12000（20*15GB）主机型号RP8420RP8420操作系统版本HP-UX 11.11HP-UX 11.11应用系统卷组信息vgapp：Cur PV： 6 PE SIZE： 32vgapp：Cur PV： 5 PE SIZE： 32数据库使用卷组vgora：Cur PV： 16 PE SIZE： 32vgora：Cur PV： 15 PE SIZE： 32数据库版本Oracle 9208Oracle 9208两台主机的oracle软件已作同步（不是RAC）VxVM 版本3.5m3.5m可运行应用环境dps1/ips/opsdps1/ips/opsHP-UX mirrordisk有有3. 实施过程简述：实施过程简述：步骤过程简述(在ywcs01/02上的操作)对象量时效1软件安装安装SF 3.5U4 软件软件占用磁盘空间3G30分钟2数据卷转换将LVM转换为VxVM一个vgora,169个PV1小时3数据校验在主机(ywcs01)上，实现VxVM与原LVM设备的连接，并启动Oracle 数据库，校验数据转换成功建立169个设备符合连接30分钟4建立卷复制关系配置主机(01)与备机(02)上卷复制映射关系2个RVG,各160个数据卷1小时5数据全同步实现主机(01)与备机(ywcs02)数据初始同步106G30分钟,54MBytes/S6数据增量同步暂停从主机(ywcs01)到备机(ywcs02)上的数据复制，在主机(ywcs01)启动应用，实现话单处理，恢复数据复制，实现主机(ywcs01)到备机(ywcs02)上的数据增量复制3.9G10分钟,7.2Mbytes/S7容灾切换演习实现Oracle数据库的容灾切换，主、备互换，在ywcs02服务器上启动数据，检验同步数据；一个命令实现切换5分钟在ywcs02服务器上启动测试应用，对ywcs02上的Oracle数据库实现话单修改，实现服务器ywcs02向服务器ywcs01上的数据反向同步；并在ywcs01上启动数据库，校验反向数据同步成功；一个命令实现切换10分钟说明：54MBytes/S：在实现数据初始化同步时，为20:30分后，系统数据传输是通过企业内网，该时段网络无其它压力，传输效率等同与FTP传输效率。7.2Mbytes/S：在实现数据增量同步时，为15:20分后，该时段是工作时间，网络有其他传输压力，传输效率等同与FTP传输效率。时间需求简述：序号总体步骤时间1方案整体实施时间小于4小时2数据库停止时间小于1小时说明：小于4小时：方案整体实施时间，取决与数据初始化同步时间。4. 实施过程总结：实现Symantec Storage Foundation + Volume Replicator能够快速实现对现有系统的远程容灾：1. 能够实现从主机到备机的数据快速全同步；2. 能够实现从主机到备机在线数据快速增量同步；3. 能够完全保证主、备服务器上Oracle 数据库数据，在整个数据复制、切换、方向复制过程中的数据一致性；4. 在整个方案实施的过程中，数据库停机时间sqlplus /as sysdbaSQL select NAME from v$datafile;NAME-/dev/vgora/rlv_dps1_sys01/dev/vgora/rlv_dps1_undo01/dev/vgora/rlv_dps1_user01/dev/vgora/rlv_dps1_gsmdba2/dev/vgora/rlv_dps1_acsdba01/dev/vgora/rlv_dps1_mcbdba01/dev/vgora/rlv_dps1_extdba01由此确认Oracle使用的vgora.5.2.2. 使用vxvmconvert进行分析和转换下面是转换vgora的过程。ywcs01:/#vxvmconvert 1Analyze LVM Volume Groups for Conversion 2Convert LVM Volume Groups to VxVM 3Roll back from VxVM to LVM listList disk information listvgList LVM Volume Group information ?Display help about menu ?Display help about the menuing system qExit from menusSelect an operation to perform: 2Select Volume Groups to convert :,all,list,listvg,q,? vgoraSpecify a name for the new VxVM disk group (default: dgora) Are you ready to commit to these changes? y,n,q,? (default: y) Volume Manager: Adding dgora16 (c19t2d5) as a converted LVM disk. Adding volumes for c19t0d6. Starting new volumes. Volume Manager: Converting LVM Volume Groups to VxVM disk groups. Conversion completed successfully for LVM Volume Group(s) vgoraHit RETURN to continue.3.4 转换后检查 ywcs01:/#vxprint -thfdg dgora default default 1822000 1241435065.1199.ywcs01dm dgora01 c19t0d6 simple 2176 14221312 -v lv_dps1_acsdba01 - ENABLED ACTIVE 524288 ROUND - genpl lv_dps1_acsdba01-01 lv_dps1_acsdba01 ENABLED ACTIVE 524288 STRIPE 16/32768 RWsd dgora01-07 lv_dps1_acsdba01-01 dgora01 0 32768 0/0 c19t0d6 ENAsd dgora02-07 lv_dps1_acsdba01-01 dgora02 0 32768 1/0 c19t0d7 ENA5.2.3. 建立LVM对VxVM的设备映射Oracle 数据文件使用的LVM的设备是在/dev/vgora目录下的，其字符设备为lv开头的设备，流设备为rlv.开头的设备。在实现LVM向VxVM的转换后，/dev/vgora目录被删除，VxVM将在/dev/vx/dsk/dgora目录下建立与LVM相对应的卷的字符设备，在/dev/vx/rdsk/dgora目录下建立与LVM相对应的流设备，为了不改变Oracle的配置信息，并能够正常启动数据库，我们需要在/dev/vgora目录下建立相应的设备文件连接，以保证Oracle能够通过/dev/vgora下的连接，使用转换后的VxVM设备文件：mkdir /dev/vgora#ls s /dev/vx/dsk/dgora/lv_dps1_acsdba01 /dev/vgora/lv_dps1_acsdba01#ls s dev/vx/rdsk/dgora/lv_dps1_acsdba01 /dev/vgora/rlv_dps1_acsdba01.#vxdit g dgora set user=oracle group=dba mode=700 lv_dps1_acsdba01.#chmod R 777 /dev/vx5.2.4. 确认数据转换后，数据库能够启动ywcs01#su oracle1. ips2. ops3. dps14. dps25. catadb-Your choice: (default 1)3ywcs01(dps1):oracle:/home/oracle/sqlplus /as sysdbaSQL startup5.3. 配置卷复制5.3.1. 主机ywcs01上配置卷复制1. 配置SRL#vxdisk f init /dev/c19t2d6#vxdisk f init /dev/c19t3d0#vxdg g dgora adddisk dgora17=c19t2d6 dgora18=c19t3d0#vxassist g dgora make srl 25g layout=stripe dgora17 dgora182. 为所有的卷配置DCM#vxassist g dgora addlog lv_dps1_acsdba01 logtype=dcm .#vxassist g dgora addlog lv_dps1_user01 logtype=dcm 3. 创建rlink#vxmake g dgora rlink rlk_1_2 remote_host=ywcs02 remote_dg=dgora comment=”From ywcs01 to ywcs02” remote_rlink=rlk_2_1 local_host=ywcs01 synchronous=off srlprot=dcm4. 创建RVG#vxmake g dgora rvg rvg_yw rlink=rlk_1_2 datavol= lv_dps1_acsdba01, , lv_dps1_user01 srl=srl primary=true comment=”ywcs01 RVG”5. 绑定rlink#vxrlink g dgora f att rlk_1_26. 启动RVG#vxrvg g dgora start rvg_yw5.3.2. 主机ywcs02上配置卷复制7. 配置SRL#vxdisk f init /dev/c19t2d5#vxdisk f init /dev/c19t2d6#vxdg g dgora adddisk dgora17=c19t2d5 dgora18=c19t2d6#vxassist g dgora make srl 25g layout=stripe dgora17 dgora188. 为所有的卷配置DCM#vxassist g dgora addlog lv_dps1_acsdba01 logtype=dcm .#vxassist g dgora addlog lv_dps1_user01 logtype=dcm 9. 创建rlink#vxmake g dgora rlink rlk_2_1 remote_host=ywcs01 remote_dg=dgora comment=”From ywcs02 to ywcs01” remote_rlink=rlk_1_2 local_host=ywcs02 synchronous=off srlprot=dcm10. 创建RVG#vxmake g dgora rvg rvg_yw rlink=rlk_2_1 datavol= lv_dps1_acsdba01, , lv_dps1_user01 srl=srl primary=false comment=”ywcs02 RVG”11. 绑定rlink#vxrlink g dgora att rlk_2_112. 启动RVG#vxrvg g dgora start rvg_yw5.3.3. 实现数据初始化同步检查卷复制配置信息：ywcs01:/tmp/vx#vxprint -PlDisk group: dgoraRlink: rlk_1_2info: timeout=500 packet_size=8400 rid=0.11799 latency_high_mark=10000 latency_low_mark=9950state: state=ACTIVE synchronous=off latencyprot=off srlprot=dcmassoc: rvg=rvg_yw remote_host=ywcs02 IP_addr=8 port=4145 remote_dg=dgora remote_dg_dgid=1241434374.1825.ywcs02 remote_rvg_version=10 remote_rlink=rlk_2_1 remote_rlink_rid=0.10871 local_host=ywcs01 IP_addr=3 port=4145protocol: UDP/IPflags: write enabled attached consistent connected asynchronous comment: From 1 to 2实现全数据同步：ywcs01:/tmp/vx#vradmin -a startrep rvg_ywMessage from Primary:vxvm:vxrlink: WARNING: Attaching rlink to non-empty rvg. Autosync will be performed.vxvm:vxrlink: INFO: Secondary data volumes detected with rvg rvg_yw as parent:vxvm:vxrlink: INFO: lv_dps1_acsdba01: len=524288 primary_datavol=lv_dps1_acsdba01.vxvm:vxrlink: INFO: lv_ops_user03: len=2097152 primary_datavol=lv_ops_user03vxvm:vxrlink: INFO: Autosync operation has started5.3.4. 监控数据同步效率ywcs01:/tmp/vx#vxrlink -i5 status rlk_1_2Mon May 4 20:37:10 EAT 2009vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 106852096 Kbytes remaining.vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 106577408 Kbytes remaining.vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 106293248 Kbytes remaining.vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 106000128 Kbytes remaining.vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 105771008 Kbytes remaining.vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 105505536 Kbytes remaining.vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 105250816 Kbytes remaining.vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 104960768 Kbytes remaining.vxvm:vxrlink: INFO: Rlink rlk_1_2 is in AUTOSYNC. 104677888 Kbytes remaining.根据系统监控，实现数据同步时间为20:37:10，网络较闲，系统平均每5秒传输270Mbytes数据，传输速率为54Mbytes/S。5.3.5. 增量数据同步在VVR启动过程中，ywcs01上数据的更改，将持续与ywcs02上实现同步，即一边在往同步管道中写数据，一边从同步管道中读走数据同步到ywcs02上，为了便宜观测数据增量同步效率，我们暂停ywcs01上的数据向ywcs02上的复制，在ywcs01上更改数据库数据，在数据库数据更改完毕后（不再有增量数据时），再开启ywcs01向ywcs02上的数据同步。在ywcs01上：ywcs01:/tmp/vx # vradmin pauserep rvg_ywywcs01:/tmp/vx # vxrlink i5 status rlk_1_2= Begin at:Wed May 6 15:00:49 EAT 2009=Wed May 6 15:02:29 EAT 2009vxvm:vxrlink: INFO: Rlink rlk_1_2 is up to datevxvm:vxrlink: INFO: Rlink rlk_1_2 is up to datevxvm:vxrlink: INFO: Rlink rlk_1_2 has 2 outstanding writes, occupying 18 Kbytes (0%) on the SRLvxvm:vxrlink: INFO: Rlink rlk_1_2 has 6 outstanding writes, occupying 54 Kbytes (0%) on the SRL.vxvm:vxrlink: INFO: Rlink rlk_1_2 has 299060 outstanding writes, occupying 3910713 Kbytes (14%) on the SRLvxvm:vxrlink: INFO: Rlink rlk_1_2 has 299062 outstanding writes, occupying 3910731 Kbytes (14%) on the SRLvxvm:vxrlink: INFO: Rlink rlk_1_2 has 299066 outstanding writes, occupying 3910767 Kbytes (14%) on the SRL数据库数据修改完成，增加增量数据约3.9G；恢复ywcs01与ywcw02的数据复制：ywcs01:/tmp/vx # vradmin resumerep rvg_ywywcs01:/tmp/vx # vxrlink i5 t5 status rlk_1_2Wed May 6 15:15:26 EAT 2009vxvm:vxrlink: I