USPV虚拟化CX500实施方案.doc

XXXXXHDS USPV存储虚拟化实施步骤USPV / CX500部分日立数据系统（中国）有限公司广州分公司目录1.概述32.实施步骤51. USPV删除当前的测试设置52. USPV对CX500进行虚拟化实施前准备53. USPV对CX500进行虚拟化64. USPV把虚拟化后的LUN重新分配给3台服务器95. VxVM对虚拟化后的LUN的接管与对DMP的设置113.回退的准备131.概述经过前期的测试准备，现拟定USPV对CX500进行虚拟化的实施步骤。请相关单位审核，并提出宝贵意见。谢谢！使用USPV对CX500进行虚拟化的具体实施步骤，包括5部分：1. USPV删除当前的测试设置，空出USPV的光纤端口准备对CX500虚拟化的实施2. USPV对CX500进行虚拟化实施前准备，包括以下内容：l 备份CX500数据并保存原有的服务器与磁盘阵列的配置l v490a / v490b / 490c增加2块HBA3. USPV对CX500进行虚拟化，包括以下内容：l 关闭3台服务器后，拔出原有光纤，插入新布的光纤，连接USPV与CX500的光纤端口l 调整USPV与CX500的光纤端口l CX500分配相关的LUN给USPVl USPV使用UVM接管CX500的LUN4. USPV把虚拟化后的LUN，重新分配给3台服务器l USPV把虚拟化后的LUN，MAPPING给v490a / v490b / 490cl v490a / v490b / 490ct通过USPV重新识别CX500上的LUN5. VxVM对虚拟化后的LUN的接管，与对DMP的设置l 检查DG是否正确l 检查DMP路径，并设置DMP的iopolicy本项目涉及EMC对CX500的配置变更，变更要求请参考与。如有问题，请及时提出，非常感谢！系统虚拟化前的结构图：系统虚拟化后的结构图：2.实施步骤1. USPV删除当前的测试设置操作编号1-1操作内容清除测试环境操作条件可提前执行操作步骤1. 停止测试服务器suntest1/suntest2的VCS，使得2台服务器的DG都处于deport的状态2. USPV上删除测试的CX500的LUN的对suntest1/suntest2的MAPPING3. USPV上删除对CX500的虚拟化对现有生产系统的影响1无影响操作单位普信 HDS回退说明无操作时间30分钟2. USPV对CX500进行虚拟化实施前准备操作编号2-1操作内容1. 保存磁盘设备与DG的配置2. 停止服务器V490a/V490b/V490c的应用3. 停应用4. deport此3台服务器的DG5. 设置Powerpath 不接管Hitachi 的设备6. 修改系统参数操作条件停应用前保存配置，并对OS的参数进行设置操作步骤1. mkdir /opt/hds2. df k /opt/hds/df k.out3. 记录format输出信息4. vxdisk o alldgs list/opt/hds/vxdisk_alldgs.out5. vxprint hft /opt/hds/vxprint_hft.out6. powermt display dev=all /opt/hds/powermt_disp_devall.out7. powermt unmanage class=hitachi8. powermt save9. 停止应用，umount 文件系统10. vxdg deport datadg_a / vxdg deport datadg_b / vxdg deport datadg_c11. 3台服务器 vi /etc/system l set sd:sd_max_throttle = 8 l set ssd:ssd_max_throttle =8l set sd:sd_io_time = 0x3Cl set ssd:ssd_io_time = 0x3C对现有生产系统的影响1停应用，停止生产操作单位普信 HDS回退说明操作时间60分钟操作编号2-2操作内容对3台服务器下电，各加入2块新的HBA卡操作条件操作步骤对现有生产系统的影响1停应用，停止生产操作单位SUN服务器服务商操作时间操作编号2-3操作内容CX500建立新SG，把生产的LUN分配给该SG，4个光纤端口全部绑定HDS的4个光纤口的WWN操作条件操作步骤要求：1. Storage Group名字请EMC决定2. Storage Group内包含LUN：40，41，42，43，44，45，46，47，48，49，50，并按此序列MAPPING3. SPA0/SPA1/SPB1/SPB1 每个端口均全部绑定USPV的1G/2G/3G/4G的4个端口的WWN4. USPV端口的WWN为：l 1G: 50060E8005B05306l 2G: 50060E0805B05316l 3G: 50060E0805B05326l 4G: 50060E0805B053365. SG的连接属性按的属性设置：l Initiator type : CLARiiON Openl FailOver Mode : 2对现有生产系统的影响1停应用，停止生产操作单位EMC操作时间请EMC提出3. USPV对CX500进行虚拟化操作编号3-1-1操作内容按既定方案，调整CX500USPV的光纤操作条件SUN服务器下电后操作步骤1. 拔出CX500的光纤（检查标签，以方便应急回退）2. 插入从USPV光纤（光纤已经敷设至CX500机柜内，并作标签）l 1G SPA0l 2G SPA1l 3G SPB0l 4G SPB13. 检查光纤是否正确连接对现有生产系统的影响1停应用，停止生产操作单位EMC HDS操作时间30分钟操作编号3-1-2操作内容1. 对USPV的1G/2G/3G/4G端口进行设置，设置为：l 端口类型：LOOP模式l 端口速率为2Gb2. 对EMC CX500的端口进行设置，设置为：l 端口类型：LOOP模式l 端口速率为2Gb操作条件操作步骤1. SVP上操作：进入Storage Navigator进行设置2. Navisphere GUI上设置3. 设置后，检查USPV与CX500的端口的连接指示LED是否正确对现有生产系统的影响1停应用，停止生产操作单位HDS EMC操作时间30分钟操作编号3-3操作内容USPV虚拟化CX500提供的LUN操作条件手提电脑连接至USPV的SVP上操作操作步骤定义：1. 采用OPENV的仿真模式虚拟化CX500的LUN2. 虚拟化后的LDEV分配给CU13. 分成2个Path Group路径优先级:a. USP-1G CX500-SPA0b. USP-2G CX500-SPA1c. USP-3G CX500-SPB0d. USP-4G CX500-SPB1l Path Group 0 :ExG 1-1 : CX500-LUN40 CU:LDEV=01:00LUN-WWN: 600601606FE11900A2DA35D8972DDB11l ExG 1-2 : CX500-LUN42 CU:LDEV=01:02LUN-WWN: 600601606FE1190078200F79982DDB11l ExG 1-3 : CX500-LUN44 CU:LDEV=01:04LUN-WWN: 600601606FE11900CA076A479A2DDB11l ExG 1-4 : CX500-LUN46 CU:LDEV=01:06LUN-WWN: 600601606FE11900C6385AD99A2DDB11l ExG 1-5 : CX500-LUN48 CU:LDEV=01:08LUN-WWN: 600601606FE11900A24E36249B2DDB11l ExG 1-6 : CX500-LUN50 CU:LDEV=01:0ALUN-WWN: 600601606FE11900D8AD824C9B2DDB114. Path Group 1路径优先级:a. USP-4G CX500-SPB1b. USP-3G CX500-SPB0c. USP-2G CX500-SPA1d. USP-1G CX500-SPA0l ExG 2-1 : CX500-LUN41 CU:LDEV=01:01LUN-WWN: 600601606FE11900A3DA35D8972DDB11l ExG 2-2 : CX500-LUN43 CU:LDEV=01:03LUN-WWN: 600601606FE1190004A9BA029A2DDB11l ExG 2-3 : CX500-LUN45 CU:LDEV=01:05LUN-WWN: 600601606FE11900CAB7EDCC9A2DDB11l ExG 2-4 : CX500-LUN47 CU:LDEV=01:07LUN-WWN: 600601606FE1190088C1CF139B2DDB11l ExG 2-5 : CX500-LUN49 CU:LDEV=01:09LUN-WWN: 600601606FE119005A51FE379B2DDB11对现有生产系统的影响1停应用，停止生产操作单位HDS操作时间60分钟操作编号3-4操作内容USPV MAPPING 虚拟化后的LDEV 到 v490a / v490b / v490c操作条件操作步骤定义：1. 对于服务器v490al USPV-1A端口建立Host Group 0 : v490a该Host Group MAPPING 01:0001:1A l USPV-2A端口建立Host Group 0 : v490a该Host Group MAPPING 01:0001:1A 2. 对于服务器v490bl USPV-3A端口建立Host Group 0 : v490b该Host Group MAPPING 01:0001:1A l USPV-4A端口建立Host Group 0 : v490b该Host Group MAPPING 01:0001:1A3. 对于服务器v490cl USPV-1A端口建立Host Group 0 : v490c该Host Group MAPPING 01:0001:1A l USPV-2A端口建立Host Group 0 : v490c该Host Group MAPPING 01:0001:1A对现有生产系统的影响1停应用，停止生产操作单位HDS操作时间30分钟4.USPV把虚拟化后的LUN重新分配给3台服务器操作编号4-1操作内容服务器v490a / v490b / v490c 在无任何的光纤连接的情况下，启动到OS状态操作条件操作步骤1. 服务器v490a / v490b / v490c在加装新的HBA卡后，拔出所有的光纤（拔出前，对光纤作标签），启动到OS的状态，确认HBA成功加入并无错误2. 插入新的Brocade 5000/4100的 port9 / port 10 / port 11 连接过来的共6条光纤到服务器v490a / v490b / v490c新增的HBA上l 光纤的对应关系为：Brocade 5000 , port 9 v490a的新增HBA（instance号较小的一个）Brocade 4100 , port 9 v490a的新增HBA（instance号较大的一个）Brocade 5000 , port 10 v490b的新增HBA（instance号较小的一个）Brocade 4100 , port 10 v490b的新增HBA（instance号较大的一个）Brocade 5000 , port 11 v490c的新增HBA（instance号较小的一个）Brocade 4100 , port 11 v490c的新增HBA（instance号较大的一个）3. 执行luxadm e port ; luxadm e dump_map 。，记录光纤卡的WWN4. 登陆Brocade 5000/4100确认ZONE的关系，并检查端口的WWN，以确认所插光纤是否正确对现有生产系统的影响1停应用，停止生产操作单位SUN服务器服务商 普信 HDS操作时间?分钟操作编号4-2操作内容USPV的1A / 2A / 3A / 4A端口的Host Group增加v490a / v490b / v490c的WWN操作条件操作步骤USPV-1A Host Group 0 (v490a) 绑定v490a 对应的新增HBA的WWNUSPV-2A Host Group 0 (v490a) 绑定v490a 对应的新增HBA的WWNUSPV-3A Host Group 0 (v490b) 绑定v490b 对应的新增HBA的WWNUSPV-4A Host Group 0 (v490b) 绑定v490b 对应的新增HBA的WWNUSPV-1A Host Group 0 (v490c) 绑定v490c 对应的新增HBA的WWNUSPV-1A Host Group 0 (v490c) 绑定v490c 对应的新增HBA的WWN对现有生产系统的影响1停应用，停止生产操作单位HDS操作时间30分钟操作编号4-3操作内容重启服务器v490a / v490b / v490c操作条件操作步骤1. 对v490a / v490b / v490c 执行reboot - -r2. 重启完成后，执行format命令，确认所认的盘是否齐全与正确3. 执行format disk inquiry 检查盘的vendor product revision是否正确4. 执行prtvtoc ./dev/rdsk/cXtYdZs2 检查盘头信息是否正确对现有生产系统的影响1停应用，停止生产操作单位HDS操作时间60分钟5.VxVM对虚拟化后的LUN的接管与对DMP的设置操作编号5-1操作内容检查VxVM对USPV虚拟化后的盘是否正确接管操作条件操作步骤1. 执行vxdisk list 应能显示：TagmaStore-USP0_0TagmaStore-USP0_1TagmaStore-USP0_2TagmaStore-USP0_3TagmaStore-USP0_4TagmaStore-USP0_5TagmaStore-USP0_6TagmaStore-USP0_7TagmaStore-USP0_8TagmaStore-USP0_9TagmaStore-USP0_102. 执行vxdisk list TagmaStore-USP0_?，应能显示2条路径，并且状态均为enable3. 执行vxdisk o alldgs list应能显示对应的DG关系对现有生产系统的影响1停应用，停止生产操作单位SUN服务器服务商操作时间30分钟操作编号5-2操作内容设置VxVM DMP的iopolicy操作条件操作步骤执行vxdisk pathvxdmpadm listctlr allvxdmpadm listenclosure allvxdmpadm getattr enclosure TagmaStore-USP0 iopolicyvxdmpadm setattr enclosure TagmaStore-USP0 iopolicy=adaptive对现有生产系统的影响1停应用，停止生产操作单位普信 HDS操作时间30分钟操作编号5-3操作内容import VG , mount 文件系统，恢复应用操作条件操作步骤1. 执行vxdisk o alldgs list，检查DG对应LUN的数量是否正确：l v490a对应的CX500-LUN为：LUN40 / LUN42 / LUN44 / LUN49 / LUN50，估计服