[VTM系统]生产存储vplex实施方案

VTM生产系统存储更换实施方案目录实施过程概述31VTM系统设备接入生产环境41.1VTM系统连接示意图41.2SAN交换机端口分配示意图51.3SAN交换机ZONE配置51.3.1通讯要求51.3.2Zone配置62实施前的准备工作72.1通知受影响的各业务部门72.2数据备份73查询主机相关信息83.1获取主机的HBA卡信息83.1.1VTMAPP主机信息83.1.2VTMDB主机上的HBA卡信息83.2获取主机VG信息83.2.1VTMAPP主机VG信息83.2.2VTMDB主机上的VG信息83.3获取主机的PV信息93.3.1VTMAPP主机上所有的PV信息93.3.2VTMAPP主机上所有的LV信息93.3.3VTMDB主机上的所有PV信息93.3.4VTMDB主机上所有的LV信息104EMC存储分配LUN104.1EMC存储划分LUN104.1.1EMC VPLEX 添加主机105存储数据迁移115.1两台主机停止HA115.2原有存储托管至EMC VPLEX115.2.1VPLEX 建立主机组，挂载磁盘至主机115.2.2业务主机开机115.2.3手动挂载文件系统测试数据完整性125.3HA启验证测试126验证业务运行完整性126.1建立EMC存储双活127应急预案127.1.1主机无法识别EMC VPLEX的disk127.2生产数据备份方法说明13实施过程概述本次实施为泰安银行VTM系统原有数据迁移至EMC VPLEX平台，实现在EMC VPLEX平台的数据双活。项目涉及的设备有原有存储IBM V7000、EMC VPLEX和IBM F96。目的是为了数据实现存储IBM V7000与EMC VNX5600存储双活。 1 VTM系统设备接入生产环境1.1 VTM系统连接示意图 13 / 131.2 SAN交换机端口分配示意图1.3 SAN交换机ZONE配置1.3.1 通讯要求主机主机HBA卡接口存储存储控制器接口说明VTMDF1VTMDF1_S1_P0Sw1：8V7000V7000_A_10口连接老存储V7000_B_14口VTMDF1_S2_P0Sw2：8V7000V7000_A_30口V7000_B_34口VTMDF2VTMDF2_S1_P0Sw1：12V7000V7000_A_10口V7000_B_14口VTMDF2_S2_P0Sw2：12V7000V7000_A_30口V7000_B_34口VTMappVTMDF1_S1_P0Sw1：8Vplexvplex-E1DA-FE0Sw1：52主机连接EMC vplex前端vplex-E1DB-FE0Sw1：53vplex-E2DA-FE0Sw1：54vplex-E2DB-FE0Sw1：55VTMDF1_S2_P0Sw2：8Vplexvplex-E1DA-FE1Sw2：52vplex-E1DB-FE1Sw2：53vplex-E2DA-FE1Sw2：54vplex-E2DB-FE1Sw2：55VTMDBVTMDF2_S1_P0Sw1：12Vplexvplex-E1DA-FE0Sw1：52主机连接EMC vplex前端vplex-E1DB-FE0Sw1：53vplex-E2DA-FE0Sw1：54vplex-E2DB-FE0Sw1：55VTMDF2_S2_P0Sw2：12Vplexvplex-E1DA-FE1Sw2：52vplex-E1DB-FE1Sw2：53vplex-E2DA-FE1Sw2：54vplex-E2DB-FE1Sw2：55VTMv7000V7000_A_1SW1:0Vplexvplex-E1DA-FE0Sw1：48VTMv7000 存储连接vplex后端vplex-E1DB-FE0Sw1：49V7000_B_1SW2:4vplex-E2DA-FE0Sw1：50vplex-E2DB-FE0Sw1：51V7000_A_3SW1:0Vplexvplex-E1DA-FE1Sw1：48vplex-E1DB-FE1Sw1：49V7000_B_4SW2:4vplex-E2DA-FE1Sw1：50vplex-E2DB-FE1Sw1：511.3.2 Zone配置l 交换机SW1上的ZONE配置主机zone名称主机端口存储端口VTMappyxv7000_vtmdbfs1_slot18口0、4口vtmdbfs1_slot1_ vplex_fe8口52、53、54、55口VTMDByxv7000_vtmdbfs2_slot112口0、4口vtmdbfs2_slot1_ vplex_fe12口52、53、54、55口VTMv7000V7000_A_1_VPLEX_BE0、4口48、49、50、51口V7000_B_1_VPLEX_BEl 交换机SW2上的ZONE配置主机zone名称主机端口存储端口VTMappyxv7000_vtmdbfs1_slot28口0、4口vtmdbfs1_slot2_ vplex_fe8口52、53、54、55口VTMDByxv7000_vtmdbfs2_slot212口0、4口vtmdbfs2_slot2_ vplex_fe12口52、53、54、55口VTMv7000V7000_A_3_VPLEX_BE0、4口48、49、50、51口V7000_B_3_VPLEX_BE2 实施前的准备工作注：请联系相关业务管理人员完成下面的工作2.1 通知受影响的各业务部门2.2 数据备份注：请联系相关业务管理人员做好数据备份工作3 查询主机相关信息3.1 获取主机的HBA卡信息3.1.1 VTMAPP主机信息l VTMAPP主机上的HBA卡信息FC名称WWN号位置描述备注vtmdbfs1_slot110:00:00:90:fa:bb:e4:b2slot1vtmdbfs1_slot210:00:00:90:fa:bd:a1:c8slot23.1.2 VTMDB主机上的HBA卡信息FC名称WWN号位置描述备注vtmdbfs2_slot110:00:00:90:fa:bd:a1:caslot1vtmdbfs2_slot210:00:00:90:fa:bc:b5:2aslot23.2 获取主机VG信息3.2.1 VTMAPP（152）主机VG信息l VTMAPP主机上所有VGvg_fssize=200G 360050768028191c16000000000000008 asm-disk2 dg_datasize=2.0G 360050768028191c16000000000000006 asm-disk0 dg_ocrsize=120G 360050768028191c16000000000000007 asm-disk1 dg_orasize=200G 360050768028191c1600000000000000c asm-disk4 dg_backup-没有在oracle中使用size=2.5T 360050768028191c1600000000000000b fssize=200G 360050768028191c16000000000000009 asm-disk3 dg_index3.2.2 VTMDB（153）主机上的VG信息l VTMDB主机上所有VGvg_fs size=200G 360050768028191c16000000000000008 asm-disk2 dg_datasize=2.0G 360050768028191c16000000000000006 asm-disk0 dg_ocrsize=120G 360050768028191c16000000000000007 asm-disk1 dg_orasize=200G 360050768028191c1600000000000000c asm-disk4 dg_backup-没有在oracle中使用size=2.5T 360050768028191c1600000000000000b fssize=200G 360050768028191c16000000000000009 asm-disk3 dg_index 3.3 获取主机的PV信息3.3.1 VTMAPP（152）主机上所有的PV信息Pv-namePv_大小PV UUIDVg_name/dev/dm-82.5TB2Cerob-o20h-cXTN-K86T-aR23-jTzh-CpxxsXvg_fs3.3.2 VTMAPP（152）主机上所有的LV信息LV PathLV NameVG NameLv大小LV UUID/dev/vg_fs/lv_fsecmdatalvvg_fs2.5TBNZBr8D-ocOL-b5Gd-W2lb-gCIe-g8ey-SPwXbp3.3.3 VTMDB（153）主机上的所有PV信息Pv-namePv_大小PV UUIDVg_name/dev/dm-82.5TB2Cerob-o20h-cXTN-K86T-aR23-jTzh-CpxxsXvg_fs3.3.4 VTMDB（153）主机上所有的LV信息LV PathLV NameVG NameLv大小LV UUID/dev/vg_fs/lv_fsecmdatalvvg_fs2.5TBNZBr8D-ocOL-b5Gd-W2lb-gCIe-g8ey-SPwXbp4 EMC存储分配LUN4.1 EMC存储划分LUN原系统LUNV7000卷名系统WWIDV7000 Logical Drive IDEMC_LUN_NameEMC LUN大小大小VMT平台2GBvtm_lun_ocr360050768028191c1600000000000000660050768028191C16000000000000006vtm_lun_ocr2GB120GBvtm_lun_ora360050768028191c1600000000000000760050768028191C16000000000000007vtm_lun_ora120GB200GBvtm_lun_data360050768028191c1600000000000000860050768028191C16000000000000008vtm_lun_data200GB200GBvtm_lun_index360050768028191c1600000000000000960050768028191C16000000000000009vtm_lun_index200GB2.5TBvtm_lun_fs1360050768028191c1600000000000000b60050768028191C1600000000000000Bvtm_lun_fs12.5TB200GBvtm_lun_bak360050768028191c1600000000000000C60050768028191C1600000000000000Cvtm_lun_bak200GB4.2 v7000存储主机映射排序SCISRLUN大小0200GBvtm_lun_bak60050768028191C1600000000000000C1200GBvtm_lun_data60050768028191C1600000000000000822.5TBvtm_lun_fs160050768028191C1600000000000000B3200GBvtm_lun_index60050768028191C1600000000000000942GBvtm_lun_ocr60050768028191C160000000000000065120GBvtm_lun_ora60050768028191C160000000000000074.2.1 EMC VPLEX 添加主机1、在v7000上注册VPLEX的后端端口。2、在VPLEX注册VTMapp、db主机的hba卡3、在vplex 注册v7000存储信息5 存储数据迁移5.1 两台主机停止HARose Ha 资源带出Rose Ha双机软件停关闭操作系统5.2 原有存储托管至EMC VPLEX1. 确认停止业务、redhat主机关闭系统，将IBM v7000的硬盘挂载至VPLEX2. VPLEX扫描磁盘，并使用保留数据的方式进行封装磁盘指令为：storage-volume claim -d VPD83T3:xxxxxx -n V7000_LUN1 -appc。5.2.1 VPLEX 建立主机组，挂载磁盘至主机在VPLEX建立主机组，将封装好的卷挂载至VTM主机HA启 验证测试5.2.2 业务主机开机主机app执行命令 查看链路聚合情况#multipath ll 主机执行命令 查看磁盘#fdisk ll主机执行命令查看pv信息#pvdisplay主机执行命令查看vg信息#vgdisplay主机执行命令查看vg信息#vgdisplay主机执行命令查看vg信息#vgdisplay主机执行命令查看lv信息#lvdisplay5.2.3 手动挂载文件系统测试数据完整性5.3 HA启验证测试检查对应仲裁盘pv信息是否有变化，挂载新pv地址启动rose ha双机软件6 验证业务运行完整性依据业为人员方法和步骤验证6.1 建立EMC存储双活1.将IBM V7000的LUN封装为vritualvolume后，根据对应关系，一一建立从 V7000至EMC VNX5600_A的复制关系2.检查rebuild