HC1309141 基于VIS和存储阵列的数据迁移方案

1、Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 0修订记录课程编码课程编码适用产品适用产品产品版本产品版本课程版本课程版本ISSUEHC1309141统一存储V1.0开发开发/优化者优化者时间时间审核人审核人开发类型（新开发开发类型（新开发/优化）优化）黄方宇2014-3-15张博新开发本页不打印Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. HC1309141基于阵列或VIS的数据迁移方案Copyright 2013

2、 Huawei Technologies Co., Ltd. All rights reserved. Page 2l学习完本章节后，您将能够：p了解基于VIS和阵列的迁移方案的优劣势p掌握基于阵列迁移方案的步骤和关键点p掌握基于VIS迁移方案的步骤和关键点目标Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 3目录1.基于阵列和基于阵列和VIS的数据迁移方案介绍的数据迁移方案介绍2.基于阵列的数据迁移方案步骤3.基于VIS的数据迁移方案步骤Copyright 2013 Huawei Technolog

3、ies Co., Ltd. All rights reserved. Page 4数据迁移方案介绍存储存储1 1存储存储2 2存储内部LUN迁移方式存储之间远程复制方式主机主机1 1主机主机2 2主机直接拷贝等卷卷1 1卷卷2 2卷复制：AIX LVM migrateHP LVM mirrorVxVM mirror OracleOracle各种应用各种应用VIS 基于存储功能的迁移基于主机功能的迁移基于卷管理软件功能的迁移基于网络功能的迁移硬件硬件功能功能实现实现软件软件功能功能实现实现基于应用及虚拟机软件功能的迁移数据库迁移虚拟机迁移基于文件系统的迁移等Copyright 2013 Huaw

4、ei Technologies Co., Ltd. All rights reserved. Page 5基于网络功能的数据迁移l支持的应用及操作系统：上层无关性，支持满足兼容性要求的各种OS及应用数据迁移(数据库，文件系统，各种文件和应用软件等)l数据安全性高(对原数据无任何操作)l中断时间较短，可以实现业务的在线迁移（中断时间决定于需要迁移的LUN数量）业务网业务网业务系统交换机迁移镜像业务系统原始阵列数据阵列镜像OR物理连线数据走向Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 6基于存储功能的

5、数据迁移l支持的应用及操作系统：上层无关性，支持各种OS及应用数据迁移(数据库，文件系统，各种文件和应用软件等)l此方式需要较长时间中断客户业务系统（中断时间决定于迁移数据量及迁移速率）。l采用全量LUN COPY或者远程复制进行数据的迁移。异构存储之间采用LUN COPY。业务网业务网业务网业务网业务系统交换机迁移业务系统源存储目标存储LUNLUN物理连线数据走向Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 7各种迁移方案的对比基于存储功能的迁移基于主机功能的迁移基于卷管理软件功能的迁移基于应用及

6、虚拟机软件功能的迁移基于网络功能的迁移优势劣势1.适宜场景下可以获得极短的停机时间2.兼容性上有一定优势3.适宜场景不够广泛1.方案较为复杂，不易广泛推广2.实施人员技能要求较高1.适宜场景下可以获得极短的停机时间2.兼容性上有一定优势3.适宜场景不够广泛1.实施人员技能要求较高1.适宜场景较广泛，基本各种离线场景都可以适用2.兼容性非常好3.方案简单，好推广1.基本只能用于离线，无法在线做1.通用方案，易推广，可用范围广2.停机时间较短1.兼容性问题很多，大部分场景不敢用，兼容性测试消耗大2.需要购买VIS等设备，成本高1.方案易推广，操作简单1.主要用于自研存储使用，异构存储应用范围较小2

7、.需要license等支出优选场景虚拟机、数据库Unix系统使用卷管理的非特定应用通用离线场景兼容性满足条件下的通用在线场景某些使用自研存储场景Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 8实施数据迁移的一般步骤+安全安全稳定稳定资源资源最佳最佳便于维护便于维护 采集精确的网络数据 搜集准确的客户需求 定义关键里程碑 制定清晰的评估步骤 根据客户环境制定数据迁移方案 评估方案中网络瓶颈和风险点 由华为工程师与客户共同完成数据验收。签属服务报告，完成服务交付信息收集信息收集方案设计、评估方案设计、评

8、估 验收验收 实施实施 由专业的服务团队实施数据迁移工作Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 9目录1.基于阵列和VIS的数据迁移方案介绍2.基于阵列的数据迁移方案步骤基于阵列的数据迁移方案步骤3.基于VIS的数据迁移方案步骤Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 10基于阵列的数据迁移步骤-LUN COPYl先将新存储连接到源存储 l停止业务，断开源存储和主机连接 l使用LUN COPY功

9、能将数据从源存储同步到新存储 l将新存储连接到主机 l替换多路径软件，修改应用配置 l迁移完成 业务网业务网业务网业务网业务系统交换机迁移业务系统源存储目标存储LUNLUN物理连线数据走向*本教程以S3100数据迁移至S5600T为例Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 11准备工作l对所有涉及设备进行检测，关键部件建议考虑现场备件准备。lS5600T 存储要求具备LUN COPY license，确保该功能可以正常使用。l管理存储用的客户端上要安装S3100的管理软件，具体安装方法可以参考

10、对应产品的开局指导书和操作指导书。l在T系列存储上配置和源存储一样大小和数量的LUN。l 数据备份。根据项目情况，制定合理的备份计划，确保数据损坏时能够及时地恢复业务系统。Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 12线缆连接及停止业务线缆连接线缆连接l记录下需要迁移的卷ID信息和当前的归属控制器，要求需迁移的卷归属控制器是连接迁移链路的控制器。l将原存储和目标存储采用FC或者iSCSI链路进行连接，最好采用交换机连接模式。 l连接时需要注意如下的问题：pFC或者iSCSI链路需要连接原存储的主

11、机端口。p检查原存储的主机端口速率，如果SFP光模块的速率较低，在存储支持的情况下，建议更换为4Gbps或者8Gbps的SFP，提升数据迁移速率。停止主机业务停止主机业务l根据LUN上承载的业务情况，在主机侧停止业务，避免有IO写入LUN，造成数据不一致。Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 13数据迁移l查看连接了迁移光纤的S5600T对应端口的WWN。首先点击端口，选择对应端口，然后在下面的信息中查看相应的WWN。l将要迁移的LUN映射给S5600T存储对应的端口WWN。在S3100下建

12、立主机，将S5600T的WWN加入主机，类型选择为Linux。l将需要迁移的LUN映射至S5600T。l在S5600T上建立全量LUN拷贝并找到对应的源LUN，可以通过LUN的WWID确认。l等待全量LUN拷贝完成。Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 14完成数据迁移l连接目标存储和业务主机。l将目标存储LUN映射给业务主机。l数据已经可以被主机访问，将主机上的S3100多路径软件删除并安装新存储的多路径软件。l如需要，进行业务系统配置l业务上线，恢复。Copyright 2013 Hua

13、wei Technologies Co., Ltd. All rights reserved. Page 15紧急情况下的业务回退迁移迁移失败导回方案失败导回方案l相关设备发生短时间无法处理的硬件故障。l系统无法正确识别分配的存储空间。l业务经过重新配置后无法正常运行，而且没有相关解决方案。l现场工程师没有在指定时间段内完成数据迁移。回退步骤回退步骤l恢复老存储和主机的连接状态l重新安装老存储的多路径软件（参考对应多路径指导书）l重新拉起业务Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 16同构阵列

14、之间的数据迁移同构阵列之间，如在华为T系列不同产品之间的数据迁移，可以利用远程复制功能实现。 具体远程复制的步骤清参考 产品手册。注意：注意：l同一个业务的多个LUN，在进行远程复制时应该建立一致性组。l应保持数据迁移后，业务处于一致性状态，否则迁移后可能出现无法拉其业务的情况。l源阵列和目标阵列均应该具备License。Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 17目录1.基于阵列和VIS的数据迁移方案介绍2.基于阵列的数据迁移方案步骤3.基于基于VIS的数据迁移方案步骤的数据迁移方案步骤Co

15、pyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 18基于VIS的数据迁移步骤l迁移准备lVIS接管现网阵列l数据迁移lVIS从现网隔离l启动业务并检查l迁移完成 *本文以Oracle RAC集群迁移为例。Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 19基于VIS的数据迁移组网图FCGECopyright 2013 Huawei Technologies Co., Ltd. All rights reserve

16、d. Page 20迁移前准备工作l检查RAC集群的运行状态，RAC集群状态正常，节点可正常切换是接管的基础。l由系统管理员重启集群主机，保证服务器可以正常重启。l由系统工程师完成系统备份。由DBA完成数据库备份。l备份磁盘信息。记录所有节点磁盘信息（lspv, lsattr EHl hdisk*），查看阵列LUN信息（lun名称、lun ID、主机lun ID、lun wwn），记录磁盘对应关系，vg信息（lsvg），文件系统信息。l备份集群配置信息。ocr信息记录备份， votedisk信息记录备份， ASM信息记录，数据库信息记录。l备份网络信息。导出光纤交换机的配置，规划好VIS和存储

17、的接入光纤口位置，以及zone的划分。l进行设备巡检，检查源存储阵列、目标存储阵列、VIS、交换机是否有报警或者异常，及时地更换备件。Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 21迁移网络规划-端口连接端口号端口号连接到交换机的设备连接到交换机的设备设备名称设备名称设备端口设备端口设备端口位置设备端口位置0AIX主节点HBA1卡端口根据现场情况确定1AIX主节点HBA2卡端口根据现场情况确定2AIX备节点HBA1卡端口根据现场情况确定3AIX备节点HBA2卡端口根据现场情况确定4VISA控0端口

18、5VISB控0端口618800_85TA控0端口718800_85TB控0端口8S12000A控0端口根据现场情况确定9S12000B控0端口根据现场情况确定在本例中应规划专用于数据迁移的Brocade交换机，确定各设备端口如何连接和进行zone的划分。Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 22迁移网络规划-zone的划分交换机名称交换机名称Brocade300 序列序列ZoneZone名称名称ZoneZone成员成员ZoneZone说明说明0VIS_A_0_to_18800_A_04，61

19、VIS_A_0_to_18800_B_04，72VIS_B_0_to_18800_A_05，63VIS_B_0_to_18800_B_05，74VIS_A_0_to_S12000_A_04，85VIS_A_0_to_S12000_B_04，96VIS_B_0_to_S12000_A_05，87VIS_B_0_to_S12000_B_05，98VIS_A_0_to_AIX1_HBA14，09VIS_A_0_to_AIX1_HBA24，110VIS_B_0_to_AIX1_HBA15，011VIS_B_0_to_AIX1_HBA25，112VIS_A_0_to_AIX2_HBA14，213VIS_

20、A_0_to_AIX2_HBA24，314VIS_B_0_to_AIX2_HBA15，215VIS_B_0_to_AIX2_HBA25，3Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 23VIS接管现网业务-1l由DBA工程师停止数据库的服务l停止双机集群l在oracle用户停止CRS所有服务并查看是否已经停止#crs_stop all#crs_stat -tl在root用户下停crs（两个节点都执行）并查看一下进程是否都已经停掉#/etc/init.crs stop#ps -ef|grep d.b

21、inl停止相关磁盘资源#rmdev dl hdisk*删除原有磁盘（注：包括原有多路径扫描到的虚拟磁盘）l在S12000阵列上删除映射给IBM主机组的所有lun。l在备节点上卸载原S12000多路径软件l在备节点上安装UltraPath 多路径软件Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 24VIS接管现网业务-2l按规划进行物理组网并划分ZoneS12000与两个Brocade交换机通过2根光纤线连接，实现冗余连接VIS与两个Brocade交换机通过2根光纤线连接，实现冗余连接。lS12000

22、映射LUN给VISS12000映射中启动器增加VIS的WWN；将LUN映射给VIS主机。lVIS上扫描LUNl创建磁盘组建立共享磁盘组，注意一定选择保留数据。lVIS上创建卷给每一个盘以全盘容量创建一个卷，不破坏原有数据，执行命令：vxassist g dg* make vol* size alloc=sd*；其中dg*为要建立的磁盘组的名字，sd*为S12000阵列映射给VIS的所有LUN的盘符，可以用vxdisk list查看；size必须是磁盘的最大容量，否则将破坏原LUN数据，无法实现接管；必须分别在每个LUN上创建卷，禁止跨LUN创建卷，否则会破坏原LUN数据；Copyright 2

23、013 Huawei Technologies Co., Ltd. All rights reserved. Page 25VIS接管现网业务-3l在VIS上创建主备节点主机组和主机。lVIS上添加备节点主机端口，必须把备节点的两个WWN端口加进去，共两个端口。lVIS向主机组映射卷，把所有创建的卷vol*都映射给主机组。l备节点扫描VIS磁盘并检查磁盘状态执行cfgmgr -v扫盘；执行lspv检查磁盘状态。检查多路径是否工作正常。l在主节点上卸载原S12000多路径软件。l在主节点上安装UltraPath 多路径软件。lVIS上添加主节点主机端口。在之前创建的AIX主节点主机中，添加主节点

24、的两个WWN，确保VIS的卷也映射到主节点。l主节点扫描VIS磁盘并检查磁盘状态。Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 26VIS接管现网业务-4l修改磁盘的权限根据之前收集的权限信息修改，以root用户在两个节点均进行修改。#chown R oracle:oinstall /dev/.（根据具体情况确定user,group和盘符）#chmod 660 /dev/.#ls -l /dev/l设置asm_diskstring属性值若VIS映射的盘符路径没有变化，可以不用设置。如果路径发生改变，

25、先查看asm_diskstring的值是否包含改变的路径，若不包含，需要进行修改。# select name,type,value from v$parameter where name=asm_diskstring;#alter system set asm_diskstring=/dev/rupdisk*,/dev/rdsk/*;（根据实际情况确定）Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 27VIS接管现网业务-5l启动集群及业务验证OCR和VOTE信息#ocrcheck#crsctl q

26、uery css votedisk系统管理员执行命令启动集群。#crsctl start crs验证集群工作是否正常。#crs_stat t验证ASM是否正常#srvctl status asm -n node1/node2（node1/node2分别为主备节点名称）l检查业务正常至此，VIS完成对现网业务的接管工作。在此过程中，业务需要中断。 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 28数据迁移-1l18800上创建LUN在迁移阵列18800上创建和S12000阵列一样的LUN用于迁移S12

27、000数据，每个LUN的大小建议大于或等于原阵列LUN大小，建议源LUN和目标LUN大小一致。l按规划进行物理组网并划分Zone18800与两个Brocade交换机通过2根光纤线连接，实现冗余连接。l18800映射lun给VIS18800的主机要把VIS两个控制器FC端口的WWN都要添加进去。18800上创建的所有lun映射给VIS。lVIS上扫描并初始化Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. Page 29数据迁移-2l在VIS系统中，将新增阵列18800的lun与S12000上的lun做镜像。l镜像完成后（镜像关系是Active，原卷和镜像数据完全一致）