飞康培训教程第二部分故障恢复和维护

IPStorCDP培训教程

（第二部分）美国飞康公司SESSION灾难恢复1:常见应用系统故障的恢复2:站点级灾难的恢复流程（一）一般系统灾难的恢复生产磁盘故障生产磁盘阵列数据/快照区业务数据镜像数据磁盘阵列出现故障时，业务不中止。CDP接管运行。EMC/HDS生产磁盘故障时的系统报警信息出现报错请通知飞康公司支持人员在详细检查之后进行增量同步回生产磁盘数据丢失的恢复1:通知生产中心/灾备中心提取快照/时间点数据库加载

关联数据传输回生产中心（export/FTP)2:在本地生产中心提取快照/时间点数据库加载（要求具备查询服务器）加载CDP数据盘的方法：

#cfgmgr–vlfcs0（fcs0取决于实际FC卡连接） #importvg-ydatavghdiskXX出现数据库瘫痪1:选择快照或者Journal历史轨迹录像2:rollback回滚3.启用CDP盘接替生产，生产运行4.随后通知飞康公司支持人员进行向生产存储的镜像修复系统升级1:HACMP双机切换2:单侧系统升级3:HACMP系统回切---CDP系统均正常运行，不中断（二）站点级别灾难的恢复流程站点级灾难1:停电2:自然灾害3:计划内停机4:多个设备故障5:生产网络瘫痪……….基本切换原则1:提升灾备中心CDP（promote/reverse),分配存储给灾备主机2:识别关联VG/PV/LV --importvg–ydatavg-fhdiskXX --lsvg–o --lsvg–p --lspv–l

3:网络切换4:启动灾备中心应用系统SESSION系统维护和优化1:CDP常见硬件维护和故障处理2:CDP软件系统故障的处理3:日常维护流程1.必须具备CDPConsole一台2.必须能够以SSH的方式登录到CDP管理器（CDP只提供这一种登录到内部的手段）

维护须知（一）CDP硬件维护硬件服务码序列号:88W2HZX快速服务码术支持必备信息CDP硬件故障快速处理序号故障现象描述处理操作1磁盘灯告警磁盘LED灯告警报告飞康公司1.保修卡的硬件维护码2.LED面板的错误代码2CDP设备告警CDP设备告警报告飞康公司1.保修卡的硬件维护码2.LED面板的错误代码3CDP设备LED有错误代码CDP设备LED有错误代码，CDP设备自身无告警1.协商某一时间进行关机2.长按开机键30秒3.重新开启CDP，CDP硬件故障快速处理(续）序号故障现象描述处理操作4更换硬件需要CDP在关机状态下更换硬件1.协商某一时间进行关机2.CDP关机后，断开所有电源线3.更换硬件设备4.重新开启CDP，(二)CDP软件系统错误快速处理序号现象描述处理操作1CDP的控制台不能连接到CDP

执行PingCDPIP，确认CDP是否存活

1.查看CDP硬件是否良好，若硬件出错，执行硬件处理流程2.开启CDP设备通过SSH登录到CDP中，执行#ipstorstatus，有若干进程为“STOPPED”状态。

1.软件报修提供软件服务码提供STOPPED的进程名称2.修复所有状态为“RUNNING”3.参见维护手册中的客户端的维护步骤进行主机的磁盘同步和复制策略恢复

所有硬件状态良好，无法Ping到CDPIP1.报网管处理网络问题

CDP软件系统错误快速处理(续)序号现象描述处理操作2不能登录容灾中心CDP容灾中心CDP运行良好，但不能登录1.报网管处理网络问题容灾中心CDP出错1.常见问题容灾中心快速修复2.软件报修提供软件服务码提供STOPPED的进程名称3.参见维护手册中的客户端的维护进行修复保护设定或策略CDP软件系统错误快速处理(续)序号现象描述处理操作3复制状态为挂起复制状态信息出现警告，同时复制为挂起1.在生产中心CDP的复制菜单中选择恢复，在下一复制时间点会开始复制4复制出错复制信息显示错误，无法复制1.报网管查看网络状况2.在复制菜单中选择“同步”进行手动复制容灾中心CDPIP变更1.在生产CDP的复制属性中修改容灾中心CDP的IP复制出现异常错误1.软件报修软件服务代码提供CDP的X-ray文件现象详细描述CDP软件系统错误快速处理(续)序号现象描述处理操作5快照资源为离线快照资源区域显示为离线状态，无此虚拟磁盘卷的TimeView1.检查硬件状态2.停止复制3.选择快照资源菜单“重新初始化”4.启动复制快照资源区域显示为离线状态，在SAN资源中有此虚拟磁盘卷的TimeView1.删除此磁盘卷的timemark2.停止复制3.选择快照资源菜单“重新初始化”4.启动复制6未知问题的处理除常见问题外，CDP发生了未知问题1．收集CDP的X-ray2.提供CDP的软件服务码3.现象详细描述4.现象发生的具体时间点5.发生此现象之前的操作CDP系统错误快速处理(续)序号现象描述处理操作8新的timeMark不创建新的timemark不创建，快照资源离线1.停止TimeMark2.修复快照资源状态3.重新设定timeMark策略新的TimeMark不创建，快照资源良好1.挂起TimeMark策略2.恢复TimeMark策略CDP系统错误快速处理(续)序号现象描述处理操作9TimeMark数量少于设定数目TimeMark的数量少于设定的数量，一直未增加1.检查TimeMark策略2.更改快照资源“停止写入”为“删除以前的timemark”

TimeMarK一直新增，但总数少于设定总数1.检查CDP的磁盘容量剩余空间2.在控制台中对此磁盘的快照资源进行扩容(三)CDP系统日常维护步骤飞康CDP维护（一）

IPStor状态检测

License状态检测物理适配器状态检测物理资源状态检测逻辑资源状态检测

复制状态检测

X-RAY获取的方法飞康CDP维护（二）

PV状态检测

VG状态检测

PV出现问题时的现象无法varyon卷组时严格遵守操作规程

（如两台主机不能同时varyon同一个卷组）系统扩展飞康CDP维护（三）

CDP开机顺序

CDP关机顺序飞康CDP维护-IPStor状态检测查看状态，执行：ipstorstatus如左图所示，正常情况下都是running状态可以用ipstorstart/stopall启动或停止服务飞康CDP维护-检查License状态进入Console右键点击CDP主机名->License出现KEY，左下角是KEY的信息

点击“License”摘要，可以看到功能列表

飞康CDP维护-检查物理适配器状态飞康CDP维护-检查物理资源状态飞康CDP维护-检查逻辑资源状态逻辑资源是从物理磁盘中“分割”或“整合”形成的；检查逻辑资源是否正常，点击每个逻辑资源看“常规”状态检查逻辑资源是否还在规划的客户端下飞康CDP维护-检查复制状态

1、查看Console界面的复制标签，检查上一次成功同步时间，如果和现在的时间相差在10分钟之内，说明复制正常2、生成复制报告

飞康CDP维护-X-RAY的生成★X-RAY是系统报修的必备文件右键点击CDP服务器，选择X-RAY。然后选择保存的路径即可。飞康CDP维护-主机PV状态检查1、查看物理磁盘状态lsdev-Ccdisk2、lspv–l<hdiskname>飞康CDP维护-PV出现问题时的状态出现报错飞康CDP维护-PV出现问题时的状态出现报错#lspvhdisk1PHYSICALVOLUME:hdisk1VOLUMEGROUP:pbc-db01-vg01PVIDENTIFIER:0002adaf827f96cbVGIDENTIFIER0002adaf827f97a6PVSTATE:activeSTALEPARTITIONS:34ALLOCATABLE:yesPPSIZE:16megabyte(s)LOGICALVOLUMES:2TOTALPPs:312(4992megabytes)VGDESCRIPTORS:2FREEPPs:1(16megabytes)USEDPPs:311(4976megabytes)FREEDISTRIBUTION:00..00..00..00..01USEDDISTRIBUTION:63..62..62..62..62出现报错无法varyon卷组时，建议先不要使用-f1、当使用命令varyonvg<vgname>无法激活卷组时，建议先不要使用-f参数强制激活卷组2、检查各个设备的状态是否正常：如exportvg->importvg；或者exportvg后将物理磁盘rmdev掉，重新识别磁盘3、如果强制varyon上，需要立即检查所有VG和PV的状态操作规程★两台IBM主机不能同时varyon同一个卷组CDP开机顺序CDP提供的存储容量和生产主机的存储同为数据存储卷VG，CDP开机应在主机未开之前或VG未在线之前进行顺序工作过程备注1CDP开启CDP服务器加电，启动操作系统及CDPIPStor服务CDP服务随内部操作系统启动自动启动。2确认CDP已完全启动通过CDP控制台进行登录确认若能登录，则启动正常，若不能登录，必须通过登录CDP的底层系统或终端设备进行确认。3开启主机1.

确认CDP启动后，开启应用主机2.

确认CDP启动后，在系统中通过#lsdev–Ccdisk查看主磁盘和CDP磁盘的状态是否识别正常。如正常，激活CDP所在的VG或应用程序（#Varyonvgdatavg）业务运行确认CDP关机顺序CDP提供的存储容量和生产主机的存储同为数据存储卷VG，CDP关机应在主机关闭后或VG离线之后进行顺序工作过程备注1关闭主机或者卸载VG1.

完全关闭主机，或者2.

关闭应用及VG（Varyoffvgdat）vg)（必须确认CDP所在的VG在inactive的状态下）

2关闭CDP1.