附件1彩信中心主备倒换及设备重启检测方案

1、彩信中心主备倒换及重启检测方案隐患，保障系统平稳重启检测操作，具体方案为检验彩信的应急倒换能力，排查行，现安排实施彩信中心 HFMMSC2 主备倒换及如下：一、系统概况彩信中心 HFMMSC2 位于黄山路一号楼 3数据机房，主要承载滁州、芜湖、马鞍山、安庆、黄山、铜陵、宣城、六安和池州用户的彩信业务。系统网络拓扑图如下：系统有共有1 对的Eudemon1000E和1 对F5 负载均衡器为主备模式。系统有 3 对业务处理机和 1 对计费/数据库服务器为主备双机。二、操作时间2018 年 6 月 12 日 0:00-4:00三、操作中心： 公司：四、操作影响主备倒换过程中可能出现到外部网元，短暂影

2、响滁州、芜湖、马鞍山、安庆、黄山、铜陵、宣城、六安和池州用户的彩信收发。五、操作内容及步骤（一）系统备份操作前检查系统软硬件状态，并进行系统备份。1、执行 save 指令保存当前配置。2、负载均衡器配置到配置文件，并执行 display current-configuration 命令离线备份登录 F5 维护Potral，导出备份配置到本地。3、业务处理机和计费/数据库服务器执行 hastatus sum 查看当前服务器双机状态执行 route 查看主机路由，并执行 cat /etc/sysconfig/network/routes查看路由配置执行 crontab l 查看主机定时任务执行 i

3、ptables -L v 查看主机安全配置执行 more /etc/VRTSvcs/conf/config/main.cf vhakan 主机双机配置执行 tar cvf config20180611.tar config 备份主机配置文件（二）主备倒换及1、重启登录主10.151.15.130，进入和CMNET 的接口 interface GigabitEthernet0/0/3 执行shutdown，进行主备切换。观察主机由 HRP_M<AHHF-PS-MMS02-FW01> 变为 HRP_S<AHHF-PS-MMS02-FW01>，并执行 display vrrp

4、 查看vrrp 状态是否变为 backup。然后拨测业务。10.151.15.130，进入和 CMNET 的接口 interface GigabitEthernet0/0/3 执行 undo登录主shutdown，进行主备切换。观察主机由 HRP_S<AHHF-PS-MMS02-FW01> 变为 HRP_M<AHHF-PS-MMS02-FW01>，并执行 display vrrp 查看2、负载均衡器vrrp 状态是否变为 master。然后拨测业务。登录主 F5 管理界面。左边导航树选择“System > High Availability :Redundancy

5、”进入“System >> High Availability : Redundancy”页面，单击“Force to Standby”，进行切换。检查主备是否切换正常，检查业务是否正常，拨测业务。观察备机 10.151.15.3 是否变成：acitve，状态为主用登录主 F5 管理界面。左边导航树选择“System > High Availability :Redundancy”进入“System >> High Availability : Redundancy”页面，单击“Force to Standby”，进行切换。检查主备是否切换正常，检查业务是否正常，

6、拨测业务。观察备机 10.151.15.2 是否变成：acitve，状态为主用3、业务处理机首先检查双机状态：hastatus sum登录备机，将 MMSG2 资源切换至主机：登录 10.151.15.38、10.151.15.42、10.151.15.48 分别执行hagrp hagrp hagrpswitchswitchswitchMMSSG2 MMSSG2 MMSSG2tototoAHHF-PS-MMS02-SV03 AHHF-PS-MMS02-SV05 AHHF-PS-MMS02-SV07检查双机切换结果和业务进程状态，等切换完成后进行业务测试：hastatus -sum 检查双机是否

7、恢复mmsc1/mmsc2 用户执行 mms status 检查业务进程是否正常启动测试正常后重启备机：reboot检查备机是否重启完成：10.151.15.38/42/48hastatus -sum 检查双机是否恢复lltstat nvv 检查双机心跳登陆主机，将 MMSG1/MMSG2 资源切换至备机：登录 10.151.15.37、10.151.15.41、10.151.15.47 分别执行hagrp switch MMSSG1 to AHHF-PS-MMS02-SV04 hagrp switch MMSSG2 to AHHF-PS-MMS02-SV04 hagrp switch MMS

8、SG1 to AHHF-PS-MMS02-SV06 hagrp switch MMSSG2 to AHHF-PS-MMS02-SV06 hagrp switch MMSSG1 to AHHF-PS-MMS02-SV08 hagrp switch MMSSG2 to AHHF-PS-MMS02-SV08检查双机切换结果和业务进程状态，等切换完成后进行业务测试：hastatus -sum 检查双机是否恢复mmsc1/mmsc2 用户执行 mms status 检查业务进程是否正常启动测试正常后重启主机：reboot检查主机是否重启完成：10.151.15.37/41/47hastatus -sum

9、 检查双机是否恢复lltstat nvv 检查双机心跳登陆备机，将 MMSG1 资源切换至主机：登录 10.151.15.38、10.151.15.42、10.151.15.48 分别执行hagrp switch MMSSG1 to AHHF-PS-MMS02-SV03 hagrp switch MMSSG1 to AHHF-PS-MMS02-SV05 hagrp switch MMSSG1 to AHHF-PS-MMS02-SV07检查双机切换结果和业务进程状态，等切换完成后进行业务测试：hastatus -sum 检查双机是否恢复mmsc1/mmsc2 用户执行 mms status 检查

10、业务进程是否正常启动4、计费/数据库服务器首先检查双机状态：hastatus sum登录备机，将 MMSSG2 资源切换至主机： 登录 10.151.15.34 执行hagrpswitchMMSSG2toAHHF-PS-MMS02-SV01检查双机切换结果和计费进程状态，等切换完成后进行业务测试：hastatus -sum 检查双机是否恢复mmsc1/mmsc2 用户执行 mms status 检查计费进程是否正常启动测试正常后重启备机：reboot检查备机是否重启完成：10.151.15.34hastatus -sum 检查双机是否恢复lltstat nvv 检查双机心跳登陆主机，将 DBS

11、G/MMSSG2 资源切换至备机： 登录 10.151.15.33 执行hagrpswitchMMSSG2toAHHF-PS-MMS02-SV02 hagrpswitchDBSGtoAHHF-PS-MMS02-SV02检查双机切换结果和业务进程状态，等切换完成后进行业务测试：hastatus -sum 检查双机是否恢复mmsc1/mmsc2 用户执行 mms status 检查业务进程是否正常启动测试正常后重启主机：reboot检查主机是否重启完成：10.151.15.33hastatus -sum 检查双机是否恢复lltstat nvv 检查双机心跳登录备机，将 DBSG 资源切换至主机：

12、登录 10.151.15.34 执行hagrpswitchDBSGtoAHHF-PS-MMS02-SV01检查双机切换结果和计费进程状态，等切换完成后进行业务测试：hastatus -sum 检查双机是否恢复mmsc1/mmsc2 用户执行 mms status 检查计费进程是否正常启动六、倒回步骤每次操作之后进行业务拨测，如果测试不正常，且 5 分钟无法解决的立即进行倒回操作，系统恢复原状。1、登录主shutdown，进行倒回10.151.15.130，进入和 CMNET 的接口 interface GigabitEthernet0/0/3 执行 undo切换。2、负载均衡器倒回登录主 F5

13、 管理界面。左边导航树选择“System > High Availability : Redundancy”进入“System >>High Availability : Redundancy”页面，单击“Force to Standby”，进行3、业务处理机双机倒回登录 10.151.15.37、10.151.15.41、10.151.15.47 分别执行hagrp switch MMSSG2 to AHHF-PS-MMS02-SV04 hagrp switch MMSSG2 to AHHF-PS-MMS02-SV06 hagrp switch MMSSG2 to AHHF-PS-MMS02-SV08 登录 10.151.15.38、10.151.15.42、10.151.15.48 分别执行hagrp switch MMSSG1 to AHHF-PS-MMS02-SV03 hagrp