江苏移动动环监控系统维护管理规定(2008.doc

江苏移动动力设备和机房环境集中监控系统江苏移动动力设备和机房环境集中监控系统 维护维护管理规定管理规定 2008 2008 版版 中国移动通信集团江苏中国移动通信集团江苏有限公司网络部有限公司网络部 二二 八年七月八年七月 目目 录录 第一章 总则 1 第二章 维护组织 1 第一节 维护组织机构及职责 1 第二节 动环监控系统与其他系统的界面划分 3 第三章 系统的日常维护和管理 4 第四章 故障管理 8 第五章 质量管理 10 1 第一章第一章总则总则 第一条第一条为加强江苏移动动力设备和机房环境集中监控系统 以下简称 动环监控系统 的维护管理 提升系统的运行质量 规范系统的维护操作 保障系统高效 安全 稳定地运行 特制定本规定 第二条第二条本规定适用于中国移动通信集团江苏有限公司动环监控系统 第三条第三条动环监控系统维护的目标是保证系统所有设备处于最佳运行状态 使其运行质 量满足对动力设备及机房环境远程监控的需求 为各级维护人员提供动力设备 及机房环境实时信息 为全省集中维护 集中管理 集中监控提供支撑平台 第四条第四条中国移动通信集团江苏有限公司动环监控系统维护工作的基本任务是 1 保证动环监控系统设备的完好 设备的电气性能 机械性能 维护技术 指标及各项服务指标符合 中国移动动力环境集中监控规范 2 保证数据采集 数据传送 数据处理等环节的设备正常运行 3 保证遥测 遥信 遥控 遥调功能的正常使用 4 保证上传数据的准确和及时 5 保证动环监控系统的实时数据 历史数据正常及安全 6 迅速准确地排除动环监控系统故障 保证系统正常运行 7 保证新增局 站 和新增动力设备准确及时接入系统 8 根据实际需求有计划的对系统软 硬件进行升级和改造 9 制定各项安全生产规章制度 切实保障动环监控系统安全运行 第五条第五条各级维护单位和维护人员必须认真执行本规定的各项规章制度和工作流程 第六条第六条本规定的解释和修改权属中国移动通信集团江苏有限公司网络部 以下简称 省公司网络部 第二章第二章 维护组织维护组织 第一节第一节 维护组织机构及职责维护组织机构及职责 第七条第七条中国移动江苏公司动环监控系统采用统一领导 分级管理 分级负责的维护管 理原则 在省公司统一领导下 省公司网络部 各分公司负责各自管辖范围内 动环监控系统的维护管理工作 第八条第八条省公司网络部基础网络维护室的主要职责 1 根据有限公司下发的 中国移动动力环境集中监控规范 组织制定 发布 实 施本省动环监控系统的维护管理规定 并监督分公司落实 2 负责制定本省动环监控系统数据配置规范 EOMS 派单规则 监督分公司严格 按照规范执行 定期或不定期抽查和核对分公司对告警等级 告警门限 工单 设置等配置数据设定的是否符合规范 3 负责对系统新功能 新技术 关键设备的入网测试和技术把关 负责制定本省 动环监控系统应用功能需求技术规范 牵头组织系统新功能和新需求的审核 开发 试点 推广 4 负责制定全省动环监控系统的结构优化方案 根据全省动环监控系统的运行情 况 提出系统的升级 改造建议 报领导审批后组织实施 5 负责动环监控系统重大故障和重大安全事件的管理 当动环监控系统出现重大 故障时 要积极指导 协助相关分公司组织抢修 并按流程逐级上报 事后及 时总结经验 组织制定防范措施 指导全省落实 6 负责做好全省动环监控 FSU LSC CSC 软件版本管理 负责组织升级软件 补 丁软件试用与推广 7 指导分公司做好动环监控系统的设备维护 优化和故障处理 为分公司提供技 术支援 牵头组织分析 解决动环监控系统中存在的热点 难点问题 8 负责制定动环监控系统质量考核指标和考核办法 检查和分析动环监控系统的 运行质量 定期或不定期组织考核评比 9 负责全省动环监控系统安全管理 制定动环网络的防病毒技术措施并组织落实 做好系统各级口令的维护与管理 10 组织各市分公司进行维护工作经验交流与业务培训 以提高维护人员的业务水 平 11 负责省中心动环监控系统 CSC 设备的维护与管理 确保系统正常运行 12 定期做好 CSC 关键指标的测试 分析省中心动环监控系统的运行状况 制定相 应防范措施 13 负责 CSC 常用报表的制定 查询 统计 分析 14 指导省监控人员正确使用动环监控相关功能 15 做好省监控终端设备的维护和管理 第九条第九条省公司网络部网络监控室的主要职责 1 负责 7 24 小时监控全省机房和基站动力设备 机房环境 动环监控系统本身 的各类告警 根据 集中监控动环告警监控手册 做好电话和短信通知 并跟 踪紧急告警现场处理的进展和结果 2 负责确认动环监控网络调整信息 Eoms 信息发布 3 负责监控全省动环监控系统的运行状况 如经确认出现重大故障应按相关流程 上报并及时电话通知设备第一责任人处理 协助故障处理人做好故障的分析 处理 总结 4 负责动环监控周报的编写 对全省每周告警及工单情况进行分析 5 根据领导要求在特定时间段统计和发布相关告警信息 6 负责省中心动力环境监控平台新需求的制定 参与省监控平台新功能 新需求 的入网验收 7 配合现场维护人员进行实时数据的核对 告警信号的测试验证等工作 8 协助基础网络维护室做好监控终端设备的维护与管理 第十条第十条分公司网络 工维 部的主要职责 1 贯彻落实省公司制定的动环监控系统维护管理规定 2 严格按照 江苏移动动力设备和环境监控系统数据配置规范 做好本地数据的 设置 对于动环监控出现的所有紧急告警 重要告警应设置短信发送给相应设 备维护人员 并对其中的部份告警设置 EOMS 派发工单 3 负责本地动环监控设备的维护与管理 按照省公司及设备厂商规定的维护周期 制定本地的设备维护作业计划并组织实施 4 每年的 4 月份定为全省核心机房所有物理测点的核对性告警测试月 各分公司 在规定时间内必须完成所有机房的测试 测试结果在 4 月 30 日前通过工单上 报省公司网络部基础网络维护室 5 新建局站 新增设备接入动环监控系统 配置数据由工程人员负责设置 维护 人员负责入网验收 对局 站 命名 设备分类 设备命名 信号命名 告警 等级的设置 告警门限的设定 存储周期 存储阀值 告警工单派发的设置 告警关联和过滤的设置等必须严格按照 江苏移动动力设备和环境监控系统数 据配置规范 执行 6 负责本地配置数据的管理 每季度的第一个月的第一周定为配置数据的核查周 核查结果于当月第二周通过工单上报省公司网络部基础网络维护室 7 负责本地动环监控系统重大故障和重大安全事件的处理和上报 当动环监控系 统出现重大故障时 要积极组织相关人员尽快进行抢修 并按流程逐级上报 事后及时总结经验 制定防范措施 并上报省公司网络部 8 负责对代维人员动环监控维护内容的培训与维护质量考核 9 要求代维队伍必须严格按照 江苏移动代维标准化管理指导意见基站代维分册 2006 版 执行 对月 季 半年 年检查测试项目通过代维工作记录和动 环监控系统上记录的告警进行核查 确认每个项目真正按要求定期进行测试 10 严格控制工程或网络调整时对动环监控信号做屏蔽的数量和时长 屏蔽操作人 员应在值班记录上做好相应记录 值班人员在交接班时要交接清楚并留有相应 交接记录 11 设备或信号处于屏蔽阶段 传输割接或监控设备故障等原因造成省公司无法监 控时 此时分公司是这部份设备和机房环境监控的第一责任人 分公司应做好 本地监控 12 做好本地告警第一责任人的管理 告警受理人应设 A B 角 人员变动应及时 报告省公司网络部网络监控室 13 严格按照省公司网络部网络监控室相关规定 做好工程和日常维护测试信息发 布工作 14 负责本地动环监控设备设计会审 工程初验和终验 15 按照省公司要求做好本地动环监控系统的结构优化和改造 16 配合省公司做好动环监控系统新需求 新功能的试点和推广 17 完成省公司委派的其它各项任务 第二节第二节 动环监控系统与其他系统的维护界面划分动环监控系统与其他系统的维护界面划分 第十一条第十一条动环监控系统的部份告警通过 EOMS 派发工单给设备维护单位 派单规则由分 公司按照 江苏移动动力设备和环境监控系统数据配置规范 在动环监控系统 配置数据时设定 1 与 EOMS 的硬件分工界面 动环监控系统与 EOMS 在省中心 CSC 做硬件连接 接 口内侧及连接线缆归属基础网络维护室 接口外侧归属网管系统室 2 与 EOMS 的数据配置分工界面 动环监控系统的告警是否需派单 派单等级 派单延时由分公司动环人员设置 故障受理单位由分公司负责 EOMS 数据设置 的专业室负责设置 第十二条第十二条动环监控系统必须从综合资源管理系统获取被监控的局 站 名 并定时把核 心机房高频整流系统和 UPS 系统实时负载电流 局 站 环境告警信息 基站 停电信息发送给综合资源管理系统 由综合资源管理系统把相关信息送大屏显 示 1 与综合资源管理系统的硬件分工界面 动环监控系统与综合资源管理系统在省 中心 CSC 做硬件连接 接口内侧及连接线缆归属基础网络维护室 接口外侧归 属网管系统室 2 与综合资源管理系统的数据处理分工界面 1 省中心 CSC 每天与综合资源管理系统做一次局 站 名同步 新增局 站 名的 录入由分公司无线专业人员同工程建设同步录入 分公司动环专业人员负责对动 环监控系统同步结果的核查 2 省中心 CSC 在一天的两个话务高峰时间点把核心机房高频整流系统和 UPS 系统实 时负载电流送缓冲区 综合资源管理系统定时读取 新建高频整流系统和 UPS 系 统先由分公司动环专业人员按照省公司制定的编码规则在动环监控系统内对设备 进行编码 然后由分公司动力设备资源管理人员在综合资源管理系统上填入相应 的编码 3 局 站 环境告警信息 基站停电信息在省中心 CSC 实时送缓冲区 由综合资源 管理系统定时读取 第十三条第十三条与传送网的维护分工界面 动环监控系统按物理架构可分为底端采集层 传输层 中心处理层 动环监控 系统与传送网的维护分工界面是 动环监控系统设备到传送网 DDF 架或 ODF 架 第一个端子 端子内侧设备归属动环监控系统 端子外侧设备归属传送网 第三章第三章 系统的日常维护系统的日常维护周期和项目周期和项目 第十四条第十四条动环监控系统的日常维护工作分两大部份 底端 核心机房 基站 采集设备 的维护和省 市监控中心设备的维护 第十五条第十五条省 市公司根据维护内容和维护周期应制定相应的维护作业计划 第十六条第十六条底端 核心机房 基站 采集设备的维护周期及内容如下 记录表见附件表一 月 季测试记录表 1 月度维护项目 1 采集主体的检查 检查电池采集模块 传输模块 输入输出采集模块 模拟量采 集模块 数字量采集模块 USB 端口等板件面板应有绿灯闪烁 各面板显示如果出 现红灯 说明该模块工作异常应尽快处理 2 烟感检查 红灯闪烁表示正常 长亮表示烟雾已告警需立即处理 3 门禁检查 能刷卡开门 能门灯联动 检查开 关门 IO 板件红灯告警是否出现和 消失 门控灯是否随着门的开关而亮灭 4 水浸检查 检查在空调室内机附近地面上的水浸传感钢片连接线接触是否可靠 查看 IO 板是否有告警出现 水浸变送器正常绿灯常亮 有水浸时红灯亮 5 温湿度传感器检查 传感器周围无遮挡 能正常采集环境温 湿度 6 蓄电池温感变送器 检查温感探头与采集点的电池连接条是否接触可靠 7 蓄电池单体电压和总电压测点检查 检查蓄电池采集点接触是否接触可靠 8 空调接口检查 采集设备信号灯闪烁表示通信正常 9 开关电源接口检查 采集设备信号灯闪烁表示通信正常 10 供电电源和开关检查 检查电源线接头连接应紧固 手摇无松动 11 动环监控设备连接检查 监控单元与墙体 机架等连接应紧固 2 季度维护项目 1 烟感告警传感器测试 使用专用烟雾发生器放置传感器下方 传感器红灯应常亮 联系本地动环监控人员在业务台上查看应有告警产生 在省 市监控台查看告警 并跟踪 EOMS 派单流程 如无告警需检查传感器和采集器 2 水浸告警传感器测试 使用一元硬币或其它金属体放置在空调室内机附近地面上 水浸传感器钢片上 查看 IO 是否有告警出现 联系本地动环监控人员在业务台上 查看应有告警产生 在省 市监控台查看告警并跟踪 EOMS 派单流程 如无告警 则需检查采集片和传感器工作是否正常 3 温湿度传感器测试 用力对温湿度传感器吹气 温湿度传感器本地显示应有明显 变化 4 UPS 系统监控测试 在本地业务台上查看与动环监控通信状态 输出电压 电流 各类告警是否正常 5 开关电源监控测试 在本地业务台上查看与动环监控通信状态 系统电压 系统 电流 模块电流 各类告警是否正常 6 空调监控测试 在本地业务台上查看空调与动环监控通信状态 工作电流 各类 告警是否正常 3 年检查测试项目如下 记录表见附件表二 核心机房设备维护记录表 附件 表三 模拟量精度测试记录表 1 核心机房每年 4 月份检查 基站由分公司制定具体作业计划 2 蓄电池精度测试 用 4 位半数字电压表现场测量蓄电池单体电压和总电压 与本 地监控中心业务台核对 误差 2V 电池电压 误差 0 005V 6V 电池电压 误差 0 020V 12V 电池电压 误差 0 060V 3 智能电表精度测试 用 4 位半数字电压表现场测量交流电压 误差 2 4 温湿度传感器精度测试 基站温湿度计显示值与监控测得的值相比较 温度误差 1 在环境温度为 25 湿度范围为 30 RH 80 RH 时 湿度误差应 5 RH 当湿度超出 30 RH 80 RH 时 湿度误差应 10 RH 5 核心机房 UPS 系统通信协议核对测试 UPS 系统与动环监控通信中断告警验证 UPS 整流器失效告警验证 在省 市监控台查看告警并跟踪 EOMS 派单流程 6 核心机房开关电源系统通信协议核对测试 开关电源与动环监控通信中断告警验 证 高频开关整流变换设备交流停电故障告警或随机拔出一个整流模块模拟模块 故障告警验证 在省 市监控台查看告警并跟踪 EOMS 派单流程 7 核心机房专用空调通信协议核对测试 专用空调与动环通信中断告警验证 专用 空调风扇工作异常告警验证 在省 市监控台查看告警并跟踪 EOMS 派单流程 第十七条第十七条省 市监控中心设备的维护周期及项目见表 记录表见附件表四 序号类别项 目周期备 注 1 系统服务器 CPU 使用状况周 系统服务器包括数据库服 务器 应用服务器等其他 SERVER 类型的硬件设备 2 系统服务器内存使用状况周 3 系统服务器硬盘空间状况周包括普通硬盘和磁盘阵列 4 数据库存储空间检查周 查看数据库各存储空间的 使用情况 5 系统运行 系统环境 重要进程及运 行状况 日 包括系统进程和应用进程 6 系统文件全备份不定期 配置文件变化时进行 如 果定期执行 则周期不能 超过月 7 数据库全备份实时数据备份与迁移 8 配置数据备份不定期配置文件变化时进行 9 应用软件备份不定期软件版本变化时进行 10 系统备份 网络连接情况检查日 11 监控中心设备巡查日 12 系统日志检查周 13 机房设备巡检和系统部件 运行状态检查 周 14 日常维护 紧急告警与重要信号派单 流程抽检 季度 15 机房智能设备重要信号及 环境量全面普查 每年 4 月份 15 系统账户安全管理季度 对非法帐户和过期账号立 即停止 及时清理无用账 号 16 修改服务器系统账号口令季度 定期修改操作系统 数据 库超级管理员权限级的账 号的口令 17 检查系统服务端口开放状 态 季度 关闭与业务无关的服务端 口 减少系统的安全隐患 18 WINDOWS 补丁发布情况检查 和安全补丁加载 月 19 防病毒软件的病毒库更新周 20 系统安全 检查系统病毒情况周 第十八条第十八条动环监控系统应定期或不定期备份 备份内容有系统软件 应用软件及应用数 据 正常每半年备份一次 如果动环监控系统需要升级变动 则在变动之前必 须进行系统的全备份 系统全备份工作尽量保证在不影响生产的情况下进行 备份的介质必须保存在安全的环境中 避免被人为破坏 失去备份作用 第十九条第十九条分公司应制定并实施系统和数据库安全访问策略 包括登录访问 网络权限 网络服务器安全 端口和节点安全及防火墙安全控制策略 并认真分析系统运 行日志 及时发现系统隐患 第二十条第二十条动环监控系统软件版本 补丁流程管理如图 1 所示 软件版本 补丁的确定 厂家开发新的版本 补丁 在完成实验 室测试后提交现网软件装载测试申请 省公司管理小组对软件进 行审核 审核是否通过 下发软件测试装载工单 测试是否成功 软件版本 补丁入网许可 省公司组织全网装 载实施 N Y N Y 开始 信息反馈 资料归档 结束 软件测试装载 软件测试反馈 图 1 软件版本 补丁管理流程 是否需要全网装载 Y N 各分公司根据需求 组织在本地市装载 第四章第四章 故障管理故障管理 第二十一条第二十一条故障处理中的职责划分 1 省公司网络部基础网络维护室负责动环监控系统严重故障的技术管理 协助各 分公司疑难故障的处理 事后负责上报严重故障和全网性设备硬件或软件版本 缺陷问题 负责处理属于省公司管辖的动环监控系统故障 2 省公司网络部网络监控室负责严重故障实时上报 电话通知省市公司抢修人员 跟踪现场处理进程 3 分公司网络 工维 部负责本地严重故障的上报 并负责本地故障的处理 第二十二条第二十二条故障分类 1 严重故障 已经或即将危及设备及通信安全 省中心动环监控系统故障导致对 全省所有分公司动环系统无法正常监控的故障 2 次要故障 可能影响设备及通信安全 动环系统部份功能不能使用 需要尽快 安排时间处理的故障 3 一般故障 表示系统中发生了不影响设备及通信安全但应注意的一般事件 第二十三条第二十三条严重故障的定义 1 以下情况发生任意一种即为严重故障 1 烟雾告警已现场确认 对机房 基站设备运行造成影响或已有火灾发生 2 机房动力设备故障导致主要设备停电或运行异常 3 省中心动环监控系统故障导致对全省所有分公司动环系统无法正常监控 时间超过 4 小时 2 故障上报流程 省监控人员判断告警级别 开 始 动环监控实时告警 设备维护人员根据工单 和短信息内容处理相应 告警 是否需电话通知 设备抢修人员 电话通知设备维护接口人 紧急重要 一般 是否重大故障 否 是 否 电话上报专业室负责人 电话上报综合 管理中心重大 故障管理人员 电话上报省公司网络部负责人 是否上报集团公 司和省管局 否 综合管理人中心按重大故障流程上报 结 束 是 是 第五章第五章 质量管理质量管理 第二十四条第二十四条为完善对江苏移动动环监控系统各个环节的质量控制 应建立各级检查 体系 做到统一领导 分级管理 分工负责 层层到位 把好质量关 第二十五条第二十五条省公司网络部基础网络维护室负责建立江苏移动动环监控系统的质量分 析制度和质量考核体系 负责定期汇总 分析各项指标 监督并指导各地市动 环监控系统质量分析工作 第二十六条第二十六条各分公司负责汇总整理本地动环监控系统的运行质量 系统性能等指标 进行质量分析 并将运行质量情况上报省公司网络部基础网络维护室 第二十七条第二十七条各分公司要加强动环监控设备的质量维护 为生产分析提供有力支撑 必须 按照省公司网络部有关动环监控质量的具体要求 保障本省的动环数据及时性 完整性 准确性 保障上报省公司的数据与本地数据的一致性 第二十八条第二十八条动环监控系统主要性能指标 1 基站动环监控断站比 指标定义 基站动环监控断站比 每天基站动环监控断站时长 小时 已接