银行IT系统运维管理平台方案.doc

人民银行广州分行人民银行广州分行 IT 系统运维管理平台系统运维管理平台 方案故事方案故事 目目 录录 1方案背景方案背景 2 2IT 管理需求管理需求 2 2 1性能监测的需求目标 2 2 2IT 管理的特殊挑战 3 3方案实施预期效果综述方案实施预期效果综述 4 4NETGAIN EM 方案方案 4 4 1方案说明 4 4 2方案物理拓扑 5 4 3方案逻辑拓扑 5 4 4提供集中的跨层次监测平台 6 4 5以业务为主线建立管理监测视图 6 4 6以高层管理者角度定制系统 7 5总结方案的效果总结方案的效果 9 1 1方案背景方案背景 在金融行业激烈的竞争中 广州人民银行不断拓展自己的新业务范围 同时也充分意识到业务服务的 高可靠性才是提高对整体服务满意度和忠诚度的核心竞争力 广州分行目前的IT管理自动化程度低 网管系统和业务系统监控是相对独立的 机房环境监控尚未形 成规模 维护人员疲于被动的应对多套管理工具 多种形式的告警 分离的故障和投诉 不仅大大降低了 已有网络资源的利用效率和维护人员的工作效率 也造成IT管理严重脱节于企业业务的整体管理 新业务 的扩展不断引起IT建设和维护成本的飞涨 随着广州分行网络规模的不断扩大 网络设备数量和各种应用 软件系统的渐渐增多 软件和硬件设备出现问题的情况也越来越多 网管人员现在处于一种 救火员 工 作方式 就是哪里出现问题 就去哪里救火解决问题 因此 建设IT系统综合管理平台实现对所有IT系统 和资源的24小时无人值守就成了当务之急 广州人行在本系统内经过多年发展已建立了大小二十多个业务系统 每个系统对行里来说说都是至观 重要的 2 2ITIT 管理需求管理需求 建立IT综合管理平台 实现横向对网络系统 业务系统和机房环境的运行状况实行监控 实现纵向对 系统管理员 部门领导人 行领导等决策层的多层次监控展现 2 1 性能监测的需求目标性能监测的需求目标 目前银行业采用的IT管理工具大都是以传统的IT元素监控为出发点 基于各自独立的派系式模式 即 使在同一网络的不同区域也是各自为政 甚至普遍存在着同一机房中同时使用多套分散监控工具的局面 更谈不上从企业业务的宏观角度去主动管理整体的IT架构 全新的IT管理理念认为 对IT的管理必须放弃对IT元素的独立管理 而必须作为一个整体统一的管理 只有这样 才能正确表达多个IT资源与业务的关系 实现着眼于业务角度的整合式管理 这次主要测试的内容有 监测网络使用情况 监测网络的通断 并及时报警 监测每个交换机的端口流量 CPU 内存的状态 监测服务器的CPU 磁盘 内存 IO及平均负载等信息 出现问题时 能及时报警 监测Sybase的每个库的运行状况 当出现问题时 能及报报警 监测Lotus状态 及每一个关键进程的活动状态 监测IIS状态 及每一个关键进程的活动状态 监测URL状态 及每一个关键进程的活动状态 将多个主机和应用 按业务的关系 模拟业务应用进行整体监测 广州人行IT系统现状 大约有30个网络节点 包括 思科 华为 北电 中软 主机节点约有40个 IBM HP 数据库有 SYBASE ORACLE MYSQL DB2 WEB应用 WEBLOGIC WEBSPHERE 业务应用 CICS DOMINO 自主研发产品及应用等 2 2 ITIT 管理的特殊挑战管理的特殊挑战 图表直观 指标全面 易于管理是人行广州分行IT系统管理平台建设的基本要求 直观是指各种图表能直接反映网络系统的结构 并直接发现运行过程中网络的故障点及存在问题 指标全面是指各种监控参数应尽可能详细 并能汇总罗列 易于管理是指尽可能提高图表显示效率 以及调整监控内容时的灵活性 1 实现集中统一的 IT 管理 对分行内部分散的多套业务系统 多套备份系统的运行状况监控都由 数据中心的 NetGain EM 统一采集 统一调度 统一告警 由统一的管理界面配置管理 显示状 态 生成数据报表等 同时又通过用户和角色管理 使得各个业务部门又拥有自己独立的用户账 号和管理范围和权限 2 以业务为线索直观管理视图 完全展现业务系统从整体到各个 IT 环节的运行状态 尤其是能够 在被监控的多个应用之间 应用和设备之间 多个设备之间建立有机的业务逻辑依赖关系 使得 所有被监控项目被贯穿为一个整体业务视图 在故障和隐患发生时能够直观的反映出受影响的业 务和应用 并能够快速定位故障点的位置 3 按照人行领导的管理需求 需要系统提供人行网络实时拓扑视图 视图间应能建立一定的连接关 系 通过几个视图的配合 可实现短时间内对广东内联网情况由面到点的详细了解 能实时了解 广州分行辖内 机关内的总体连通情况 能迅速定位网络的故障点 网络拓扑图的监控对象是广 州分行内联网中的各主要网络设备的连通情况 包括路由器 交换机和防火墙 4 全部客户端界面功能通过 WEB 浏览器实现 易操作易使用 5 对应用服务 网络设备 系统服务的监测参数定制灵活 通过图形界面 能够针对不同的容灾监 控环境 自动或者手动创建监控对象 配置监控对象的参数 包括主备机名称 轮询间隔 有 5 sec 15 sec 30 sec 1 minute 5 minute 15 minute 30 minute 和 1 hour 门限设置 告警 触发条件等 后台服务模块会按照采集周期 定时访问被监控节点 检测阀值 生成告警 并把 采集到的数据记录到历史数据库 以供用户查询和生成报表 6 告警的集中智能管理 告警的分类查询 合并压缩重复告警 告警过滤机制 告警映射机制 事件相关性分析 通过不能的告警模式 可以有针对性的对容灾系统中出现的问题做出快速而明 确的判断 7 提供灵活多样的故障处理机制 多种方式的告警自动通知 8 提供符合电信规范的告警处理机制 告警的确认 反确认 导出 评注 专家建议等 9 灵活的适应性 最大限度降低银行系统需求多变带来的风险 基于 NetGain EM 的系统方案采用 先进的面向对象体系结构 所有的管理对象都以树型结构的模型定义 使得管理系统具备高度灵 活性 当容灾系统中的网络设备 网络结构 业务结构发生变化和调整时 只需要在管理系统中 进行简单的拖拽操作 就能够完成相应的管理模型调整 整个管理系统能够不断自适应日后容灾 系统的调整和相关业务的调整 3 3方案实施预期效果综述方案实施预期效果综述 a 作为预集成的完整 OSS 解决方案 为广州人行提供的一体化 IT 管理方案不是多个软件产品的 复杂集成 而要成为一个一步到位的 实用的人性化管理工具 我们的方案区别传统方案的突出特定就是平台的完整性和一步到位 能够统一支撑各种网络设备 主机服务器 数据库 中间件 通用软件 专有设备及专有业务系统的完整管理平台 将广州网络的 小型计算机 PC 服务器 在各主机系统上运行的有 Lotus Notes SYBASE WEB 服务 FTP 服务 Email 服务等 以及网络管理 业务管理和办公自动化等一系列管理信息系统统一整合到一个网络管 理中 网络维护人员只需要通过一个的统一管理界面来 快速 形象 直观地查看网络状态 使系统维护 人员能够地作出正确的判断问题根源 b 根据需求目标 我们要把广州整个信息工作内容进行了一次全面的梳理 把依赖 IT 平台的所 有业务分为各类业务服务系统并建立各自不同的以 IT 设备为依赖的业务视图 这样当 IT 设备出现问 题 从业务视图中就可以直观的看到将会影响到哪些业务的正常运行 从而大大的降低了管理人员查 找排查问题的时间 进而将时间用在解决问题上 转变 IT 支持部门面向网络元素支持为面向业务 面 向客户服务 改被动性局部维护为主动性宏观管理 重视预警机制和智能分析 致力于提高企业整体 运营品质 提高资源的利用率 c 并且在实时监控方面 能够提前发现网络中存在的潜在问题 提前处理问题 使故障率大大 降低 网络故障时间大大减少 用户的投诉率明显减少 能够在出现故障时间迅速找到问题根源 减 少了运营部门的繁重工作量 提高了维护水平 提高了维护人员的技术水平 提高了广州业务服务质 量 使客户便被动为主动 降低了管理风险 也降低了维护成本 4 4NetGainNetGain EMEM 方案方案 4 1 方案说明方案说明 银行的 IT 建设始终高度的发展速度 要求其管理平台采用国际上先进的技术 提高系统性能 又要 保证系统的可靠性和实用性 作为业务系统的可靠性是服务质量的第一要素 本方案推荐的 NetGain Systems 公司的 NetGain Enterprise Manager 系统是集设备 网络 应用和服务 管理功能于一体的综合运行支撑系统 其一体化的平台架构符合下一代综合 IT 架构管理的发展趋势 它 的设计遵循 FCAPS TOM eTOM NGOSS 等国际规范 及大型软件系统设计所必须满足的模块化 分 布式以及多线程的基本要求 支持面向服务的网络系统管理模式 能够使当前网络系统管理功能方便地扩 展到面向服务的服务流程管理和服务级别管理 并能遵循业界管理标准 NetGain EM 突破传统网管工具以 IT 技术元素为导向的管理模式 提出 IT 管理为业务管理服务的理 念 符合 以管理为导向 统一平台 集中管理 数据共享 的 IT 管理性趋势 具有较高前瞻性 NetGain EM 是新加坡网利系统有限公司提供的一款即插即用的硬件 IT 架构管理设备 以业务视图为 主线 通过对 IT 架构的各个层次全面监测 和建立业务管理模型 提供管理者从宏观到微观 从业务逻 辑层到设备技术层的整体运行状态 并包含了金融系统运维管理平台所应具备的性能管理 故障管理 报 表管理 拓朴管理 资源管理等规范的功能模块 4 2 方案物理拓扑方案物理拓扑 为了监测广州人行内部网络及内部应用软件 NetGain Enterprise Manager 设备部署在广州人行的内部 网络系统中 交换机 路由器 交换机 核心交换机 交换机 交换机 人行内部应用服务器 人行业务应用服务器 地市人行应用服务器 各商业银行应用服务器 NetGain Enterprise Manager 4 3 方案逻辑拓扑方案逻辑拓扑 在人民人行项目中 Netgain EM 通过 agent JDBC SNMP 三种方式对服务器及应用程序进行监测 4 4 提供集中的跨层次监测平台提供集中的跨层次监测平台 NetGain EM 突破传统IT 网管概念 高效集成了传统的网络管理 系统管理 软件应用管理 职能和 业务监测 将网络 主机系统 应用等 统一作为系统管理对象 NetGain EM 统一提供覆盖各种网络设 备 主机服务器 数据库 中间件 通用软件 专有设备及专有业务系统的各种监测器 监测器的种类和 覆盖范围还在不断增长和升级 用户可以为每一个网元同时创建上述各个层面的多个监测器 并能够在不 同的监测之间 从不同管理角度建立任意的相关性和依赖关系 NetGain EM 通过引入SLA 规则和业务视图定义 将不同类型的监测器获得的管理数据进行多角度多 层面的综合分析 汇总出企业关心的整体运行状况 众多单体监测器监测到的各种微观管理信息将被汇总 映射为对服务和业务造成的影响和损失 同时为用户提供实用的配置工具 能够从业务管理要求出发 主 动制定各种监测和管理的规则和指标 并最终落实到不同的监测器上 1 针对广州人民人行的网络情况 NetGain EM 提供基于 SNMP 和 Agent 两种方式主动轮询被监测对象 的性能和状态数据 2 本项目中主要为人民人行广州分行实现对下列对象的监测 服务器和网络设备性能参数监测服务器和网络设备性能参数监测 DominoDomino 监测器监测器 SQLSQL ServerServer 监测器监测器 IISIIS 监测器监测器 WEBLOGICWEBLOGIC 监测器监测器 SybaseSybase 监测器监测器 URLURL 监测器监测器 4 5 以业务为主线建立管理监测视图以业务为主线建立管理监测视图 根据人民人行广州分行的网络情况和目前 NetGain 能监测的网络设备 服务器 应用软件 我们 根据 NetGain Enterprise Manager 提供的业务管理视图功能为人民人行广州分行建立了八个业务监 测视图 OA 系统 网站系统 金融机构邮件系统 外汇交易 结算业务 内联网络 帐户管理 服 务器状态 OA 系统是分行内部办公系统 此业务视图依赖于 Domino 系统运行状态 我们建立的 OA 系统包 含了所有与 OA 有关的关键监测器 一旦有一个监测器异常 通过 OA 系统这边都可以了解到 OA 系统 的影响程度 金融机构邮件系统是广东人民人行内部 20 个地市的内部交流系统 此业务视图监测邮件服务器 的系统状态和邮件应用程序的运行 保障人行内部沟通系统的稳定运行 内联网络是广东省 20 个地市和分行的连接通路 有 20 个地市分行分别有电信和盈通 备用 两 条线路 建立此视图后可以很直观的掌握内联网络的时实情况 外汇交易和结算业务 是人行重要的业务系统 目前在外网主要监测其依赖的网络设备 4 6 以高层管理者角度定制系统以高层管理者角度定制系统 在本次项目实施中 将根据人行的高层对网络拓扑视图的管理需要 我们通过 Netgain EM 系统中灵 活的自定义拓扑视图为人民人行提供了三张拓扑视图 广东辖区城市网 机关外部内联网络图 分行机关 内联网络图 通过三个视图的配合 可实现短时间内对广东内联网情况由面到点的详细了解 例如点击广 东辖区城市网图中广州分行图标 可进入机关外部内联网络图 点击分行机关外联网络图中广州分行图标 可进入机关内部内联网络图 根据客户的网络分布状态 我们通过系统提供的上传图片和修改背景可以达 到更形象直观的效果 如下图中的广东地图 为方便高层主管能够快速调出所需页面 获得最直观的使用体验 我们在 NetGain 管理主页中 定制 相关快捷视图 在有包含关系的拓扑视图中建立拓