上投摩根基金案例故事060802.doc

NetGainNetGain SystemsSystems 上投摩根上投摩根富林明富林明基金基金管理有限管理有限公司公司 IT 管理方案故事管理方案故事 新加坡网利系统有限责任公司 2020 年年2 月月 本文档所包含的信息是受 NetGain SystEnterprise Managers公司保护和保密的 NetGain SystEnterprise Managers公司将本文档呈交与上投摩根基金公司 只是用于上投摩根基金公司有关雇 员或专业顾问审阅考虑服务方案之目的 在未事先得到 NetGain SystEnterprise Managers公司书面 同意之前 本文档全部或部份内容不得用于其他任何用途或交与第三方 NetGainNetGain SystemsSystems 目目 录录 1方案背景方案背景 3 2IT 管理需求管理需求 3 2 1性能监控的需求目标 3 2 2管理功能的需求目标 4 2 3上投摩根基金 IT 管理中的特殊挑战 4 3NETGAIN ENTERPRISE MANAGER 方案方案 5 3 1方案说明 5 3 2方案物理拓扑 5 3 3方案逻辑拓扑 5 3 4提供集中的跨层次监控平台 6 3 5以业务为主线建立管理监控视图 7 3 6灵活的适应性和可定制性 8 4方案特色及优势方案特色及优势 8 5项目实施方案项目实施方案 9 5 1路由策略 9 5 2实施步骤和内容 9 6用户反馈用户反馈 9 NetGainNetGain SystemsSystems 1 1方案背景方案背景 上投摩根富林明基金管理有限公司 China International Fund ManagEnterprise Managerent Co Ltd 由上 海国际信托投资有限公司 Shanghai International Trust Investment Co Ltd 和摩根富林明资产管理 英国 有限公司 J P Morgan Asset ManagEnterprise Managerent UK Limited 共同组建 注册资本高达 1 5 亿元人 民币 为国内注册资本最大的基金管理公司之一 其中上海国际信托投资有限公司持股 51 摩根富林明 资产管理 英国 有限公司持股 49 上投摩根富林明基金不断发展的基金交易业务越来越依赖 IT 网络系统 同时现代化办公和规范化管 理也越来越依赖 IT 管理系统 上投摩根富林明基金管理有限公司做为一家全国基金发行公司 IT 网络 和系统的稳定性 可靠性与可管理性直接影响到业务系统的稳定性运行 如果没有有效的手段和工具保 障 IT 架构的健康稳定 会成为制约业务平稳发展的主要瓶颈 目前上投摩根基金公司的网络和业务系统建设已完成 如何通过一个集中统一的 IT 架构管理系统有 效的保障业务运行 已经正成为上投摩根基金公司增强潜在竞争力和可持续发展能力的必然需求 2 2ITIT 管理需求管理需求 2 1 性能监控的需求目标性能监控的需求目标 上投摩根基金公司的 IT 系统主要包括基金交易业务系统网络 OA 管理系统网络 行情咨询发布系统 网络三个部分 其中基金交易系统的运维压力最大 从网络 主机 中间件 数据库到业务应用的任何环节出现故障 都会直接影响公司的正常交易业务 造成公司损失 OA 系统主要包括公司的邮件管理系统 文件管理系 统 业务管理系统 财务系统等 其所依赖的 IT 架构的可用性将影响公司内部的正常运作流程 行情和 咨询发布系统是否正常工作将关系到公司的业务策略是否及时准确的传达给公众 同时也关系到公司的形 象 由于基金业务的交易具有时间段 主要集中在早 9 00 11 00 下午 13 00 15 30 在这段时间范围内 交易系统是决对不能出现问题 否则 带来的严重后果是无法估计的 为了公司 IT 环境的稳定 摩根投入了大量的人力 每天都由各主要负责人 手工测试网络 系统 业务的情况 并手工填写记录单 在用户 IT 系统的三大业务系统里 基金交易业务系统网络 主要使用的是 Cisco 网络设备和 F5 负载均衡设备 IBM RS6000 小型机 AIX 操作系统 在 AIX 上运行 Oracle Tuxedo 和 Weblogic 及自有的业务应用系统 并通过 HACMP 实现灾备系统 OA 管理系统网络 主要是用普通 PC 服务器和 Cisco 网络设备 运行 Oracle Tuxedo Weblogic NOTES 和客户服务 CALLCENTER 系统 行情和咨询发布系统网络 主要使用 Cisco 网络设备 IBM RS6000 小型机 AIX 操作系统 运 行 Oracle Tuxedo Weblogic Apache 和行情系统 并通过 HACMP 实现灾备系统 针针对对上上投投摩摩根根基基金金公公司司 I IT T 系系统统 保保证证其其正正常常运运行行的的关关键键又又有有如如下下几几点点 防火墙 PIX NetScreen 路由器 Cisco 系列 NetGainNetGain SystemsSystems 交换机 Cisco 系列 服务器 IBM AIX Windows 2000 中间件 Tuxedo Weblogic Websphere 邮件系统 Domino Exchange 数据库 Oracle MS SQL Web 服务器 IIS Apache 2 2 管理功能的需求目标管理功能的需求目标 基于对上投摩根基金公司 IT 架构管理需求的分析 认为上投摩根基金公司 IT 架构管理系统的目标 是建立一套满足于公司自身 IT 业务保障的需求 同时为网络及系统管理提供方便快捷的管理工具和手段 的全方位 IT 架构管理系统 上投摩根基金公司 IT 架构管理系统目标为 消除故障隐患 提高管理水平 快速定位故障 及时恢复服务 积累维护经验 消除人员风险 灵活定制管理策略与规则 集中统一的管理平台 2 3 上投摩根基金上投摩根基金 ITIT 管理中的特殊挑战管理中的特殊挑战 由于基金业务的交易具有时间段 主要集中在早 9 00 11 00 下午 13 00 15 30 在这段时间范围内 交易系统是决对不能出现问题 上投摩根网管系统中 有如下几点在实施过程中 对 NetGain Enterprise Manager 极具特殊挑战性 1 全面监控全面监控 需要用 NetGain Enterprise Manager 监控用户的办公网和基金交易网 但由于用户的 这两个网段 是物理隔离 如何使用一个 NetGain Enterprise Manager 设备监控两个物理隔离网络 而且不会造成这两个网络联通 是项目实施首要难点 2 高度可靠性高度可靠性 由于用户属于金融行业 对数据的敏感性及 NetGain Enterprise Manager 的代理程 序对服务器的稳定性的要求都是很高的 3 高度可用性高度可用性 最初用户对 HACMP 的监控功能表示比较疑惑 因为 IBM 公司也没有十分成熟 对 HACMP 的监控产品 4 以业务为主线的全面整合监控管理以业务为主线的全面整合监控管理 如何将用户原来分散管理方式 变成为通过业务角度 统 筹管理 IT 系统的运行情况 是本次项目中的最大难题 5 高易用性高易用性 用户在原手工方式监控的工作中 积累了一些小的监控脚本 如何将这些脚本集成 在 NetGain Enterprise Manager 中 也是用户比较关心的 6 6 高高度度灵灵活活性性 为保护上投摩根基金公司不同时期的各项投资 同时保持统一集中的管理方式 要求 IT 架构管理系统能够与各种第三方软件和工具无缝集成 7 7 个个性性化化管管理理目目标标 需要针对上投摩根基金公司自主的关键业务和自身特有的业务模式 实现 个性化的管理 8 8 先先进进性性 可可持持续续性性 可可扩扩展展性性 IT 架构管理系统必须能够适应上投摩根基金公司信息化建设 的步伐 要求综合 IT 架构管理系统至少能够适应三年内或更长时间的网络扩展和业务扩展 即 系统必须具备很好的扩展性 能够兼容并集成未来的管理规模和管理内容 NetGainNetGain SystemsSystems 3 3NetGainNetGain EnterpriseEnterprise ManagerManager 解决方案解决方案 3 1 方案说明方案说明 经过一段时间的产品试用 对比分析 上投摩根认为新加坡网利系统公司拥有先进成熟的网管技术 完整的解决方案 以及强大的服务能力 最终确定使用 NetGain Enterprise Manager 作为上投摩根的网管系 统 在成功实施后 获得高于最初设想效果 NetGain Enterprise Manager 是新加坡网利系统有限公司提供的一款即插即用的硬件 IT 架构管理设备 以业务视图为主线 通过对 IT 架构的各个层次全面监控 建立业务管理模型 提供管理者从宏观到微观 从业务逻辑层到设备技术层的整体运行状态 并包含了电信运维管理平台所应具备的性能管理 故障管理 报表管理 拓朴管理 资源管理等规范的功能模块 3 2 方案物理拓扑方案物理拓扑 NetGain Enterprise Manager 要实现对全网的统一管理 理论上可以将 NetGain Enterprise Manager 安 装在骨干网 OA 子网 业务子网或者 Web 发布子网的任何位置 只要在路由和防火墙上配置相应的策略 NetGain Enterprise Manager 可以从业务子网和 Web 子网的被监控设备上采集数据 出于安全考虑 OA 与交易两个网段需要进行隔离 建议将 NetGain Enterprise Manager 部署在骨干网 通过 NetGain Enterprise Manager 的两个网卡分别接入两个网段进行分别监控 同时限制这两个网卡的通讯 来保证安全策略 下图示意将 NetGain Enterprise Manager 部署在骨干网 分别接入两个网段 如下图所示 NetGainNetGain SystemsSystems 3 3 方案逻辑拓扑方案逻辑拓扑 上投摩根基金公司需要一个完整的网络综合管理方案 将不同设备的管理需求整合为一个整体进行 统一集成管理 需要对中心机房的多个系统和业务进行统一集中管理 必须从纵向 多套第 三方监控和 管理工具集成 和横向 网络 系统 应用的统一管理 两个方面全面实现统一管理和数据共享 事事件件集集成成与与过过滤滤 数数据据监监控控 采采集集 N Ne et tg ga ai in n E EM M 系系统统环环境境 C CP PU U M Me em mo or ry y S Sw wa ap p I I O O L Lo oa ad dA Av ve e D Di is sk k A AI IX X E Er rr ro oL Lo og g H Ha ac cm mp p l lo og g f fi il le e O Or ra ac cl le e l lo og g f fi il le e D DB B S St ta at tu us s S Se es ss si io on n N Nu um mb be er r T Ta ab bl le e S Sp pa ac ce e L Li is st te en ne er r S St ta at tu us s K Ke ey y P Pr ro oc ce es ss se es s M Me em mo or ry y A Al ll lo oc c O Or ra ac cl le e 数数据据库库 N Ne et tG Ga ai in n A Ag ge en nt tH HA A S SN NM MP P A Ag ge en nt t H HA AC CM MP P C Cl lu us st te er r H HA AC CM MP P N No od de e S St ta at tu us s H HA AC CM MP P I In nt te er rf fa ac ce e H HA AC CM MP P R Rs so ou ur rc ce eG Gr ro ou up p G GM MD D D De ev vi ic ce e S St ta at tu us s H HA AC CM MP P 容容灾灾系系统统 实时状态 历史数据 告警事件 管管理理人人员员监监控控界界面面 每每个个O OS S分分区区 3 4 提供集中的跨层次监控平台提供集中的跨层次监控平台 1 NetGain Enterprise Manager 提供基于 SNMP 和 Agent 两种方式主动轮询被监控对象的性能和状 态数据 2 本项目中为上投摩根实现对下列对象的监控 监控对象监控对象监控内容监控内容 AIX磁盘容量 CPU 使用率 VM Status swap 空间 AIX errolog OracleOracle 数据库状态 Oracle 表空间状况 Oracle Listener 监控 Oracle Process MEnterprise Managerory 监控 Oracle Process 监控 Oracle 监听端口 WebLogicJdbcConnection Pool JVM Servlet webLogic 监听端口 WebLocgic 日志监控 WebLogice 进程 TuxedoTuxedo 端口监控 BBL 进程 WSL 进程 ApacheCPU 使用率 繁忙线程数 每秒钟请求数 通过 NetGain Enterprise Manager 业务视图模块 实现了以业务为线索直观管理视图 完全展现 上投摩根 IT 系统从整体到各个 IT 环节的运行状态 尤其是能够在被监控的多个应用之间 应用和设 备之间 多个设备之间建立有机的业务逻辑依赖关系 使得所有被监控项目被贯穿为一个整体业务视 图 在故障和隐患发生时能够直观的反映出受影响的业务和应用 并能够快速定位故障点的位置 NetGainNetGain SystemsSystems Domino 财务应用服务器 文件服务器 应用服务器 DB Tuxedo Weblogic 应用服务器 Web服务器 应用服务器 Web服务器 Web服务器 应用服务器 应用服务器 应用服务器 Web服务器 基金交易业务子网 OA管理系统子网 Web发布子网 NetGain EM 在实施过程中 将用户原手工监控对指定 Oracle 数据库指定用户登录情况统计的脚本 略加修改 加入 NetGain Enterprise Manager 监控器 达到了很好的监控效果 3 5 以业务为主线建立管理监控视图以业务为主线建立管理监控视图 NetGain Enterprise Manager 通过引入 SLA 规则和业务视图的模型定义 将不同类型的监控器和采 集器获得的管理数据进行多角度多层面的综合分析 汇总出企业关心的各项业务的健康性和可用性 众 多单体监控器监控到的各种微观性能将被汇总 映射为对宏观服务和业务造成的影响和损失 同时为用 户提供实用的配置工具 能够从业务管理要求出发 主动制定各种监控和管理的规则和指标 并最终落 实到不同层次的监控器和采集器规则上 上投摩根公司的业务拓扑图 是由用户自行绘制 为了便于理解 网利公司加入了一些简单的注解 如下图 上投摩根基金公司网络中的关键业务都依赖于 IT 基础 基金交易业务系统网络 OA 管理系统网络 行情咨询发布系统网络 如果使用传统的 IT 架构管理产品 要管理这个复杂的 IT 网络系统 需要分别 用户业 务名称 用户业 务组成 元素 NetGainNetGain SystemsSystems 管理防火墙 路由器 文件服务 数据库服务 应用服务和 WEB 服务 同时要管理每台服务器的操作系 统性能 磁盘空间等性能 但这就出现了一个 IT 管理和和业务脱节的问题 比如 当 IT 架构管理员收 到某台服务器磁盘满的告警时 无法准确判断出对那个业务有影响 更无法确定事件的严重程度 但此 时可能企业的关键业务和数据库已经瘫痪 同样 当管理员收到业务不通的投诉时 完全依靠个人经验 判断该业务都和哪些网络性能相关 和哪些应用相关 和哪些服务器相关 再分别检查各种可能的故障 如果这个问题从业务角度出发进行管理 只需要分别建立每个业务系统的管理视图 这个视图将每 个业务与对其有影响的上述 IT 元素对应起来 IT 架构管理员就能够从业务角度确定故障的紧急程度和 损失 当网络中的任意一台服务器出现问题时 这个服务器监测点本身和所有受影响的业务系视图统都 会报警 管理员能够立即发现那个设备的哪项性能出现问题 会对哪些业务造成什么影响 以便及时通 知业务部门和客户 避免损失 如上图所示 用户将三项业务 绘制出拓扑视图 通过对业务组成元素 的监控 达到保障业务健康的目的 3 6 灵活的适应性和可定制性灵活的适应性和可定制性 NetGain Enterprise Manager 最大限度降低 IT 架构管理需求多变带来的风险 能够为上投摩根基金 公司提供源代码级的定制服务和技术支持 使得我们的客户个性化定制非常灵活 按照上投摩根基金公司 的需求进行快速的响应和定制开发 与第三方产品无缝集成 基于 NetGain Enterprise Manager 的系统方案采用先进的面向对象体系结构 所有的管理对象都以 树型结构的模型定义 使得管理系统具备高度灵活性 通过图形界面 能够针对不同的容灾监控环境 自动或者手动创建监控对象 配置监控对象的参数 后台服务模块会按照采集周期 定时访问被监控节点 监测阀值 生成告警 并把采集到的数据记录到历史数据库 供用户查询和生成报表 当上投摩根基金公 司的网络设备 网络结构 业务结构发生变化和调整时 只需要在管理系统中进行简单的拖拽操作 就 能够完成相应的管理模型调整 整个管理系统能够不断自适应日后上投摩根基金公司的网络调整和业务 调整 4 4方案特色及优势方案特色及优势 1 即插即用的硬件设备即插即用的硬件设备 无需额外采购服务器 数据库无需额外采购服务器 数据库 NetGain Enterprise Manager 不仅突破传统对 IT 元素划分层次的管理理念 而且突破了传统 IT 管 理项目的复杂实施与培训 将完整的 IT 架构管理方案与高效的刀片服务器相集成 实现完全意义的即插 即用 最大限度的缩短企业实现 IT 综合管理的采购 实施 培训的周期 降低时间和人员成本 无需额外的服务器采购 无需额外的第三方数据库 自动快速的配置过程 最大限度的降低培训成本和使用风险 2 2 高性能的数据处理机制高性能的数据处理机制 NetGain Enterprise Manager 采用高效的内部数据处理机制和最先进的内存驻留技术 有效解决并发访 问对系统造成的负载 基于完整统一的平台架构 各个内部模块之间紧密结合 实现真正意义的数据共享 大大减少内部数据的复杂交换 提高处理效率 3 自定义拓朴自定义拓朴 除提供自动生成的 IP 拓扑外 还提供手工绘制和修改拓扑链路的图形界面工具 通过定义每个链路 的逻辑属性和物理属性 能够在拓扑图上以不同颜色实时显示链路逻辑和物理通断状态 4 即插即用 快速自动配置即插即用 快速自动配置 NetGainNetGain SystemsSystems 对上投摩根 IT 系统中的网络设备 服务器等设备能够通过扫描自动发现并创建监控对象 能够自动 扫描并创建服务器性能 HACMP 状态 端口流量等大部分监控项目 免去大量手工配置的繁杂 5 告警的集中智能管理告警的集中智能管理 告警的分类查询 合并压缩重复告警 告警过滤机制 告警映射机制 事件相关性分析 通过不发告 警模式 可以有针对性的对容灾系统中出现的问题做出快速而明确的判断 5 5项目实施方案项目实施方案 5 1 路由策略路由策略 如果 NetGain Enterprise Manager 与被管理设备不在同一个网段 则需要路由和防火墙为 NetGain Enterprise Manager 所在 IP 开放相应端口权限 需要开放 NetGain Enterprise Manager 如下端口 1 Web 访问端口 2 与