人社智慧运维综合管理系统解决方案

XX省人社厅智慧运维综合管理系统解决方案第页XX省人社厅智慧运维综合管理系统解决方案XX公司 目录 目录 21项目综述 51.1省人社信息化现状 51.2省人社IT运维现状 52省人社运维整体需求分析 73省人社智慧运维系统解决方案 83.1系统包含模块 83.2系统数据中心可视化 84数据中心可视化方案 104.1管理思路 104.2方案特点 104.3详细方案 104.3.1地理位置可视化 104.3.2数据中心可视化 114.3.3监控数据可视化 164.3.4IT架构可视化 195北塔BTSO智慧运维解决方案 225.1管理思路 225.2方案特点 225.2.1落实等级化管理 225.2.2落实管理经验积累 235.2.3从数据挖掘实现隐患分析 245.2.4支持持续管理建设 265.2.5满足私有云平台运维需求 265.3产品架构 275.4方案详细介绍 285.4.1智能拓扑 285.4.2智能基线 295.4.3智能运维引擎 305.4.4系统智能运维 315.4.5故障管理 335.4.6报表与分析 365.4.7系统类管理 385.4.8网络管理 505.4.9专项运维 536北塔BTSM运维流程管理 566.1管理思路 566.1.1高效的自动流程管理 566.1.2统一平台进行管控 566.1.3提高知识积累能力 566.2运维流程管理BTSM系统特点 566.2.1将订制化流程产品平滑升级到产品化流程产品 566.2.2解决现有工具的不灵活、易用性、及时性问题 576.3功能模块介绍 586.4提供标准化的基于ITILV3的实施方案 617应用性能监控与管理 637.1管理思路 637.2方案特点 637.2.1开放性 637.2.2可扩展性 637.2.3可靠性 647.2.4高效性 647.2.5安全性 647.2.6技术的成熟性 647.2.7先进性 647.2.8可管理性 647.3产品架构 657.4方案详细介绍 667.4.1面向真实用户体验的应用性能管理 667.4.2端到端的应用性能管理 667.4.3防范于未然的预警、告警机制 677.4.4增强的关键事务管理 687.4.5统一的业务流程视图 697.4.6BusinessTransaction实现自定义业务参数的监控 707.4.7有据可依的IT运营决策分析 71项目综述1.1省人社信息化现状当前，省人社厅信息化工作已经取得了很大的成绩，但同时也存在一些问题。IT基础设施方面，具有涉及广，品牌复杂等特点，这给全面、统一管理带来了重大挑战。IT基础设施设备存在利旧情况，有些符合下线条件设备超期服役，设备故障、不稳定因素日渐增多，直接影响上层业务系统稳定运行。信息化的管理、规划部门和实际执行运维部门工作职能分离，但管理规划需要真实原始的日常运维数据才能进行科学决策。1.2省人社IT运维现状2012年至今，省人社选用了北塔IT综合运维管理平台BTIM对IT基础设施进行了管理，逐步建立了针对网络设备、主机、数据库、应用等基础设施的综合监控体系，实现了设备性能统一监控、告警事件统一处理、运维报表统一呈现等管理目标，初步摆脱了信息化管理部门完全被动的“救火队”局面。运维监控手段有了实质性提高。但随着业务规模不断扩大，现有运维工作已经不能满足日常管理需求，主要问题总结如下：运维工作缺乏针对性，没能完全按照省人社专有的IT环境进行定制运维，导致整体运维工作未能达到预期目标。运维系统如何适应未来基于私有云平台的运维需求。应用程序在运行过程中经常会遇到响应缓慢、僵死、崩溃的问题，无法快速、准确定位系统故障原因，问题排查较为繁琐。信息化管理部门缺少运维大数据积累，规划决策工作缺乏科学依据。对于日常的数据中心上下架的信息确认与查询，相关的容量统计缺乏直观、快速的图示已部署的数据中心环境监控系统、网络监控系统，主机监控系统产生的监控信息没有有效进行整合，要在分散的操作界面上进行分析查看，不利日常的故障处理与分析。资产配置信息（对象）与监控信息（性能）各自孤立，无法形成一个数据中心的全面信息整体，经常由于IT运维的信息需要，穿行于不同的IT管理工具之间。省人社运维整体需求分析运维系统应进一步增强自动化、智能化运维能力，能够自动分析省人社IT运行健康度，并基于真实情况，及时提供全面的运维异常数据预警和分析。运维系统要兼容未来私有云模式的运维体系，满足云运维的特色运维需求，从原来的传统物理设备管理，转变为全面的云平台资源分析、运行展现、性能分析、趋势预判等层面的一体化综合管理体系。基于ITIL的标准形成一套结合服务台，知识库，CMDB，事件管理，问题管理一整套的流程平台，可以和监控系统做无缝联接，对日常事件直接触发工单运维，提高工作效率，明确管理职责，规范管理流程。通过对业务系统的监控，结合现有监控系统构建集中式运行监控和故障快速定位系统，通过系统联动，可以及时、准确、全面反映与掌握业务系统的运行状态，保障各业务系统的正常运行及良好的用户体验。运维系统要为省人社信息化管理部门提供运维大数据，数据要求颗粒度细致，未被加工。可以为管理部门提供用于规划决策方面工作的数据依据，同时也可以对运维工作质量进行客观评价。实现基于三维环境对数据中心、机柜和各类设备的管理功能，构建数据中心环境、设备和管理信息的可视化平台，集成现有的数据中心环境监控系统、网络监控系统和主机监控系统，实现所有资产对象的管理及相关监控信息整合展示，让相关管理人员清晰直观的掌握IT运营中的有效信息，实现透明化与可视化的管理。可视化管理能让IT的资产配置信息和运行状况更加直观，使复杂的IT信息变得易于表达、理解和传播，从而消除IT运营过程中不同角色之间的认知偏差和监管盲区，实现管理的透明化，更进而有效提升资产管理与监控管理的效率，真正实现一个立体式、可视化的新一代数据中心运行管理系统。省人社智慧运维系统解决方案3.1系统包含模块智慧运维系统以北塔BTSO智慧运维系统为核心，整合北塔BTSM流程管理系统、应用性能管理系统，并利用3D图形技术将系统整体展现出来。3.2系统数据中心可视化以3D形式展现数据中心的建筑机房布局、基础设施设备及IT设备设备，可与IT监控管理系统集成，实现3D场景中IT设备状态、性能及告警信息，可与机房动环系统(包括：环境监控、电力监控)、楼宇自控、安防监控（包括门禁监控、视频监控)、消防监控集成，展示冷冻机、空调、UPS、PDU、视频摄像头、温湿度探头、烟感等设备的监控告警信息。数据中心可视化方案管理思路针对数据中心的日常运维管理，本项目能够充分利用最新的计算机图形技术，基于3D虚拟现实的最佳表现形式建立IT管理的可视化平台。可视化平台是统一IT管理系统的数据展现平台，也是重要的信息交互和获取界面，更是IT运维管理走向可视化管理的重要基础。方案特点系统的实现参考国际标杆并结合现状，采用先进可靠的设备和技术，确保系统的先进性和成熟性，保证投资的有效性和延续性。系统达到企业级的安全标准，提供良好的安全可靠性策略，支持多种安全可靠性技术手段，制定严格的安全可靠性管理措施。系统基于国内外业界开放式标准，统一规划，为未来的业务发展奠定基础。系统具备灵活的可扩展性，具备方便地适应业务需求的变化、迅速地支持新业务的能力。系统易于使用与维护，具备良好的用户操作界面、人性化的管理工具和完备的帮助信息。详细方案地理位置可视化本项目主要实现GoogleEarth式的地球立体全景展示，依据真实的经纬度信息展示多个数据中心节点的地理位置分布，并结合直观互动的3D可视化交互技术，通过点击“数据中心机房场景效果图”进入该机房的3D虚拟仿真管理场景。数据中心可视化以3D形式展现数据中心机房所在建筑、机房布局、设备及网络链路，实现3D场景中设备及网络链路的可视化管理。实现以机柜为单位的数据中心机房容量管理，对于机柜的空间、电力和承重等容量信息进行统计和展现，并与主机监控、网管监控和日志监控系统集成，实现对设备性能、告警的实时监控。机柜内设备3D可视化：机柜内的各类IT设备，如机架式服务器，存储，网络设备，安全设备等；设备和线缆的3D可视化：主要设备的前后面板并独立表现其端口；机房内部的网络线缆（基础、端口跳线）和供电线路。资产可视化可采用Excel导入方式，将各个机柜及机柜内设备的基本配置信息纳入可视化平台，通过任何物理可见的设备就可查找到相关的配置信息，通过任何一条配置信息也可以查找到相关设备，完成资产配置可视化。配线可视化可采用自管理或集成其它CMDB或资源管理系统的方式，将各个机柜内设备的连接信息信息纳入可视化平台，通过任何物理可见的设备就可以查找到相关的链路信息，通过任何一条链路信息也可以查找到相关设备端口信息，完成链路配置可视化。按设备连接查看：查看一个设备的所有对外的网络连接，包括经过的每一个中间设备的每一个端口信息。容量可视化将数据中心机房机房的机柜剩余空间、机房的各个区域的承重情况、电力负荷等以图景形式展现，以便数据中心机房应用运维人员快速掌握机房情况。支持对机房容量的可视化管理，包括机位、U位、承重与功耗等，对相关的容量数据需要按图形进行可视化展现，并能进行容量统计，包括总容量与已用容量。空间统计及查询：在3D可视化环境中支持对机房中所有机柜的连续可用空间分布查询，统计结果能够在3D环境中以柱状图方式直观表现。演示可视化在物理环境仿真再现的基础上，提供灵活强大的可视化展示功能，可以实现数据中心机房基础设施多样化的展示需求，如逻辑关系表达、模拟故障、PPT整合及自动巡检及演示路线定制等。自定义动画：系统要提供非常易用的动画制作功能，用户可以自定义生成流畅生动的演示动画，可用于数据中心机房介绍、巡检路线示意和应急预案展示等日常运维工作。交互式演示汇报：系统要支持用户将多段动画嵌入PPT演示文档中，实现PPT与三维仿真场景的双向互动，以丰富生动的手段实现最佳演示汇报效果。监控数据可视化数据中心现有多个监控子系统，包括综合网管监控、电力监控、动环监控、楼宇自控、安防监控、消防监控等。所有监控系统协同运行，相互补充，共同监控着数据中心的各项指标，为数据中心全天候的安全运行保驾护航。但是各个监控子系统之间相互独立，在发生故障时无法有效综合各方面的告警情况，帮助故障的分析处理，大大降低故障排除效率，所以需要一个统一的监控平台对多个监控子系统进行良好整合集成。各类监控数据可以用图层的方式进行叠加显示。网管监控可视化网管监控系统集成展示：与网管监控系统进行集成，能在设备上实时展示设备的告警信息，能查看设备CPU、内存等使用信息。设备性能监控展示：设备性能监控信息展示是指通过3D视图的展示设备监控到的性能数据信息。设备告警监控展示：机房设备告警信息展示要求机房的所有告警信息在机房3D展示界面上实时展示。动环监控可视化动环监控系统集成展示：与动环监控系统进行集成，能展示温湿度监测点位置、漏水监测点位置，能实时查看温湿度、漏水监测等动环数据，并支持以云图形式表达机房温度分布状况，能实时查看空调设备运行数据，能实时显示动环监控系统告警信息。包括供电设备的电压、电流、耗电量等情况，能实时显示电力系统设备告警信息。温湿度监控：集成动环监控工具里的温湿度感应器的监控数据，在可视化环境中采用小面板的形式展示每个温湿度感应器的湿度、湿度、运行状态等监控数据和告警信息。在可视化环境中以云图的方式来呈现整个机房内温湿度环境信息。漏水系统监控：集成动环监控工具里的漏水监控的告警监控数据，在可视化环境中配置好空调漏水线的线路位置，当某个位置发生漏水告警时，告警提示。IT架构可视化在应用全景图（IT逻辑宇宙）的基础上，通过层次模型，提供自应用系统至IT基础设施的交互式端到端IT管理视图，直观展示组件配置信息以及关联关系、IT组件与基础设施的映射关系，生成基础设施定位视图，并通过和监控数据基础，形成整个动态监控的IT逻辑宇宙。业务交易可视化以业务交易流为主线，梳理应用系统对外的IT服务提供渠道，以及支撑应用系统业务运转的后台接口系统，形成应用系统业务的交易全景图（IT逻辑宇宙），识别在全景图（IT逻辑宇宙）中各条线的关键业务系统，形成系统间的影响分析框架，绘制成最上层的IT逻辑宇宙。应用关系可视化业务关系视图能够直观反映应用系统模块间，以及跨应用系统的交易调用路径，清晰区分交易上游应用和下游应用。当交易出现问题时，能够自上游至下游，跨系统、跨模块的定位故障应用和影响范围。当应用系统或模块运行出现问题时，能够自下游至上游清晰的圈定潜在的影响范围和业务交易类型。业务关系视图既可以通过在线编辑平台定义，也可以由数据驱动自动生成，根据运维管理需求，既可以显示大而全的应用系统全景，又可根据管理范围和各类实际需求，选择关注的部分应用系统，实现重点突出的个性化应用系统交互视图，无需任何开发工作，简单拖拽即可实现视图对象、布局和样式的更新。监控数据可视化可视化IT监控面向业务和IT，从众多个应用系统中划分出应用系统运维分析的系统边界，分析应用系统所支持的外围接入渠道、上下游支撑应用，以及应用系统系统组件。最终延伸到系统、设备及网络等IT基础架构，形成以应用组件为分析对象的FTA（FaultTreeAnalysis）分析树。当捕捉到系统事件后，形成自下向上，自右向左的影响传导路径，以及反向的故障定位路径。主要针对告警事件、监控指标进行可视化定制，保存监控历史数据供性能曲线图等统计类形式展现以及历史告警事件的查询。监控数据可视化将帮助数据中心机房整合分散的监控工具，实现监控工具、监控数据的价值最大化，真正改变监控数据孤岛现象，建立统一监控信息界面。北塔BTSO智慧运维解决方案管理思路自动管理：北塔BTSO具有自动管理能力，更像一个高水平的“管家”帮助用户全方位的监控各类系统的运行状况，及时给出异常提醒和操作建议。趋势管理：北塔BTSO遵循设备本身的实际运行状态情况，“贴身”描绘出各个设备各个时间段的性能变化情况，并根据变化情况建立跟踪曲线，通过跟踪曲线可以真正建立趋势管理视角，依据设备运行数据变化情况来做趋势分析和预测，准确把握设备处于健康状态、亚健康状态和“异常”状态。具备趋势管理能力。运维专属平台：北塔BTSO在提供全面、深入的管理能力同时还具备开放性，能够根据用户自身运维经验提供“私人专属”的定制运维策略能力，将用户历史的运维经验，目前的管理重点都通过智能运维策略自动实现，真正实现即兼顾全面的综合运维管理要求又能充分兼顾用户个性化运维诉求。方案特点北塔BTSO具备自动学习功能，可以完整学习各类设备日常运行状况，根据基线数据自动运维，主动汇报设备异常，可以根据用户真实管理要求进行定制策略。落实等级化管理管理上划分优先级是被普遍认可的方式，优先级划分能实现管理投入的合理分配，对于运维管理同样适用，通过对资源按照所在业务重要度区分其对应的管理等级，比如关乎生产系统的资源划分成一级，内部办公系统相关资源划分成二级设备；对于一级设备意味着更为密集的数据采集和更低的阈值，对于异常更为敏感，故障处理上要求更为严格，后期的管理数据统计需要单独列项统计。常规运维软件中仅仅是对于将管理对象简单的划分了不同等级，仅是为了界面上进行统计，没有落实到具体运维过程中；真正落地的等级化管理必须要做到如下几点：按照业务划分管理资源实现对于不同等级资源不同的监控周期和预警阈值对于不同等级资源定义不同预警等级和处置方案对于不同等级资源进行不同角度的统计和报表分析能便捷的调整等级，并应用相应等级的管理规则北塔BTSO以等级为核心进行管理区分，内置不同等级的管理解决方案，从下到上贯彻等级化，差异化管理模式。预置不同的指标采集方案和策略，落实差异化采集方式，按需采集提供技术基础，同时为大节点管理提供理论可能；预置不同等级的不同风险阈值的设定，落实差异化管理和考核要求；为高级别设备自动生成统计报表，使用户能方便的关注报表数据；支持方便的界面等级显示方式，在不同界面均能方便的区分不同的等级，便于管理视野的日常落地。落实管理经验积累长期的运维工作促成企业用户总结处理其具有自身业务特色的管理方法，这些方法包括大到流程的本地化，小到具体管理指标的定义；如何实现此类管理经验的落实呢？北塔BTSO提供处置知识管理，通过对用户日常故障处置方法的收集，经验积累，自动反馈到相同故障的处置过程中。通过系统提供的智能策略机制，将用户对于某些异常分析的人工方式自动化，比如对于主机高负载原因的排查，一般的操作逻辑是确定主机负载超过风险阈值情况是偶发事件还是一直存在，然后分析每一次出现高负载的进程是否一致，通过人工智能找到具体的异常进程，关闭该进程或者卸载相关软件，同时对于该进程的设定预警，达到事前预警；北塔BTSO通过策略实现这一系列动作，包括对历史记录多点对比，对于进程的记录，异常进程的智能判断，乃至告警的建议；通过策略体制调用系统的各项零散功能，将用户问题分析方式，快速自动化。从数据挖掘实现隐患分析传统运维领域，更多的关注点在于即时状态的监控，能对于异常的即时、准确通知；而随着厂商技术的不断提高，设备的告警越来越少，特别是一些新建机房，可能一个月也不能没有几个告警事件，难道运维就不再重要了吗?恰恰相反，当设备故障减少后，正好为IT运维创造价值提供了客观条件，IT运维需要将更多的时间和精力放在挖掘实例数据，发现业务隐患，提高业务运行效率。北塔BTSO提供了强大的历史记录能力，可以实现45万KPI的指标数据不压缩存储1年；同时提供详尽灵活的数据分析工具，可以实现单设备1年、1季度、1月、1周整体趋势分析，从历史层面分析出业务运行规律，方便的发现业务运行异常；多指标相对分析，实现管理对象的纵向比较，找到影响具体的异常指标集。通过对历史记录分析，为管理方式改进提供基础数据，贴合业务指标变化的规律，整合人力资源，实现关键时段重点关注的优先级理念；为用户年度管理数据的统计提供可能，配合北塔快速报表开发能力，使符合用户管理实践的事后考核报为可能。北塔BTSO贯彻时段管理的理念，提供了拓扑上整体的CPU趋势分析，对近几周的整体性能均值做比较，便于发现业务的偏离情况；使用历史记录作为检测阈值，实现更为合理的业务使用情况监控；提供整体高低负载分析，实现整体回顾，合理评价。支持持续管理建设北塔BTSO以平台化架构设计，可以灵活定制用户管理需求，实现用户管理的可持续化建设；为用户多种开发集成方式包含如下几种技术实现：增加具有用户独有设备的管理，通过合作开发，北塔BTSO可以集成用户自行开发的采集方式，融入平台中进行统一的管理；整合具有本单位特色的管理指标集，实现下级单位的快速部署，和统一化管理；用户管理经验的策略化，实现用户先进管理分析方式的自动化处理；报表定制，快速导入报表模板，实现客户报表的快速实现和更新，使用户报表的变更不再成为运维软件的痛苦；使用户的管理意志在软件中得到持续体现。满足私有云平台运维需求针对私有云运维特殊需求，北塔BTSO主要帮助用户解决以下六方面问题：了解云平台对象是否健康如何预防容量枯竭云资源是否得到有效使用资源“去哪了”如何发现和解决云平台性能瓶颈虚拟资源是否可回收产品架构北塔BTSO采用平台化设计，以DGO（DataGatherOcean）为数据采集平台，基础采集平台构建功能平台；以告警、报表、智能运维、license构成强大的功能平台；具体资源的管理作为基于平台的管理功能，具备以接口为中心的设计模式。系统提供强大的扩展能力，支持管理能力的自由扩展：采集平台支持用户个性化采集程序的快速兼容，实现管理指标的快速扩展；采集服务器支持无缝扩展，支持多个采集器同时部署；支持管理策略的快速扩展，实现用户管理方式落地；支持用户个性化报表的快速扩展，实现各种具备企业特征报表数据和展现方式。方案详细介绍智能拓扑系统采用北塔先进的、且得到近5000个现场验证的发现算法，智能发现网络设备和设备间的真实线路，准确而快速的完成拓扑的构建。网络拓扑能清晰展现网络的关系，自动布局；并能提供“圆形”“树形”多种拓扑展现方式，便于用户根据业务关系快速调整到用户需要的展现方式，同时将管理对象的实时性能和告警信息通过图标的不同状态展现给用户。智能基线传统运维关于被管对象“警戒值”，而一旦超过警戒值意味着一定程度的“损失”已经发生，有没有办法在提前一点发现风险呢？答案有多种，通过业务基线的偏离判断异常就是其中一种。BTSO能根据历史记录自动生成基线，并可按照业务变化规律，形成以日基线、周基线的数据对比，一旦实时数据大于基线比对点一定范围，即生成智维事件，便于分析；当出现多次越界后，系统主动通知用户，提示运维风险。基线方式的引入，降低了用户对于“警戒值”的识别难度，使设置符合用户业务实际的阈值成为简单、可执行的事情；同时基线的方式，符合用户周期性业务稳定的实际情况，真正落实用户对于业务风险检测。智能运维引擎运用等级概念实现差异化管理运用等级概念实现差异化管理BTSO精选各类管理对象的关键状态、性能指标，以不同管理等级为数据集，实现一个等级的资源一个管理方案，包含预置智维检测指标、预置报表、预置策略检测等；实现资源加入即可监控的简单运维方式。BTSO也支持用户根据业务系统的重要性，将管理上相同重要性的不同管理对象设置为同一等级，针对性新设、修订管理指标监控集合，修订监控密度、阈值，指定针对性处置策略，在不同等级间实施差异化管理；图：智维引擎工作示意智能策略实现管理实例落地BTSO将围绕运维数据产生且具有固定分析和处理逻辑的运维方法，归类为智能策略需要处理的方法；通过策略的应用，可以进一步提高运维效率和运行成效。BTSO内置了众多的智维策略，提供标准的管理实例落地，通过客户化开发实现用户处理经验的快速落地；图：异常情况分析与处理建议系统智能运维智维事件监控对于预置监控方案，BTSO不仅提供后台自动检测过程，也提供了前端巡查功能，使用户能实时了解到后台智维的实时动态；对于智维巡查结果，以事件方式存在，此类事件并不完整描述了故障或异常，所以BTSO推荐以统计角度进行评价，以越界比例作为观测的切入点。同时系统提供详尽智维分析工具，包含智维信息的统计、智维异常分布、历史值检查等，结合此类工具实现异常的关联分析和确认。智维越界提醒策略BTSO预置多种预置策略，基础策略是对于内置监控方案的提醒策略，对于智维越界事件，当系统发现内置检测指标，越界事件超出安全频率后，主动推送到页面前端，通知管理员，系统发现了异常。提示内容中包含最近3日，发生异常的次数并且给出该指标的历史曲线；同时给出该指标的详细定义，清晰的列明，该指标是什么，异常后影响什么，一般的解决方案是什么。同时可对该指标进行快速设置告警，便于后期管理中，出现了相同问题后能通过短信、邮件通知离线用户。客户化分析策略定制BTSO的智能策略基于平台化接口体系，作为软件的核心，其可以调用BTSO软件的各个方面，包含基础数据的采集，合成指标的计算，各类对象的综合分析，并可以实现通知、报表、下发等处置策略的调用。北塔软件基于BTSO，通过合作开发的模式，可以实现用户管理策略的自动化，使每个用户能使用上“贴心”的运维软件。故障管理对管理对象按照预置的风险阈值进行检测，并实时通知到管理员处，是运维系统必备功能，也是传统上运维软件的核心价值所在；而在传统上故障管理在应用上经常会遇到如下问题：设置告警的范围选择，用户总是期望监控无死角，但是所有KPI的高频监控必然导致管理设备的异常负载增加，这要求运维厂商能提供合理的告警范围推荐；告警规则的自动设置，往往用户对于告警的规则和检测标准时一致的，如何实现相同标准的推广，这要求运维软件对于规则设置的易用性；告警的经验如何总结和继承，告警处理经验能得到及时记录，并能在下次出现同问题时，即时推送，便于有效提高故障处置效率。BTSO系统提供了灵活的告警设置、精确的告警检测，多样告警推送方式、简单的告警经验积累方式，实现用户有效及时得到故障信息。告警管理便捷的规则设置告警永远是运维中最基础的功能，对于运维人员而言，总是期望告警不产生，那样意味着系统正稳定运行；为了给用户提供这个可靠的信息，BTSO提供便捷的告警设置实现大面积的监管设置；在设置界面为重点指标实现详尽的指标说明，使用户面对具体技术指标能更为合理的进行配置。系统提供多种预置告警规则支持以IP为方式，为未纳入管理设备规则化的告警规则支持为某一个存在的对象为样本，批量设置进程、硬盘的子对象的告警支持以IP网段方式和等级方式显示告警的设置支持以多种通知方式，灵活的通知给不同的人员支持对告警通知内容恢复内容的自定义，满足用户对于业务化通知内容的实现高效的告警提醒机制BTSO为了让用户能快速识别告警信息，以不同颜色区分不同的告警等级，并在运行摘要和页面框架中重点突出显示。用户每日登陆系统均可了解昨日告警的处理情况，目前发生且需要处理的告警数量，同时可以看到具体告警实时条目。以及本日的停机计划，为一天的工作提供基础信息。当长期打开页面时，系统通过框架上的颜色区别显示不同的等级告警，使值班人员能快速了解到具体的告警展现。同时系统提供短信、邮件的通知方式，为线下管理员提供最及时的告警信息。清晰的告警查询为了使告警信息更为有效，系统提供灵活、清晰的告警历史查询界面，界面中列出了不仅列举了历史告警的各个字段，同时给出告警统计分析信息，为用户以告警角度对现有对象的信息进行评价。系统提供告警时长、和累计次数为索引条件统计，为用户提供这个维度出现告警最多的管理对象和具体异常点；提供重复告警统计，以及统计时段内最长、平均、累积的告警时长，为用户提供告警规则有效性评估提供处置经验的编辑功能，为用户快速积累处置经验提供管理入口，下一次相同问题出现时，提供处置参考；知识库管理用户在长期的运维过程中，一般均会有一些管理预案，但是如何实现管理经验的长期积累呢？BTSO提供处置知识库，通过对处置预案的积累，出现问题后能快速实现信息传导，将处置预案真正落实到实际操作过程中。报表与分析监控数据是一般宝贵的财富，不仅仅能实现前期运维成绩的考核统计，也可数据分析实现管理方法的改进，BTSO提供强大的报表数据处理能力，可根据用户要求定制不同的个性化报表；同时提供灵活的数据分析工具，实现对于历史数据的灵活分析能力；运维管理员可以在分析重大异常问题和阶段性分析时进行数据分析。性能趋势分析性能趋势分析是基于BTSO强大的数据采集和存储能力的基础上，实现的数据分析工具，提供对于最多5个指标的同时对比分析，支持长达1年无压缩数据的数据分析；实现从天到年的无缝数据扩展查看；对于每一个数据可以压缩比例，实现数据幅度比较。基础管理报表系统提供多张预置报表，包括管理上离不开的运行率和告警统计报表、性能统计报表；系统提供日、周、月、季报表统计周期；可对统计周期可以进行设置，可实现对于工作时段和值班时段的报表，并可按照用户考核时段进行统计。同时用户可实现不同管理域生成不同的报表，并可将报表授权给不同的人员进行查看。快速报表定制用户的管理考核要求每年的都会变化，固定的报表机制无法满足用户考核报表的要求，BTSO通过先进的报表引擎，可实现快速定制化报表开发；此项内容作为产品服务提供给客户。报表引擎可以实现各类图标和展现要求的定制，在界面风格和数据上满足用户要求。系统类管理系统拓扑图系统扑主为心现了有载数库中间准应之的时状，为主监提全视；系自生并能局，需工整。系统扑供晰展方式提网不颜表示式不主按其操类标显示从机发联据库主的系。系统通过不同的颜色区分管理对象的实时性能层级，BTSO提供了主机经典性能指标，并以红、黄、蓝代表其主机实时性能；提供根据业务需要性能负载调整设置功能；提供主机关键性能指标的实时显示；系统以闪烁的图标反映，重点提醒用户该资源发生了告警；同时以弹出框显示告警的具体对象信息；系统提供自定义拓扑方式，可通过对不同业务拓扑主机的自定义归类，实现单独业务的聚焦关注。拓扑图不仅反映单个设备的状态，同时提供关联数据排行，为问题定位增加信息参考：提供以故障作为评价方式的综合评分，整体了解系统的整体运行健康情况；提供主机CPU实时TOPN排行，分析主机性能最高的设备，便于用户重点监控；提供主机连续运行时间TOPN，分析主机异常开关系统的变化；提供数据库会话数topn，分数据库实时运行状态。拓扑图不仅作为展现工具，同时可作为主机管理的分析工具：系统提供各种全局性变化趋势分析，包括CPU涨幅分析、内存涨幅分析、流量涨幅分析、存储周涨幅分析；通过对管理范围内的所有的主机进行全局分析，以不同的颜色区别显示主机对于CPU的增长区间；提供CPU、内存、流量、存储的趋势分析，通过环比分析，区分出运行趋势的异常；如CPU趋势分析，给出前4天日均值，以及动态变化曲线。主机管理主机管理以波浪图方式显示所有主机的全局信息，以图形化方式显示主机的常用管理参数。包含如下信息：详细的主机基本管理参数单个系统的CPU、内存增长趋势单个系统的业务流量变化趋势单个系统存储空间实时和变化情况同时可对统计范围内的主机进行详细的实时分析数据，便于用户关联分析出需要重点关注的主机：以实时CPU利用率的主机排行实时内存利用率的主机排行实时连续运行时间的主机排行各个操作系统的存储空间已使用情况分析，给出使用率最高的20个设备最近30天以CPU为评价指标的高负载和低负载设备列表提供主机一体化显示，按照不同的操作系统进行数据分类，系统提供基础信息、运行信息、进程管理、事件与告警、硬件信息等各类管理信息：以关联方式显示主机上的承载数据库、中间件、标准应用的实时状态图形化列出重点监控的硬件、日志、CPU性能、磁盘信息的实时信息对于CPU性能、网卡等重要参数的最近3天数据分析支持主机进程的实时展示分析主机系统支持对于HP、Dell、IBM三个厂商的硬件状态监控，支持对于温度、风扇、磁盘、CPU、内存、电源等重要主机硬件的状态监控；BTSO智能翻译硬件各个状态，将复杂的各个硬件运行状态，转化成运维监控的异常正常状态；便于用户快捷的设置硬件异常监控告警。数据库管理数据库专项管理支持对所有数据库的统一分析和处理；BTSO支持Oracle（含OracleRAC）、SQLSever、DB2、MYSql、sybase、infomix、达梦等各版本的数据库监控；数据库管理操作系统管理为基础，实现主机和数据库协同管理。数据库增加方式支持手工增加和批量导入模式；支持用户以模板为基础修改的资产清单的导入。支持对于管理信息的统计，包含授权点使用情况，各个数据库状态分布、各类型数据库熟练统计、数据库等级统计。支持对于各个数据库实时运行状态的实时统计，包含数据库会话数、死锁数实时排行。在数据库技术层面主要对表空间大小和会话数、缓存信息、锁信息进行重点监管；系统以图形化方式显示了各个关键指标，使管理者能快速了解数据库状态。同时鉴于数据库与主机的不可分割性，系统强调关联分析：主机列出数据的实时告警状态，所在主机主要性能，主机上目前数据库相关的进行列表实时情况。依托于所在主机的日志管理，支持对于数据库应用日志的监控，比如oracle中alert_<instance>.log文件监控，可以获取对ORA-27072等常见错误日志的实时监控。SQLserver管理从运行状态、运行信息、资源使用、日志、作业、后台告警几个角度进行管理，对于运行信息涉及会话、事务、锁对象、闩对象、缓存器多个管理要素的核心运行数据，资源使用结合操作系统资源和分配资源内容进行管理，包含CPU、内存、进程、磁盘空间、网络带宽使用；同时提供数据文件的日增量，便于了解业务增长规律；DB2管理从运行状态、运行信息、表空间、进程状态、资源使用等几个维度重点切入，运行信息涉及应用连接、缓存、数据库缓存池IO信息、锁信息等多个管理要素的核心运行数据，资源使用涉及操作系统相关的CPU、内存、应用已分配日志空间的管理；Mysql管理从运行状态、运行信息、资源使用、事件等几个角度进行重点切入，运行信息涉及响应时间、缓存、IO、连接、锁对象等多个管理要素的核心运行数据，资源使用结合操作系统资源和分配资源内容进行管理，包含CPU、内存、进程、磁盘空间、网络带宽使用；同时提供数据文件的日增量，便于了解业务增长规律；Sybase管理从运行状态、运行信息、资源使用、作业等几个角度进行重点切入，运行信息涉及响应、会话、缓存、事务、锁对象、磁盘读写等多个管理要素的核心运行数据，资源使用结合操作系统资源和分配资源内容进行管理，包含CPU、内存、进程、磁盘空间、网络带宽使用；同时提供数据文件的日增量，便于了解业务增长规律；达梦（DM）数据库管理通过运行状态、运行信息、资源使用等多个角度进行管理切入，运行信息涉及会话、缓冲区、网络、线程、磁盘IO、锁对象、文件IO、数据缓冲区等多个管理要素的核心运行数据；informix管理通过运行状态、运行信息、日志文件、配置信息等多个角度进行管理切入，运行信息涉及块、扩展数据块、高可用数据复制状态、锁对象、会话等多个管理要素的核心运行数据。中间件管理中间件管理对通用定义中间件的管理，包含了应用服务器、消息中间件的管理，支持MQ、webologic、websphere、Tongweb、IIS、Domino、Easerver、Jboss、Apache、tomcat、Tuxedo的非集群管理；实现用户对于中间件的基本状态和承载业务的基本状态监管。支持对于管理信息的统计，包含授权点使用情况，各个数据库状态分布、各类型数据库熟练统计、数据库等级统计。MQ管理：对于MQ管理系统中重点关注所在主机性能和通道、队列信息。同时提供特别关注功能，记录用户业务相关的通道和队列信息。websphere管理线程、事务信息、虚拟机信息，同时显示实际承载业务的链接信息。weblogic管理重点关注中间件自身性能和承载业务链接应用的信息。BTSO支持最近24小时数据展现，使用户更为清晰了解性能变化情况。Tongweb管理通过对中间件运行状态和运行数据、配置信息的监控实现运维，其中运行数据涉及堆内存、非堆内存、Java虚拟机、线程信息、class信息、垃圾收集器、ORB线程池、JDBC连接池、web应用、servlet、EJB池的核心运行指标；Tuexdo管理通过对中间件运行状态和运行数据、配置信息的监控实现运维，其中运行数据涉及客户端、消息队列、服务信息、服务器信息的核心运行指标；Tomcat管理通过对运行状态和JVM信息、连接器信息的监控实现运维，其中连接器部分涉及线程、和请求信息的核心运行指标；Apache管理通过对运行状态和性能指标的监控实现运维，其中关键的指标包含访问次数、业务流程、活动进程数等该类指标均可通过基线方式实现运行异常变化的监管；Domino管理通过运行状态和性能、配置指标等监控实现运维，其中性能指标涉及服务运行情况、服务器任务、服务器信息、服务器硬盘、复制情况、邮件情况、服务器内存的核心运行指标。IIS管理通过对总体IIS服务站点的监控实现运维，其中涉及IIS的运行状态、连接信息、服务器性能等多方面的核心运行指标；JBoss管理通过状态和运行信息的监控实现运维，其中运行信息涉及EJB、EJB3、JDBC、JVM、servlet、线程池、web应用、缓存、JMS、请求、会话、log4j能等多方面的核心运行指标。EAserver管理通过对运行状态和运行信息的监控实现运维，主要涉及服务器状态、连接信息、网络读写、连接缓存信息等多个方面的核心运行指标。标准应用管理标准应用管理支持文件传输应用（ftp）、网页服务（http）、邮件服务（pop3、smtp）、Aspnet、dhcp、DNS、Exchange2003\2007、JVM、LDAP的监控。支持加密传输协议，包括Sftp、https的监控。支持对于管理信息的统计，包含授权点使用情况，各个数据库状态分布、各类型数据库熟练统计、数据库等级统计。支持图形化方式显示应用的承载主机状态和应用的基本性能信息。设备性能分析对当前网络设备的CPU和MEM负载进行排名查看，并可进一步查看指定设备的性能负载历史记录。可及时了解当前负载较高的网络设备，在问题苗头出现的时候，及时进行处置，保障网络不间断的平稳运行。系统报表主机运行率报表:以主机真实宕机为统计基础，反映设备的运行情况，包含运行率、连续运行时长、停机检修时间的统计；告警统计分析报表：统计分析系统所有告警的处理情况，包括告警发生比例和修复情况；主机性能报表：针对于主机各项性能进行数据分析，以图标方式显示CPU、内存、流量TOP5设备，并列举出统计范围内各个主机的CPU、内存、流量的环比和最大值和最小值。网络管理网络拓扑管理拓扑生成BTSO可以自动根据北塔特有的拓扑生成算法，快速搜索整个网络内的网络设备，智能分析网络拓扑结构，自动勾画出整个网络的真实物理拓扑图，真实反映整个网络的构成状况。BTSO除拓扑生成之外，还支持拓扑添加功能，在保留原有拓扑图的基础上，搜索新的网络设备，并自动添加到网络拓扑图上。拓扑算法快速、准确。内部采用北塔特有的拓扑算法，并融合了CDP算法、NDP等多种常用算法。确保能够快速、准确的自动生成物理拓扑图；支持跨广域网分布式部署拓扑引擎。可将各引擎的拓扑搜索结果上传到中心进行汇总，创建出一张完整的拓扑图，实现统一展现。设备厂商支持广泛，能够支持100多厂家的1600多种型号设备，且能支持多厂商的设备组成的“混合”网络。拓扑图展现网络拓扑图可从全局的角度出发，帮助运维管理人员实时了解整个网络当前的运行状况，主动告诉用户关注点应在哪里，网络架构是否合理，有无网络瓶颈，设备和流量有无异常等，动态告诉用户可能的故障隐患，达到透明化、事前管理目的。个性化拓扑为了同时满足不同用户间的个性化需求，BTSO提供了灵活的拓扑图复制功能，可为不同用户提供单独的展现页面。用户可以根据自己的偏好设置自己的个性化拓扑图，且不同的用户之间没有任何影响。监控结果展现直观可以通过红、黄、绿等不同颜色表示网络设备和线路负载压力的评估状况，并可以调整设备和线路的变色阈值；可以通过不同颜色的告警图标，显示各个网络设备的告警触发情况；可以为拓扑图上的每台设备、每条线路设置中文名称，添加注释，方便进行管理。界面美观提供背景图的更换设置功能，可自由选择精美的图片作为拓扑图的背景；提供了灵活设备图标的拖拽功能，可以自由设定图标的摆放位置；提供设备图标大小自适应功能，可以根据连接线路的数量自动调整设备图标大小；提供拓扑图的放大、缩小功能，可以将拓扑图调整到合适的展现尺寸；提供大屏展现功能，可以在大屏投影的情况下提供友好的显示效果；最突出的是网络拓扑图中连接线路的线型选择方案异常丰富，主要包含：直线、直角折线、斜角折线、合并线等多种不同线型，并可在同一张拓扑图中同时存在多种线型。操作便捷提供鹰眼功能，可以总揽全局，并快速的浏览、移动拓扑图；提供便捷的缩略图标、拓扑图创建和维护功能；提供多种常用管理工具：服务端Ping、SNMP测试、Web管理等，可供用户直接调用；提供快捷的设备实时信息查看功能，可以快速的查看指定设备的MAC表、ARP表、路由表、端口信息表等内容。网络管理报表网络设备运行率报表：以设备底层真实中断情况为基础，反映设备的运行率情况；包含运行率、运行时长、停机检修时间的各项统计；网络线路连通率报表：以线路真实连接状态（端口通断）为基础，反映整体运行情况；网络故障报表：对网络设备的故障进行统计,明确统计各等级告警的发生比例和修复情况；网络性能报表：针对于网络各项性能进行数据分析。专项运维运维主管和值班员偏重于以拓扑图、运行摘要为代表的全新性概述页面，而具体负责问题解决分析的运维负责人，需要更深入的了解每个管理对象的信息，而每个管理对象具备不同的管理侧重点，需要不同的管理方式，专项管理就是为了专职人员最快的查看和分析对象的管理菜单集。设备性能管理网络设备的性能管理指的是优化网络的活动，包括对网络设备CPU、MEM等负载的监测、制定可接受的网络性能阈值，与实际的网络设备性能进行比较，发现偏离和性能异常，突出进行展现。通过网络性能管理可以及时发现网络堵塞情况，在问题苗头出现的时候，及时进行处置，保障网络不间断的平稳运行，并可基于事实进行相关的容量规划和有效地分配网络资源。主要功能包括：支持对全网的网络设备CPU、MEM的实时负载进行排名，当负载超过警戒值时，以显著颜色进行标注，以引起管理员的注意，发现问题隐患。当发现某设备可能存在问题隐患时，还可以支持查看该设备的负载历史记录信息。查看该设备是长期处于高负载运行，还是突然出现异常，以协助管理人员判断问题原因可能所在。线路性能管理在网络建设完成之后，维护网络线路，保障网络传输线路的稳定与正常，是日常运维工作中重要的一个环节。BTSO可提供便捷的网络线路维护管理功能，并可对网络线路的负载进行细致分析。实现网络线路流量、丢包率、错包率等指标的实时监测，及时发现网络堵塞情况，在问题苗头出现的时候，及时进行处置，保障网络不间断的平稳运行，并可基于事实进行相关的容量规划和有效地分配网络资源。主要功能包括：支持对全网的网络设备线路按照流量、带宽占用比、丢包率、错包率、广播包等指标的实时负载进行排名。当发现某线路可能存在问题隐患时，还可以支持查看该线路的负载历史记录信息。查看该线路是长期处于高负载运行，还是突然出现异常，以协助管理人员判断问题原因可能所在。北塔BTSM运维流程管理管理思路高效的自动流程管理目前省人社网络运维采用手动填单、人工方式流转的流程，效率非常低，维护人员工作量很难进行统计；而且网络的负荷日益增加，大量的IT运维工作，让信息网络中心的IT运维人员处于救火队的模式，无法提升用户的满意度，也无法体现IT部门的服务价值统一平台进行管控由于省人社没有采用运维流程管理系统，导致运维管理缺乏一个客观、严谨、可量化的标准和规范，企业的IT管理部门和最终用户无法根据自己的能力和需求来定义自己所要求的不同服务水平；对于IT基础设施庞大的鞍钢来说，也缺乏一个统一的平台对资产及配置项进行控制管理提高知识积累能力运维流程处理因为采用人工的处理方式，不仅效率低下，问题的处理方式和解决方案很难追溯，而且数据很容易丢失；同时导致运维处理知识很难积累，无法形成标准的问题解决方案，从而无法提高IT运维服务的效率。运维流程管理BTSM系统特点将订制化流程产品平滑升级到产品化流程产品为了提高省人社信息系统IT综合流程管理运维质量，保障省人社信息系统可靠稳定运行。新的ITSM在设计之初就充分考虑了对原有系统的升级要求，可以将原有系统中的数据无缝的升级到新的系统。保留原平台内的监管数据，以满足省人社的IT基础设施监管要求。解决现有工具的不灵活、易用性、及时性问题北塔软件IT服务流程平台是基于ITIL最佳实践和ISO20000国际标准理论框架，融合北塔软件多年的IT服务管理成功经验，完全针对IT服务管理职能部门设计研发的专业IT服务管理系统。产品定位：专业、易用的IT服务管理软件。IT服务流程平台结合全球IT服务管理的最佳实践经验，内置标准流程、分析报表、服务台、配置项管理等一整套专业的服务台运营模型，实现IT服务管理的规范化、标准化、管理信息化、流程自动化，快速提升企业IT服务管理能力，提升客户满意度。如下图可以直观的看出ITSM系统模块清晰，层次分明，有强大的第三方系统集成能力。各模块之间既相互独立，又互相关联，共同实现了对IT服务管理的集中监控，另外也通过WEB方式为用户进行了统一的展现。功能模块介绍编号分类具体功能1门户任务管理、公告、知识库2事件管理支持多种的事件录入方式，web录入、E-mail录入等。支持预先定义事件的分类（严重等级、影响范围、紧急程度的分类）和优先级设置。可根据事件分类进行事件的自动指派或者进行手工指派。根据事件单可以直接建立问题单和变更单。事件单录入时，能够自动根据输入的信息查询知识库中相关的知识条目。支持事件请求的自动升级。3问题管理支持多种问题创建方式：通过事件创建和手工创建。提供问题的分类（严重等级、影响范围、紧急程度的分类）和优先级设置。可以和其它流程管理模块如：事件、变更、配置等关联。提供问题的指派，并支持重新指派。支持问题的升级。支持问题指派的各种通知，通知的方式包括邮件、短信。对于已知的问题，可通过已知问题进行处理。关闭问题前必须先填写解决方案，并将问题解决方案自动添加到知识库。能够记录数据变化前后的修改人、时间，确保可查询。问题录入时支持上传附件。提供问题的搜索查看及过滤器查看功能。提供问题列表页的自定义列表列字段的功能。4变更管理支持多种变更录入方式，包括手动创建或通过事件、问题来提交创建。提供变更的分类和优先级设置。可以和其它流程管理模块进行关联，与事件、问题的关联关系能够进行查看。提供详细的字段记录变更的详细信息。可以定义变更委员会的成员，并能根据变更委员会的审批情况来实施变更。变更录入时支持上传附件。提供变更的搜索查看及过滤器查看功能。提供变更列表页的自定义列表列字段的功能。5知识库管理可以定义知识库的分类。提供丰富的编辑环境，可以嵌入图片。强大的检索功能，支持关键字检索、全文模糊检索匹配，并支持对常规附件文档的全文检索。支持在编辑知识时上传附件。提供知识库的搜索查看及过滤器查看功能。对于非知识库管理员提交的知识有知识库的审核功能。6配置项管理CMDB提供配置项的分类设置。提供详细的字段记录配置项的属性，对于不同类别配置项的差异化属性通过自定义字段来展现。提供配置项三类（生命周期、保修期、预警期）到期后的提醒功能。提供配置项的搜索和过滤器的查看功能。配置项关联的其它流程模块，如相关联的请求、问题、变更的查看功能。提供配置项录入时的附件上传功能。提供配置项列表页的自定义列表列字段的功能。能够自主维护各配置项之间的相互关联关系，并通过配置项关联关系树状图展现的功能。配置项录入时支持从CSV文件导入。提供配置项的扫描工具，并支持从扫描结果导入的功能。7发布管理发布管理功能模块8报表输出提供事件、问题、变更、配置项模块的常规参数报表。支持多种类别的报表展示（饼状图、柱状图、仪表盘等）。支持报表生成多种格式文件，如PDF、EXCEL等。支持报表灵活定制，可根据不同模块、不同时间、不同角色等定制报表。具有自定义报表的功能。9系统设置按照实际情况设置组织架构的功能。提供LDAP验证设置，用户免登录功能。支持与本地域结合。设置不同角色的功能，并且可通过勾选的方式定义不同角色的权限。提供数据字典的设置功能。SLA服务级别的自定义设置功能。请求规则和通知规则的自定义设置功能。提供流程自定义功能，并支持在线部署、设置。支持增加定期任务。支持T-CODE快速转到对应的功能与邮件系统集成的功能。提供标准化的基于ITILV3的实施方案通过引入北塔IT服务流程平台，明确各管理人员的工作职责，以工单的形式高效解决企业IT服务相关问题，并且流程可以根据用户的管理变更随时进行调整，充分考虑到企业IT规模增长的管理需要。帮助企业提高IT服务水平，提升IT服务质量，实现高效率的IT运维流程运作！北塔软件的解决方案建议： 概述：基于客户的IT服务管理的现状和目前存在的问题，概要的解决方案如下：按照项目管理的办法，先做项目定义；公司的高层批准并支持这个项目及其后续的在业务部门中的广泛推广与实行。引入ITIL的概念，给相关的人员做简要的ITIL培训。先让大家理解ITIL规范及其最佳实践。依据ITIL的理念，设置IT组织里面相关的角色和责任人。双方做充分的沟通，收集客户的需求，与我们的标准产品做比较，做“差异分析”（GapAnalysis）；开始设置服务流程，和一些基础设置数据的准备。公司内部所有的配置项，即使是应用软件方面的配置项，一定要整理出来，建立配置项管理数据库CMDB.因为这是其他一切事件流程管理的基础和必要因素。然后开始北塔ITIL软件的标准版的分步实施。（将来条件成熟了，再实施专业版，比标准版多了变更管理的功能。）IT内部人员先用起来、实行规范的操作，然后向公司里面的广大用户推广，做相关的培训。业务部门的管理者应当给予全力支持。相关的考绩辅助措施可以参考：例如，工程师积极完善知识库的，算做优先表现计入员工考绩；普通用户积极采用自助服务的，也算做优先表现计入员工考绩。采用相应的排班和技术分类负责，进行相关的规则设置指派，由用户自己全程查看故障的处理情况。应用性能监控与管理管理思路掌握真实用户体验，实现业务性能用户体验可视化强化主动监控，实现主动式集中管理。使用真实