面向资源弹性调度与运维自动化的云资源池设计与规划

Copyright©2014NeusoftCorporation面向资源弹性调度与运维自动化的云资源池设计与规划一月23东软集团股份有限公司云计算发展解读云资源池整体架构设计面向资源弹性调度的云资源池规划与设计面向运维自动化的云资源池池规划与设计Q&A提纲CostUtilizationConsolidationScaleAvailabilityPredictabilityITagilityITcompetitivenessITasaServiceBUchargeBack

BusinessDriversCost/ROIDR/BCOverflow/BurstCapServerVirtualizationHybridCloudPODse.g.VblockPrivateCloudTransitionStagesSimpleApplicationSophisticatedResourceProvisioningOrchestrationSecurityComplianceAcceptableSLAs24312431EvolvingCustomerNeeds

BusinessContinuityisCritical!3rd-PartyIntegrationITSMWorkflowCMDBServiceAssuranceServiceDeliverySPServicesInfrastructureDev/TestR&DAppTestingPre-productionProductionDR/BCDemandDrivenWebFarmsPortalsInfrastructureServicesCriticalAppsByFunctionByDepartmentByApplicationTypeCostUtilizationConsolidationScaleAvailabilityPredictabilityITagilityITcompetitivenessITasaServiceBUchargeBack

BusinessDriversCost/ROIDR/BCOverflow/BurstCapServerVirtualizationHybridCloudPODse.g.VblockPrivateCloudTransitionStagesSimpleApplicationSophisticatedResourceProvisioningOrchestrationSecurityComplianceAcceptableSLAs24312431TheAutomationThreshold3rd-PartyIntegrationITSMWorkflowCMDBServiceAssuranceServiceCultureMetering/BillingServiceCatalogSPServicesInfrastructureDev/TestR&DAppTestingPre-productionProductionDR/BCDemandDrivenWebFarmsPortalsInfrastructureServicesCriticalAppsByFunctionByDepartmentByApplicationTypeAutomationRequirementManualDeliveryAbilityServiceComplexity/DemandAutomationThresholdInefficiencyToleranceZoneElementsofCloudComputingSelf-ServiceInterface:Providesabilityforuserstoorderand

trackmeteredservicesServiceDeliveryAutomation:

AutomatesprovisioningandmetersusageofservicesResourceManagement:

ResourcesareprovisionedandmanagedasperserviceneedsOperationalProcessAutomation:

Automatesoperationalprocessessuchasusermanagement,capacitymanagement,servicelevelmanagement,servicedeskintegration,alerting…LifecycleManagementLifecycleManagementofCloudServicesDynamicresourceallocationCapacitymanagementResourceutilizationPerformancemanagementMaintenanceStandardizedofferingsVeryfastprovisioning/

de-provisioning

ofresourcesMetered

usageWeb-basedfrontendAutomatedfulfillmentBroad

NetworkAccessRapid

ElasticityMeasuredServiceOn-Demand

Self-ServiceResourcePooling云计算发展解读云资源池整体架构设计面向资源弹性调度的云资源池规划与设计面向运维自动化的云资源池池规划与设计Q&A提纲私有云总体架构7私有云平台由私有云管理平台和一个或多个资源池系统组成。私有云管理平台：运维管理平台运营管理门户资源池系统：资源池管理平台计算/储存/网络等资源资源池体系架构资源池管理平台支持对资源池的管理资源池系统通过符合私有云标准规范的统一接口，接收资源申请和操作请求。资源能力由各个不同资源类型的子系统组成，提供不同类型资源服务资源池管理平台功能架构资源池管理平台OpenStack接入调度子系统资源管理子系统告警策略管理备份管理资源调度能力调度计算能力调度网络能力调度存储能力调度资源模板管理私有云接口解析消息登录鉴权功能分发资源部署预处理流量控制缓存队列性能告警采集子系统性能告警采集SNMP性能采集性能代理采集告警代理采集硬件设备告警任务管理任务执行任务调度性能处理性能阀值告警性能预处理告警处理告警预处理告警重定义告警过滤OpenStack接口本地资源管理资源项/属性管理资源变更管理资源实例管理资源关联关系管理资源配置信息同步告警接收入库处理其他能力调度资源创建资源变更资源操作资源回收性能后处理告警后处理资源视图管理全局资源的容量历史容量信息分类资源容量监控管理采集任务管理采集设备管理映射配置管理系统管理子系统系统管理系统参数管理运维报表管理日志管理系统监控报表分类报表绘制报表输出报表引擎用户/角色管理软件部署管理告警策略管理虚拟机子系统X86子系统小型机子系统块存储子系统分布式文件子系统日志详单类存储子系统备份子系统网络子系统短信/邮件接口4A/BOMC/网管接口资源分区管理拓扑管理资源分区视图资源状况管理资源容量管理资源计量管理能力子系统云计算发展解读云资源池整体架构设计面向资源弹性调度的云资源池规划与设计面向运维自动化的云资源池池规划与设计Q&A提纲资源弹性调调度概述资源服务（纵向弹性性调度）生命周期管理资源能力高级服务（横向弹性性调度）资源弹性调调度规划步步骤资源类型资源能力生命周期管理服务高级服务资源弹性调度-资源类型规规划根据业务应应用类型确定资源选型CEP

高可用性，确保响应高吞吐量事件执行自动化决策

高可扩展性，支持高吞吐和峰值负载处理

低复杂性，支持高吞吐事件处理

低数据容量，由于基础事件短生命期而产生的低查询复杂度，支持低延迟查询处理

低查询延迟，支持高吞吐事件处理中等成本，基于CEP处理重要度的考虑低易用性/互操作性，基于基础事件可以（经常）被废弃OLTP高可用性，确保执行面向客户的交易

高可扩展性，支持业务增长场景和峰值处理中等复杂度，支持中等吞吐交易处理中等数据容量，当BI基础设施存储历史数据时低查询复杂度，支持中等延迟查询处理中等查询延迟，支持中等吞吐交易处理高成本，基于OLTP处理重要度的考虑高易用性/互操作性，基于交易要传输给BI基础设施的考虑BI

中等可用性，支持战略决策的制定（复查，如果运行报告是在同一信息系统之外执行的话）

高可扩展性，支持数据增长和峰值处理

中等复杂度，由于系统规模大高数据容量，支持数据增长高查询复杂度，支持分析查询处理中等查询延迟，由于分析类查询处理高成本，基于数据容量和分析的重要度的考虑高易用性/互操作性，由于频繁使用第三方工具分析交易，以及与其它信息系统的集成/联邦BigData高容量，并不是一个绝对的概念，但是大数据需要用特殊的数据管理技术来存储和处理数据高速度，意味着数据以多快的速度产生就需要以多快的速度来处理才能够满足需求，也与数据保持能力dataretention（影响数据容量）的考虑相关联多样性，包括表数据、层次数据、文档、电子邮件、仪表数据、视频、图像、声音、股票交易数据、金融交易数据等等高复杂度，意味着需要处理不同的标准、领域规则、甚至存储格式CEP类典型物理理架构OLTP类典型物理理架构BI类典型物理理架构BigData类典型物理理架构资源弹性调度-资源能力规规划与设计计虚拟计算资源能力项vmwareXenServerHyper-VFushionCompute虚拟机创建1010510虚拟机删除1010510虚拟机配置修改101058虚拟网卡VLAN配置89010创建虚拟硬盘1010010虚拟机添加虚拟硬盘1010510查看虚拟硬盘信息109510卸载虚拟硬盘1010510删除虚拟硬盘1010010获取虚拟机信息91059虚拟机运行控制1010510虚拟机克隆1010010虚拟机模板创建108010获取虚拟机模板信息91009虚拟机模板删除1010010模板批量部署810010虚拟化软件自动分配虚拟网络信息108510虚拟计算资源能力项vmwareXenServerHyper-VFushionCompute性能监控1010010故障告警107010CPU资源绑定设置910010虚拟CPU资源预留910010内存资源专享设置910010虚拟内存资源预留910010虚拟资源优先级设置99010虚拟CPU在线增加910010虚拟内存在线增加910010虚拟磁盘网卡在线增减910010存储I/O控制107010网络带宽单向控制107010网络带宽双向控制100010虚拟机主机迁移1010010基于本地存储的虚拟机迁移1010010虚拟机快照1010510虚拟防火墙90010虚拟机OS内应用进程监控5000多用户分权管理910010虚拟机备份接口1010010计算能力的的比较及虚虚拟化产品品的选型资源弹性调调度-资源能力规划与与设计计算能力的的设计暨计计算资源的的纵向弹性性调度虚拟化产品选型异构虚拟化的支持抽象层设计（OpenStack等）虚拟化产品的高级特性支持（Proxy/Plug-ins）不属于云计算范畴资源能力的支持（物理机）元数据及数据模型的建立资源能力的全生命周期服务的发布资源弹性调调度-资源能力规规划与设计计网络能力的的规划与设设计网络能力规规划要素支持的业务务/租户规模(VRF/VLAN/VXLAN)稳定的物理理网络结构构（扩容，网网络虚拟化化）业务网与管管理网分离离明确的手工工维护与自自动运维的的分工界面面（网络自自动化，专专网与混网网）通用网络服务与业务务专用网络络服务的分分层控制资源弹性调度度-资源能力规划划与设计网络能力的规规划与设计网络出口采用用硬件防火墙墙，提供基于于3、4层的网络通用用安全防护虚拟机之间的的安全防护使使用虚拟化应应用防火墙，，提供7层的内容及安安全防护，有有效隔离不同同的虚拟机，，防止虚拟机机之间的安全全风险资源池（或主主机）的出口口部分使用解解决入侵防御御和负载均衡衡需求使用VSS/VDS/LS控制虚拟化网网络资源弹性调度度-资源能力规划划与设计经典KVM网络资源弹性调度度-资源能力规划划与设计经典OpenstackKVM网络资源弹性调度度-资源能力规划划与设计VxLAN资源弹性调度度-资源能力规划划与设计存储能力的规划与与设计支持主流IPSAN/FCSAN设备支持大云EBS支持IBMSVC等专业存储虚虚拟化兼容Openstack的Cinder块存储接口支持块分区管管理支持存储碎片片化管理支持存储设备备性能及故障障的监控分区1BC-EBS…IBMSVCEMCVPLEX…分区NBC-EBSIBMSVCEMCVPLEX…块操作OpenStackAgent监控采集系统管理存储管理子系统资源池系统26弹性调度自动部署镜像云监控VLBAPI镜像用户可以将业务使用的镜像上传到资源池镜像管理系统内进行统一管理云监控监控业务应用运行的实时状态，具备业务级弹性调度的基础服务能力。API系统对外部开放资源调度API服务接口，支持业务应用调度资源。VLBVLB服务作为业务弹性调度的一种基础服务能力提供，并与业务自定义镜像动态加载相结合，实现业务应用的弹性扩展自动部署系统根据用户提供的脚本自动部署业务所需的应用软件其它服务高级服务（横向资源弹性性调度）Service（自动）API（业务系统判断并执行）Portal（人工判断并执行）展现形式高级服务案例：VM+VLB+云监控+镜像的资源弹弹性调度云监控镜像选择预警虚拟机对应的业务镜像VM根据模板及镜像创建出新的VMVLB将新VM加入到VLB成员列表中VM启动虚拟机监控到CPU持续超过70%云计算发展解解读云资源池整体体架构设计面向资源弹性性调度的云资资源池规划与与设计面向运维自动动化的云资源源池池规划与与设计Q&A提纲自动化运维的的构成自动化运维统一资源管理理自动化部署运维资源弹性调调度统一监控管理理（工单，服务流程程、告警，性性能）大数据运维运维资源的弹性性调度资源能力中规规划的能力分分为：面向租户的能能力面向运维的能力面向运维的资资源能力只面面向运维人员员提供对资源源池资源弹性性调度。运维资源需要与与监控和策略略配合使用。。运维资源的弹性性调度支持半半自动和自动动两种方式VMware分布式资源调调度（DRS）功能跨资源池动态态调整计算资资源基于预定义的的规则智能分分配资源优势使IT和业务优先级级对应动态提高系统统管理效率自动化的硬件件维护动态负载均衡衡和连续智能能优化，保证证所有应用需需要的的资源源资源池ResourcePool业务需求BusinessDemand围绕业务进行行组织和规划划…而不是您的硬硬件!通过VMwareDRS动态获得硬件件资源负载分配规则则设定一次，，永远有效，，自动执行易于添加更多多的资源避免业务繁忙忙时段的过载载动态添加硬件件资源池CPU36GHz,Mem58GB优先级：高资源池CPU50GHz,Mem70GB优先级：高分布式电源管管理(DPM)资源池业务需求下电当整个群集需需要资源减少少时，整合所所有负载到少少数几台服务务器上将不需要的服服务器置于备备用模式当负载增加时时，DPM自动将处于备备用状态的服服务器唤醒在确保服务级级别的同时，，最大限度降降低了数据中中心服务器的的耗电量虚拟机没有中中断或停机利用UpdateManager和DRS无中断地升级级ESXVMotionVMotionUpdateManagerserver大批量地升级级ESX并且不影响任任何应用的运运行，虽然ESX会重启，但确确保虚拟机永永不停机UpdateManager升级整个DRS群集DRS群集中的每个个ESX主机依次进入入维护模式虚拟机被VMotion到其他ESXESX升级并重启虚拟机重新VMotion回来下一台ESX重复以上步骤骤统一资源管理理虚拟主机虚拟存储虚拟网络虚拟资源域实体资源域实体主机实体存储实体网络CMDBVMwareHA功能当服务器故障障时，自动重重新启动虚拟拟机优势经济有效的适适用于所有应应用的高可用用不需要独占的的stand-by硬件没有集群软件件的成本和复复杂性经济有效的适适用于所有应应用的高可用用解决方案X统一资源管理理-特性满足云计算发展要求对于实体资源包括：物理机、存储设备、网络设备等进行资产管理。对于包括虚拟机、操作系统、应用软件、业务软件等进行资产管理。实体与虚拟资源统一管理根据资产的数据模型，支持资产间的关联关系管理。例如某物理机上安装了操作系统、版本及补丁号等。资产管理关系管理资源管理系统与自动部署系统对接，自动识别物理机配置信息、安装的操作系统/应用系统/业务系统版本、补丁等信息，以及物理上创建的虚拟机等信息。资产自动发现与更新资产管理支持资源视图、业务视图、CI项视图等查询和展示资源，并支持资源关联关系钻取展示，全方位的了解资产情况多维度资产展示计算资源CMNET带宽FC-SAN存储分布式存储公网IP私有云各类资资源分配情况况展示，为扩扩容提供数据据依据。固定时间段内内月均发生故故障统计。各类资源故障障以厂商和类类型进行统计计厂家更换备件件数量各类硬件更换换数量统一资源管理理-辅助决策统一资源管理理-辅助决策（续）资源池整体扩容的辅助决策业务系统资源扩容的申请辅助决策业务系统资源过剩收回资源的辅助决策备品备件的辅助决策资源池扩容厂商及型号选择的辅助决策一二三四自动化部署41现象本质小李，明天需要安装好50台安装好的物理机给业务部门使用？集团公司要求8号前所有的Windows7操作系统都需要打上SP3的补丁昨晚10台BOSS的业务系统升级，有一台漏掉了，导致BOSS业务故障小王，明天给我提交一份报表，包括所有的物理机的配置，操作系统版本，补丁号，安装的应用软件版，业务软件版本00的资产管理中显示的信息怎么跟实际的不一致，谁又没有按照流程处理，动了这台机器？这批HPDL380的太老了，需要升级微码，才能安装我们的系统小张，这批机器10号前需要全部安装操作系统/Tomcat/监控代理/计费采集模块人工已经难以满足业务本身对机器及业务上线速度的要求？有了完善IT运维制度还不够，如何保障制度被有效的执行？运维人员忙于各种系统安装配置、没有更多经历关注业务如何发展需要具备能真实反应生产环境的资产清单，并且他不仅仅只包括物理机的配置人工操作难免出错，如何避免/减少错误的发生，降低故障率？42统一资源管理理能够真实反映映生产环境的的资产及动态态配置资产管理能够够涵盖设备配配置/操作系统/应用系统/业务系统/补丁等多层面面精细化管理理资产管理与云云平台无缝对对接目标自动部署大批量自动化化部署操作系统的自自动部署应用/业务软件的自动部部署补丁自动升级软件仓库及版版本的管理应用调度流程程管理监控与管理自动部署任务务监控资产配置一致致性扫描与检检查版本的一致性性扫描与检查查设备/应用/业务软件监控控自动化部署-目标操作系统安装装软件部署软件调度管理理应用软件监控控管理员物理机监控资产库物理机应用软件监控agent软件仓库管理员11、软件发布2、资产录入3、制定操作系系统自动部署任务务2344、提提取取操操作作系系统统版版本本5、部部署署操操作作系系统统6、更更新新资资产产库库7、返返回回安安装装结结果果并并通通知知568、性能能/告警警/开关机机9、制制定定软软件件自自动动部部署署任任务务10、提提取取软软件件版版本本11、部部署署软软件件712、更更新新资资产产库库13、返返回回安安装装结结果果并并通通知知14、运运行行状状态态/启停停15、软软件件关关联联关关系系管管理理及及调调度度81091112131415自动动化化部部署署-业务务场场景景自动动部部署署-操作作系系统统自自动动部部署署软件库Windows镜像Redhat镜像Suse镜像OSInstallServerDHCP广播FTP下载DHCP广播FTP下载DHCP广播FTP下载DHCP广播FTP下载OS部署总控ServerOS模板以PXE（网络启动）方式启动新增机器，从管理节点获取IPOSInstallServerOSInstallServerOSInstallServer自动动部部署署-软件自动动部署特特性批量部署批量：支持物理机和虚拟机的软件批量部署自动化：支持标准化的软件安装框架（标准打包、安装接口，卸载接口，启停接口，监控接口）自动安装定制化安装定制化：支持用户自定义的应用软件的安装动态监控动态监控：支持软件安装任务管理，查看任务进度及结果，及自动消息通知机制多软件类型多软件类型：支持主流中间件的安装部署，包括Oracle,Weblogic,Tomcat,MySQL,Glassfish,Jboss,Hadoop。支持各类操作系统支持补丁的安装设备告警详情情拓扑网管告警性能自动部署署-监控管理理监控agent/应用软件件实时监控告警标准化处理告警级别重定义应用软件监控采集确认通知工程中设备关联信息清除告警监控重复告警实时展示监控上报拓扑管理拓扑展示分组与钻取拓扑过滤拓扑导出拓扑编辑设备主动上报告警性能阀值告警SNMPSNMP告警拓扑应用监控控性能自动部署署-监控与管理特特性大规模：：支持上上万台服服务器监监控采集集，通过过分布式式部署方方式，提提高采集集效率大规模监监控采集指标定义义：支持持用户自自定义采采集指标标，用户户可以根根据业务务需求灵灵活定义义采集指指标，不不受操作作系统限限制监控指标标可定义义展示丰富富：支持持告警、、性能和和应用监监控等独独立功能能的展示示，并支支持网络络的拓扑扑展示，，可以将将告警实实时在拓拓扑图上上反映出出来监控展示示丰富多样化通通知手段段：支持持短信、、邮件等等通知手手段，方方便运维维人员及及时了解解系统情情况通知手段段多样自动部署署-版本管理关键键因素对业务、系统、软件、补丁等信息进行建模，针对版本管理要求完善版本基本信息、校验信息、部署依赖关系、补丁关系等进行建模，保证版本的可管理性。完善的版本数据模型软件如池时，需输入完整版本信息，上传安装包后系统会进行版本信息比对，只有版本信息及安装包一致的情况下才生效。版本输入一致性软件部署作业批量部署软件后，安装脚本在安装目录生成软本信息，系统比对所有安装版本信息，保证批量部署的软件版本一致。版本部署一致性定时或手动触发软件版本核对功能，系统通过部署的软件版本信息以及其他关键信息与系统中版本信息比对，出现不一致的情况则触发告警。版本信息核对自动部署署-版本一致性检查/巡检版本信息息元数据据文件自动生成成软件管理理系统版本一致致性检查查判断条件件：1、版本信信息元数数据文件件是否存存在；2、版本信信息元数数据文件件信息与与配置库库信息是是否一致致；3、检查指指纹数据据是否与与初始值值一致安装完成成后的指指纹数据据（类svn）大数据运运维50大数据运维监控指标数据据对接获取取指标数据自学习和建模单指标历史基线分析多指标相关性分析指标异常预警多数据源数据采集集指标数据据自学习习功能51随时间推推移和指指标采样数据据的变化动态态刷新可灵活设设定模型型建立自学习时间周期期。历史归档档数据和和持续采采集的指标数据自学学习完成成相关指标标采样数数据进行行自学习，无需人工编写写分析规规则。单指标历历史基线线分析功功能基于数理统计计算法对对任意指指标采样样数据做做变动基基线分析析。对周期性性变化指指标可自自学习和和展现其其周期变变化规律律基线。。可搜索和和查看任任意被分分析指标标的时间间序列变变化曲线线和趋势势。52指标行为为轨迹的的自学习习和阀值值自动判判定单KPI的自学习习和分析析围绕其其变动基基线展开开阀值基于于指标采采样数据据的波动动规律自自动判定定TimeKPIUpperthresholdLowerthresholdValueKPI周期曲线线TimeValueWeek0Week1Week2Week3upperthresholdlowerthresholdTimeValueWeek0Week1Week2Week3upperthresholdlowerthreshold现有模型型引入自学学习后模型型多指标相相关性分分析功能能基于大数数据分析析和相关关算法可可自学习习指标间间（多变变量）因因果关系系。对于被关关注的指指标数据据，系统统会自学学习并识识别各指指标之间间是否有有相关性性。如果果有相关关性，系系统能自自学习其其数据变变化，识识别出这这些指标标之间间“正常常”的相相关行为为模式，，并持续续对其行行为进行行跟踪并并提供图图形化的的展现。。系统可搜搜索、选选择任意意数个指指标并放放在同一一个时间间序列图图中查看看这些指指标的变变化曲线线和趋势势，包括括选择任任意指标标的历史史基线进进行比对对。指标异常常预警功功能KPI指标自学学习动态生成成合理区区间范围围异常发生生形成告警警信息KPI指标监控控策略资源池业业务全景景监控环环境指标分类基线容忍线KPI样例策略类别一有容量限制静态对于容量类（如最大并发用户数等）告警，可以只设定高容忍线进程数可设置多个超出时限，逐级升级告警连接数session总数类别二随时间单向递增或递减静态对于资源使用量类指标（如磁盘利用率、磁盘空间、数据库表空间等），可以在指标变化趋势的方向上设置单侧容忍线（上容忍线或下容忍线）磁盘使用率设置上容忍线---可设置多个超出时限，逐级升级告警磁盘剩余空间设置下容忍线---可设置多个超出时限，逐级升级告警磁盘可使用天数根据历史使用数据，采用线性回归算法，计算使用速率，从而估算空间的剩余可使用天数。表空间使用率设置上容忍线---可设置多个超出时限，逐级升级告警类别三周期性变化很小动态对于命中率、部分使用率、或者响应类的通用指标，可以只设定上容忍线或者下容忍线数据字典缓冲区命中率(%)

根据历史数据，采用正态分布算法，设置合理的超出时限库高速缓冲区命中率(%)

SGA命中率(%)

读请求磁盘命中率(%)写请求磁盘命中率(%)响应时间堆内存使用率线程个数类别四指标波动与时间相关，随时间变化呈规律性波动动态对于大部分周期性的指标，可同时设置上容忍线和下容忍线CPU使用率根据正态分布算法，设置周期变化的阈值内存使用率网卡接收速率网卡发送率类别五纳入KPI考核并给出达标值要求静态对于KPI类指标，设置单侧容忍线（高容忍线或低容忍线）根据实际需要调整可设置固定值，超出固定值则产生告警案例1：单KPI分析-预测资资源的的消耗耗时间间历史数数据分分析对历史史剩余余磁盘盘空间间分析析采用线线性回回归算算法计计算磁磁盘的的消耗耗速率p数据库库表空空间监监控时时，能能看到到剩余余的表表空间间大小小，可是每每天用用多少少呢？？剩余余的空空间究究竟能用多多久呢呢？预测基于实实时的的剩余余表空空间大大小、、计算算的消消耗速速率p，来预预测可可使用用的天天数D根据实实际使使用情情况精精确预预测出出使用用天数数，更更有指指导意意义。。我再再也不不用自自己估估算了了~案例2：单KPI分析-周期性性数据据的动动态阈阈值设设定历史数数据分分析对历史CPU使用率率进行行分析析利用正态分分布法法计算算某时刻刻的上上下阈值自动识识别周周期性性数据据和非非周期期性数数据能够在在周期期性和和非周周期性性间切切换CPU的使用用率是是周期期性，，阈值该该设定定多少少呢？多少少才是是最符符合实实际业业务运行需要呢呢？案例2：单KPI分析-周期性性数据据的动动态阈阈值设设定60决策辅辅助显示相相关的的信息息数据据，辅辅助用用户做做后续续的处处理决决策显示过过去N个周期期内，，该时时间段段的CPU数据显示该该设备备最近近的N条故障障信息息显示该该时刻刻内存存、进进程CPU使用数数据等等监控&预测基于KPI的基线线自学学习跟跟踪和和预警警，过过滤掉掉噪音音预警警更安全全实用用了，，告警警更可可靠了了~连问题题分析析处理理时间间也大大大缩缩减了了！案例3：多KPI分析-单设备备KPI关联分分析历史数数据分分析定义检检测问问题相相关KPI的关联联性基于历历史运运行数数据分分析相相关KPI的检测测临界界值Tomcat的堆内内存使使用率率高，，到底底是什什么原原因造造成呢呢？是是内存存泄露露了么么？堆内存存使用用率：：高垃圾回回收时时间：：长垃圾回回收时时间间间隔：：短内存泄泄露案例3：多KPI分析-单设备备KPI关联分分析62决策辅辅助显示关关联指指标的的实