KGOPS助推智能运维发展-邢怀康

邢怀康上海中亦图灵数字科技有限公司产品研发总监运维发展现状与挑战故障分类文本抽取微服务故障定位调用链图挖掘7THZABBIXConferenceChina/2022场景目标数据AI方法告警识别故障分类文本抽取微服务故障定位调用链图挖掘7THZABBIXConferenceChina/2022场景目标数据AI方法告警识别异常检测告警压缩关联指标贝叶斯优化容量预测 应用拓扑逻辑 CMDB图技术/自动化技术业务影响分析 应用拓扑逻辑ITSM 单维数据分析 缺乏多维数据视角分析数数据质量不高CICI达不到要求 (高于95%)重重模型轻数据把模型的重要性放在较高位置7THZABBIXConferenceChina7THZABBIXConferenceChina/20225%%%算法模型是最强大脑达5%%%算法模型是最强大脑达动力数据数据质量业务规则算法模型智能运维体系7THZABBIXConferenceChina/2022自动化路线主题词全自动化运维中心为中心运维知识图谱7THZABBIXConferenceChina/2022自动化路线主题词全自动化运维中心为中心运维知识图谱与流程工具数据可观测平台基于AI的推理与决策提升手段以业务价值为导向数字数字化以知识图谱为核心的核心技术集中化智能化7THZABBIXConferenceChina/2022•统一管理•工具集成•数据可视化•7THZABBIXConferenceChina/2022•统一管理•工具集成•数据可视化•运维数据标准化•KGOPS智能检核•KGOPS智能关联•运维数据服务•运维数据基座•智能算法•KGOPS智能场景一站式入口数字化报表运维大屏多维数据融合支撑数据消费知识图谱建模与表达变更风险预测能力快速排障能力全面走向智能运维价值•运维数据治理需求关键内容•ITIL运维体系•运维数据•运维自动化工具数据中心智能运维建设路线制度、流程、工具数字门户运维数据基座智能运维6个月6个月6个月6个月N个月初创型发展型成长型量化量化IT运维价值疏通运维流程统一运维数据标准KGOPS产品介绍产品定位7THZABBIXConferenceChina/产品定位7THZABBIXConferenceChina/2022主要解决什么问题？数字化、智能化的问题。主要应用场景•CMDB关系发现与质量检核•应用全景资源画像•变更影响分析•智能监控与告警抑制•故障根因分析定位•...KGOPS定位大数据技术构建的智能运运维走向智能运维。7THZABBIXConferenceChina7THZABBIXConferenceChina/2022&大屏展示业务系统画像管理看板运维数字门户&大屏展示业务系统画像管理看板运维数字门户|务报告智能巡检智能检核基线比对故障根因定位变更影响分析数据分析平台运维大数据分析业务关系数据分析运营数据分析智能巡检智能检核基线比对故障根因定位变更影响分析数据分析平台运维大数据分析业务关系数据分析运营数据分析自动化平台调度发布自动化目录知识管理支持商管理包管理IT服务管理(绩效KPI、移动端)请求管理运维工具运维工具集zabix数据库监控与分析工具巡检工具系统监控工具中间件管理工具MysqlMysql|Oracle|DB2|HDFSKGOPSCMDBMetricMetric(zabix)TracellogHHardwareAApplicationMiddleMiddleWareOSOS HHardwareAApplicationMMiddleWare7THZABBIXConferenceChina7THZABBIXConferenceChina/2022功能模块特色优势效效果示意图客户案例收益关联系统数据融合检核联规则；淀成规则；据质量图谱可视化图工作台看各系统数据7THZABBIXConferenceChina7THZABBIXConferenceChina/2022势益对线数据准确性Ø可直观查看基线新增、修改、删除等不同状态Ø简化基线排查工作复杂度集管理各类基线数据定位推荐变更影响范围及对象定位故障点分析推荐变更影响范围及影响程告警压制警信息准确性警信息升网络故障定位速度KGOPS最佳实践7THZABBIXConferenceChina/2022•实体属性图构建(entitygraph)应用支持部门系统运维部应用区进程1应用1进程2进程3应用2进程4门物理区机房1设备数据中心机房2设7THZABBIXConferenceChina/2022•实体属性图构建(entitygraph)应用支持部门系统运维部应用区进程1应用1进程2进程3应用2进程4门物理区机房1设备数据中心机房2设备主机1主机2具体案例成果•实现持卡人关系网络构建；系网络数据治理能力；•完成关系网络社区划分；若应用2出故障，可通过智能关联获取所有应用相关数据，解决数据孤岛问题配置区优势景数据库区数据库1数据表1数据库2数据表2数据库2数据表2消息列队2消息列表1消息列队2算法罗列及功能•社区侦测(communitydetection)算法罗列及功能•社区侦测(communitydetection)•链接预测(linkprediction)数数据库部门CMDBCMDB数据管理部门MacMac地址表1Mac地址表2网络端口1网络端口2配置实例1配置实例2IP地址1IP地址2用户1用户27THZABBIXConferenceChina/2022应用全景视图7THZABBIXConferenceChina/2022应用全景视图逐一查询Metric(zabix)TraceLogCMDB异常情况；CMDCMDBØ首先对CI进行实体抽取,关联字段名+值一致，及字段名不一致，值一致的实体；Ø再通过IP关联，实现CMDB与Metric等数据融合。7THZABBIXConferenceChina/2022多维关联后变更•时长：修复约耗时48小时7THZABBIXConference7THZABBIXConferenceChina/2022重损害应用服务的故障恢复效率。告警抑制案例(1)可用性。)l通过组合模型+业务召回规则的方案，l在不遗漏重要告警的前提下，l对当前的告警数据进行了很好的压缩，l压缩比达到了5%。告警抑制案例(2)步骤输出效果分类模型召回规则聚类模