乐道1号店运维云平台介绍

1、乐道1号店运维云平台介绍技术创新，变革未来Agenda123四环一库的深度解读乐道的产品架构及核心价值乐道的演变过程及核心功能私有云平台的演变过程纯手工标准化自动化平台化CMDB乐道首页乐道的核心功能 - 四环一库CMDB设备管理 装机管理 配置管理配置管理 服务部署 服务注册IDC闭环部署闭环监控闭环监控系统 事件管理 报警系统业务闭环持续集成 配置中心 发布系统四环一库 - CMDBCMDB基础设施 系统&配置 组织&业务四环一库 - IDC闭环IDC闭环设备管理 装机管理 配置管理四环一库 - 部署闭环部署闭环配置管理 服务部署 服务注册四环一库 - 业务闭环业务闭环持续集成 配置中心

2、发布系统四环一库 - 监控闭环监控闭环监控系统 事件管理 报警系统Agenda123四环一库的深度解读乐道的产品架构及核心价值乐道的演变过程及核心功能四环一库 - IDC闭环IDC闭环监控闭环IDC管理自动化配置自动化部署闭环装机自动化业务闭环装机管理的演变过程物理机IPMICobblerPXEAPI物理机命令行-GUI虚拟机CMDB网络安装远程控制统一管理自动更新拥抱云IDC_A主机Puppet AgentZabbix ServerIDC_B主机Puppet AgentZabbix Server配置管理Puppet Masterfile - zabbix_agentd.confpackage

3、 - zabbix-agentCMDB获取详细信息(用于factor)IDC管理系统设备管理宿主机管理装机管理资源池装机初始化创建虚拟机Hypervisor配置管理设 备 录 入应用运维IDC运维IDC管理系统四环一库 - 部署闭环IDC闭环监控闭环服务注册自动化服务部署自动化部署闭环业务闭环 配置管理可视化主机状态空闲已废弃预上架 中维护中使用中维护注销服务屏蔽监控维护完成配置管理部署服务注册服务下架报废删除监控释放IP清理设备下架回收开启监控清理日志清理服务清理代码报废删除监控释放IP清理设备上架应用运维一 键 上 架一键上架通用文件管理系统通用文件管理系统通用文件 管理系统GitLabP

4、uppet Master主机Puppet Agent1.git push2.web hook3.api4.git pull5.puppet agent服务自动部署发布系统配置中心待上架主机主机管理MQ版本仓库产生消息消费消息推送代码拉取配置服务自动注册ZooKeeper服务调用者服务调用者服务提供者监听监听服务注册(服务启动)服务注销(服务停止)etcd应用(服务调用者)LBLBconfdconfd监听监听服务注册(主机上架)服务注销(主机下架)应用层服务层四环一库 - 业务闭环IDC闭环部署闭环业务闭环监控闭环进度控制降低风险无人值守编译 打包代码 仓库持续集成预发布 环境生产 环境发布系统

5、预发布 环境生产 环境配置中心生产环境流程管理配置代码发布流程发布平台无人发布生产环境自动化阶段化人工单阶段发布无人发布无人发布乘客业务线一趟列车一次发布车站发布系统时刻表上线周期订票上线申请检票上线审核专车紧急上线无人发布的整体架构SCM配置代码配置中心持续集成8.代码发布7.代码获取预发布环境6.配置拉取产环境生1.提交审核3.审核发布系统4.生成发布5.发布流程管理2.上线申请配置 客户端业务开发灰度发布生产环境自动化阶段化人工单阶段发布无人发布灰度发布灰度发布的访问控制服务提供者服务提供者服务提供者应用(服务调用者)应用 (服务调用者)应用(服务调用者)服务层ZK集群LB发布系统HC/

6、调度服务发现服务注册灰度控制应用层应用(服务调用者)服务提供者进度控制待发布已作废发布中已发布阶段N已 完成回滚中回滚暂停已回滚作废发布完成暂停回滚完成暂停继续 回滚灰度YYN最后 阶段N阶段等待继续发布发布暂停回滚进度控制待发布已作废发布中已发布阶段N已 完成回滚中回滚暂停已回滚作废发布完成停回滚完成暂停继续 回滚灰度YYN最后 阶段N阶段等待继续暂发布发布暂停回滚四环一库 - 监控闭环IDC闭环部署闭环业务闭环监控闭环准确性及时性全面性监控整体架构负载均衡交换机服务器路由器存储设备NginxRedisDBTomcatApp 1App NApp 2健康数据日志数据服务数据业务数据系统数据SQ

7、LLogAgentAPIZabbixZabbix基础监控日志监控大屏监控业务监控数 据 采 集 层监 控 报 警 层数 据 展 示 层监控系统监控项配置报警系统短信/语音/邮件事件管理屏蔽/去噪 降维/合并网络监控监控的全面性监控的及时性Zabbix ServerZabbix ProxyZabbix ProxyZabbix AgentZabbix AgentZabbix AgentZabbix Agent基础监控Storm日志监控Kafka原始日志ElasticSearch图表、报警访问日志应用日志监控项的分类可 用 性稳 定 性外部内部负载网卡流量CPU使用率进程端口PingHealthCh

8、eck接口调用量接口错误数接口响应时间监控的准确性 - 系统故障降维核心交换机接入交换机物理机虚拟机TomcatApp接入交换机物理机虚拟机Tomcat AppMonitorpingpingporthcpingping监控的准确性 - 系统故障降维监控对象监控降维过程AppApp异常-Tomcat异常-虚拟机异常-物理机 异常-接入交换机异常-接入交换机异常TomcatTomcat异常-虚拟机异常-物理机异常-接入交换机异常-接入交换机异常虚拟机虚拟机异常-物理机异常-接入交换机异常-接入交换机异常物理机物理机异常-接入交换机异常-接入交换机异常接入交换机接入交换机异常-接入交换机异常核心交换机接入交换机异常接 入 交 换 机 异 常远近监控的准确性 - 应用故障降维Service BService CService Ahc监控对象监控降维过程Service AService A异常-Service B异常-Service C异常Service A异常-Service C异常Service BService B异常-Service C异常Service CService C异常hchcService C异常Agenda123四环一库的深度解读乐道的产品架构及核心