滴滴出行自动化运维实践_第1页
滴滴出行自动化运维实践_第2页
滴滴出行自动化运维实践_第3页
滴滴出行自动化运维实践_第4页
滴滴出行自动化运维实践_第5页
已阅读5页,还剩15页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1、滴滴自动化运维实践滴滴如何运维千级别规模机器Agendav滴滴运维问题与挑战v滴滴自动化运维思路v滴滴自动化运维实践 WorldTree(统一资源管理) 监控系统 自动故障处理滴滴运维挑战v 产品线多且同构, 运维工作如何复用? 出租车: api,mis, 专车: api,mis, v流量突增, 如何快速扩容? 初始化环境 监控采集/报警策略 v业务频繁变更, 如何维护服务稳定? 代码 bug 故障定位 运维思路 运维对象以服务节点为中心, 而不是具体机器 服务节点包含运维资源(机器,初始化策略,) 资源变更自动化感知并应用到对应服务器(Puppet, 监控采集 agent, 报警策略,)滴滴

2、实践(Odin)服务树(设计考虑)v核心作用: 统一资源管理 逻辑空间隔离v核心用户: 运维人员(精通命令,擅长文本操作)v系统特点 读多写少(读取速度决定用户体验)v常见设计v数据库存储树形结构v数据库存储 Tag, 动态构建树WorldTree(设计)v 目录结构即树v 运维元素抽象为资源,文本存储v 机器v 初始化策略v 监控采集策略v v 资源变更版本记录WorldTree(模板)v 父节点包含资源模板v 初始化策略v 监控采集策略v v 创建时继承非运行时v Agent 直接依赖叶子节点资源v 支持模板变量, 动态实例化Parent/_template_/machinecollect

3、initChild/machinecollectinit创建节点, 模板变量实例化WorldTree(架构)WorldTree( 实现)统一资源管理 获取机器列表 获取监控采集列表 获取部署策略列表v 监控系统v新上架机器自动化安装 Agentv服务扩容之后, 所有监控自动生效v 新增一个模块, 所有基础监控自动添加v节点迁移, 采集/报警策略自动完成迁移v 各个产品线架构类似, 采集/报警策略复用v监控系统(架构)监控系统(实现)用户自定义业务监控, 机器监控默认自动创建监控系统(实现)集群模式( 流量:求和, 耗时:均值)监控系统(实现)时间对比(同比, 环比)监控系统(实现)自定义Tag 对比 (nginx 状态码, 分城市, 错误码 )监控系统(实现)日志内容显示(对于PHP Fatal 之类错误, 直接可以查看到)监控系统(稳定性)监控系统保证线上业务稳定, 谁来保证监控系统的稳定? v架构设计无单点v故障自动冗余v监控系统自我监控v外部系统相互监控自动故障处理v监控系统并不只是报警v抽象: iF Fx(ts) then actions. 类似

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论