版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、滴滴自动化运维实践滴滴如何运维千级别规模机器Agendav滴滴运维问题与挑战v滴滴自动化运维思路v滴滴自动化运维实践 WorldTree(统一资源管理) 监控系统 自动故障处理滴滴运维挑战v 产品线多且同构, 运维工作如何复用? 出租车: api,mis, 专车: api,mis, v流量突增, 如何快速扩容? 初始化环境 监控采集/报警策略 v业务频繁变更, 如何维护服务稳定? 代码 bug 故障定位 运维思路 运维对象以服务节点为中心, 而不是具体机器 服务节点包含运维资源(机器,初始化策略,) 资源变更自动化感知并应用到对应服务器(Puppet, 监控采集 agent, 报警策略,)滴滴
2、实践(Odin)服务树(设计考虑)v核心作用: 统一资源管理 逻辑空间隔离v核心用户: 运维人员(精通命令,擅长文本操作)v系统特点 读多写少(读取速度决定用户体验)v常见设计v数据库存储树形结构v数据库存储 Tag, 动态构建树WorldTree(设计)v 目录结构即树v 运维元素抽象为资源,文本存储v 机器v 初始化策略v 监控采集策略v v 资源变更版本记录WorldTree(模板)v 父节点包含资源模板v 初始化策略v 监控采集策略v v 创建时继承非运行时v Agent 直接依赖叶子节点资源v 支持模板变量, 动态实例化Parent/_template_/machinecollect
3、initChild/machinecollectinit创建节点, 模板变量实例化WorldTree(架构)WorldTree( 实现)统一资源管理 获取机器列表 获取监控采集列表 获取部署策略列表v 监控系统v新上架机器自动化安装 Agentv服务扩容之后, 所有监控自动生效v 新增一个模块, 所有基础监控自动添加v节点迁移, 采集/报警策略自动完成迁移v 各个产品线架构类似, 采集/报警策略复用v监控系统(架构)监控系统(实现)用户自定义业务监控, 机器监控默认自动创建监控系统(实现)集群模式( 流量:求和, 耗时:均值)监控系统(实现)时间对比(同比, 环比)监控系统(实现)自定义Tag 对比 (nginx 状态码, 分城市, 错误码 )监控系统(实现)日志内容显示(对于PHP Fatal 之类错误, 直接可以查看到)监控系统(稳定性)监控系统保证线上业务稳定, 谁来保证监控系统的稳定? v架构设计无单点v故障自动冗余v监控系统自我监控v外部系统相互监控自动故障处理v监控系统并不只是报警v抽象: iF Fx(ts) then actions. 类似
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2026-2030中国甲萘威市场深度剖析与发展风险研究报告
- 2026-2030中国榨菜泡菜酱菜腌菜行业消费状况及竞争格局分析研究报告
- 高三毕业数学文科冲刺复习方案
- 研究生导师立德树人合作精神培养课题申报书
- 现代企业内部审计工作方案与流程
- 施工现场人员配置及机械设备调度方案
- 快递行业配送路径优化方案分析
- 电大形考实操作业完整指导方案
- 2026年辽宁省北镇市高考物理三轮冲刺考试卷A4版附答案详解
- 2026年湖南省沅江市高考物理二模测试卷及参考答案详解【新】
- 2026年基础设施建设与管理知识考试及答案
- 2026广东佛山市顺德区村(社区)大学生CEO选聘100人备考题库及一套参考答案详解
- 26年胸膜间皮瘤评估实操指引
- 浙江省绍兴市柯桥区2024-2025学年七年级下学期期末数学试卷(含答案)
- 2025北京市朝阳区太阳宫乡社区工作者招聘考试真题及答案
- 2026年山东春考《艺术设计类专业知识》模拟试题及答案解析
- 2026年吉安市青原区社区工作者招聘考试备考题库及答案解析
- 2026版中央安全生产考核巡查明查暗访应知应会
- TSG08-2026《特种设备使用管理规则》全面解读课件
- ETERM指令讲解课件
- 纯音测听法、听力图及其临床意义(新)课件
评论
0/150
提交评论