滴滴出行自动化运维实践

上传人：A*** IP属地：广东上传时间：2023-04-13 格式：DOCX 页数：3 大小：16.46KB 积分：2.4 举报 版权申诉

全文预览已结束

 下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

本文格式为Word版，下载可任意编辑——滴滴出行自动化运维实践

滴滴自动化运维实践滴滴如何运维千级别规模机器俞进秋

Agendav滴滴运维问题与挑战v滴滴自动化运维思路v滴滴自动化运维实践WorldTree(统一资源管理)监控系统自动故障处理

滴滴运维挑战v产品线多且同构,运维工作如何复用?出租车:api,mis,…专车:api,mis,……

v流量突增,如何快速扩容?初始化环境监控采集/报警策略…

v业务频繁变更,如何维护服务稳定?代码bug故障定位…

运维思路运维对象以服务节点为中心,而不是具体机器服务节点包含运维资源(机器,初始化策略,…)资源变更自动化感知并应用到对应服务器(Puppet,监控采集agent,报警策略,…)

滴滴实践(Odin)

服务树(设计考虑)v核心作用:v核心用户:v系统特点读多写少(读取速度决定用户体验)统一资源管理规律空间隔离运维人员(精通命令,擅长文本操作)

v常见设计v数据库存储树形结构v数据库存储Tag,动态构建树

WorldTree(设计)v目录结构即树v运维元素抽象为资源,文本存储v机器v初始化策略v监控采集策略v…v资源变更版本记录

WorldTree(模板)Parent/_template_/machinecollectinit

创立节点,模板变量实例化

Child/machinecollectinit…

v父节点包含资源模板v初始化策略v监控采集策略v…v创立时继承非运行时vAgent直接依靠叶子节点资源v支持模板变量,动态实例化

WorldTree(架构)

WorldTree(实现)统一资源管理获取机器列表获取监控采集列表获取部署策略列表v……

监控系统v新上架机器自动化安装Agentv服务扩容之后,所有监控自动生效v新增一个模块,所有基础监控自动添加v节点迁移,采集/报警策略自动完成迁移v各个产品线架构类似,采集/报警策略复用v…

监控系统(架构)

监控系统(实现)用户自定义业务监控,机器监控默认自动创立

监控系统(实现)集群模式(流量:求和,耗时:均值)

监控系统(实现)时间对比(同比,环比)

监控系统(实现)自定义Tag对比(nginx状态码,分城市,错误码)

监控系统(实现)日志内容显示(对于PHPFatal之类错误,直接可以查看到)

监控系统(稳定性)监控系统保证线上业务稳定,谁来保证监控系统的稳定?v架构设计无单点v故障自动冗余v监控系统自我监控v外部系统相互监控

自动故障处理v监控系统并不只是报警v抽象:iffx(ts)thenactions.类似IFTTTvActionChanne

人人文库> 全部分类> 教育资料 > 中学教育

1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。