DevOps和AIOps探索及实践课件

阿里搜索的DevOps和AIOps探索及实践阿里搜索的1阿里搜索的阿里搜索的1目录DevOps-基础调度框架DevOps-运维管控平台AIOps-探索及实践目录2目录目录2搜索AI·OS搜索AI·OS3搜索AI·OS搜索AI·OS3DevOps基础调度框架：复杂行列式服务调度DevOps基础调度框架：复杂行列式服务调度4DevOps基础调度框架：复杂行列式服务调度DevOps基础历史问题存在三套各自独立的运维系统，维护难、投入多，架构迭代缓慢。在线服务基础运维具备相似性：在线服务管理、数据Dump&Build、数据回流链路管理等。差异点是不同业务系统的管控模型不一样。DevOps运维管控平台历史问题存在三套各自独立的运维系统，维护难、投入多，架构迭代5历史问题存在三套各自独立的运维系统，维护难、投入多，架构迭代DevOps运维管控平台：基础运维简化运维概念DevOps运维管控平台：基础运维6DevOps运维管控平台：基础运维DevOps运维管控平台：DevOps运维管控平台：基础运维从系统到全链路DevOps运维管控平台：基础运维7DevOps运维管控平台：基础运维DevOps运维管控平台：DevOps：Continuous

DeliveryDevOps：ContinuousDelivery8DevOps：ContinuousDeliveryDev• SP,

Wsearch• TPP••••iG

raph••• HA3• ES• HA3• HA3•••AIO

ps K

Mon• Metrics+Log+

Event• alarm->action•• +SP,

WsearchTPP••••

iG

raph••HA3ESHA3

HA3•••A

IO

ps KM

onMetrics+Log+

Eventalarm->action••+AIOps在搜索的探索• SP,Wsearch•iGraph• HA3•AIO9• SP,Wsearch•iGraph• HA3•AIO背景QPS预估差异过大服务间存在错峰服务QPS存在波动周期性规律目标打破静态分配资源，按时按需分配根据流量动态调整，应对突发流量AIOps-大促突发流量变化：弹性伸缩背景AIOps-大促突发流量变化：弹性伸缩10背景AIOps-大促突发流量变化：弹性伸缩背景AIOps-大AIOps-大促突发流量变化：弹性伸缩AIOps-大促突发流量变化：弹性伸缩11AIOps-大促突发流量变化：弹性伸缩AIOps-大促突发流AIOps-资源碎片整理AIOps-资源碎片整理12AIOps-资源碎片整理AIOps-资源碎片整理12AIOps-日常化容量评估背景从1000+到10000+的业务规模爆炸业务变化是常态目标自动化申请合理的（成本低，安全）容器资源容量评估克隆仿真自动化性能压测平台价格调控小规格实例提升资源分配率平衡CPU&Mem&Disk使用AIOps-日常化容量评估13AIOps-日常化容量评估AIOps-日常化容量评估13++c••gg••••A••L••&EiM&e L•••L基础设施建设高效管控的执行-夯实的DevOps一切运维对象样本化-运维样本库算法的高效迭代优化-算法产品化AIOps-平台化建设++cgg•A•L••EiM&e L•基础设施建设高效管14++cgg•A•L••EiM&e L•基础设施建设高效管THANK

YOU！THANKYOU！15THANKYOU！THANKYOU！15阿里搜索的DevOps和AIOps探索及实践阿里搜索的16阿里搜索的阿里搜索的16目录DevOps-基础调度框架DevOps-运维管控平台AIOps-探索及实践目录17目录目录17搜索AI·OS搜索AI·OS18搜索AI·OS搜索AI·OS18DevOps基础调度框架：复杂行列式服务调度DevOps基础调度框架：复杂行列式服务调度19DevOps基础调度框架：复杂行列式服务调度DevOps基础历史问题存在三套各自独立的运维系统，维护难、投入多，架构迭代缓慢。在线服务基础运维具备相似性：在线服务管理、数据Dump&Build、数据回流链路管理等。差异点是不同业务系统的管控模型不一样。DevOps运维管控平台历史问题存在三套各自独立的运维系统，维护难、投入多，架构迭代20历史问题存在三套各自独立的运维系统，维护难、投入多，架构迭代DevOps运维管控平台：基础运维简化运维概念DevOps运维管控平台：基础运维21DevOps运维管控平台：基础运维DevOps运维管控平台：DevOps运维管控平台：基础运维从系统到全链路DevOps运维管控平台：基础运维22DevOps运维管控平台：基础运维DevOps运维管控平台：DevOps：Continuous

DeliveryDevOps：ContinuousDelivery23DevOps：ContinuousDeliveryDev• SP,

Wsearch• TPP••••iG

raph••• HA3• ES• HA3• HA3•••AIO

ps K

Mon• Metrics+Log+

Event• alarm->action•• +SP,

WsearchTPP••••

iG

raph••HA3ESHA3

HA3•••A

IO

ps KM

onMetrics+Log+

Eventalarm->action••+AIOps在搜索的探索• SP,Wsearch•iGraph• HA3•AIO24• SP,Wsearch•iGraph• HA3•AIO背景QPS预估差异过大服务间存在错峰服务QPS存在波动周期性规律目标打破静态分配资源，按时按需分配根据流量动态调整，应对突发流量AIOps-大促突发流量变化：弹性伸缩背景AIOps-大促突发流量变化：弹性伸缩25背景AIOps-大促突发流量变化：弹性伸缩背景AIOps-大AIOps-大促突发流量变化：弹性伸缩AIOps-大促突发流量变化：弹性伸缩26AIOps-大促突发流量变化：弹性伸缩AIOps-大促突发流AIOps-资源碎片整理AIOps-资源碎片整理27AIOps-资源碎片整理AIOps-资源碎片整理27AIOps-日常化容量评估背景从1000+到10000+的业务规模爆炸业务变化是常态目标自动化申请合理的（成本低，安全）容器资源容量评估克隆仿真自动化性能压测平台价格调控小规格实例提升资源分配率平衡CPU&Mem&Disk使用AIOps-日常化容量评估28AIOps-日常化容量评估AIOps-日常化容量评估28++c••gg••••A••L••&EiM&e L•••L基础设施建设高效管控的执行-