王超：以应用为中心的DevOps平台建设

以应用为中心的DevOps平台建设京东金融王超融 金融科技

自我介绍京

东

金

融 金融科技

07年~11年

在传统大型企业运维11年~14年

负责人人网PE团队14年~今负责京东金融PE团队王超

Charles传统行业社交网络互联网金融融 金融科技

京东总体介绍京

东

金

融 金融科技

中国最⼤⾃营电商中国第⼆⼤B2C电商全球⼗⼤互联⽹公司融 金融科技

京东总体介绍京

东

金

融 金融科技

⼊驻商家约12万家正式员⼯12万名京东活跃⽤户数需要”亿级流量网站架构"融 金融科技

京东金融总体介绍京

东

金

融 金融科技

2013年10月开始独立运营，定位为金融科技公司2017年3月，京东集团正式签署重组京东金融的最终协议。农村金融消费金融众筹保险金融科技供应链金融财富管理支付证券九大业务板块融 金融科技

京东支付99.99%全站年度可用率（99.99%约一年52分钟）10,000每秒万笔交易且可以水平扩展7×24秒级监控到问题京

东

金

融 金融科技

京东金融-支付业务融 金融科技

总体介绍京

东

金

融 金融科技

•北京三机房北京宿迁宿迁灾备机房京东金融-两地四中心部署京东金融

金融科技

继Agile，Scrum和XP之后2008年，Patrick

Debois

等初次提出DevOps2009年，DevOpsDay

⼤会举办DevOps简介研发，QA，技术运维之间的沟通协作的⽂化京东金融

金融科技

部门墙DevOps要解决的问题更⼩、更频繁的变更意味着更少的风险让开发⼈员更多地控制⽣产环境；更多地以应⽤程序为中⼼来理解基础设施定义简洁明了的流程，尽可能地⾃动化1.2.3.4.5.促成开发⼈员与运营⼈员的协作；京东金融

金融科技

1.DevOps的⽬标是建⽴流⽔线式的准时制(JIT)的业务流程，最⼤化业务产出。2.从架构的⾓度来看，DevOps需要建⽴⼀个⾃动快速部署系统。3.DevOps的价值应由业务结果来评判，⽽不是根据IT项⽬范围和IT成果来评判。——引⾃EXIN_WhitepaperDevOps目标京东金融

金融科技

设计系统的组织，其产生的设计和架构等价于组织间的沟通结构。反过来，如果你的系统设计或者架构不支持，那么你就无法成功建立一个有效的组织2

Pizza

Team打造合适的组织架构PESADBA运维开发安全网络开发产品 测试谁来打破部门墙康威定律产品沟通协调员(StoryTeller)•与研发共同承担SLA⽬标••性能分析师容量规划员•…••PE生产运维京东金融

金融科技

DevOps原则京东金融

金融科技

梳理产品名录服务级别产品信息管理对外接⼜1.2.3.4.5.应⽤中⼼+CMDBSURE应用管理流程系统自动部署系统其他系统自动录入应用信息提供服务器，分组等信息返回部署实例信息查询应用状态提供API接口全局的应用信息维护平台，覆盖业务和应用信息的操作和维护应用全生命周期管理京东金融

金融科技

Infrastructure

as

Code

——

DevOps的基础容器AnsiblePlaybook

Puppet

manifests

SaltstackChefDockerMesos

Kubernetes使⽤描述性语⾔⾃动化，减少⼿⼯做好配置和脚本的版本控制针对配置的测试1.2.3.4.5.敏捷，灰度Infrastructure

as

Code的演进配置管理工具Shell

Scripts

Config

File脚本&配置文件融 金融科技

熟悉技术架构京

东

金

融 金融科技

15基础服务4基础设施服务管控JSF/Dubbo服务框架服务配置中心万兆+SSD传统网络+SDNX86/ARMIDC异地灾备主机监控分布式数据中间层CDS消息中间件JMQ分布式调度中心分布式服务数据和调度服务分布式缓存

R2MOracle/MySQL

HA数据复制组件DBrep数据中心Hbase/ES数据抽取平台Databee网络监控UMC统一日志digger分布式服务跟踪SGM告警中心UWCGSLBHttpDNSIAASCMDB时钟服务定制内核4/7层负载安全服务加解密中心AKS数字证书中心CASYS移动SDK漏洞扫描/WAFJDGuard应用信息中心资产系统代码管理持续集成持续部署分布式弹性计算&实时流式计算接入层网关GPUPaaSIaaSInfra京东金融

金融科技

GSLB（智能DNS）4/7

⽹关服务化（微服务）消息中间件分布式缓存分布式数据库配置管理平台分布式调度1.2.3.4.5.6.7.8.9.数据加解密平台Platform

as

code•有效利用平台减少硬编码，有效解决问题融 金融科技

京

东

金

融 金融科技

方法级监控APM与全链路跟踪代码无侵入全调用链跟踪融 金融科技

京

东

金

融 金融科技

海量日志的准实时检索基于关键词的告警分析日志发布订阅日志的数据挖掘和APM联动分析日志平台京东金融

金融科技

运维の未来京东金融

金融科技

基础监控（⽹络，OS，DNS等）基础服务（DB，缓存，消息等）应⽤级性能监控分布式调⽤跟踪和监控⽇志监控业务指标监控1.2.3.4.5.6.7.监控⼤盘数据