2020年全球运维大会-砥砺前行：华泰证券技术运课件

砥砺前行：华泰证券技术运营实践与探索之路砥砺前行：华泰证券技术运营实践与探索之路1目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来发展方向4

目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来2涨乐财富通介绍运营数据下载量4800+万月活750+万公司客户交易人数占比87%获奖情况2018年度券商优秀APP2017年度最佳金融APP

涨乐财富通介绍运营数据3涨乐财富通业务业务保障级别行情沪深期货港股科创板全球新三板交易普通买卖港股通融资融券大宗交易打新神器国债理财公募基金工资定投私募基金养老专区天天财闲钱理财账户账户管家网上开户资产分析业务办理我的账单风险评估资讯热门财经快讯要闻专区涨乐吧自选资讯热门概念其它消息推送优惠价智能选股乐米Level2涨乐会员

涨乐财富通业务业务保障级别行情交易理财账户资讯其它4目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来发展方向4

目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来5行业现状-客户投诉

行业现状-客户投诉6行业现状-监管压力

2018年7月23日，XX证券发生信息安全事件，导致集中交易系统部分中断10分钟。违反了《证券期货业信息安全保障管理办法》（证监会令第82号）（以下简称《管理办法》）第二十四条规定。根据《管理办法》第五十条的规定，深圳证监局决定对XX公司采取出具警示函的行政监管措施。2018年12月24日，XX证券集中交易系统中断37分钟，2019年2月26日，XX公司综合账户管理系统发生故障，影响交易时间累计13分钟。违反了《证券期货业信息安全保障管理办法》（证监会令第82号）第二十四条的规定。依据《证券期货业信息安全保障管理办法》第四十八条第二款、第五十条和《证券期货业信息安全事件报告与调查处理办法》（证监会公告[2012]46号）第三十条的有关规定，辽宁证监局决定对XX公司采取责令改正并定期报告的监管措施。2018年12月24日，XX证券信息技术运维人员XXX违反了《证券期货业信息安全保障管理办法》(证监会令第82号)违反所在证券公司信息安全管理规定，在交易时第二十四条的有关规定。根据《证券期货业信息安全保障管理间对生产环境中的存储过程进行运维操作，引发公司网上交易系统和移动终端交易系统客户端登办法》第五十条、《证券期货业信息安全事件报告与调查处理办法》(证监会公告〔2012〕46号)第二十六条的规定，浙江证监录异常的风险事件。涉事技术人员被浙江证监局出具警示函并记入证券期货市场诚信档案。局决定对你采取出具警示函的行政监管措施，并记入证券期货市场诚信档案。行业现状-监管压力2018年7月23日，XX证券发生信息安7行业现状-行情波动

行业现状-行情波动8复杂的业务5000+条测试用例复杂的系统8个机房，1500+服务器频繁的变更全年变更800+

运维的挑战-系统现状复杂的业务运维的挑战-系统现状9运维过程中的难题

故障问题定位耗时太长无法从客户视角感知系统健康状况缺乏贴近实际业务的监控方法服务端架构物理隔离，还会出现故障蔓延运维过程中的难题故障问题定位耗时太长10目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来发展方向4

目录涨乐财富通介绍1行业现状&运维的挑战2技术运营实战3未来11技术运营概览机房服务器交换机防火墙负载均衡虚拟化操作系统通讯线路IP地址基础架构硬件属性地域分布应用属性业务属性流程管控状态信息配置信息资产信息配置&流程应用高可用用户体验业务连续性系统健康度风险量化运行管理早间巡检值班补丁安装基础运维基础监控客户端监控服务端监控监控体系变更流程灰度发布风险管控变更管理事件知识库事件处置事件分析事件管理应急预案演练报告混沌工程应急演练容量指标基线管理扩容缩容系统容量立项预算成本成本管理

技术运营概览机房服务器交换机防火墙负载均衡虚拟化操作系统通讯12客户端监控客户端指标业务感知真实客户业务感知UI测试用例视频留存崩溃率耗时机型分布地域分布版本分布服务端监控基础指标应用指标业务指标

cpu，memtcphttpping可视化监控服务器交换机负载均衡防火墙吞吐量耗时错误数日志时间序列异常检测全业务链监控监控体系客户端监控客户端指标业务感知真实客户业务感知崩溃率服务端监控13可视化监控案例-系统拓扑

可视化监控案例-系统拓扑14全业务链监控案例-设计思路

全业务链监控案例-设计思路15全业务链监控案例-落地情况

全业务链监控案例-落地情况16全业务链监控案例-桑基图

全业务链监控案例-桑基图17时间序列异常检测案例-业务周期性

时间序列异常检测案例-业务周期性18时间序列异常检测案例

时间序列异常检测案例19时间序列异常检测案例-检测模型

模型适用场景新标签对一段时期内新出现的标签（请求号、功能号、错误号）进行揭示，可以关注到系统中不同以往的事件点。动态阈值利用历史数据，自动计算出上下限。对突破上下限的情况，进行告警。非常适合请求耗时这样比较稳定的指标，也可以用于请求量突破历史极限等情况的发现。请求有无不关注请求的量，关注请求是否出现。通过历史数据，计算出请求出现的概率。可以用于监控关键时刻（如开闭市）关键请求是否出现。周期很多请求具有较强的周期性，通过历史数据，计算出中位线和波动范围，对突破正常范围的情况进行揭示。时间序列异常检测案例-检测模型模型适用场景新标签对一段时期20真实客户业务感知案例

真实客户业务感知案例21变更流程自测&系统集成测试变更申请验收测试变更&验证升级说明测试需求评审功能测试恢复发布SLA测试方案手工和自动化用例健康检测自测报告风险评估回归测试流量镜像部署方案关联系统日志回放业务监控回退和应急方案性能测试混沌测试

变更流程自测&系统集成测试变更申请验收测试变更&验证升级说明22自动化变更案例研发侧IT资源管理系统自动化服务平台变更墙变更流程

变更指令变更结果变更内容变更通知自动化变更案例研发侧IT资源管理系统自动化服务平台变更墙变更23应用高可用两地三中心部署全链路调用关系绘图丰富的测试演练手段多层次的运行监控维护01020304

应用高可用0102030424强弱依赖关系&混沌工程案例-故障蔓延

强弱依赖关系&混沌工程案例-故障蔓延25强弱依赖关系&混沌工程案例-设计思路交易MobileStock行情MobileStock资讯MobileStock涨乐UI自动化用例测试集标记页面步骤标签程序交易主站日志行情主站日志资讯主站日志映射页面与接口调度程序涨乐页面与接口映射关系集

强弱依赖关系&混沌工程案例-设计思路交易MobileStoc26强弱依赖关系&混沌工程案例-演练思路

强弱依赖关系&混沌工程案例-演练思路