后台架构设计课件.ppt

后台架构设计,浅谈后台架构设计,后台架构设计之我见,毕业于浙江大学电子信息工程任职经历深圳华为技术有限公司中央软件院北京趣拿软件科技有限公司（去哪儿网）机票事业部腾讯科技（深圳）有限公司SNG即通应用部众安在线财产保险股份有限公司金融技术部,吴隆烽,架构是一种平衡的艺术,1基本能力（抽象，估算，tradeoff）2设计原则KISS大系统小做有状态无状况逐步演进和演化3整套解决方案可扩展协议性能可用性及容灾部署监控安全4评估敏捷性易于部署可测性性能可伸缩6易于开发5康威定律6业务架构-应用架构-技术架构,分层,事件驱动-状态机,微内核,微服务,SOA与微服务,分布式服务组成的系统按照业务而不是技术来划分组织做有生命的产品而不是项目Smartendpointsanddumbpipes自动化运维（DevOps）容错快速演化,分布式之一：方法论,1CAP(NRW)2BASE3SOA服务化职责单一边界清晰开闭4拆,分布式之二：一致性,强一致，弱一致，最终一致强同步，半同步，异步补偿和最终一致重试和幂等一致性中心一致性算法（paxos,raft,zab）,分布式之三：事务,分布式事务最好的解决方案就是不考虑事务,分布式之三：事务,两阶段提交VS三阶段提交1、引入超时机制。同时在协调者和参与者中都引入超时机制。2、在第一阶段和第二阶段中插入一个准备阶段。保证了在最后提交阶段之前各参与节点的状态是一致的。,分布式之三：事务,本地事件表or消息事务+最终一致,14,可编辑,分布式之三：事务,TCC,分布式之四：服务治理,01服务注册与发现02软负载均衡与容错03服务监控与统计04服务容量评估05服务上线审批06服务下线通知07服务路由08服务编排09服务黑白名单10服务调用链跟踪,11服务自动测试12服务伪装容错13服务使用情况报告14服务权重动态调整15服务负载均衡调整16服务健康检测17服务自动部署18服务资源调度19服务降级20服务等级协定,负载均衡,LVSNGINXHAPROXYL5ZKF5哈希(一致性哈希)SmartClient,高可用(HA),1可用性(N个9)2高可用mysql3高可用redis4failover,failfast,failsafe,failback,forking,broadcasting5VIP,VRRP6zookeeper8WAL9replication&elect10限流控流1频率限制12重试雪崩,高性能(HP),1性能指标2影响性能因素3缓存4同步，异步，协程5多进程VS多线程6线程模型7从单机到多机(分片&读写分离)8压测9错峰10硬件(SSD,RAID,DRBD)11程序优化,12池化13锁优化&zerocopy14批量和延迟写入15静态化16网络17预处理18推送之读写扩散19队列20操作系统21数据库优化,海量服务,容灾,1备份2过载保护(及时拒绝)3解耦4降级5两地三中心(热备，冷备，温备)6同城多活-异地多活7流量切换8重试，防雪崩9柔性可用,监控,监控指标统一日志搜集，监控，跟踪报警立体监控,部署,独立迭代，独立生命周期灰度，蓝绿服务器容量评估服务资源动态调配扩容缩容机房，同城，异地，IDC,安全,ddos，sql注入，xss，csrf，dns劫持，jsonhack）网络,感悟,1学习技术的方式2基本功多线程并发编程网络(io,nio,netty)linux内核数据结构和算法mysqlmemcache/redis3软实力（沟通，组织，领导）4架构师境界以工程思维全面理解业务需求基于模型和基础模式抽象简化提出恰当可行的整体解决方案在限定资源范围完成明确目标满足业务需求且保证系统质量在可预见的周期内具备扩展性并在系统生命周期内持续演进,推荐,JDK源码（netty，spring，tddl，mycat，nginx，redis，kafka，dubbo，RocketMQ，HSF，zookeeper，mysql，kilim）TCP/IPHTTPlinux命令&linux内核(源码)搜索引擎大数据（hadoop，spark，storm