基于容器构建高可用系统的架构课件

1、基于容器构建高可用系统的架构传统企业进军互联网面临的问题与挑战微服务架构服务挂掉模块解耦依赖多模块多环境 复杂横向扩展调用灵活路由混乱频繁升级容错 高可用可独立部署Docker带来了什么？Lxc虚拟化启动速度快镜像分层CI环境构建提升性能，节约成本快速部署更快的扩容 缩容测试生产环 境一致为何基于Docker可以实现微服务架构容 器容 器容 器容 器容 器物理机虚拟机虚拟机容器容器容 器容 器容 器容 器容 器容 器镜像是应用的唯一单元应用包本身配置环境运行环境运行依赖包操作系统发行版操作系统内核容 器容 器容 器容 器容 器高可用系统需要具备哪些能力？运维监控系统 监控配置管理批量命令性能分

2、析应用拓扑大数据存储日志收集系统日志弹性伸缩镜像仓库镜像文件Docker模式海量索引主机管理集群管理异常 报警发布部署中间件安装自动伸缩 服务发现 负载均衡调用链路中间件日志应用性能服务编排错误详情内存快照Native模式中间件网络管理应用构建仓库应用日志安全日志总体架构设计系统运维IaaS ( 用友云、阿里云、华为云、企业自建云)应用层订单服务 tomcat应用服务发现分布式协调 服务Zookeeper镜像仓库代码仓库构建仓库NginxNginxNginxHAProxyHAProxyHAProxy接入层灰度发布系 统 监 控应 用 性 能 分 析性能监控日 志 收 集HDFSHBaseMyS

3、QLElasticSearch数据层自动构建DockerMesosMarathon容器层一键部署配置管理批量命令余额服务 dubbo缓存 redis互联网用户互联网用户互联网用户开发人员运维人员互联网用户管理人员互联网用户节点管理物理架构设计总体流程设计发布管理系统监控Ganglia应用监控代码管理Git镜像仓库构建仓库Maven任务调度集群JenkinsMesosMasterMesosMasterMesosMasterGanglia Nagios统一收集分布式存储业务监控日志分析服务注册与 发现基于Docker模式的构建流程rootuap-01# docker build -t yonyou

4、/tomcat .rootuap-01# docker run -d -p 8080:8080 yonyou/tomcatrootuap-01# docker push yonyou/tomcat :1.0build & tagpushrun & pullServerServerServerServerServerServerServerServerServerServerrootuap-01# docker run -d -p 8081:8080 yonyou/tomcatrootuap-01# docker run -d -p 8090:8080 yonyou/tomcat 由1台服务器，

5、产生了10个新“服务器”（容器）DockerFile基于Docker模式的构建脚本应用向资源池发布如何做？基于Docker模式的服务发布脚本持续交付怎么做？容器编排服务端口设 定应用版本号镜像仓库发布脚本开始发布Marathon 分发Mesos MasterMesos Slave服务启动服务发现代码提交Git/SVN代码构建Maven仓库应用war包Nginx 反向代理域名接入用户可访问用户引流root01# wget app.war tomcat.tar.gz jdk.tar.gzroot01# ./bin/catalina.sh run -config ./conf/mesos.xmlro

6、ot01# tar zvxf tomcat.tar.gz jdk.tar.gzwgetunzipstartTomcatTomcatTomcatTomcatTomcatTomcatTomcatTomcatTomcatTomcat由1台服务器，产生了10个新“中间件”（原生）服务编排脚本root01# ./bin/catalina.sh run -config ./conf/mesos.xml root01# ./bin/catalina.sh run -config ./conf/mesos.xml基于Native模式应用构建和发布流程无需构建直接发布Native模式应用发布的利与弊简单，无需D

7、ockerFile环境冲突不用服务编排基于Framework性能优势版本管理端口管理百万并发压测 Docker不同模式的性能对比测试场景：物理机+Docker结论：Docker bridge网络模 型，性能最差，但是相比 Docker host模型损耗不大，1%左右。Docker host网络模型和Native方式，性能几乎无差 异。弹性高可用的设计ContainerApplications云计算资源池（Data Center and Clouds）动态弹性伸缩（Dynamic Scaling）Mesos SlaveMesos SlaveMesos SlaveMesos SlaveMesos

8、SlaveMesos SlaveMesos SlaveMesos SlaveMesos SlaveMesos SlaveMesos SlaveMesos SlaveMarathonContainerContainerNativeNativeApplicationsRPC ServicesApplicationsSchedule JobsZookeeper ZooZkeoeopkereperMesosMaster健康状态检查保证高可用应用运行的架构分布式索引Mesos + Docker 虚拟化Marathon(init.d)Mesos SDKtomcat,dubbo,redis,hadoop(容

9、器生成的节点)原生 实例订单服务tomcat tomcat tomcattomcat tomcat tomcat用户登录服务数据缓存dubbo dubbo dubboElasticSearchElasticSearch大数据处理NginxredisredisredisNginxHAProxyHAProxy镜像仓库应用仓库容器实例HadoopHBase HBase应用访问的数据流向域名接入服务发现MarathonTomcatDockerNginx Docker数据存储Hbase ClusterNativeNginx DockerTomcatNativeZookeeperES Cluster Na

10、tive80HAProxy8080Router Server80HAProxy8080Mesos 资源池（混合架构）TomcatDockerDB ServerMySQLTomcatNativeDubboNativeNginxupstream资源的合理利用保证服务的高性能CPUI/O NetWork Mem业务监控和应用性能监控怎么做？Web Server #1NginxLogstash（shipper）DB Server #2MySQLLogstash（shipper）RPC Server #2DubboAPM Agent（txId）API Server #3JavaAPM Agent（txI

11、d）日志收集与性能分析Kibana WebRedisCollector数据存储HBaseAPM WebRedisLogstash（indexer）App Server #1TomcatAPM Agent（txId）ElasticSearch更大数据量的Easticsearch集群Web UISearch QueryCollectorIndex Query提交索引数据搜索请求执行搜索ElasticSearch Data NodeElasticSearch Query Node保存索引数据ElasticSearchMaster NodeMesos SDKDocker EngineDockerNative应用云化的一些规范与准则 代码与拓扑无关 应用无状态化 不要写本地磁盘 日志统一管理DockerFile +镜像化 不要依赖基础设施 使用通用的REST API 禁止手工部署应用 Port资源必须规划 禁用不稳定的源平台建设过程中用到的技术栈企业互联网开放平台的总体构成公共应用支撑开发工具技术平台前端控件、框架服务端中间件、框架云运维平台互联网连接器编