容器及微服务架构模式在流媒体领域的实践

容器及微服务架构模式在流媒体领域的实践痛并快乐着目录了解聚力一期工作技术指标选型Mesos基础持续集成长时服务服务发现定时任务结果和经验下半年工作产品线网站客户端移动OTT前端视频业务点播PP云营收业务广告会员游戏硬件直播第三方VirtualizationServers、IDCservers（CloudStack、Zabbix、Puppet、ControlTier、LVS、Racktable）业务系统媒资系统Epg内容管理Cms广告系统Ads评论系统Comment。。。。。。用户系统Passport搜索引擎Search推荐引擎Rec支付系统PaymentCloud云平台BigData大数据P2PCDNTracker、Dispatcher、OMS、Encoder、Preload、Streaming、FlashP2P、VMSHadoop、HBase、Mahout(人群分析）、Storm\Pike(实时分析)、Spark\Shark支撑系统底层平台了解聚力-业务产品线网站客户端移动OTT前端视频业务点播PP云营收业务广告会员游戏硬件直播第三方VirtualizationServers、IDCservers（CloudStack、Zabbix、Puppet、ControlTier、LVS、Racktable）业务系统媒资系统Epg内容管理Cms广告系统Ads评论系统Comment。。。。。。用户系统Passport搜索引擎Search推荐引擎Rec支付系统PaymentCloud云平台BigData大数据P2PCDNTracker、Dispatcher、OMS、Encoder、Preload、Streaming、FlashP2P、VMSHadoop、HBase、Mahout(人群分析）、Storm\Pike(实时分析)、Spark\Shark支撑系统底层平台了解聚力-业务产品线网站客户端移动OTT前端视频业务点播PP云营收业务广告会员游戏硬件直播第三方VirtualizationServers、IDCservers（CloudStack、Zabbix、Puppet、ControlTier、LVS、Racktable）业务系统媒资系统Epg内容管理Cms广告系统Ads评论系统Comment。。。。。。用户系统Passport搜索引擎Search推荐引擎Rec支付系统PaymentCloud云平台BigData大数据P2PCDNTracker、Dispatcher、OMS、Encoder、Preload、Streaming、FlashP2P、VMSHadoop、HBase、Mahout(人群分析）、Storm\Pike(实时分析)、Spark\Shark支撑系统底层平台了解聚力-业务产品线网站客户端移动OTT前端视频业务点播PP云营收业务广告会员游戏硬件直播第三方VirtualizationServers、IDCservers（CloudStack、Zabbix、Puppet、ControlTier、LVS、Racktable）业务系统媒资系统Epg内容管理Cms广告系统Ads评论系统Comment。。。。。。用户系统Passport搜索引擎Search推荐引擎Rec支付系统PaymentCloud云平台BigData大数据P2PCDNTracker、Dispatcher、OMS、Encoder、Preload、Streaming、FlashP2P、VMSHadoop、HBase、Mahout(人群分析）、Storm\Pike(实时分析)、Spark\Shark支撑系统底层平台了解聚力-业务产品线网站客户端移动OTT前端视频业务点播PP云营收业务广告会员游戏硬件直播第三方VirtualizationServers、IDCservers（CloudStack、Zabbix、Puppet、ControlTier、LVS、Racktable）业务系统媒资系统Epg内容管理Cms广告系统Ads评论系统Comment。。。。。。用户系统Passport搜索引擎Search推荐引擎Rec支付系统PaymentCloud云平台BigData大数据P2PCDNTracker、Dispatcher、OMS、Encoder、Preload、Streaming、FlashP2P、VMSHadoop、HBase、Mahout(人群分析）、Storm\Pike(实时分析)、Spark\Shark支撑系统底层平台了解聚力-业务产品线网站客户端移动OTT前端视频业务点播PP云营收业务广告会员游戏硬件直播第三方VirtualizationServers、IDCservers（CloudStack、Zabbix、Puppet、ControlTier、LVS、Racktable）业务系统媒资系统Epg内容管理Cms广告系统Ads评论系统Comment。。。。。。用户系统Passport搜索引擎Search推荐引擎Rec支付系统PaymentCloud云平台BigData大数据P2PCDNTracker、Dispatcher、OMS、Encoder、Preload、Streaming、FlashP2P、VMSHadoop、HBase、Mahout(人群分析）、Storm\Pike(实时分析)、Spark\Shark支撑系统底层平台了解聚力-业务数据库缓存对象存储JavaPHP消息系统协作系统文件存储负载均衡域名解析内容分发网络/CDN数据层计算层接入层了解聚力-一次访问请求数据库缓存对象存储JavaPHP消息系统协作系统文件存储负载均衡域名解析内容分发网络/CDN数据层计算层接入层了解聚力-一次访问请求数据库缓存对象存储JavaPHP消息系统协作系统文件存储负载均衡域名解析内容分发网络/CDN数据层计算层接入层了解聚力-一次访问请求数据库缓存对象存储JavaPHP消息系统协作系统文件存储负载均衡域名解析内容分发网络/CDN数据层计算层接入层了解聚力-一次访问请求数据库缓存对象存储JavaPHP消息系统协作系统文件存储负载均衡域名解析内容分发网络/CDN数据层计算层接入层了解聚力-一次访问请求数据库缓存对象存储JavaPHP消息系统协作系统文件存储负载均衡域名解析内容分发网络/CDN数据层计算层接入层了解聚力-一次访问请求服务器自动化安装硬件故障检测资产管理计算云管理系统自动化部署集中配置管理负载均衡自动化管理数据中心管理监控告警系统网络及系统安全监测基础运维应用运维安全与监控权限及消息订阅系统实时日志收集与处理系统日志处理了解聚力-运维服务器自动化安装硬件故障检测资产管理计算云管理系统自动化部署集中配置管理负载均衡自动化管理数据中心管理监控告警系统网络及系统安全监测基础运维应用运维安全与监控权限及消息订阅系统实时日志收集与处理系统日志处理了解聚力-运维服务器自动化安装硬件故障检测资产管理计算云管理系统自动化部署集中配置管理负载均衡自动化管理数据中心管理监控告警系统网络及系统安全监测基础运维应用运维安全与监控权限及消息订阅系统实时日志收集与处理系统日志处理了解聚力-运维服务器自动化安装硬件故障检测资产管理计算云管理系统自动化部署集中配置管理负载均衡自动化管理数据中心管理监控告警系统网络及系统安全监测基础运维应用运维安全与监控权限及消息订阅系统实时日志收集与处理系统日志处理了解聚力-运维服务器自动化安装硬件故障检测资产管理计算云管理系统自动化部署集中配置管理负载均衡自动化管理数据中心管理监控告警系统网络及系统安全监测基础运维应用运维安全与监控权限及消息订阅系统实时日志收集与处理系统日志处理了解聚力-运维服务器自动化安装硬件故障检测资产管理计算云管理系统自动化部署集中配置管理负载均衡自动化管理数据中心管理监控告警系统网络及系统安全监测基础运维应用运维安全与监控权限及消息订阅系统实时日志收集与处理系统日志处理了解聚力-运维目录了解聚力一期工作目标与技术指标选型Mesos基础持续集成长时服务服务发现定时任务结果和经验下半年工作测试开发环境全面转换到docker一期工作：目标风险小为线上使用docker提供经验、踩坑、排除问题一期工作：技术指标持续开发测试平台分布式、高可用、弹性扩展多种工作负载支持自动化生命周期管理提高资源利用率提高开发测试工作效率与线上环境无缝衔接目录了解聚力一期工作技术指标选型Mesos基础持续集成长时服务服务发现定时任务结果和经验下半年工作Why容器资源占用少：解决开发测试环境资源紧张的问题效率：计算效率、内存访问效率、启动速度100-1000:10-100选型趋势MesosVS

KubernetesVSSwarm选型K8S、Swarm还不成熟Mesos的两级调度，可以集成其他的框架目录了解聚力一期工作技术指标选型Mesos基础持续集成长时服务服务发现定时任务结果和经验下半年工作MesosMesosMesosMesosMesosMesosMesosMesosMesosMesosMesosZookeeperJenkinsMarathonChronosConsulDNS+Nginx/MarathonLBGlusterFSMesos目录了解聚力一期工作技术指标选型Mesos基础持续集成长时服务服务发现定时任务结果和经验下半年工作持续集成持续集成持续集成持续集成持续集成持续集成持续集成持续集成持续集成持续集成持续集成100:1持续集成目录了解聚力一期工作技术指标选型Mesos基础持续集成长时服务服务发现定时任务结果和经验下半年工作长时服务：MarathonVSAurora易用程度：Marathon完胜Aurora

[+]还能调度周期性任务

[+]细粒度、可扩展、基于文件的配置

[+]支持命名空间，所以多个环境可以共存

[-]只读的用户界面，没有官方API

[~]文件配置和命令行执行的模式很麻烦（好处是更容易扩充功能集）

Marathon

[+]很容易安装和使用

[+]提供用户控制界面和扩展功能的API（有些API功能目前都没包含在用户界面中）

[+]监听API调用的事件总线

[-]只能处理常驻任务

[-]部署-运行-清理三个步骤的区分不是很清晰，必须写在一行脚本里

长时服务：Marathon长时服务：Marathon长时服务：Marathon长时服务：Marathon长时服务：Marathon零停机时间部署程序运行状态检查具备节点故障、应用故障弹性事件总线，可以定制化管理应用程序变更的响应采用插件结构、便于扩展应用分组，便于管理资源约束长时服务：Marathon目录了解聚力一期工作技术指标选型Mesos基础持续集成长时服务服务发现定时任务结果和经验二期工作服务发现客户端发现服务发现服务端发现服务发现：Consul&MarathonLB服务发现：Consul&MarathonLB服务发现：Consul&Marathon