互联网运维理论与实践

2005.5前端/数据存储运维负2012.12广广州UC.负责人2015.6广州普信科技广州普信科技有限公司.2007.5广广州YY.人2014.3优维科技.优维科技.职能化职能化/服务化是内看运维、价值化/产品化是外看运维Ops业的实践抽象驱扩展性践，甚至是9危机驱动下危机驱动下转型驱动下成本驱动下细细分驱动下IT”I”T运维的新解读--IT运营起起功能/特性满意度易用性运维的16字要诀(愿景)自动化运维管理4、标准化协议cache自动化运维管理4、标准化协议cache务4、统一调度中心用、过双中心调度、立体监层面给业务提供优化数数据化运维运维阶段性工作(KPI)OS标准化OS标准化标】jws.cachejws.datajws.db支持多源ws.Logger分布式mysql存储jws.dal异步队列jws.mq分布式缓存架构jws.dal.cacheWorkerjws.mq.Workerjws.cachejws.datajws.db支持多源ws.Logger分布式mysql存储jws.dal异步队列jws.mq分布式缓存架构jws.dal.cacheWorkerjws.mq.Worker插件:PlayPluginonApplicationStart()onApplicationStop()Enhance(ApplicationClass)启动加载文件(图片)存储jws.fastdfs异步HTTP客户端jws.httpTCP服务ws.tcpserverTCP服务配置中心jws.tcploadaccesslogstatlogds-accesslogds-statlogcache-statlog配置监控jws.configWebsocket客户端jws.websocket同步服务客户端模模块:ModulesdocviewertestrunnerWebWeb功能Http，Https，WSController，TCPControllerMVCController@With@Before,@After,@Finally,@Cacth模板TemplateGroovyRequest,Response,Route,Cookie,Session,UploadFile,Chunked,Etag，Validation，staticFile,staticDirTimeout,Gzip,ACL类加载类加载：jws.classloader，Enhancer业业务线程池:jws.pool网网络层：Netty第三方组件async-http-client-1.7.6.jar，c3p0-.jar，mysql-connector-java-5.1.14.jarnetty-3.3.1.Final.jar，gson-2.2.2.jar，groovy-all-1.7.10.jarspymemcached-2.8.0.jar，log4j-1.2.16.jar，junit-4.8.1.jar标准化以简化运维标准化以可运标准化意味着运维下降用性应业务的试越低理，提高服务器服务器器负负载均衡层CacheCache服务器TomcatResinApacheHaproxy+keepaliveNginx+keepaliveTomcatResinJettyMysqlMongodbMysqlMongodbCassandraRedisMemcacheRedisMfsFastdfsTfs一切可配置，场景化一切可配置，场景化化管理，产品化的要求、位置透明、名字服务明性性集和监控能力平台服务化就是PAAS化的能力29队队统Mysql高UCMHACache高可用—HTTPSF务心包UCMysql统AdminAdminPPPI信ManagererverProxyDataServerisisFooYun特性度融合rdcode质量控服务质质量控服务质保证成本高本高效率低低安安全IP地址1IP地址2IP地址3IP地址4…..IP地址nDNS是到IP的映射，端口怎么办？IP故障了，怎么办？39400om…N10om…N1portal_web给对应的接口取一个接口名称缩写，比如说login_web对应的接口名下的具体/login/register等等11..N1..N1对应的IP+port的集合，址级到IP+PORT的41人工或够对被调42新名字服务的特性(高级)为名 的业界方案 4343级别对应的是IP+对应的是IP+PORT，粗粒度，级别原理46Sfservice是服务名、sfApi是接口名4849基于拓扑的故APM度框架的完组件的运维是内看，和名字线心010401040202034个意识4个意识再优化活再优化活务级用行 /legacy/event/lisa07/tech/full_papers/hamilton/hamilton_html/GSLB(全局GSLB(全局灾IDC度能力容灾营之灰度升级性灰度是一个渐进式的过程，重大变更不能一次触及全网，保护别人SRGSLBGB基础网络(外网、内网)NBNBIDCCDN(自建/外包)(国内、海外CF5/REDWAREABSRGSLBGB基础网络(外网、内网)NBNBIDCCDN(自建/外包)(国内、海外CF5/REDWAREABLQProxyWeb层(tomcat、JVM)MAPLML中间层(weblogic／WS)PA数据层(oracle／mysql／redis)SLBOS/服务器 用户访问WWWW业务分析系统A:自动化测试Q理S根据服务的重要性、不同性进行服务解耦分离，方便后续的服务精细化控制，比如说过载保护、服说游戏包。说游戏包。结合件基础平台：用户的基础账号信息户基基础平台：用户的基础账号信息户基6262运维平台实践之DevOps运维平台率／安全率／安全化／安全.标准化体系.规范体系.方法论体系•psOpenStackVMwareCloudStackGSLB服务LB即服务服务服务平台台IT运营分析平台务化能力化能力化能力能力提升能力能力力即服务服务署服务OpenStackVMwareCloudStackGSLB服务LB即服务服务服务平台台IT运营分析平台务化能力化能力化能力能力提升能力能力力即服务服务署服务务APIAdapterLayer层如产品1/产品2如DBA系统管理员机房管理员运维平台实践之CMDBABAB关联的环的场景化关联的环的场景化包及其配管理所对应的息用关联的设信息关联的用层层模型源模型模型理资源模型CMDB不是一个cticestoreducehangestousers.成熟度不断提升作作业交付层 (服务编排)(代码部署)包/配置、服务、环境等资源生命周期管理(发布、测试、部署、优化)线业务、服务管理(业务/服务拓扑视图管理)BBeforInstallAAfterInstall8%2000次M12月份8%2000次M12月份11月份10月份209.012月份138.0641.011月份51.0472.0437.010月份20.0247.0266.0游戏运维服务化平台游戏运维服务化平台_部署次数0.0200.0400.0600.0800.01,000.01,200.01,400.01,600.01,800.0•自动化构建•构建脚本从•自动化构建•构建脚本从IDE分离建动化单元测试动化组件测试动化系统测试动化功能测试复试复杂性查告成•DBA成为开发团持持续集成工具平台(作业自动化)应用下线应用上线业务扩容业务缩容资源申请试试统统CMDBCMDBAPI及服务维管理都应该转换成鼠标动作12345质量，面向用户的度量；可用性，包含面向系统的度量质量，业务部门关注；可用性，技术部门关注质量，多因素；可用性，时间因素单量不一定好 (宏观) (微观)••面向问题的能力驱动，•面向业务部门的用户需求管理•以事务为典型特征，比如说变更、资源等等关注运维的优化点在用户侧的价值体现，并建立持续的驱动机制执行可能应用的现网的前沿技术研究等理平台的研发多维、复合能力培养;明确的KPI要求维人员雏鹰人才(新人) 1 10TB等TB等TB等TB等求热爱产产网络网络运维组服务服务器运维组存储运维组系统系统管理组产产(事业群)(公司级)(公司级)(公司级)(事业群)(公司级)(公司级)(公司级) 应Firmswithhighperformingnsweretwiceaslikelytoexceedshareandproductivitygoals.”ure200timesshorterleadtimes.@JezHumble的LeanEnterpriseforleadforchangestimetoservicereleasechangefailrateAB D123456123456维维过程构建面向IT性能型的运维组织运维实践之DevOps12345ITIL强调对内服务输出，DevOps强调对外价值输出DevOps是Dev用D的能力延伸到Ops(Ops-Friendly)，而Ops则把O的能力传递到Dev(Dev-Friendly)，确保高质量、持续、快速Dev与Ops的冲突解决方案(业务)Dev与Ops的冲突解决方案(思维)Dev与Ops的冲突解决方案(技术)handmakeitso05FosterDevOpsskillswithinyourteam06Developandusemetrics07Encouragelateralcommunication02030401DevOps从来就不是一个技术问题——互联网运维体系构建——互联网运维最佳实