监控和虚拟化技术课件

1、“去哪儿”2022年9月8日David Wu1 一、“去哪儿” 介绍 二、监控系统 三、虚拟化在去哪儿的应用 四、Java开发的一些tips一、“去哪儿” 介绍“去哪儿”简介中国领先的旅游媒体2005年5月上线最大的旅游搜索引擎机票，酒店，知道，博客，打折，签证，度假，景点开始提供手机服务增长趋势数字35M月访问用户每天60M动态请求，峰值1700+/sec每天消息系统承载30M消息，峰值1000/sec每天18M次数据获取、网页解析30G memcached data, 264M次访问，峰值7000/sec50%的数据能够在3s内得到服务，80%的数据能在8s内提供服务数字过去两年我们搜索量

2、增长了28倍技术团队从10个人增长到60个人产品线从2个增长到6个各种系统从5个增长到近30个二、监控系统高可用性3个9：99.9%2592秒/月=43分钟/月2小时/季度4个9：99.99%259秒/月=4.3分钟/月12.9分钟/季度一个故障特定事情发生服务质量不可接受故障发生注意到故障并开始修复修复结束层次Qunar的监控系统Whats up监控服务器存活状态监控URL存活状态Cacti监控服务器各项资源的使用情况丰富的pluginSquid/memcached/netapp保存历史记录，观察流量和各项资源的使用的关系要求ops每天都需要浏览cacti，每周全面审核Qunar监控Hype

3、ricJava开源丰富的plugin可用的报警机制所有的业务、系统相关指标都在hypericSmokepingMonitor机房到各省各个运营商的链路质量经验HardwareCPU2x4 coreRam32G or 16GDisk2x500G, Raid 0+1，有些有带电池写cache的raid卡NIC2x1G，1 for iloXenExampledavid.wu1 $ ssh 1 sudo /usr/sbin/xm listName ID Mem VCPUs State Time(s)112_tw6_f_cn1 2 2200 4 r- 3097120.3114_tw7_f_cn1 3 2

4、200 4 -b- 3099024.2116_mem1_f_cn1 1 1700 4 -b- 267107.3118_sug1_f_cn1 10 1200 4 -b- 58702.3430_twb2_f_cn1_ovms8 9 2200 4 r- 2283516.6434_askdb1_ovms8 11 2200 4 -b- 60466.4Domain-0 0 668 8 r- 1661065.3问题性能RAM/Syscall(context switch)I/O performanceDisk performanceNetwork performance(not so important i

5、n web environment)管理Network structure(vlan tagging)VMM层Vm之间隔离RAM/SyscallUnixbench scoreRaw 503Dom-0 397Dom-U 317Unixbench scoreDisk performance(with write buffer)Bonnie+Disk performance(without write buffer)Disk performance(Random seek)Vlan tagging一个物理主机上要支持在多个vlan的虚拟机规模扩大，单个网段无法满足需求安全分区需求JAVA开发的一些T

6、ips 善用jdk的命令JpsJstatJmapJstackjhattips内存OOMGC并不能杜绝内存泄露仔细计算内存的使用，内存是有限的，给内存的使用一个上限Jhat可以帮助你看到你的内存用在什么地方内存池化tips线程线程数量是有限的所以减少线程数量是非常重要的减少数量意味着要缩短线程的长度线程池化，降低创建和销毁线程的开销tipsCache和timeout是互联网永恒的主题数字，数字，数字监控对于工程师，相当于雷达对于战斗机还可以更简单吗？如果不知道未来，那就不要为未来做准备性能（速度）象海绵，挤一挤总会有的去掉一个部件远比增加一个部件功劳大并发安全是魔鬼一点体会共享基础设施比代码重用更加重要保持状态是扩展性的天敌团队的背景很大程度决定了架