cgroup与单机资源管理课件

Cgroup与单机资源管理2011-12提纲业界声音Cgroup实现CgroupinBaidu提纲业界声音Cgroup实现CgroupinBaiduCgroup的发展是不可逆转的MemoryController（memcg）WorkshopGoogle的云计算平台OpenVZ的虚拟计算平台RedHat6和openSUSE11.3YingHan(Google)“SoIthinkthisisfirmlyoneofthose"realimprovement"patches.Goodjob.Groupschedulinggoesfrom"usefulforsomespecificserverloads"to"that'sakillerfeature".”LinusTorvalds小补丁大改善200+行代码+configSCHED_AUTOGROUP+ bool“Automaticprocessgroupscheduling”+ selectCGROUPS+ selectCGROUP_SCHED+ selectFAIR_GROUP_SCHEDControlGroupsResourceControlinProcessGroupsPaulMenage(Google)sincelinux-2.6.24资源=硬件CPUNETIOMEMORY进程组更适合作为资源管理的单位进程G1G2G3进程组Cgroup细节Cgroup框架HierachicalInheritCgroup子系统使用框架的分组机制对一组进程就某种资源进行管理Cgroup框架 <-> Cgroup子系统 vfs <-> ext4/btrfs文件系统Cgroup子系统ResourceControlCPU,MEMORY,NET,IOIsolationandspecialControldebug,perf,ns,freezer,devices…联合或独立的子系统联合独立silver

cpu:30%mem:30%goldencpu:50%mem:40%‏Iron

cpu:20%mem:30%silver

cpu:30%goldencpu:50%Iron

cpu:20%silver

mem:30%goldenmem:40%‏Iron

mem:30%CPU子系统CFS组调度cpu.shares下限可抢占可稀释

SCHED_AUTOGROUP原理firefoxv.s.make

-j64per-tty/sessionautogroupuserspacev.s.kernelspaceCPU子系统进展多核cpuset：区分cpucore及momorynodes(NUMA)Pay-per-use环境cfsbandwidthcontrol：cpu硬上限MEMORY子系统进展隔离性：per-groupvm机制更友好的OOMKernelmemoryaccountingNET子系统net_cls：基于cgroup的filtertc：限制发送速率，bps/ppsNET子系统进展用户程序友好接收限速IO子系统进展servicetime

v.s.iopsv.s.bandwidth逻辑设备v.s.物理设备隔离对IO调度策略的影响异步支持其他子系统debug：exampledebugns：名字空间，用于实现containerdevices：进程访问设备的黑白名单freezer：暂停或重启整组进程perf：控制本组进程在特定CPU上的perf_event监控checkpoint/restart：进程状态dump到file里，可以在别的机器上重启CgroupinBaidu场景1：网页检索不停服务更新索引库响应时间灵敏写对读的影响CgroupinBaidu场景2：分布式计算平台的预算申请与审计