yunyingoo-2015云栖大会-“天河二号”云平台的开源实践-谭郁松

性能计算、高吞吐率信息服务和海量数据处理等多领域复杂需求市建设的公共基础设施平台发展的•软件平台多样：Linux/Windows,Oracle/MySql/SqlServer,Apache/Tomcat/Nigix,Weblogic…•资源规模弹性伸缩：重大事件/重要时间节点的突发访问•可靠性、可用性与安全性要求高的云需求性件进行定制与裁剪11p自己开发p使用已有产品/平台22p商业平台p开源平台/dash/browser/AustinOctober2010Nova,SwiftNova,Swift,GlancelNova,Swift,Glance22September2011Nova,Swift,GlanceApril2012e27September2012ntumCinderGrizzly4April2013dertoberterltoberApril2015NovaSwiftGlanceHorizonKeystoneNeutronCinder,Heat,BigTentModel(Nova,Swift,Glance,Horizon,Keystone,服务以RestfulAPI为存储、虚拟机等提供密钥管理NSystem统corosyncKylinCloudBasedonOpenStack系统增强全全数消全全数消管理域库安全队列安全据息增强-系统安全框架Ø云平台访问安全ACL控制和MAC保护制安全：多重身份验证Ø实现云平台本身的服务安全、消息队列及各组件的置文件的权限控制和防触发策略触发策略增强-一体化高可用机制•调度器、网络管理等关键服务•数据库、消息队列等支撑服务•基于高可用域的虚拟机高可用增强-跨域资源迁移建立全局资源统一视图，统一调度•数据中心发生故障时能将业务平滑迁移到其他数据中心，保障业续性•根据负载情况将业务分布到其他数据中心，应对突发压力增强-弹性云主机集群Ø应用QoS感知的资源弹性伸缩IaaSPaaS态升降级增强-可定制自动化部署Ø操作系统增强-精细化计量机制告警故障告警故障化运维一存储qOpenStack个Swift+Cinder队之一lanceCinderdiffmergerbddiff域的修改造成像还原更复杂的问题管理Clones•针对访问RBDclone镜像中相对parent镜像未修改部分的对象性能较•优化后，第二次访问RBDClone镜像性能提升20%ØRbdofflinerecoverytool•当ceph集群发生故障导致rbdimage无法访问时，此工具可以用来恢复rbd•实现了有快照和无快照的原始rbdimage的恢复口Cache优化•当前cacheflush的机制在应对突发性IO时，大量回刷会对性能造成影响•通过设定高、低两个阈值，在低阈值时限速回刷，当达到高阈值再高速回刷，O0sØInlinedatasupport系统中小文件访问性络延时的问题，小文件访问性能提升2倍ØPunchholesupport•针对Ceph用于虚拟镜像文件存储时，在虚拟机文件系统删除文件时回机存储空间的问题虚拟机删除文件时回ØCephFSquotasupporthFS•优化后，为CephFS实现了基于占用空间大小的,以及基于文件数量的quota性管理口混合应用à混合/弹性管理？Ø完成操作系统内核适配可达256TB系统性能折损低于5%2位模式的客户操作系统Ø基于KylinCloud搭建了生产环境，最大部署规模达到6400节点，其中Ø为电子政务、动漫渲染等多个行业和应用提供服务Ø入选2015OpenStackSuperUser四强应用情况-对HPC类应用的支持计算的优势引入到传统的高性能计算领域，使用目前成熟的容器技术为用户提供可定制、隔离性强、可弹性伸缩、界面友好的HPC集群•接近物理机的性能•充分利用天河节点的加速部件和高速网•拉通HPC软件栈，实现全系统资源统一管理•更好的资源共享与隔离•可定制的软件环境•满足弹性的资源使用需求•在配额下用户自助申请资源区参与模式社区参与实例：用户级配额管理(per-project-user-quotas)口参与经过口心得：提高代码质量，减少维护工作口一名Rally的corereviewerKilo5946828379Cloud6aIcehouseIcehouse版本的组件贡献比例om，并就大规模部署、业务支撑和监控等内容作了大会报告Ø讨论Ceph开发的核心会议Ø每届均参与并主持Session讨论ØCeph创始人SageWeil一