专9-2-dtcc爱可生-弹性数据库云PaaS平台-1.5

来2年nalysisue库服务库服务数据仓库务数据安全与管理：备份、灾备、审计、加密数据服务据处理涵盖范围——以数据处理技术为核心，持续为互联网转型企业打造高端服务PaaS平台APP企业应用DevOps开发者应用服务HiveOnSparkSQL 公有云本地集成混合部署——以组件、平台、服务多种方式输出数据处理技术，促进传统企业互联网转型B2DB2D基础组件读写分离自动化组件高可用组件数据库中间层组件制与监控组件DRDS群平台DevOps务云平台ThinkBig台台咨询服务数据库设计最佳实践多维度数据汇聚算法合方法论理与安全简单，易用，十分钟数据库67存在存在的问题：•在应用程序中包含–读JDBC/ODBC–写JDBC/ODBC•应用程序逻辑决定哪些SQL数据源，哪些调用写源•已有应用需做大量修改才可•数据复制的效率得不到有效制延迟影响业务的DBProxyDBProxy8Q•配置和运维复杂；Q•配置和运维复杂；针对MySQL特点需要人工开发额外脚本不可避免脑裂的问题•在业务高峰期出现问题不敢切换；据文件存在于存储设备，是个单独故冷备，备机不提供服务，浪费一半资源不支持故障节点自动修复PActionHA存储存储设备901负载均衡负载均衡pHAProxy1xyhaproxygroup1管理门户mcinst1mcinst1mcinst2mcgroup1读写分离oxyoxybproxygroupdbproxy1oxyygroupdbproxy1数据库高可用集群bibinmysqlinstmysqlinstnmysqlinstmysqlinst1mysqlinstmysqlinst2 ActionHAMySQL ActionHAmysqlinstmysqlinstnmysqlinst1mysqlinst2pbin ActionHApgsqlinstpgsqlinst1pgsqlinst2pgsqlinstnSQLGroupActionHA物理集群bbotbbotbbotrverbotbotmgrbotbotbabotbotbalmServerrver务积累-十年数据服务经验-完善的数据生态系统投产无需更改应用由-事务可强制读主库-业务维度的延迟检测和y之大成-部署简单，运维方便-极端情况不丢任何数据-多套灵活高可用分组化-贴近MySQL设计，自动处理上百种水平扩展-降低主节点的负载压力-提高资源利用效率-在线添加MySQL从机，不影响业务-根据业务SQL统计调整主从比例-高性能，中间层的性能损耗低于10%31MySQL理 件SQL转换和分发SQL转换和分发MySQLMySQL库集群用1l析片数据源MySQL主MySQL从MySQL主MySQL从MySQL主MySQL从Processor(n)Processor(1)果集果集用1l析片数据源MySQL主MySQL从MySQL主MySQL从MySQL主MySQL从Processor(n)Processor(1)果集果集理理分布式集群软件架构用2MySQLMySQL主MySQL从数据库DB1片4片1片2片3数据库4数据库2数据库3数据库1数据库DB1片4片1片2片3数据库4数据库2数据库3数据库1分布式数据库分库分表模型物理主机1物理主机2物理主机1物理主机2●逻辑库(schema)-●逻辑表(table)-T1●分片节点(datanode)-分片1●实例(database)-数据库1●节点主机(datahost)-物理主机1应用程序应用程序应用程序sqoop复制HiveOnHiveOnSpark群中间件MySQL数据库集群rMySQL数据库集群81某银行面向私有云的云数据库平台，打造DevOps模式应用●项目背景：该银行的数据中心拥有规模庞大的IT基础设施和种类繁多的线上和开发测试项目。需构建完整统一的私有云中的数据库即服务平台，并与IaaS整合。●解决方案：•我们提供了基于MySQL的云数据库即服务平台。•实现了面向多租户开发测试环境和生产环境的数据库自服务、随需创建扩缩、便捷自动管理和运维的统一的数据库云平台。●方案价值：目前DBaaS平台已投产系统60多套，开发环境几个百个数据库实例，测试环境100多个实例。物理服务器共计30多台左右，虚拟机几百个左右。•提升了快速的MySQL服务交付能力•形成了标准的MySQL运维管理规范•实现了全面的MySQL运维自动化能力已经支持了30余个业务上线，加快了开发、单元测试、功能测试、集成测试和生产部署的处理流程，从基础设施层面满足业务敏捷性需求。界面展示---实例管理示---备份策略界面展示---实例性能扩容容界面展示---实例存储扩容界面展示---实例HA扩容统A型实例内存资源的段统A型实例内存资源的段例运行时在各自器中运行，互相见，不影响•CGroups是Linux内一种资源隔资源调度损性能高linux内核中的物理机资源ControlGroups资源用户互联网金融数据云爱可生数据支撑平台，并由爱可生公司提供业务架构咨询，和全线技术支持服务27数据缓存负载均衡pHAProxy数据缓存负载均衡pHAProxy1HAProxy2haproxygroup1oxydbproxy1dbproxy1dbproxy2读写分离应用管理门户bbixbalmmcbalmmc高ysqlmysqlysqlmysql2Mysql3mysqlmysql4ysqlysqlmysqlmysql2mysql2mysql2ysql短消息mysql2mysql2ysqlmysqlmysql2ysqlmysqlmysql2ysqlmysql2ysqlmysql2mysqlmysql2ysqlmysql2mysqlmysql2ysqlmysql2物理集群bbotbbotbotbotbalmbalmbotmgrbotbotmgrbot存储设备(支持SCSI-3PR)存储设备存储设备(支持SCSI-3PR)28•30台服务器构成数据库支撑平台(可随需扩展)MkRAID用存储3TB/台•存储设备–支持SCSI3-PR协议–60T*2台–存储实时binlog–数据备份•软件–CentOS6.5–爱可生高可用集群管理程序balm–爱可生高可用节点控制程序bot•快捷部署–Balm(FirstBot)手工Steb-By-Step参数化部署–集群成员由BalmWebGUI自动化纳管29MySQL高可用集群层部署20余套业务数据库，通过爱可生高可用读写分离集群进行管理–支付库，一主一从，记录支付详情，并外联exadata完成支付,RW5:1WW0业务系统数据规模性能指标●红包数量按照100万/秒容量设计系统特业务系统数据规模性能指标●红包数量按照100万/秒容量设计系统特性运行级别爱可生分布式数据库集群软件爱可生分布式数据库集群软件——支撑100万/秒的红包设计容量，：红包数据。。，：红包数据。。4组分片节点。所在节点是1主3从，其它节点时1：产品、账号、好友相关2，可以无缝扩展更多“读”节点