数据库云的构建管理与注意事项

数据库云的构建与管理八大注意事项,FrankZhang（张军华）Junhua.zhang企业管理与云解决方案部2014.05,云，不仅仅是经典,云经典定义,按需自助服务访问的网络访问资源共享快速可伸缩可度量的服务,如果想实现数据库云（DBaaS）,怎样才能减少数据库数量？怎样保证不同的服务质量要求？怎样防止某个消费者使用过量资源？怎样实现自动化数据库运维？怎样实现数据库高可用？怎样实现数据库云与其他云的集成？怎样从数据库角度计费？,数据库云生命周期管理策略,1.规划、配置云资产发现与架构供应容量与整合规划资源池设置策略与治理的设置,2.使能自服务定义服务目录使能服务治理通过API集成,3.管理与监控数据库监控数据库服务配置管理自动化性能管理全堆栈周期管理,4.计量、计费与优化测量资源使用计费与收费优化性能、容量、服务质量,构建数据库云的八大注意事项,数据库资产,注意事项（1）资产评估：现在与未来,注意事项（1）资产评估：示例,注意事项（2）服务目录：定义服务,订单,业务服务,业务服务,业务服务,业务服务目录,技术服务,技术服务,关键业务数据库,IaaS,业务服务,关键业务应用服务器,技术服务,技术服务,技术服务,技术服务目录,服务定义,PaaS,SaaS,计算即服务Core&RAMSizeIsolationVirtualizationUptimeAvailabilityElasticityNetworkQualityofServiceSecurityI/ORTO/RPO,存储即服务CapacitySATAFlashSSDI/OBackup/RecoveryVirtualizationTieredStorageRTO/RPO,数据库即服务BlockSizeUptimeWorkloadInfoSecurityPrivacyRegulatoryComplianceIsolationAvailabilityElasticityUserConcurrencyIOPSAccessControlDataRetentionDataArchiveRPO/RTO,中间件即服务JavaSOABIBPELWorkflowContentScalabilityUptimeElasticityAvailabilitySecurityQualityofServiceUserConcurrencyRTO/RTO,企业软件即服务ERPMRPCRM/CXMHCMFinancialsSocialNetworkEmailCollaboration,注意事项（2）服务目录：服务定义概要,从DBaaS消费者角度，服务定义是关于服务能力、服务策略、服务流程的正式契约。,注意事项（2）服务目录：目录设计过程,小,大,中,超大,RACDataGuardGoldenGate,PDBDatabaseSchema,Private,Public,Provider,Hybrid,注意事项（2）服务目录：客户案例研究,弹性；服务裁剪,某大型金融服务公司,注意事项（2）服务目录：客户案例研究（续）,提供逐步深入的备份恢复级别,某大型金融服务公司,注意事项（3）整合密度：整合模型,不断增加的整合度,注意事项（3）整合密度：各整合模型对比,注意事项（3）整合密度：整合规划工作流,收集资源利用率等信息,CPU，内存，存储，磁盘IO，网络IO,业务约束与技术约束,物理或虚拟或XD，现存或规划中,整合率，目标服务器利用率,注意事项（4）供应方式：多种级别,用户需要一个全新的数据库服务（基于种子数据或不需要种子数据）,2.用户需要一个现有数据库的克隆（为测试用）,a.虚拟机上的数据库,b.专有数据库DBCA/RMAN/ExpImp/Clone,c.专有Schema或PDB,a.为高强度测试的全克隆,b.为功能测试的快照克隆,注意事项（4）供应方式：智能、透明的服务位置,自动发现合适的位置：为单实例数据库查询合适的主机为多实例的RAC查询合适的节点为Schema查询合适的数据库,数据库池,获取每个OracleHome的数据库实例数目，或每个数据库的DBServices数据,获取当前CPU的使用与内存分配（存储情况只针对Schemaasaservice）,验证在CPU、内存和实例/服务数目上的约束限制,注意事项（4）供应方式：自动化、自助,请求通过web页面从目录选择最终使用者填写表单、设置口令数据库自动创建,请求IT部门IT采购、供应硬件、操作系统与网络等DBA安装Oracle11gR2+GridInfrastructure+RACDBA然后创建数据库,传统方法,数据库云（DBaaS）,注意事项（5）资源管控：整合与资源管理/控制,服务器整合（专有数据库模式）管理CPU管理I/O管理内存（SGA+PGA）管理存储（表空间）数据库整合（Schema模式）管理CPU管理I/O管理失控查询管理存储（表空间）,注意事项（5）资源管控：基于策略,基于预定义策略动态分配资源DBRM/IORM，RAC扩缩基于调度基于调度而行动，例如，在周末静默虚拟机基于性能按需管理计算能力，例如扩展CPU或回收CPU,注意事项（5）资源管控：CPU控制效果图,4CPU的服务器运行OracleFinancials，包括OLTP交易、并行查询、DML等混合业务,注意事项（5）资源管控：从EM看例CPU调配,注意事项（5）资源管控：ExadataI/O管理,怎样配置I/OResourceManager?,销售数据库,财务数据库,分配:60%,分配:10%,分配:30%,配置IORM资源计划，设置每个数据库的配比,注意事项（5）资源管控：创建资源管理计划,按比率分配CPU的计划,联机业务60%,报表业务30%,其他业务10%,级别1级别2封顶值联机业务80%报表业务60%75%其他业务40%50%,按优先级分配CPU的计划,带有封顶CPU限制的混合计划,注意事项（5）资源管控：管理失控的查询,对“关键查询交易”，失控意味着：30+sec,对“其他随机查询”，失控意味着：24+hour的预估执行时长,行动：根本就不执行！,行动：切换到“低优先级”组!,对“报表类交易”，失控意味着：32GB+I/Os,行动：放弃查询！,应用数据库分布,EM企业管理平台,活动会话历史（ASH）+自动负载库（AWR）+自动数据库诊断（ADDM）,TopSQL,度量/阀值,告警/规则/规则集/行动,监控模版/分组,IO问题,软硬解析,配置问题,内存问题,XXXX,XXXX,XXXX,XXXX,XXXX,RAC相关,监控层,扩展功能（接口等）,诊断层,数据采集汇总层,代理与插件,注意事项（6）管理模式：数据库运维理念,SQL自动优化引擎+SQL监视+数据库基础层优化,执行计划,索引建议,分区建议,统计信息,执行路径,SQLProfile,优化层,数据库层,报告/报表,热块,锁/栓竞争,等待事件,重组对象,STS,实时SQL监控,验证层,SQL性能,整体负载,Script,JOB,数据传输与存储,实施层,注意事项（6）管理模式：共性管理与个性化管理,A类监控模版集合,生产监控模版集合,非生产监控模版集合,注意事项（6）管理模式：真正实现自动化运维,（1）新增数据库，并设置属性,数据库云平台,（2）加入云平台,（3）自动开始运维管理,合规管理（规则、标准与框架）,注意事项（7）计量计费：计费度量,注意事项（7）计量计费：成本中心,注意事项（8）集成接口：云管理API,从“自构建的自服务控制台”中部署数据库集成到一个更大的业务流中，例如批准工作流之后开始供应从“服务台”部署数据库,注意事项（8）集成接口：示例,数据库云的概念架构与实现模型DBaaS/SCHEMAaaS,EM,DB/XD,UserRegistry,SecurityAudit,审计日志,合规管理,CMDA,通用应用角色,通用DBA角色,多租户支持,事件监控,TivoliNetcool/HP/BMC,数据库管理,数据加载/卸载工具,DataLoad/UnloadAccess,作业控制,数据库备份,BackupStorageandManagement,DatabaseNameResolution,授权,软件包部署,补丁管理,数据库安装软件供应,业务连续性支持,接口,日志管理,用户、角色与权限管理,云接口,资源与负载管理,数据库克隆/快速克隆,数据库休眠与激活,数据分发,容量管理,度量,数据库重定位,SQL接口,自服务入口,健康检查,性能监控,部署容量分析、规划,CMDB/ITAM,NetworkAddressManagement,NetworkAddressResolution,NetworkConfigurationService,计量/计费/收费,Orchestration,BCMManagement,VulnerabilityMan