业务10X背后的技术重生-熊斌

•携程数据库概况•早期数据库架构及瓶颈•架构解耦与扩展新•监控目标与监控架构•基线运算与告警流程•数据库容量KPItrip•SQLREVIEW概要•SQLREVIEW系统架构•SQLREVIEW流程llinOnellinOne以以携程酒店预订为例应用耦合，关联查询应用耦合，关联查询4)无法区分关键应用，缺少DB分级，容灾成本高，DB故障的影响面与损失过大3)无法实现DB的水平扩展，通过提升硬件来支持业务发展2)不同应用读写操作相互影响，关联查询1)业务飞速发展后，DB容量不足瓶颈数据库耦合扩展性差运维成本瓶颈垂直拆分按产品线解耦DB•数据访问通过API、WS、MQ酒店机票度假商旅火车票门票……品查询品预订单处理单结算服公共服务服公共服务展酒店品查询品预订单处理单结算•携程数据库概况•早期数据库架构及瓶颈•架构解耦与扩展新•监控目标与监控架构•基线运算与告警流程•数据库容量KPItrip•SQLREVIEW概要•SQLREVIEW系统架构•SQLREVIEW流程开源解决方案与自主研发相结合全面覆盖实时告警多样化(SMS,MAIL…)精确定位DBMonitor监控系统MonitorSystemDataSourceDataBBIXQLPerfmonDB DBPerformance/1minDBPerformance/1daytoryMonitorSystemDataSourceDataBBIXQLPerfmonDB DBPerformance/1minDBPerformance/1daytoryminSQLAgent er OBAnalysisDBT-SQLPerformance(DMV)/5min xsizeTablesizeTraceDBTraceScanTSQLPerformance/1minT-SQLPerformance/1minDBMonitorSiteAnalysisrm次数幅度次数幅度Step1Step2Step3Step4监控数据实时采集主机性能指标应用相关指标对比基线识别异常区分紧急程度与影响业务酒店or机票送告警SMSE-MAIL1样本内异常点剔除历史数据采样341样本内异常点剔除历史数据采样3422共4×20个点9月13日(周四)9月13日(周四)9月20日(周四)9月27日(周四)(周四)11日(周四)0得到全天的每分钟基线区间实时监控数据对比基线区间进行告警主机基线为例ServerPerformance机性能查询Report常用报表SQLAlert报警配置&历史记录T-SQLServerPerformance机性能查询Report常用报表SQLAlert报警配置&历史记录T-SQLPerformance语句执行性能DBServiceHAData关键指标实时监控DBMonitorPlatformDDataBase数据库服务器&服务应用信息数据库高可用性能数据库服务器&服务应用信息BLOCKTBLOCKTEMPDBCPU Memory Bandwidth•区分不同的KPI指标•针对KPI设定容量标准•自动计算主机负载•提供DB容量日报TPSSESSIONDB应用可用性硬件容量业务请求量DB应用可用性•携程数据库概况•早期数据库架构及瓶颈•架构解耦与扩展新•监控目标与监控架构•基线运算与告警流程•数据库容量KPItrip•SQLREVIEW概要•SQLREVIEW系统架构•SQLREVIEW流程SQL36条军规：SQL36条军规：Join个数<5引4.xxxxx•一句性能不佳的SQL，甚至可能引起DB的全面故障•静态的规范检查+动态的性能校验SQLSQL性能要求：CPU100msIO<1000xxxxxxx生产环境的数据、分布、执行频次都在变化，需要对之前的评估进行ReviewDataSourcetoreeklyReviewttSQLeklyReviewReviewanceTTraceDBPDCodeDev71PDDBDev246SQLPDCodeDe