MGR技术在美团的应用_第1页
MGR技术在美团的应用_第2页
MGR技术在美团的应用_第3页
MGR技术在美团的应用_第4页
MGR技术在美团的应用_第5页
已阅读5页，还剩14页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

1、技术创新，变革未来MGR技术在美团的应用提纲01使用概况02问题描述03原因与 解决办法04质量建设05后续探索01 使用概况美团内部基础设施美团金融业务等实例数100单集群写入峰值5000响应时间999线较主从增加10%技术指标场景02 问题描述A. 每隔60s，发生一次性能抖动B. 经常出现秒级慢查询、甚至3秒02 问题描述-续C. 可观测性差，发生问题时，无从判断D. 内存占用过大，触发OOM02 问题描述-续E. 多机房架构，容易误切换F. 空闲连接过多，严重影响性能03 原因与解决办法-A每隔60s，发生一次性能抖动解决办法：冲突数据库大小减半，if 版本=5.7.21多主模式变为单

2、主模式并简化清理逻辑60s一次清理，变为1s一次清理03 原因与解决办法-A每隔60s，发生一次性能抖动效果：03 原因与解决办法-B秒级慢查询,甚至3s原因：重试的难题硬编码：0.1s 0.5s 3s03 原因与解决办法-B秒级慢查询,甚至3s解决办法：去除硬编码；重复请求过滤（防止重试过多，打垮集群）；重试时间可配置（根据业务类型，进行配置）效果：线上无秒级慢查询，即使引入0.1%丢包03 原因与解决办法-C可观测性差原因：MySQL性能抖动的诱因太多, GR模块难以自证清白网络抖动磁盘抖动内存紧张实现造成，比如binlog切换的锁解决办法：GR模块增加秒级性能统计，同时输出到 perfo

3、rmance_schema和 err日志03 原因与解决办法-C可观测性差效果：每秒输出一次paxos状态机的统计信息03 原因与解决办法-D内存占用过大，触发OOM解决办法：改写内存统计模块，每秒进行更新消息交换原因：所有消息存在LRU队列中；但是内存统计逻辑复杂， 在丢包等情况下，数据不准，极端情况下（可复现）会出现负值。若使用该值进行限制，会造成整个集群hang死03 原因与解决办法-E多机房架构，容易误切换原因：机房之间发生网络抖动，影响时长偶而超过5s，大于节点间探活超时极限，触发相关节点主动或被动离开多机房解决办法：探活超时时间可配置03 原因与解决办法-Fworkaround: 降低各应用的连接池大小办法(暂未实现) : thd列表再加一层hash数据结构空闲连接过多，性能下降，响应时间成倍上升原因：解决办法：connconnconnconnthdthdthdthd数据修改事务提交时，需遍历thd链表，复杂度O(N)04 质量建设自动化长稳测试引入不同概率网络丢包、不同时间的网络延迟、包重复等自动化性能测试使用java，模拟一个线上真实的业务进行测试 使

人人文库> 全部分类> 专业文献 > IT计算机

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论