大容量redis存储中间件介绍_第1页
大容量redis存储中间件介绍_第2页
大容量redis存储中间件介绍_第3页
大容量redis存储中间件介绍_第4页
大容量redis存储中间件介绍_第5页
免费预览已结束,剩余32页可下载查看

付费下载

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

科技目前在科技负责基础平台相关工作,参与过RPC服务框架、中间件、配置中心、线上Q& 机器规丰富的数据结构支持(string、list、hashset、支持持久化支持主 ,便于搭建集接口简单,客户端语言支持非常丰…机器 重启加载速度较慢对磁盘压力也较大读写分高可数据一致客户端容错(fail-…产品需求快速迭代、业务同学压力有点能支持redis协稳定性、可用是否强一致性看业务场对业务方是透明简大容量、廉问题定位 需修改redis持增量同步以及冷热数据京东的JIMDB、sina、aliredisRedis协议+持久 redis协议 pikaredis协议Cache(redis)+可扩展的后端 支持redis定制化 及redis高性能问题以及运维问 实现读写分离、分库分表、高可引入缓存数据一致性问 元数据中心、运 Redis

OnestoreNetty定制化redis协议解析 性能以及带宽压快速部署以及重客户端预…

zookeeper配 模--Cluster集群信息抽----shard分片信息抽----Instance具体读写实例抽采用 集群元数数据变更实时通知客户树形结 比较符合主从模redis自研sentinel sqldb

sql resultsql 采用一致性hash算针对null值情况特殊处cache回填并发优化、避免单key瞬间db穿更新cache设置读写锁保证数据一致节点无状态、挂掉自动通知客户端摘 量 量、错误 支支mysql倍分扩扩容步info、monitor、暂时不支持list、pubsub*Get、Set ark测 ark–honestore.dx-p9090–c50-tget-n300000–r ark–honestore.dx-p9090–c50–tset-n300000-r*测试条物理机(24corescpu96gb内存,千兆带宽Cacheredis单实例20g内Mysql单实例96g内存sas7200转1T磁0

onestore(nocache)onestore(cache)redis5redis客户端客户端20个线行getvalue200字cache实例8mysql主从实例4个24核60g内存千M网卡内存–xmx4gxms9onestore读多写少(读写比较大业务冷热数据区分度比较明数据量 量较大的服留言板 onestore改用户发的feed写qps<5k、读qps改造redis全 +hbase备redis14台+hbase2台+moa2台共18台接 时延<2ms, 率<2台mysql4台、redis2台共8200亿条数据 上限500亿qps上限接 时延<4ms, 率40%、可支撑未来2年不需扩Profile服 改写qps<1k、读qpsL1cache+L2rediscache+ 率<5% 10cache14mysql84主4从最大可承受qps110w目前40~60w

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论