一站式搜索服务平台-Tsearcher_第1页
一站式搜索服务平台-Tsearcher_第2页
一站式搜索服务平台-Tsearcher_第3页
一站式搜索服务平台-Tsearcher_第4页
一站式搜索服务平台-Tsearcher_第5页
已阅读5页，还剩25页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

一站式搜索服务平台 TSearcher 柳明 洪震 淘宝终搜 背景 诞生于淘宝 SNS 是一站式的全文搜索解决方案 起初只是支持部门内部的搜索需求 但随着产品的不断完善和发展 逐渐支持了淘宝网 天猫 B2B 一淘 聚划算等事业部的100 的应用搜索需求 终搜产品是什么 终搜提供了用户原始数据的一个结构化副本 在副本上提供了多样的查询功能 数据库 云梯数据 数据副本 导入 导入 业务方 终搜 查询 Select Fromtab1wherecol1like xxxx 产品规模 终搜产品在阿里巴巴集团内部目前已经有将近300台的索引服务节点 12台全量DUMP服务节点 支撑了120亿 的文档数 和每天峰值在1亿 左右的查询请求 背景 发展轨迹 2009 2010 2010 2011 2012 至今 第一阶段 第二阶段 第三阶段 产品发展 技术关键字 Solr Lucene Zookeeper业务规模 10 数据规模 5000W 技术关键字 Solr Lucene Zookeeper Hadoop数据规模 30 数据规模 30亿 技术关键字 平台化业务规模 100 数据规模 120亿 成长的烦恼 业务规模的增长 终搜集群 聚划算事业部 技术部 开发一组 聚划算事业部 技术部 开发二组 应用2 应用1 1 n 1 n 天猫事业部 产品技术部 导购 垂直线 天猫事业部 产品技术部 会员营销 应用2 应用1 1 n 1 n 成长的烦恼 数据规模的增长 成长的烦恼 其他 业务实例索引配置变化频繁 归属机器需要重启生效业务实例依赖配置和三方jar包无版本化管理 更新轨迹无法追踪 业务需要在线扩容怎么办检索节点宕机 导致检索服务不稳定怎么办 寻求思路 平台化 容量扩容 业务接入 索引构建 基础服务 业务管理 中心管理 定义和维护业务实例状态信息收集可视化状态信息集群视图关系维护 全量任务分发并执行源数据存储索引回流 业务引擎维护检索服务提供状态信息汇报 平台化 协调 TSearcher TSearcher 业务实例管理 可视化监控 DUMP中心 DUMP中心 搜索 DUMP隔离 实时增量 扩容 垂直扩容 扩容 垂直扩容 扩容 水平扩容 扩容 水平扩容 容灾恢复 核心业务 Lucene版本 资源过滤 Solr版本 版本匹配过滤 业务独占资源 正在恢复 条件过滤 优先推选规则1 空闲资源 磁盘容量 JVM内存 请求平均响应时间 承载业务实例副本 机器Load 优先推选规则2 优先推选规则2 容灾恢复 机器推选 查询优化 范围查询 fn2 10TO100 0 0 0 查询优化 范围查询 其他优化 检索
人人文库> 全部分类> 应用文书 > 技术指导

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论