版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
Hadoop大数据项目开发——HBase概述目录content02MapReduce优化方法01MapReduce运行效率瓶颈HBase简介HBase是一个面向列、高性能、高可靠、可伸缩的分布式存储系统。可在廉价计算机上搭建起大规模的结构化存储集群。HBase是以HDFS为文件存储系统。以MapReduce为海量数据处理框架,以ZooKeeper为协同服务工具。HBase简介HBase是一个非关系型数据库。非常适合于非结构化数据存储的数据库。数据以列族形式存储,HBase基于列的而不是基于行的模式。HBase支持在海量数据上随机、实时读写数据。HBase特点它弥补了Hadoop不能进行实时数据处理的缺陷。它采用了稀疏矩阵的存储方式。它可以通过增加节点的方式进行线性扩展。HBase的特点它弥补了Hadoop不能进行实时数据处理的缺陷。它采用了稀疏矩阵的存储方式。它可以通过增加节点的方式进行线性扩展。HBase与传统数据库的区别HBase的数据存储类型单一。HBase仅具有简单的操作。HBase的更新操作实际上是插入了新的数据且仍保留旧的数据。HBase的查询只能通过行键进行,表的设计难度较大。HBase与Hive的区别Hive支持SQL查询,而HBase不支持SQL。Hive不支持行级别的更新,而HBase支持数据的增、刷、改、查。Hive本身不存储数据,而HBase可以联机实时处理数据,是一种分布式数据库。HBase逻辑视图HBase中的表一般由行键(rowkey)、时间戳(timestamp)、列族(columnfamily)、列(column)组成。在使用表之前,需要先定义列族,而行、列和时间戳可动态扩展。行键:行键以字节数组来存储,没有特定的数据类型,可以是任意字符串,但最大长度为64KB。它是用于检索的主键。列族:在定义表结构时,必须预先定义列族,并且不可以随意修改。列:列在定义表时不需要定义,因为它不是元数据的一部分,只需在插入数据时再指定。时间戳:通过行键和列可以确定一个存储单元。每个存储单元中可能保存着一个数据的多个版本,它们通过时间戳索引。HBase逻辑视图HBase存储原理HBase由1个或者多个HMaster和多个RegionServer组成的集群。其中HMaster和RegionServer的状态存储在ZooKeeper上,HBase的数据存储在HFile的文件上。HRegion内部架构图本章小结本节介绍了HBase、HBase逻辑视图和HBas
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 外科感染防控措施
- 2026年国际货运资格证考试试题及答案
- 护理技能信息化应用培训
- 家政护理员营养膳食与健康
- 汽车驾驶安全知识试题及答案
- 2026届贵州省毕节市高三上学期一模英语试卷
- 护理实践指南:护理科研与循证实践
- 护理操作技能与实践
- 家私清洁工具使用技巧
- 北京母婴护理中的创新技术应用
- 2026贵州省农业发展集团有限责任公司招录(第一批)岗位65人备考题库(含答案详解)
- 2026泰信基金管理有限公司社会招聘备考题库含答案详解(培优a卷)
- (二模)济南市2026届高三第二次模拟考试英语试卷(含答案)+听力音频
- 2025年甘肃省平凉市庄浪县老年大学选聘专业授课教师笔试备考试题及答案解析
- 2026内蒙古和林格尔新区建设管理咨询有限公司招聘6人建设考试备考题库及答案解析
- 【武汉】2025年湖北武汉市教育系统专项招聘事业单位编制教师679人笔试历年典型考题及考点剖析附带答案详解
- 食品安全标准及员工培训手册
- 2026年度学校心理健康节方案
- 2026年地理信息系统与环境影响评价
- 龙湖集团批量精装交付标准(可编辑版)
- 2026时政热点考试卷及答案
评论
0/150
提交评论