HBase分布式数据库技术与应用 课件1项目一-任务一-认识HBase

《HBase分布式数据库实战》课程核心知识：HBase安装、部署、配置、HBaseShell语法、HBaseAPI编程。课程介绍：以能力为本位、以职业实践为主线、以项目课程为主体。培养技能目标：HBase安装、部署、配置能力、HBaseShell操作能力、HBaseAPI编程能力。课程简介课时分配基础篇HBase分布式数据库实战HBase是一个分布式存储、数据库引擎，可以支持千万的QPS、PB级别的存储，这些都已经在生产环境验证，并且在广大的公司已经验证。特别是阿里、小米、京东、滴滴内部都有数千、上万台的HBase集群。篇章引入章节任务HBase分布式数据库实战项目一认识HBase任务一浅谈Hbase的由来任务引入淘宝的实时个性化推荐服务，中间推荐结果存储在HBase中，广告相关的用户建模数据也存储在HBase中，用户模型多种多样，可以用于多种不同场景，例如，针对特定用户投放什么广告，用户在电商门户网站上购物时是否实时报价等。任务概要任务描述:本任务将讲解大数据分布式数据库HBase的发展历史和使用场景，让大家对HBase有初步认识。任务教学目标：了解HBase的由来、使用场景。一数据创新二海量数据与NoSQL教学内容三HBase的由来四HBase的崛起五HBase的使用场景数据创新知识点一挑战需要实现更快地传输数据、高效存储和访问数据。5G、人工智能和边缘智能设备等技术结合在一起。2020英特尔新闻发布会上，英特尔公司首席执行官司睿博表示：2015年以来全球数据量每年增长25%，50%的数据来源于边缘端，全球560亿设备，相当于每个人有7个。到2025年，全球数据量估计达到175ZB（一）数据创新海量数据与NoSQL知识点二（二）海量数据与NoSQL关系型数据库的优缺点关系型数据库的优缺点优点缺点保持数据的一致性（事务处理）大量数据的写入处理（这点尤为重要）由于以标准化为前提，数据更新的开销很小（相同的字段基本上都只有一处）为有数据更新的表做索引或表结构（schema）变更可以进行Join等复杂查询字段不固定时应用对简单查询需要快速返回结果的处理HBase的由来知识点三（三）HBase的由来Google的三驾马车BigTableGFSMapReduceHadoopHBase1.HBase的由来（三）HBase的由来1.HBase的由来HBase历史年份事件Nov2006谷歌公布BigTable文件。Feb2007最初的HBase原型创建由

Hadoop

贡献。Oct2007随着Hadoop0.15.0，第一个可用的HBase也发布了。Jan2008HBase成为

Hadoop的子项目。Oct2008HBase0.18.1发布。Jan2009HBase0.19发布。Sept2009HBase

0.20.0

发布。May2010HBase成为Apache的顶级项目。HBase的特点数据多版本面向列大数据类型单一稀疏无模式（三）HBase的由来2.HBase的特点HBase的崛起知识点四HBase是一个分布式的、面向列的开源数据库，该技术来源于FayChang所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系数据库，它是一个适合于非结构化数据存储的数据库。HBase的定义（四）HBase的崛起列的可以动态增加，并且列为空就不存储数据，节省存储空间。HBase自动切分数据，使得数据存储自动具有水平scalability。HBase可以提供高并发读写操作的支持。不能支持条件查询，只支持按照Rowkey来查询。（四）HBase的崛起2.HBase崛起的原因HBase的使用场景知识点五HBase为语料库中的文档提供了存储。Bigtable支持行级的访问，以便抓取工具可以插入或更新单独的文档。爬虫不断抓取互联网新的页面。这些网页都存储在Bigtable的文档记录。MapReduce的作业运行在整个表上，为页面搜索应用程序生成搜索索引。用户发起网络页面搜索请求。网络页面搜索应用程序查询搜索索引，然后直接从Bigtable中找出匹配的文档。查询的结果返回并呈现给用户。（五）HBase的使用场景1.典型互联网搜索问题在本任务中，我们主要学习了以下内容：数据创新海量