HBase入门基础PPT推荐.ppt

1、深入浅出Hadoop,Hbase&#Storm（新版）,本节课的主要内容,Hbase架构Hbase集群安装使用HBase Shell,HBase,HBase是Google Bigtable的开源实现，类似Google Bigtable利用GFS作为其文件存储系统，HBase利用Hadoop HDFS作为其文件存储系统；#Google运行MapReduce来处理Bigtable中的海量数据，HBase同样利用Hadoop MapReduce来处理HBase中的海量数据；#Google Bigtable利用 Chubby作为协同服务，HBase利用Zookeeper作为对应。#,Hbase的特点,

2、高可靠性高效性面向列可伸缩,Hbase的基本架构,Hbase表结构,Row Key row key是用来检索记录的主键，访问hbase table中的行，只有三种方式通过单个row key访问通过row key的range全表扫描,列族（Column Family）,Column Family列族在创建表的时候声明，一个列族可以包含多个列，列中的数据都是以二进制形式存在，没有数据类型。#,时间戳（Time Stamp）,时间戳HBase中通过row和columns确定的为一个存贮单元称为cell。#每个 cell都保存着同一份数据的多个版本。#版本通过时间戳来索引。#,HBase数据模型,Lo

3、rem ipsum dolor sit amet,consectetur adipisicing elit,sed do eiusmod tempor incididunt ut labore et dolore magna aliqua.,Table&#Region,当Table随着记录数不断增加而变大后，会逐渐分裂成多份splits，成为regions，一个region由startkey,endkey）表示，不同的region会被Master分配给相应的RegionServer进行管理：#,Table&#Region,Lorem ipsum dolor sit amet,consectet

4、ur adipisicing elit,sed do eiusmod tempor incididunt ut labore et dolore magna aliqua.,HBase系统架构,Lorem ipsum dolor sit amet,consectetur adipisicing elit,sed do eiusmod tempor incididunt ut labore et dolore magna aliqua.,-ROOT-&#.META.Table,HBase中有两张特殊的Table，-ROOT-和.META.Zookeeper中记录了-ROOT-表的location

5、-ROOT-：#记录了.META.表的Region信息，-ROOT-只有一个region.META.：#记录了用户表的Region信息，.META.可以有多个regoin,Client,Zookeeper,Client 1 包含访问hbase的接口，client维护着一些cache来加快对hbase的访问，比如regione的位置信息。#Zookeeper 1 保证任何时候，集群中只有一个master2 存贮所有Region的寻址入口。#3 实时监控Region Server的状态，将Region server的上线和下线信息实时通知给Master4 存储Hbase的schema,包括有哪些t

6、able，每个table有哪些column family,Master,Master 1 为Region server分配region2 负责region server的负载均衡3 发现失效的region server并重新分配其上的region4 GFS上的垃圾文件回收5 处理schema更新请求,Region Server,Region Server 1 Region server维护Master分配给它的region，处理对这些region的IO请求2 Region server负责切分在运行过程中变得过大的region可以看到，client访问hbase上数据的过程并不需要master参与（寻址访问zookeeper和region server，数据读写访问regione server），master仅仅维护者table和region的元数据信息，负载很低。#,