2.8.8 hadoop体系之离线计算-HBase数据库-HBase高级-HBase读流程

约定不等于承诺〃 2022-12-26 00:57 166阅读 0赞

**目录**

1.HBase读流程图

2.读流程分析

3.Block Cache（读缓存）

--------------------

# 1.HBase读流程图 #

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMzMjA4ODUx_size_16_color_FFFFFF_t_70_pic_center]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1N1eWViaXViaXU_size_16_color_FFFFFF_t_70][]

# 2.读流程分析 #

1）Client 先访问 zookeeper，获取 hbase:meta 表位于哪个 Region Server。

2）访问对应的 Region Server，获取 hbase:meta 表，根据读请求的 namespace:table/rowkey， 查询出目标数据位于哪个 Region Server 中的哪个 Region 中。并将该 table 的 region 信息以 及 meta 表的位置信息**缓存在客户端的 meta cache**，方便下次访问。

3）与目标 Region Server 进行通讯；

4）分别在 **Block Cache（读缓存）**，**MemStore** 和 **Store File（HFile）**中查询目标数据，并将查到的所有数据进行**合并（返回时间戳最大的数据）**。此处所有数据是指同一条数据的不同版本（time stamp）或者不同的类型（Put/Delete）。

5） 将从文件中查询到的数据块（Block，HFile 数据存储单元，默认大小为 64KB）**缓存到 Block Cache**。

6）将合并后的最终结果返回给客户端。

# 3.Block Cache（**读缓存**） #

**缓存磁盘中的数据（磁盘慢）**（仅仅放磁盘文件中的数据，不放内存Mem Store中的数据）。当读取`stu3,1001，info:name`的时候，如果Block Cache没有，同时读取内存和磁盘中的数据（将磁盘的数据放到block Cache，[LRU原理，缓存淘汰][LRU]），然后将merge(内存读取，磁盘读取)的结果返回。下图中，zhangsan在磁盘中（手动刷入），时间戳t1；lisi在内存中（默认等到一定大小或时间），时间戳t2，且t1>t2。如果是读取内存而不读取磁盘，得到的应该是lisi。而HBase通过上述的方式返回时间戳最大的那一条数据，为zhangsan。（**读比写慢**）  
![在这里插入图片描述][20200403140021404.png_pic_center]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzMzMjA4ODUx_size_16_color_FFFFFF_t_70_pic_center]: /images/20221120/db482da6641c43a2b8a7f96bca65124a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1N1eWViaXViaXU_size_16_color_FFFFFF_t_70]: /images/20221120/5c3af36439074febba1a3f98cb7d65ed.png
[LRU]: https://www.cnblogs.com/Dhouse/p/8615481.html
[20200403140021404.png_pic_center]: /images/20221120/e0b833e32a684ae4a39ebbda096fa6ef.png