Hbase读写原理

- 日理万妓 2023-07-08 10:28 15阅读 0赞

**1 hbase读取数据流程**  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzU5OTM3Nw_size_16_color_FFFFFF_t_70]

1）Client先访问zookeeper，从meta表读取region的位置，然后读取meta表中的数据。meta中又存储了用户表的region信息；  
2）根据namespace、表名和rowkey在meta表中找到对应的region信息；  
3）找到这个region对应的regionserver；  
4）查找对应的region；  
5）先从MemStore找数据，如果没有，再到BlockCache里面读；  
6）BlockCache还没有，再到StoreFile上读(为了读取的效率)；  
7）如果是从StoreFile里面读取的数据，不是直接返回给客户端，而是先写入BlockCache，再返回给客户端。

**2 写数据流程**  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzU5OTM3Nw_size_16_color_FFFFFF_t_70 1]  
1）Client向HregionServer发送写请求；  
2）HregionServer将数据写到HLog（write ahead log）。为了数据的持久化和恢复；  
3）HregionServer将数据写到内存（MemStore）；  
4）反馈Client写成功。

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzU5OTM3Nw_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20200226124111335.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzU5OTM3Nw==,size_16,color_FFFFFF,t_70
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzU5OTM3Nw_size_16_color_FFFFFF_t_70 1]: https://img-blog.csdnimg.cn/20200226124202444.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzU5OTM3Nw==,size_16,color_FFFFFF,t_70

发表评论取消回复

表情：

评论列表（有 0 条评论，15人围观）

还没有评论，来说两句吧...

相关阅读

相关 Flink 读写 HBase 总结

总结 Flink 读写 HBase本文总结了Flink SQL 读写 HBase 的参数配置，解决了在kerberos环境下因 hudi 包 hbase-site.xml...

妖狐艹你老母/ 2024年05月31日 06:05/ 0 赞/ 138 阅读

相关 HBase的读写流程

HBase的读写流程 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9

小鱼儿/ 2024年02月19日 19:31/ 0 赞/ 106 阅读

相关 HBase读写流程

HBase读写流程架构原理 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0

妖狐艹你老母/ 2023年10月04日 16:42/ 0 赞/ 91 阅读

相关 Hbase读写原理

1 hbase读取数据流程 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6L

- 日理万妓/ 2023年07月08日 10:28/ 0 赞/ 16 阅读

相关 HBase的读写机制

HBase写数据流程 1、Client先访问zookeeper，从meta表获取相应region信息，然后找到meta表的数据 2、根据namespace、表名和rowke

雨点打透心脏的1/2处/ 2023年02月12日 06:27/ 0 赞/ 37 阅读

相关 Hbase读写流程

Hbase读写流程一、写数据流程 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_a

Love The Way You Lie/ 2023年01月08日 10:24/ 0 赞/ 181 阅读

相关 HBase：HBase架构及读写流程

本篇博文从分析HBase架构开始，首先从架构中各个组成部分开始，接着从HBase写入过程角度入手，分析HFile的Compaction合并、Region的Split分裂过程及触

深碍√TFBOYSˉ_/ 2022年10月02日 10:51/ 0 赞/ 274 阅读

相关 python hbase 读写

根据hbase的key值范围查询: for key,data in table.scan(row_start=vin+'_'+str(int(start_t)),ro

比眉伴天荒/ 2022年05月18日 05:17/ 0 赞/ 284 阅读

相关 HBase数据模型和读写原理

Hbase的数据模型和读写原理： HBase是一个开源可伸缩的分布式数据库,他根据Google Bigtable数据模型构建在hadoop的hdfs存储系统之上。

心已赠人/ 2022年04月25日 02:16/ 0 赞/ 332 阅读

相关 HBase（一）HBase的读写流程

> Region是HBase数据存储和管理的基本单位。在HBase的一个表中，可以包含一个或多个region。对于一个region，每个列族都会对应一个store，用来存储该列

谁践踏了优雅/ 2021年11月08日 19:16/ 0 赞/ 451 阅读