大数据之Hbase:HBase之读写数据流程

最新推荐文章于 2025-07-30 10:24:43 发布

原创最新推荐文章于 2025-07-30 10:24:43 发布 · 179 阅读

0 ·

本内容遵循CC 4.0 BY-SA版权协议

大数据系列二专栏收录该内容

110 篇文章

订阅专栏

本文详细介绍了HBase的数据写入和读取流程。在写流程中，客户端首先通过Zookeeper找到RegionServer，然后将数据追加到WAL并写入MemStore，待时机成熟再刷写到HFile。读流程则涉及从Meta表定位数据，从MemStore和HFile合并查询结果，最后返回给客户端。整个过程高效且有序。

1.HBase写流程流程

在这里插入图片描述
写流程步骤：
1）Client先访问zookeeper，获取hbase:meta表位于哪个Region Server。
2）访问对应的Region Server，获取hbase:meta表，根据读请求的namespace:table/rowkey，查询出目标数据位于哪个Region Server中的哪个Region中。并将该table的region信息以及meta表的位置信息缓存在客户端的meta cache，方便下次访问。
3）与目标Region Server进行通讯；
4）将数据顺序写入（追加）到WAL；
5）将数据写入对应的MemStore，数据会在MemStore进行排序；
6）向客户端发送ack；
7）等达到MemStore的刷写时机后，将数据刷写到HFile。

2.HBase读流程流程

在这里插入图片描述
读流程步骤：
1）Client先访问zookeeper，获取hbase:meta表位于哪个Region Server。
2）访问对应的Region Server，获取hbase:meta表，根据读请求的namespace:table/rowkey，查询出目标数据位于哪个Region Server中的哪个Region中。并将该table的region信息以及meta表的位置信息缓存在客户端的meta cache，方便下次访问。
3）与目标Region Server进行通讯；
4）分别在MemStore和Store File（HFile）中查询目标数据，并将查到的所有数据进行合并。
5）将查询到的新的数据块（Block，HFile数据存储单元，默认大小为64KB）缓存到Block Cache。
6）将合并后的最终结果返回给客户端