一、H 的特点是什么
1.H 一个分布式的基于列式存储或者行式存储的数据库,基于hadoop的hdfs存储，zookeeper进行管理。
2.H 适合存储半结构化或非结构化数据，对于数据结构字段不够确定或者杂乱无章很难按一个概念去抽取的数据。
3.H 为null的记录不会被存储.
4.数据存储模式为key，value模式：（Table，Rowkey，Column，Timestamp）-> value 
5.H 是主从架构。Hmaster作为主节点，Hregionserver作为从节点。
 
二、H 存数据流程
\"\"

 

流程：Client请求Zookeeper确定 表所在的RegionServer所在的地址，接着根据Rowkey找到数据所归属的RegionServer；用户提交put或delete请求时H Client会将put或delete请求添加到本地buffer中，符合一定条件
会通过异步批量提交服务器处理。
 
接着数据到达Region后，服务端处理流程如下：
\"\"

 

 
流程：RegionServer去获取RowLock，region更新共享锁；接着H 会先写写日志WAL（数据可靠性）再写缓存MemStore（阈值默认64M，每个列族对应一个Store下的MemStore）；然后释放锁后将日志落到HDFS；若MemStore达到阈值则将缓存数据落磁盘StoreFile，最后多个StoreFile发生合并；若StoreFile很大会触发split操作，将当前region分割成2个Region，并同步到Hmaster。
 
三、H 取数据流程
H Client的操作和存数据类似
\"\"

服务器操作流程：

\"\"

 

RegionServer收到get请求后，对当前Region进行Scan，接着会根据列族对Store进行Scan，同时会对对应的MemStore进行Scan；最后找到我们要的数据返回给Client。注意：一个StoreScanner会对应多个StoreFileScanner，整个过程是一个层级关系。

 
四、H 存取优化
检索优化（BloomFilter）：应用BloomFilter来提高随机读的性能，BloomFilter是列族级别的配置
五、H API使用
\"\"

\"\"

\"\"

 

 

继续阅读与本文标签相同的文章

无标签
最新文章 最热文章
收藏 打印

特别推荐 2026年05月19日 星期二

精彩发现

热门标签

阻止表单提交 窗口 关闭浏览器 清除 CDATA css文件 光标位置 坐标 javascrpt !important 超链接 数字

相关文章