HBase Compact && Split

Compact

HStore存储是HBase存储的核心,其中由两部分组成,一部分是MemStore,一部分是StoreFiles。
MemStore是Sorted Memory Buffer,用户写入的数据首先会放入MemStore,当MemStore满了以后会Flush成一个StoreFile(底层实现是HFile),当StoreFile文件数量增长到一定阈值,会触发Compact合并操作,将多个StoreFiles合并成一个StoreFile,合并过程中会进行版本合并和数据删除,
因此可以看出HBase其实只有增加数据,所有的更新和删除操作都是在后续的compact过程中进行的,
这使得用户的写操作只要进入内存中就可以立即返回,保证了HBase I/O的高性能。

split

当StoreFiles Compact后,会逐步形成越来越大的StoreFile,当单个StoreFile大小超过一定阈值后,会
触发Split操作,同时把当前Region Split成2个Region,父Region会下线,新Split出的2个孩子Region
会被HMaster分配到相应的HRegionServer上,使得原先1个Region的压力得以分流到2个Region上。


下图描述了Compaction和Split的过程:
HBase Compact && Split_第1张图片




你可能感兴趣的:(HBase Compact && Split)