美文网首页hbase&hadoop
Hbase 的小合并大合并

Hbase 的小合并大合并

作者: 大数据修行 | 来源:发表于2019-03-28 13:03 被阅读0次

compaction从store上面,选取一些HFile进行合并。把key-value按顺序排列写入到新的文件下面,取代之前的文件提供数据。分为minorcompaction和majorcompaction。
1.minorcompaction
较小的,相邻的HFile的合并
2.majorcompaction
一个store里面的所有HFile的合并,合并成一个,会清理三类数据:
1.已经删除的数据
2.ttl过期的数据
3.版本超过限定的数据

相关文章

网友评论

    本文标题:Hbase 的小合并大合并

    本文链接:https://www.haomeiwen.com/subject/uhrtbqtx.html