LevelDB 学习笔记3:合并策略
LSM 树常见的合并策略有两种: Leveled Compaction 和 Size-tiered
Leveled Compaction
LevelDB 和 Rocksdb 选择的合并策略叫 Leveled Compaction
- 每个 level 是有序的
- sstable 内有序,多个 sstable 的 key 不重叠
- 每层有大小阈值
- 触发阈值后,选择至少一个文件和下一层的 sstable 合并
- 可能触发递归的合并
- 不同层级的合并可以多线程并发执行
- 触发阈值后,选择至少一个文件和下一层的 sstable 合并
LevelDB 中的 Compaction
LevelDB 的合并策略详见这篇博客
Size-tiered
HBase 选择的合并策略叫 size-tiered(Cassandra 两种合并策略都支持)
- 只能保证单个 sstable 的有序性
- sstable 被组织为 tier
- memtable 会周期性地产生小型的 sstable
- 某个 tier 内的 sstable 数量达到阈值后
- 这个 tier 内的所有 sstable 合并为一个 sstable 刷到下一层的 tier 里去
比较两种合并策略
- Leveled Compaction
- 搜索效率高
- Level 内有序,可以二分搜索
- 合并触发频繁
- 写放大更显著
- 搜索效率高
- Size-tiered
- 搜索和存储效率低
- 读放大和空间放大更显著
- 但触发合并的频率较小
- 搜索和存储效率低
原创文章,作者:bd101bd101,如若转载,请注明出处:https://blog.ytso.com/tech/pnotes/245075.html