RocksDB概述

RocksDB是一个持久化k-v存储系统,存储介质包括内存和闪存。底层文件结构符合LSM(Log-Structured-Merged-Database)。在写放大、读放大以及空间放大之间可以进行折衷。底层文件的合并压缩采用多线程,适合存储TB级别的数据。

概念解释

1)闪存:一种存储介质,非易失性、区块为单位进行数据删除。
2)LSM:按读写顺序将写操作数据保存在一些相似的有序文件中。每个文件包含短时间内的一些改动。因为文件是有序的,查找会很快。文件是不可以修改的,永远不会被更新,新的更新操作只会写到新的文件中。读操作检查所有的文件。通过周期性的合并这些文件来减少文件个数。
3)写放大、读放大、空间放大:所谓的放大就是额外多出来的。写放大,即比理论上更多的写成本;读放大,比理论上更多的读成本;空间放大,比理论上更大的空间。
4)Compaction(压缩):用于将相似的小文件合并成大文件,减少文件之间的overlap,减少inode消耗,减少IO消耗。RocksDB的compaction采用了多线程方式,值得去探索学习下。

多说两句:
目前No SQL非常流行,市面上也有好几款流行的k-v存储系统,底层都涉及到了LSM、Compaction技术,偏基础架构层面的技术,对这种技术感兴趣的朋友可以去自学或者一起交流。
在接下来的时间中,我会从源码层次、架构层面去解析RocksDB。欢迎各位批评指正。

参考文献:
1. https://baike.baidu.com/item/%E9%97%AA%E5%AD%98/108500?fr=aladdin

如果你觉得这篇文章对你或者你的朋友有帮助,欢迎转发~

你可能感兴趣的:(RocksDB概述)