KV存储的对比

KV存储的对比

转载于:https://yq.aliyun.com/articles/85634?spm=5176.8091938.0.0.Bck5cC

最近对各种KV存储进行一个比较,从存储引擎到存储引擎的类型,到单机版的kvstore,再到分布式kvstore集群。

存储引擎的类型

类型 全称
btree
LSH Log-Structured Hash Table
LSM Log-Structured Merge Tree
FractalTree 分型树

存储引擎

Welcome to Oschina Tools website

类型 名称 语言 备注 应用在___ dbengine排名 出品
berkeleyDB BTREE, HASH, QUEUE, RECNO C,Java

No.9 oracle
Wiredtiger btree, LSM C
mongodb No.24 WiredTiger/mongodb
Tokyo Cabinet /Kyoto Cabinet b+tree,hash table

nmdb,Kyoto Tycoon NO.27/No.36 FAL Labs
LMDB btree C
OpenLDAP
symas
BoltDB btree Go LMDB的go版本


leveldb LSM c++

No.15 google
goleveldb LSM Go leveldb的go版本

个人
levigo LSM Go Go wrapper for LevelDB

个人
rocksdb LSM c++,java

No.18 facebook
gorocksdb LSM Go Go wrapper for RocksDB

个人
mongo-rocks LSM C++
RocksDB Storage Engine Module for MongoDB
mongo partner
bitcast LSH C
beansdb,riak
basho
PerconaFT FractalTree C++ Mysql存储引擎之TokuDB percona

单机kvstore

类型 名称 采用的存储引擎 语言 出品 主从复制 github star
kv对 nmdb qdbm, berkeley db, tokyo cabinet,tdb C 个人Alberto Bertogli

kv对 memcachedb Berkeley DB C 新浪 yes
kv对 Kyoto Tycoon Kyoto Cabinet C/C++ FAL Labs

结构化kv(redis兼容) ssdb leveddb C/C++ 个人ideawu yes 4k+
结构化kv(redis兼容) ssdb-rocks rocksdb C/C++ 个人ideawu
92
结构化kv(redis兼容) ardb LevelDB, RocksDB, LMDB, WiredTiger C++ 个人yinqiwen yes 800+
结构化kv(redis兼容) (reborndb)qdb Rocksdb and LevelDB Go 个人ngaut
200+
结构化kv(redis兼容) Pika Rocksdb C Qihoo360 yes 900+
结构化kv(redis兼容) LedisDB LevelDB, goleveldb, LMDB, RocksDB, BoltDB or Memory Go 个人SiddonTang
2K+

单机kvstore的分布式代理

名称 语言 存储 出品 应用/githubstar 分片 弹性 备注
Reborndb Go qdb 个人ngaut 200+ yes yes
Netflix Dynomite C redis,memcached Netflix 1.9K+

Dynamo
Codis Go codis-server(定制redis) 社区CodisLabs 5K+


Twenproxy C redis,memcached twitter 6K+


分布式KVstore

类型 名称 语言 出品 dbengine排名/githubstar 存储引擎 社区活跃 特性 备注
kv型 riak erlang basho No.3/2K+ bitcask

Dynamo
kv型 beansdb C douban 600+ bitcask模型 近2年没有更新,没有文档
Dynamo
kv型 project Voldmort Java LinkedIn No.29/1.8K+ BDB-JE,MySQL,Read-Only


kv型 Scalris erlang Zuse Institute Berlin No.35/88



kv型 aeospike
aespike No.7



kv型 Tair C/C++ alibaba 400+ 自研的fdb 停止更新,没有文档

补充

原文中没有提到的,在这里添加上作为补充。

  • tidb: 国产的分布式NewSQL产品,底层采用tikv, 支持MySQL协议, PingCap出品。
  • badger: 性能优异,特别为SSD优化,仅仅key存储在LSM tree中。

你可能感兴趣的:(分布式存储系统)