redis的bigkeys命令之原理

简言

1. 想要统计分析redis中的大key，使用redis的命令 bigkeys 是个比较简洁的办法

2. bigkeys的原理其实很简单，就是分多次遍历整个redis的所有key，计算各个key的大小（一般是元素数）

 

源代码如下（笔者的redis版本：5.0.1）

// 计算各个类型的方法，可以看到不同的类型用了不同的办法求其长度，并非真正的内存占用
// string     :    字符串长度
// list       :    列表长度
// set        :    元素个数
// hash       :    元素个数
// zset       :    元素个数
// stream     :    元素个数
typeinfo type_string = { "string", "STRLEN", "bytes" };
typeinfo type_list = { "list", "LLEN", "items" };
typeinfo type_set = { "set", "SCARD", "members" };
typeinfo type_hash = { "hash", "HLEN", "fields" };
typeinfo type_zset = { "zset", "ZCARD", "members" };
typeinfo type_stream = { "stream", "XLEN", "entries" };
typeinfo type_other = { "other", NULL, "?" };

// 查找大key的函数
static void findBigKeys(int memkeys, unsigned memkeys_samples) {
    unsigned long long sampled = 0, total_keys, totlen=0, *sizes=NULL, it=0;
    redisReply *reply, *keys;
    unsigned int arrsize=0, i;
    dictIterator *di;
    dictEntry *de;
    typeinfo **types = NULL;
    double pct;

    dict *types_dict = dictCreate(&typeinfoDictType, NULL);
    typeinfo_add(types_dict, "string", &type_string);
    typeinfo_add(types_dict, "list", &type_list);
    typeinfo_add(types_dict, "set", &type_set);
    typeinfo_add(types_dict, "hash", &type_hash);
    typeinfo_add(types_dict, "zset", &type_zset);
    typeinfo_add(types_dict, "stream", &type_stream);

    .......
}