其实我需要的只是一个简单的文件型kv存储, 使用时独占的, 只有查询, 能达到1000qps, 内存占用要小就行了. 估摸着自已写一个, 代码量应该在500行以内.
存储格式:
header
klen1 key1 vlen1 value1
klen2 key2 vlen2 value2
header占12字节, 标明版本号. klen占一个字节, klen的第一个bit是删除标记位, 后7个bit表示实际大小, 这样如果klen大于127说明这条记录被删除了, 紧接着是key, key后面存储vlen和value, vlen占两个字节, 所以记录大小最大为64KB
打开数据库的过程是将key做一遍索引保存在hash表里, hash node结构如下:
struct node {
unsigned int hash2;
unsigned int pos;
struct node *next;
};
hash2是采用另一种hash算法计算出的hash值, 这样是为了节约内存, 避免在内存里保存key内容, 这可能会产生冲突, 没关系, 二次hash的情况下冲突的机率是2^32 * capacity, 如果发现冲突调大capacity就行了. pos是klen在数据文件中的位置, 这样可精确知道某条记录在文件中的位置, 两次fseek和fread就可读出文件内容.
支持的操作:
一些测试数据:
机器配置: E5200 2.50GHz, SATA 7200
目前适用场景:
