memcache 对比 redis
memcache 与 redis 有什么区别,在什么情况下应该使用 redis?
memcache
- memcache 提供简单的 kv cache 存储,value 大小不超过1mb。
- 我使用 memcache 作为大文本或者简单的 kv结构使用。
- memcache 使用了slab 方式做内存管理,存在一定的浪费,如果大量接近的 item,建议调整 memcache 参数来优化每一个 slab 增长的 ratio、可以通过设置 slab_automove & slab_reassign 开启memcache 的动态/手动 move slab,防止某些 slab 热点导致内存足够的情况下引发 LRU。
- 大部分情况下,简单 KV 推荐使用 Memcache,吞吐和相应都足够好。
- 每个 slab 包含若干大小为1M的内存页,这些内存又被分割成多个 chunk,每个 chunk存储一个 item;
- 在 memcache 启动初始化时,每个 slab 都预分配一个 1M 的内存页,由slabs_preallocate 完成(也可将相应代码注释掉关闭预分配功能)。
- chunk 的增长因子由 -f 指定,默认1.25,起始大小为48字节。
- 内存池有很多种设计,可以参考下: nginx ngx_pool_t,tcmalloc 的设计等等。
redis
- redis 有丰富的数据类型,支持增量方式的修改部分数据,比如排行榜,集合,数组等。
- 比较常用的方式是使用 redis 作为数据索引,比如评论的列表 ID,播放历史的列表 ID 集合,我们的关系链列表 ID。
- redis 因为没有使用内存池,所以是存在一定的内存碎片的,一般会使用 jemalloc 来优化内存分配,需要编译时候使用 jemalloc 库代替 glib 的 malloc 使用。
对比
Redis 和 Memcache 最大的区别其实是 redis 单线程(新版本双线程),memcache 多线程,所以 QPS 可能两者差异不大,但是吞吐会有很大的差别,比如大数据 value 返回的时候,redis qps 会抖动下降的的很厉害,因为单线程工作,其他查询进不来(新版本有不少的改善)。
所以建议纯 kv 都走 memcache,比如我们的关系链服务中用了 hashs 存储双向关系,但是我们也会使用 memcache 档一层来避免hgetall 导致的吞吐下降问题。
我们系统中多次使用 memcache + redis 双缓存设计。