Redis使用经验之谈
应用场景
保存用户喜欢的商品信息.
类型: Hash,
key: usr:${type_id}:${version_id}:${user_id}:${warehouse_id},
field: ${sku_id},
value: jsonstr(sku对应的brand, goods, 来源渠道等信息)
- 记录用户喜欢的商品所在档期的数目.
类型: ZSet,
key: usr:${type_id}:${version_id}:${user_id}:${warehouse_id},
value: ${brand_id},
score: int(喜欢则+1, 取消喜欢则-1) - Redis同步Queue, 定期将喜欢/取消喜欢的商品同步到mysql,
类型: List,
key: usr:${type_id}:${version_id}:${user_id}:${warehouse_id},
value: jsonstr(sku对应的brand, goods, 喜欢状态)
最佳实践
1,针对商品收藏, 粒度是sku的时候, 如何更好的利用redis丰富的数据类型?
以user_id+warehouse_id作为查询条件, 存储的信息包括sku_id, good_id, brand_id, channel, time等信息,如果采用redis基础的 Key/Value 存储结构, 那么
- 方案1: user_id+warehouse作为key, value是所有喜欢的商品信息的一个集合, 这种方式的缺点是,增加了序列化/反序列化的开销,并且在需要修改其中一项信息时,需要把整个对象取回,并且修改操作需要对并发进行保护,引入CAS等复杂问题。
- 方案2: user_id+warehouse+sku作为key, value是单件sku信息的序列化信息, 第二种方法是这个用户喜欢商品有多少成员就存成多少个key-value,用user_id+warehouse+sku唯一标识来取得对应属性的值,虽然省去了序列化开销和并发问题,但是用户ID为重复存储,如果存在大量这样的数据,内存浪费还是非常可观的, 并且如果要全部取出用户所有的喜欢商品数据, 只能先用keys 正则匹配, 拿到所有key的list, 再遍历去拿每个的对应value, 性能不可接受.
2,针对统计用户喜欢商品对应档期的计数,
以user_id+warehouse作为查询条件, 存储的主要是每个brand_id下用户喜欢了多少商品,如果采用基础的K/V结构的话, 无法避免的会出现上面例子产生的问题
如果采用HASH, key: user_id+warehouse_id, field: brand_id, value: int 存在的问题是: CAS并发问题, 不通过Redis加锁机制, 无法保证加减操作的原子性, 而且必须与Redis通讯两次, 第一次获取并加锁, 第二次设置新值
所以我们采用ZSET结构, Redis sorted set的可以通过提供一个优先级(score)的参数来为成员排序或计数, 并且是插入有序的, 如果需要对set中某一个brand_id的数目进行操作只需要一次redis通讯, 并且是原子性操作
3,使用pipeline, 减少调用redis通讯次数, 如果需要返回值, 则可以使用syncAndReturn方法
踩过的坑
商品收藏一开始没有采用sharding的Redis部署架构, 导致单机Redis CPU和流量很大, 后期进行扩展的做法不知道好还是不好, 写出来大家可以讨论: 新部署结构上线前将扩容的4台新Redis实例slaveof原有实例, 将原有单机数据持续引入, 新部署结构完全上线后, 将slaveof切断, 5台实例向外提供服务.
优点: 不会造成数据丢失, 扩展平滑对调用方透明
缺点: 新实例上会有垃圾数据
Redis使用经验之谈的更多相关文章
- 架构师养成记--35.redis集群搭建
前记:redis哨兵经验之谈.哨兵做主从切换可能要花费一两秒,这一两秒可能会丢失很多数据.解决方法之一是在java代码中做控制,try catch 到 链接断开的异常就sleep 一两秒钟再conti ...
- PHP Warning: PHP Startup: redis: Unable to initialize module Windows版本phpredis扩展
版权声明:经验之谈,不知能否换包辣条,另,转载请注明出处.https://www.cnblogs.com/zmdComeOn/category/1295248.html [root@VM_0_2_ce ...
- 【原创】(求锤得锤的故事)Redis锁从面试连环炮聊到神仙打架。
这是why技术的第38篇原创文章 又到了一周一次的分享时间啦,老规矩,还是先荒腔走板的聊聊生活. 有上面的图是读大学的时候,一次自行车骑行途中队友抓拍的我的照片.拍照的地方,名字叫做牛背山,一个名字很 ...
- 使用redis构建可靠分布式锁
关于分布式锁的概念,具体实现方式,直接参阅下面两个帖子,这里就不多介绍了. 分布式锁的多种实现方式 分布式锁总结 对于分布式锁的几种实现方式的优劣,这里再列举下 1. 数据库实现方式 优点:易理解 缺 ...
- Ignite性能测试以及对redis的对比
测试方法 为了对Ignite做一个基本了解,做了一个性能测试,测试方法也比较简单主要是针对client模式,因为这种方法和使用redis的方式特别像.测试方法很简单主要是下面几点: 不作参数优化,默认 ...
- mac osx 安装redis扩展
1 php -v查看php版本 2 brew search php|grep redis 搜索对应的redis ps:如果没有brew 就根据http://brew.sh安装 3 brew ins ...
- Redis/HBase/Tair比较
KV系统对比表 对比维度 Redis Redis Cluster Medis Hbase Tair 访问模式 支持Value大小 理论上不超过1GB(建议不超过1MB) 理论上可配置(默认配置1 ...
- Redis数据库
Redis是k-v型数据库的典范,设计思想及数据结构实现都值得学习. 1.数据类型 value支持五种数据类型:1.字符串(strings)2.字符串列表(lists)3.字符串集合(sets)4.有 ...
- redis 学习笔记(2)
redis-cluster 简介 redis-cluster是一个分布式.容错的redis实现,redis-cluster通过将各个单独的redis实例通过特定的协议连接到一起实现了分布式.集群化的目 ...
随机推荐
- springboot快速集成swagger
今天技术总监说:小明,我们本次3.0改造,使用swagger2.0作为前后端分离的接口规范,它可以一键生成前后端的API,一劳永逸--小明:??? Spring Boot 框架是目前非常流行的微服务框 ...
- Java中将List转成逗号数组的方案
说明:逗号字符串转成数组或者List都是可以的,反过来依然可行:但是如果是List<String>转List<Integer>,基本误解,在Java 7只能for循环,如果在J ...
- Java中获取ServletContext的方法
Servlet: this.getServletContext() this.getServletConfig().getServletContext() request.getSession().g ...
- windows XP 下的DTRACE 跟踪 学习
https://github.com/prash-wghats/DTrace-win32 1. dtrace_loader.exe -l //to load dtrace drivers 2. C:\ ...
- Android View 测量流程(Measure)完全解析
前言 上一篇文章,笔者主要讲述了DecorView以及ViewRootImpl相关的作用,这里回顾一下上一章所说的内容:DecorView是视图的顶级View,我们添加的布局文件是它的一个子布局,而V ...
- excel怎么把文本格式的数字转换为数字,且把前面的撇号去掉
excel把文本格式的数字转换为数字,且把前面的撇号去掉方法:1.选中要处理的列,在“数据”菜单下,选择“分列”.2.在“分列”向导对话框里,选择“分隔符号”,并点击下一步.3.在“分列”向导对话框第 ...
- extern “C”的使用
2016-12-11 22:40:48 VS编译的时候,可以指定编译为C代码或者C++代码.c/c++->高级.而当你新建一个cpp文件时,VS很有可能自动会把编译方式由C变成C++编译.然 ...
- C#应用程序配置文件.config介绍
我们经常会希望在程序中写入一些配置信息,例如版本号,以及数据库的连接字符串等.你可能知道在WinForm应用程序中可以利用Properties.Settings来进行类似的工作,但这些其实都利用了Ap ...
- Redhat hadoop2.7.2安装笔记
本次安装是在windows7环境下安装redhat虚拟机进行的,所须要的软件例如以下: VirtualBox-5.0.16-105871-Win.exe rhel-server-5.4-x86_64- ...
- 递归计算战士打靶S次打了N环一共同拥有多少种可能的问题
问题描写叙述 一个战士打了10次靶.一共打了90环,问一共同拥有多少种可能,并输出这些可能的组合. 思路 首先.嵌套10层循环进行穷举是不可取的,一是由于速度太慢,二是假设改成打20次靶就完蛋了. 事 ...