Redis的Sorted-Sets排行榜功能实现
Redis的ZSet排行榜功能实现
1. 功能需求
类似给用户n张图片, 用户左滑不喜欢右滑喜欢。所以每个用户就会有一些喜欢的图片集合和不喜欢的图片集合。现在我们要做一个将按照一个算法将喜欢的排到前面。算法 ctr = (喜欢数+20)/ (喜欢数+不喜欢数+20),所有的内容按照这个算法的结果进行排行榜排序。
2. Redis sorts sets简介
Sorted-Sets和Sets类型极为相似,它们都是字符串的集合,都不允许重复的成员出现在一个Set中。它们之间的主要差别是Sorted-Sets中的每一个成员都会有一个分数(score)与之关联,Redis正是通过分数来为集合中的成员进行从小到大的排序。然而需要额外指出的是,尽管Sorted-Sets中的成员必须是唯一的,但是分数(score)却是可以重复的。
Sorted Sets是通过Skip List(跳跃表)和hash Table(哈希表)的双端口数据结构实现的,因此每次添加元素时,Redis都会执行O(log(N))操作。所以当我们要求排序的时候,Redis根本不需要做任何工作了,早已经全部排好序了。元素的分数可以随时更新。
3. 代码实现
本文主要通过redisTemplate来操作redis,当然也可以使用redis-client,看个人喜好。
首先写两个要用到的两个方法, 一个批量插入数据,一个获取排行榜Top n。
/**
* @Description: 批量添加zset数据
* @author mazhq
*/
public Long setBatchZSet(String key, Set<ZSetOperations.TypedTuple<Object>> typedTuples) {
try {
return redisTemplate.opsForZSet().add(key, typedTuples);
} catch (Exception e) {
logger.error("redis setZSet failed, key = " + key + "| error:" + e.getMessage(), e);
return 0L;
}
} /**
* @Description: 获取排行前面的数据
* @author mazhq
*/
public List<Object> getTopRankZSet(String key, int topCount) {
try {
Set<Object> range = redisTemplate.opsForZSet().reverseRange(key, 0, topCount);
return Arrays.asList(range.toArray());
} catch (Exception e) {
logger.error("redis getTopRankZSet failed, key = " + key + "| error:" + e.getMessage(), e);
return new ArrayList<>();
}
}
插入排行榜数据
/**
* @Description: 批量添加图片排行榜数据
* @author mazhq
*/
public void batchAddImageData(){
//获取喜欢和不喜欢的map数据 key是图片ID
Map<String, Integer> map = userBehaviorRecordManager.getQuickImageStatistic();
//获取所有图片列表
List<ImageConfigBean> imageConfigBeanList = quickImageConfigManager.getRealAllList();
Set<ZSetOperations.TypedTuple<Object>> tuples = new HashSet<>();
for (ImageConfigBean imageConfigResp : imageConfigBeanList) {
String likeKey = imageConfigResp.getGuid() + QuickConstant.LIKE;
String unLikeKey = imageConfigResp.getGuid() + QuickConstant.UNLIKE;
//ctr算法 以1000为统计精确维度 即精确到小数点后三位
double ctr = 1000d;
if (map.containsKey(likeKey) && map.containsKey(unLikeKey)) {
double total = (map.get(likeKey)).doubleValue() + map.get(unLikeKey).doubleValue() + 20d;
double ctrStatistic = (map.get(likeKey).doubleValue() + 20d) / total;
ctr = (double) Math.round(ctrStatistic * 1000);
}else if(!map.containsKey(likeKey) && map.containsKey(unLikeKey)){
double total = map.get(unLikeKey).doubleValue() + 20d;
double ctrStatistic = 20d / total;
ctr = (double) Math.round(ctrStatistic * 1000);
} DefaultTypedTuple<Object> tuple = new DefaultTypedTuple<>(imageConfigResp.getGuid() + "", ctr);
tuples.add(tuple);
} redisClient.setBatchZSet(RedisKeysManager.getMiniProgramSlideRankingKey(), tuples);
}
获取Top50排行榜数
/**
* @Description: 获取排行榜top50条记录
* @author mazhq
*/
@RequestMapping("/getTop50")
public String getTop50() {
List<Object> stringList = redisClient.getTopRankWithScoresZSet(RedisKeysManager.getMiniProgramSlideRankingKey(), 50);
return JSONObject.toJSONString(stringList);
}
其它集合操作方法
//单个增加集合内容
public boolean setSortedSet(String key, double score, Object value) {
try {
return redisTemplate.opsForZSet().add(key, value, score);
} catch (Exception e) {
logger.error("redis setSortedSet failed, key = " + key + "| error:" + e.getMessage(), e);
return false;
}
}
//单个增加分数
public double incrementScore(String key, double score, Object value) {
try {
return redisTemplate.opsForZSet().incrementScore(key, value, score);
} catch (Exception e) {
logger.error("redis incrementScore failed, key = " + key + "| error:" + e.getMessage(), e);
return 0.0;
}
}
//单个删除
public boolean delSortedSet(String key, Object... values) {
try {
long count = redisTemplate.opsForZSet().remove(key, values);
return count > 0;
} catch (Exception e) {
logger.error("redis delSortedSet failed, key = " + key + "| error:" + e.getMessage(), e);
return false;
}
}
4. 总结
新增or更新
//单个新增or更新
Boolean add(K key, V value, double score);
//批量新增or更新
Long add(K key, Set<TypedTuple<V>> tuples);
//使用加法操作分数
Double incrementScore(K key, V value, double delta);
删除
//通过key/value删除
Long remove(K key, Object... values); //通过排名区间删除
Long removeRange(K key, long start, long end); //通过分数区间删除
Long removeRangeByScore(K key, double min, double max);
查寻
//通过排名区间获取列表值集合
Set<V> range(K key, long start, long end); //通过排名区间获取列表值和分数集合
Set<TypedTuple<V>> rangeWithScores(K key, long start, long end); //通过分数区间获取列表值集合
Set<V> rangeByScore(K key, double min, double max); //通过分数区间获取列表值和分数集合
Set<TypedTuple<V>> rangeByScoreWithScores(K key, double min, double max); //通过Range对象删选再获取集合排行
Set<V> rangeByLex(K key, Range range); //通过Range对象删选再获取limit数量的集合排行
Set<V> rangeByLex(K key, Range range, Limit limit);
//获取个人排行
Long rank(K key, Object o); //获取个人分数
Double score(K key, Object o);
统计
//统计分数区间的人数
Long count(K key, double min, double max); //统计集合基数
Long zCard(K key);
基本整理了排行榜用到的所有方法,排行榜有这一篇文章够用了。同时大家注意当redis缓存被清空,如何重新计算排行榜相关数据,或者安排定时排行榜数据定时落地逻辑。
避免redis缓存出现问题导致系统瘫痪。
Redis的Sorted-Sets排行榜功能实现的更多相关文章
- Redis 命令 - Sorted Sets
ZADD key score member [score member ...] Add one or more members to a sorted set, or update its scor ...
- Redis 有序聚合实现排行榜功能
排行榜功能是一个很普遍的需求.使用 Redis 中有序集合的特性来实现排行榜是又好又快的选择.Redis有序集合非常适用于有序不重复数据的存储 一般排行榜都是有实效性的,比如“用户积分榜”.如果没有实 ...
- Redis实现排行榜功能(实战)
需求前段时间,做了一个世界杯竞猜积分排行榜.对世界杯64场球赛胜负平进行猜测,猜对+1分,错误+0分,一人一场只能猜一次.1.展示前一百名列表.2.展示个人排名(如:张三,您当前的排名106579). ...
- Redis实现世界杯排行榜功能(实战)
转载请注明出处:https://www.cnblogs.com/wenjunwei/p/9754346.html 需求 前段时间,做了一个世界杯竞猜积分排行榜.对世界杯64场球赛胜负平进行猜测,猜对+ ...
- 使用 Redis 的 sorted set 实现用户排行榜
要求:实现一个用户排行榜,用户数量有很多,排行榜存储的是用户玩游戏的分数,对排行榜的读取压力比较大,如何实现? 思路分析: 实现排行榜,可以考虑使用 Redis 的 zset 结构: 用户数量很多的话 ...
- 使用 Redis 实现排行榜功能
排行榜功能是一个很普遍的需求.使用 Redis 中有序集合的特性来实现排行榜是又好又快的选择. 一般排行榜都是有实效性的,比如“用户积分榜”.如果没有实效性一直按照总榜来排,可能榜首总是几个老用户,对 ...
- 使用 Redis 实现排行榜功能 (转载 https://segmentfault.com/a/1190000002694239)
排行榜功能是一个很普遍的需求.使用 Redis 中有序集合的特性来实现排行榜是又好又快的选择. 一般排行榜都是有实效性的,比如"用户积分榜".如果没有实效性一直按照总榜来排,可能榜 ...
- redis的有序集合(Sorted Sets)数据类型
和Sets相比,Sorted Sets增加了一个权重参数score,使得集合中的元素能够按score进行有序排列,比如一个存储全班同学成绩的Sorted Sets,其集合value可以是同学的学号,而 ...
- redis实现排行榜功能
目录 加入排行榜 操作排行榜 redis的zset可以很方便地用来实现排行榜功能,下面简单介绍python如何使用redis实现排行榜功能 加入排行榜 获取redis实例 import redis m ...
随机推荐
- Java连载52-单例模式的缺点以及抽象类
一.单例模式 1.单例模式的缺点:单例模式的类型没有子类,无法被继承. 例如:下面的例子,由于父类的构造方法是私有的,所以子类中的构造方法是无法创建的,因为它是引用父类的构造方法 package co ...
- spring cloud 2.x版本 Config配置中心教程
前言 本文采用Spring cloud本文为2.1.8RELEASE,version=Greenwich.SR3 本文基于前面的文章eureka-server的实现. 参考 eureka-server ...
- Saiku嵌入页面plugin=true效果自定义实现(二十七)
Saiku嵌入页面使用 自定义实现 Plugin=true 效果 saiku嵌入页面plugin=true时数据不显示(plugin=false或者不设定plugin的值时数据显示正常)这个问题困扰了 ...
- 基于python的selenium常用操作方法(2)
9 多表单切换 在Web应用中经常会遇到frame/iframe表单嵌套页面的应用,WebDriver只能在一个页面上对元素识别与定位,对于frame/iframe表单内嵌页面上的元素无法直接定位.这 ...
- Do Deep Nets Really Need to be Deep?
url: https://arxiv.org/pdf/1312.6184.pdf year: NIPS2014 浅网络学习深网络的函数表示, 训练方法就是使用深网络的 logits(softmax i ...
- 【转】理解ASP.NET Core验证模型(Claim, ClaimsIdentity, ClaimsPrincipal)不得不读的英文博文
这篇英文博文是 Andrew Lock 写的 Introduction to Authentication with ASP.NET Core . 以下是简单的阅读笔记: -------------- ...
- ACR122U读卡器在win7以上系统使用过程中的设置项
发现ACR122U这个读卡器在进行nested破解的时候总是卡死,换了N个驱动程序都不行. 后发现是windows系统因智能卡的即插即用设置导致的问题,可以通过组策略的设置搞定. gpedit.msc ...
- RabbitMQ的交换器Exchange之direct(发布与订阅 完全匹配)
1.交换器.用来接收生产者发送的消息并将这些消息路由给服务器中的队列.三种常用的交换器类型,a.direct(发布与订阅 完全匹配).b.fanout(广播).c.topic(主题,规则匹配). 2. ...
- Core源码(四)IEnumerable
首先我们去core的源码中去找IEnumerable发现并没有,如下 Core中应该是直接使用.net中对IEnumerable的定义 自己实现迭代器 迭代器是通过IEnumerable和IEnume ...
- Z从壹开始前后端分离【 .NET Core2.2/3.0 +Vue2.0 】框架之五 || Swagger的使用 3.3 JWT权限验证【必看】
本文梯子 本文3.0版本文章 前言 1.如何给接口实现权限验证? 零.生成 Token 令牌 一.JWT ——自定义中间件 0.Swagger中开启JWT服务 1:API接口授权策略 2.自定义认证之 ...