使用Reids实现简单消息队列
队列操作
简单队列
利用List数据结构可以实现简单的队列,在于使用List提供插入和移除api来完成简单队列操作;
准备数据
获取数据
后入先出
使用redis提供的apiLPOP
可以从队列左边获取数据,也就是从队列的头部获取到最后插入的数据,也可以使用BLPOP
设置超时时间,从而做到等待数据写入;
先入先出
与上面的一样,只是把获取数据的方向改成另一边,使用RPOP
可以从队列右边获取数据,也就是从队列的尾部获取到最先插入的数据,也可以使用BRPOP
设置超时时间,从而做到等待数据写入;
等待
使用BLPOP
、BRPOP
可以移除并获取列表头部/尾部获取第一个元素;如果把BLPOP
命令的超时时间设置为0,表示一直阻塞,直到数据写入;
实现
到这就可以将List当成一个简单的队列,推送数据的生产者,将数据写入到List,然后消费者等着List中有数据,然后获取;
生产者
using StackExchange.Redis;
var connection = ConnectionMultiplexer.Connect("localhost");
var redis = connection.GetDatabase(1);
foreach (var i in Enumerable.Range(0,10))
{
await redis.ListLeftPushAsync("data",i);
Console.WriteLine($"写入 {i}");
Thread.Sleep(1000);
}
消费者
using StackExchange.Redis;
var connection = ConnectionMultiplexer.Connect("localhost");
var redis = connection.GetDatabase(1);
while (true)
{
var res = await redis.ListRightPopAsync("data");
if (!string.IsNullOrEmpty(res))
{
Console.WriteLine($"读取 {res}");
}
Thread.Sleep(1000);
}
至此,消息已经消费,但是消息的多播并不能实现,队列中的消息被移除了,另外的消费者就拿不到这条消息,同时ListRightPopAsync方法对应的redisRPOP
命令,StackExchange.Redis中不支持Redis中对应的BLPOP
、BRPOP
命令,但是可以使用发布订阅模式实现;
发布订阅
生产者
using StackExchange.Redis;
var connection = ConnectionMultiplexer.Connect("localhost");
var sub = connection.GetSubscriber();
foreach (var i in Enumerable.Range(0,10))
{
await sub.PublishAsync("channel", $"消息 {i}");
Console.WriteLine($"发布消息 {i}");
Thread.Sleep(1000);
}
Console.ReadLine();
消费者
using StackExchange.Redis;
var connection = ConnectionMultiplexer.Connect("localhost");
var sub = connection.GetSubscriber();
sub.Subscribe("channel",
(channel, message) =>
{
Console.WriteLine($"接收消息:{message}");
});
Console.ReadLine();
通过消息生产者将消息发布到某个channel,同时消费者订阅该channel,即可获取到消息;当有多个消费者也可以接受到消息了,如果在消费者订阅之前消息就已消费则不能再获取到该消息;
开启两个消费者,都订阅了同一channel,利用Sleep使消费者2晚一秒订阅到channel,导致没有接收到消息0;
如果想要做到消息的持久化可以同时将Redis的List利用起来,或者使用其他介质存一份,在消息发布的同时使用将消息推到List中,然后在消费者中去将消息移除,历史消息可以在订阅channel前获取到当前List中消息,开启一个线程去执行业务操作并移除当前消息;
生产者
using StackExchange.Redis;
var connection = ConnectionMultiplexer.Connect("localhost");
var redis = connection.GetDatabase(1);
var sub = connection.GetSubscriber();
foreach (var i in Enumerable.Range(0,100))
{
await redis.ListLeftPushAsync("historyMsg", $"消息 {i}");
await sub.PublishAsync("channel", $"消息 {i}");
Console.WriteLine($"发布消息 {i}");
Thread.Sleep(1000);
}
Console.ReadLine();
消费者
using StackExchange.Redis;
var connection = ConnectionMultiplexer.Connect("localhost");
var redis = connection.GetDatabase(1);
var sub = connection.GetSubscriber();
//这里可以选择不同消息持久化介质
var count = (await redis.ListRangeAsync("historyMsg")).Length;
if (count > 0)
{
await Task.Run(() =>
{
for (int i = 0; i < count; i++)
{
string result = redis.ListRightPop("historyMsg");
Console.WriteLine("处理历史消息:" + result);
}
});
}
sub.Subscribe("channel",
(channel, message) =>
{
redis.ListRightPop("historyMsg");
Console.WriteLine($"接收消息:{message}");
});
Console.ReadLine();
使用Reids实现简单消息队列的更多相关文章
- simple简单消息队列
一:介绍 1.优缺点 简单,但是耦合性较高. 这种模式是生产者与消费者一一对应,就是一个产生者,有一个消费者来消费. 如果,多个消费者想消费一个队列中的消息就不适合了.这种情况在后面会接着介绍. 2. ...
- Redis实现简单消息队列
http://www.jianshu.com/p/9c04890615ba 任务异步化 打开浏览器,输入地址,按下回车,打开了页面.于是一个HTTP请求(request)就由客户端发送到服务器,服务器 ...
- 用 Redis 实现 PHP 的简单消息队列
参考:PHP高级编程之消息队列 消息队列就是在消息的传输过程中,可以保存消息的容器. 常见用途: 存储转发:异步处理耗时的任务 分布式事务:多个消费者消费同一个消息队列 应对高并发:通过消息队列保存任 ...
- redis(五)---- 简单消息队列
消息队列一个消息的链表,是一个异步处理的数据处理引擎.不仅能够提高系统的负荷,还能够改善因网络阻塞导致的数据缺失.一般用于邮件发送.手机短信发送,数据表单提交.图片生成.视频转换.日志储存等. red ...
- RabbitMq(2) 简单消息队列
<dependency> <groupId>com.rabbitmq</groupId> <artifactId>amqp-client </ar ...
- redis简单消息队列
<?php $redis = new Redis(); $redis->connect('127.0.0.1',6379); $redis->flushall(); $redis-& ...
- Redis使用总结(3):实现简单的消息队列
参考Redis实现简单消息队列 Redis提供了两种方式来作消息队列.一个是使用生产者消费模式模式,另外一个方法就是发布订阅者模式.前者会让一个或者多个客户端监听消息队列,一旦消息到达,消费者马上消费 ...
- 玩转redis-简单消息队列
使用go语言基于redis写了一个简单的消息队列 源码地址 使用demo redis的 list 非常的灵活,可以从左边或者右边添加元素,当然也以从任意一头读取数据 添加数据和获取数据的操作也是非常简 ...
- PDO和消息队列的一点个人理解
什么是消息队列,百度百科说,···消息队列····是在消息的传输过程中保存消息的容器. 看着网上林林总总的文章,都说是为了应对高并发,处理数据量超级大的一种数据容器,也可以说是利用各种方式,先把数据存 ...
- RocketMQ 消息队列单机部署及使用
转载请注明来源:http://blog.csdn.net/loongshawn/article/details/51086876 相关文章: <RocketMQ 消息队列单机部署及使用> ...
随机推荐
- Docker可视化容器管理工具之Portainer
官网:https://www.portainer.io/ 仓库地址:https://hub.docker.com/r/portainer/ Portainer 是一个轻量级的管理 UI ,可让你轻松管 ...
- 基于rsync+sersync的服务器文件同步
参考:https://github.com/wsgzao/sersync 原理 Synchronize files and folders between servers -using inotiy ...
- Linux禁止某个sudo用户修改root密码
(1) 假设被禁止的sudo用户名为 user (2) 禁止user用户使用passwd命令更改密码(非最终配置) vim /etc/sudoers 加入 user ALL=(root)!/usr/b ...
- 解析JDBC使用查询MySQL【非流式、流式、游标】
解析JDBC使用游标查询MySQL 使用jdbc查询MySQL数据库,如果使用游标或者流式查询的话,则可以有效解决OOM的问题,否则MySQL驱动就会把数据集全部查询出来加载到内存里面,这样在大数据的 ...
- vue全局事件总线
首先在main.js中app实例中使用生命周期钩子添加组件 new Vue({ router, render: h => h(App), beforeCreate() { Vue.prototy ...
- Podman与docker兼容性问题
使用Podman最好的地方就是支持rootless,也就是说用户不需要为root权限即可进行容器的管理操作.因此现在在CentOS 8及以后的版本中,默认使用Podman替代Docker,如果使用do ...
- 【C#】【ffmpeg】外部调用线程执行ffmepg读取返回的信息乱码问题
起因 C#使用FFmpeg获取电脑音视频可以用设备,当返回内容包含中文时,出现乱码问题 解决方案 ffmpeg本身的输出都是使用的错误输出,所以设置的是StandardErrorEncoding,如果 ...
- Qt编写安防视频监控系统56-数据库分页
一.前言 在视频监控系统中也需要对日志记录进行查询显示,有时候查询到的记录并不能一页显示完,最好的做成翻页显示,如果所有记录都在一页显示通过滚动条查看,不是很符合用户习惯,比如搜索引擎的记录也都是分页 ...
- opencv只在bin目录下编译dll,在lib目录下编译lib,在bin目录下不编译测试程序的各种exe
penCV是一个开源的计算机视觉库,它提供了多种编程语言的接口.如果你只想编译出DLL和Lib库文件,而不编译EXE(可执行文件),这通常是因为你想要进行某种形式的动态链接或者库的分发,而不关心EXE ...
- Java中使用JFreeChart生成甘特图
引言 甘特图是一种流行的项目管理工具,用于显示项目的进度和任务分配.它通过条形图显示任务的开始和结束时间,使项目经理能够直观地了解项目的整体情况.在Java开发中,JFreeChart是一个强大的开源 ...