二、RabbitMQ 进阶特性及使用场景 [.NET]
前言
经过上一篇的介绍,相信大家对RabbitMQ 的各种概念有了一定的了解,及如何使用RabbitMQ.Client 去发送和消费消息。
特性及使用场景
1. TTL 过期时间
TTL可以用来指定queue 和message多久会被去掉;在短期message数量很大,或者订单需要特定失效(例如15min支付)等场景,设置消息的过期时间可以减轻rabbitmq的压力,后者可以帮助方便的实现业务。
那么如何设置消息过期时间呢?
- 为queue中的消息整体设置
var ttlSetting = new Dictionary<string, Object>();
ttlSetting.Add("x-message-ttl", 10000);
queueName = _channel.QueueDeclare(arguments: ttlSetting).QueueName;
- 为每条message设置过期时间
var properties = _channel.CreateBasicProperties();
properties.Expiration = "10000";
var messageBytes = ObjectToByteArray(message);
_channel.BasicPublish(TicketExchangeName, optType, false, properties, messageBytes);
队列TTL 设置
我们不但可以对message 设置过期时间,还可以对消息队列设置生存时间,当超过设定时间未被使用,该消息队列可以被自动删除。
设置方法同样是在声明队列的时候传入参数即可:
var ttlSetting = new Dictionary<string, Object>();
ttlSetting.Add("x-expires", 6000);
queueName = _channel.QueueDeclare(arguments: ttlSetting).QueueName;
2. 死信交换器和死信队列
何为死信?
- 被拒绝的消息
- 过期的消息
- 消息队列达到最大长度
当死信发生时,死信会通过死信交换机进入到声明的死信队列,可以通过参数声明:
_channel.ExchangeDeclare(DLExchangeName, ExchangeType.Direct);
var arguments = new Dictionary<string, Object>();
arguments.Add("x-dead-letter-exchange", DLExchangeName);
_channel.QueueDeclare("dlqueue", arguments: arguments);
死信消息的路由,如果在消息初始被投送到的队列上设置了 x-dead-letter-routing-key 参数,则死信消息路由时以这个为准,否则按照它被产生时的路由key为准。例如,如果您将消息发布到具有路由密钥 foo 的交换,并且该消息是死信的,它将被发布到其具有路由密钥 foo 的死信交换。如果消息最初登陆的队列已声明为 x-dead-letter-routing-key 设置为 bar,则消息将发布到其带有路由键 bar 的死信交换。
查看死信队列中的消息可以帮助我们了解分析程序的运行健康情况,明确异常发生的原因。
3. 交换机,队列,消息的持久化
交换机的持久化是我们在使用rabbitmq经常需要做的事情,声明交换器时将 durable 参数设置为 true 来实现的。如果不设置持久化属性的话,当 RabbitMQ 服务重启后交换器的数据就会丢失,需要注意的是,是交换器的数据丢失,消息不会丢失,只是不能将消息发送到这个交换器中了,一般生产环境使用都会把该属性设置为持久化。
队列的持久化:先介绍队列的持久化,是因为消息的持久化是依赖在队列持久化之上的。通过在声明时将durable 参数设置为 true 达到目的。
_channel.QueueDeclare(“myqueue”, true, false, arguments: ttlSetting)
消息的持久化:通过在publish 消息时,设置基本属性 DeliveryMode 来实现消息的持久性。
var properties = _channel.CreateBasicProperties();
properties.DeliveryMode = 2;
4. 消息的确认机制
相比于http请求和RPC,message queue的应用确实带来了不少便利,但引入新的application不可避免的增加了可靠性的考虑;如何确保消息从生产者准确的投递到了rabbitmq broker,又如何确保消费者真的消费了消息,又或者消费者没有重复消费消息?
这些都是我们在使用消息队列时候要考虑的问题,如何你使用何种技术(RabbitMQ或者是Kafka)。
其中,在保证消息的准确投递和消费上,RabbitMQ提供了确认机制帮助我们确保消息的可靠性。
生产端的消息确认机制:
消息确认的处理办法分为:单个消息同步确认(吞吐量低),批量消息同步确认,消息异步确认。这里只介绍异步confirm的情况。
var channel = connection.CreateModel();
channel.ConfirmSelect();
channel.BasicAcks += (sender, ea) =>
{
// code when message is confirmed
};
channel.BasicNacks += (sender, ea) =>
{
//code when message is nack-ed
};
var outstandingConfirms = new ConcurrentDictionary<ulong, string>();
如果希望在投递失败后,重新投递,可以用 ConcurrentDictionary 存储deliverTag 和 消息体,在投递失败后,重新投递。
消费端的消息确认机制:
1. 自动应答
消费者在消费消息的时候,如果设定应答模式为自动,则消费者收到消息后,消息就会立即被 RabbitMQ 从 队列中删除掉。
因此,在实际开发者,我们基本上是将消费应答模式设置为手动确认更为妥当一些。
_channel.BasicConsume(queue: queueName, autoAck: true, consumer: consumer);
2. 手动应答
消费者在收到消息后:
- 可以在既定的正常情况下进行确认(告诉 RabbitMQ,我已经消费过该消息了,你可以删除该条数据了);
- 可以在既定的异常情况下不进行确认(RabbitMQ 会继续保留该条数据),这样下一次可以继续消费该条数据。
_channel.BasicAck(ea.DeliveryTag, false);
本文介绍了过期时间,死信队列,应答机制和持久化的设置和使用场景,后续还会继续介绍RabbitMQ的其它特性和集群搭建,欢迎大家关注和提出意见。
---------------------------------------------------
二、RabbitMQ 进阶特性及使用场景 [.NET]的更多相关文章
- 重温ASP.NET WebAPI(二)进阶
重温ASP.NET WebAPI(二)进阶 介绍 本文为个人对WebApi的回顾无参考价值. 本文内容: Rest和UnitOfWork 创建WebAPi的流程 IOC-Unity的使用 MEF ...
- 【算法系列学习三】[kuangbin带你飞]专题二 搜索进阶 之 A-Eight 反向bfs打表和康拓展开
[kuangbin带你飞]专题二 搜索进阶 之 A-Eight 这是一道经典的八数码问题.首先,简单介绍一下八数码问题: 八数码问题也称为九宫问题.在3×3的棋盘,摆有八个棋子,每个棋子上标有1至8的 ...
- amazeui学习笔记二(进阶开发5)--Web 组件开发规范Rules
amazeui学习笔记二(进阶开发5)--Web 组件开发规范Rules 一.总结 1.见名知意:见那些class名字知意,见函数名知意,见文件名知意 例如(HISTORY.md Web 组件更新历史 ...
- amazeui学习笔记二(进阶开发4)--JavaScript规范Rules
amazeui学习笔记二(进阶开发4)--JavaScript规范Rules 一.总结 1.注释规范总原则: As short as possible(如无必要,勿增注释):尽量提高代码本身的清晰性. ...
- amazeui学习笔记二(进阶开发3)--HTML/CSS规范Rules
amazeui学习笔记二(进阶开发3)--HTML/CSS规范Rules 一.总结 1.am:以 am 为命名空间 2.模块状态: {命名空间}-{模块名}-{状态描述} 3.子模块: {命名空间}- ...
- amazeui学习笔记二(进阶开发2)--Web组件简介Web Component
amazeui学习笔记二(进阶开发2)--Web组件简介Web Component 一.总结 1.amaze ui:amaze ui是一个web 组件, 由模板(hbs).样式(LESS).交互(JS ...
- amazeui学习笔记二(进阶开发1)--项目结构structure
amazeui学习笔记二(进阶开发1)--项目结构structure 一.总结 1.项目结构:是说的amazeui在github上面的项目结构,二次开发amazeui用 二.项目结构structure ...
- python函数知识七 闭包、装饰器一(入门)、装饰器二(进阶)
21.闭包 闭包:在嵌套函数内,使用非全局变量(且不使用本层变量) 闭包的作用:1.保证数据的安全性(纯洁度).2.装饰器使用 .__closure__判断是否是闭包 def func(): a = ...
- Redis高级特性及应用场景
Redis高级特性及应用场景 redis中键的生存时间(expire) redis中可以使用expire命令设置一个键的生存时间,到时间后redis会自动删除它. 过期时间可以设置为秒或者毫秒精度. ...
随机推荐
- SprintBoot使用Validation
1.为什么要使用Validation 在开发过程中有没有使用一堆的if来判断字段是否为空.电话号码是否正确.某个输入是否符合长度等对字段的判断.这样的代码可读性差,而且还不美观,那么使用Validat ...
- pass在if中
pass在if中是停止if成立后的操作. 如 num=1 while num<=100: if num==50: pass #当作先占位 elif num>=60 and n ...
- [c++] 常犯错误
更改变量值时想清楚对后面程序的影响 scnaf & == 数组下标从0开始 不赋初值导致的垃圾数据 全局flag和局部flag
- [BD] Sqoop
什么是Sqoop 数据交换工具(ETL):RDBMS(MySQL.Oracle等)<-->Sqoop<-->HDFS(HBase.Hive等) 基于JDBC 执行数据交换时,本 ...
- gdb调试coredump(使用篇)
gdb调试coredump(使用篇) 看到一个非常好的介绍coredump的文章,做个记录, 参考链接: https://blog.csdn.net/sunxiaopengsun/article/de ...
- 【转载】一次「Too many open files」故障
一次「Too many open files」故障 发表于2015-08-02 昨天,项目的 ElasticSearch 服务挂了,我说的挂可不是进程没了,因为有 Supervisor 保护,而是服务 ...
- linux服务器市场特性高可用高性能 (集群上体现)安全
https://www.linuxprobe.com/chapter-00.html 1 linux安全 更安全 对比windows 代码漏洞 及时修补 全世界看到源代码 2 linux 可以卸载图 ...
- minikube与kubectl版本不一致问题
在使用minikube学习的时候,会出现你在mac上安装的minikube默认是最新版本,但是实际情况是需要安装低一些版本.可以按照k8s官方文档安装的时候指定不同安装版本,如果很慢或者无法访问直接走 ...
- 某SPI设备驱动引起的开关机压力测试死机问题一例
环境 硬件平台:某ARM SoC 软件平台:Linux 问题现象:产品做开关机压力测试,发生死机. 分析 用crash工具解析两次死机dump信息,得到死机前的log如下.两次死机的backtrace ...
- 201871030136-颜静 实验三 结对项目—《D{0-1}KP 实例数据集算法实验平台》项目报告
项目 内容 课程班级博客链接 https://edu.cnblogs.com/campus/xbsf/2018CST/ 这个作业要求链接 https://www.cnblogs.com/nwnu- ...