消息确认机制

前言


消息队列的下游,业务逻辑可能复杂,处理任务可能花费很长时间。若在一条消息到达它的下游,任务刚处理了一半,由于不确定因素,下游的任务处理进程

被kill掉啦,导致任务无法执行完成。而沿用我们前面几章的消息删除【消息一旦抛给下游,就立马从队列删除】,这可能会引发问题——消息没有处理完,但是队列

里的消息已经被删除了。

因此,rabbitmq内含 消息确认机制【Message acknowledgment】,简称ack。rabbitmq将消息发送给consumer,此刻消息不会从队列删除,consumer消费完毕消息后,

给rabbitmq发送一条ack,在rabbitmq收到ack后,才从队列里删除。

代码


在consumer层的代码,需要修改两步。

一、添加ack代码

$msg->delivery_info['channel']->basic_ack($msg->delivery_info['delivery_tag']);

二、开启消息确认机制

$channel->basic_consume('task_queue', '', false, false, false, false, $callback); //basic_consume第四个参数置成false,no_ack=false

整体代码见下

生产者sender.php

<?php
/**
* sender.php
* Created by PhpStorm.
* User: wangdaxi
* Date: 2017/10/18
* Time: 14:26
*/
require_once __DIR__ . '/vendor/autoload.php';
use PhpAmqpLib\Connection\AMQPStreamConnection;
use PhpAmqpLib\Message\AMQPMessage; $connection = new AMQPStreamConnection('127.0.0.1', 5672, 'guest', 'guest');
$channel = $connection->channel(); $channel->queue_declare('hello', false, false, false, false); $data = implode(" ", array_slice($argv, 1));
empty($data) && $data = "Hello World!"; $msg = new AMQPMessage($data); $channel->basic_publish($msg, '', 'hello'); echo " [x] Sent '$data'\n"; //close the channel and connection;
$channel->close();
$connection->close();

消费者receive.php

<?php
/**
* receive.php
* Created by PhpStorm.
* User: wangdaxi
* Date: 2017/10/18
* Time: 14:34
*/
require_once __DIR__ . '/vendor/autoload.php';
use PhpAmqpLib\Connection\AMQPStreamConnection; $connection = new AMQPStreamConnection('127.0.0.1', 5672, 'guest', 'guest');
$channel = $connection->channel(); $channel->queue_declare('hello', false, false, false, false);
echo ' [*] Waiting for messages. To exit press CTRL+C', "\n"; $callback = function($msg) {
echo "[x] Received ", $msg->body, "\n";
sleep(substr_count($msg->body, '.'));
echo "[x] Done\n";
//消息确认
$msg->delivery_info['channel']->basic_ack($msg->delivery_info['delivery_tag']);
};
$channel->basic_consume('hello', '', false, false, false, false, $callback); while(count($channel->callbacks)) {
$channel->wait();
}

验证


模拟消息下游进程被kill掉。

1. 开启两个终端分别作为消费者,记作C1,C2。分别等待接收消息。

2. 开启一个终端作为生产者。记作P。发送消息,用圆点来模拟耗时任务。

3. 发现C1接收到了消息,这里我们用 Ctrl+C关闭掉该进程。

4. 由于C1没有回传ack,且已中断,C2接收到了该消息,处理并且ack回传。

5. 通过 rabbitmq命令 查看hello队列messages_ready 和 messages_unacknowledged,ready状态的消息和未确认消息都是0。证明该消息已经被消费。

疑问


如果消费者执行完毕消息但是忘记了ack,会发生什么?

1. 修改消费者代码,注释掉ack代码。

2. 开启两个终端,分别作为消费者C1、生产者P。

3. 生产者P生产消息

4. 消费者接收到消息并处理

5. 命令查看消息数,发现未ack消息有两条。

6. 修改代码,解除ack通知的注释,另开终端作为消费者C2。发现C2不会接收到任何消息。

7. 关闭C1,C2接收C1未ack消息并处理。

8. 命令行查看发现消息都被消费掉。

结论


当消费者开启ack确认机制却忘记在处理完消息后回传rabbitmq ack时,会产生严重后果。

1. 未ack的消费者可以继续接收消息,但是不回传ack。导致rabbitmq内存被unacknowledged messages占用过多。

2. 从代码层面要解决掉,需要放弃掉这个进程,另开进程添加ack代码,进行消息回传。从而清除掉占用内存的已经被处理却未被删除的消息。

以上。

RabbitMq初探——消息确认的更多相关文章

  1. RabbitMq初探——消息均发

    消息均发 前言 由前文 RabbitMq初探——消息分发 可知,rabbitmq自带分发机制——消息会按顺序的投放到该队列下的多个消费者,例如1,3,5投放消费者C1,2,4,6投放消费者C2. 这就 ...

  2. Java使用RabbitMQ之消息确认(confirm模板)

    RabbitMQ生产者消息确认Confirm模式,分为普通模式.批量模式和异步模式,本次举例为普通模式. 源码: package org.study.confirm4; import com.rabb ...

  3. RabbitMQ的消息确认机制

    一:确认种类 RabbitMQ的消息确认有两种. 一种是消息发送确认.这种是用来确认生产者将消息发送给交换器,交换器传递给队列的过程中,消息是否成功投递.发送确认分为两步,一是确认是否到达交换器,二是 ...

  4. RabbitMq之消息确认

    最近阅读了rabbitmq的官方文档,然后结合之前面试时被问到关于消息队列的问题来探索一下关于消息队列的消息确认机制. 其实消息确认就是消费者确认消息被消费了, 生产者确认消息已经发送到了消息队列中了 ...

  5. RabbitMQ学习笔记六:RabbitMQ之消息确认

    使用消息队列,必须要考虑的问题就是生产者消息发送失败和消费者消息处理失败,这两种情况怎么处理. 生产者发送消息,成功,则确认消息发送成功;失败,则返回消息发送失败信息,再做处理. 消费者处理消息,成功 ...

  6. RabbitMq初探——消息持久化

    消息持久化 前言 通过上一节,我们知道,有消息确认机制,保证了当消费者进程挂掉后,消息的不丢失. 但是如果rabbitmq挂掉呢?它的队列和消息都会丢失的.为了保证消息在rabbitmq挂掉重启后不丢 ...

  7. RabbitMQ 之消息确认机制(事务+Confirm)

    概述 在 Rabbitmq 中我们可以通过持久化来解决因为服务器异常而导致丢失的问题,除此之外我们还会遇到一个问题:生产者将消息发送出去之后,消息到底有没有正确到达 Rabbit 服务器呢?如果不错得 ...

  8. RabbitMQ (十一) 消息确认机制 - 消费者确认

    由于生产者和消费者不直接通信,生产者只负责把消息发送到队列,消费者只负责从队列获取消息(不管是push还是pull). 消息被"消费"后,是需要从队列中删除的.那怎么确认消息被&q ...

  9. springboot整合rabbitmq,支持消息确认机制

    安装 推荐一篇博客https://blog.csdn.net/zhuzhezhuzhe1/article/details/80464291 项目结构 POM.XML <?xml version= ...

随机推荐

  1. 很好用的log4j

  2. three3D地图

    终于闲下来了,前段时间做了个项目,高精度精准定位系统,用到了three3D地图 听起来是不是很炫酷?其实并不难.先把部分代码附上(文件比较多,只粘贴部分的) $(function () {     i ...

  3. 无法启动Tomcat, 端口被占用的问题

    这个错误是说这几个端口已经有某个应用程序占用了,所以Tomcat就没法启动了.   出现这个问题的原因可能有以下几种: 情况一:点击运行的时候没有选中页面或Servlet窗口的标签 标签被选中时: 标 ...

  4. unity3d 移动与旋转 1

    移动与旋转 1 player角色随asdw按键左右上下移动并旋转 public void Update() { // Reset player rotation to look in the same ...

  5. Django基础学习五_引入静态文件

    今天继续学习Django,今天主要掌握两个小点 一.如果为Django项目中引入静态文件 1.先要在project目录下创建static的目录,然后将jquery文件拷贝这个目录下就可以了 2.在pr ...

  6. Python全栈工程师(Python3 所有基础内容 0-0)

    ParisGabriel              每天坚持手写  一天一篇  决定坚持几年 为了梦想为了信仰    开局一张图     Python一个月的基础语法 基本就到这咯    接下来是数据 ...

  7. [z] How can we render CSS3 in a WebBrowser Control ?

    http://www.pedautreppe.com/post/How-can-we-render-CSS3-in-a-WebBrowser-Control-.aspx

  8. An Introduction To Value at Risk (VAR)

    http://www.investopedia.com/articles/04/092904.asp http://www.jpmorgan.com/tss/General/email/1159360 ...

  9. 牛掰的python与unix

    python的中心哲学 Python 2.7.5 (default, Nov  6 2016, 00:28:07) [GCC 4.8.5 20150623 (Red Hat 4.8.5-11)] on ...

  10. Zookeeper 源码(五)Leader 选举

    Zookeeper 源码(五)Leader 选举 前面学习了 Zookeeper 服务端的相关细节,其中对于集群启动而言,很重要的一部分就是 Leader 选举,接着就开始深入学习 Leader 选举 ...