RabbitMQ基本示例,轮询机制,no_ack作用
一、RabbitMQ简介:
'''
RabbitMQ就是消息队列
之前不是学了Queue了吗,都是队列还学RabbitMQ干嘛?
干的事情是一样的
Python的Queue有两个,
一个线程Queue生产者消费者模型,一个进程Queue用于父进程与子进程交互
两个完全独立的Python程序就不能交互了,或者两台机器之间的Queue,Java跟Python之间不能交互了
所以有了RabbitMQ QQ跟Word通信:
1、用socket直接通信
2、通过硬盘通信
3、QQ通过socket发给中间商,中间商通过socket发给Word
第1个和第3个有啥区别呢?
第一种直接通信比较复杂,
第二种中间商可以省去网络通信维护的工作,而且可以实现三方或者更多方的通信
这个中间商就叫RabbitMQ
Python语言连接RabbitMQ的模块有:
pika主流常用、 celery分布式消息队列
'''
二、简单的示例:
import pika # 相当于建立最基本的socket
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
# 声明一个管道
channel = connection.channel()
# 在管道里声明一个队列
channel.queue_declare(queue='q1')
# 通过管道发消息
channel.basic_publish(exchange='',
routing_key='q1', # 队列名
body='Hello World') # 消息内容
print("send: Hello World")
connection.close()
producer生产者
import pika '''
消费者可能在其他机器上跨机器是没问题的
'''
# 建立连接.
connection = pika.BlockingConnection(pika.ConnectionParameters('localhost'))
# 建立管道
channel = connection.channel()
# 声明队列,为什么还要声明队列?
# 如果是生产者先运行,可以不写这个。
# 由于不确定生产者先运行还是消费者先运行,所以写上这个,随便哪个先运行都不会报错。
channel.queue_declare(queue='q1') def callback(ch, method, properties, body):
# ch:管道内存对象地址,method:获取前面发的routing_key或处理成功应答delivery_tag,properties:可以获取持久化模式delivery_mode
print("-->", ch, method, properties)
print("received:{0}".format(body))
# 开始消费消息
channel.basic_consume(callback, # 如果收到消息就调用该函数处理消息
queue='q1',
no_ack=True)
print("Waiting for messages...")
# 开始收消息了。启动就一直运行,一直收下去,没有就阻塞住
channel.start_consuming()
consumer消费者
运行结果:先启动消费者,再启动生产者(多个生产者,一个消费者)
'''
消费者控制台(启动时):
Waiting for messages...
生产者控制台(第一次运行):
send: Hello World
消费者控制台(变化1):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
生产者控制台(第二次运行):
send: Hello World
消费者控制台(变化2):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
'''
三、消息分发轮询:
上面的示例第二种运行结果:先启动消费者,再启动生产者(多个生产者,多个消费者)
'''
消费者控制台(启动消费者1):
Waiting for messages...
消费者控制台(启动消费者2):
Waiting for messages...
消费者控制台(启动消费者3):
Waiting for messages...
生产者控制台(第一次运行):
send: Hello World
消费者1控制台(变化):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
生产者控制台(第二次运行):
send: Hello World
消费者2控制台(变化):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
生产者控制台(第三次运行):
send: Hello World
消费者3控制台(变化):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
生产者控制台(第四次运行):
send: Hello World
消费者1控制台(变化):
Waiting for messages...
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
--> <BlockingChannel impl=<Channel number=1 OPEN....
received:b'Hello World'
轮询分发...
'''
四、特殊情况,no_ack作用:
'''
假如现在顺序启动了3个消费者(A,B,C)处理数据,
A在处理的过程中挂掉了,怎么办呢?有两种方式:
一、no_ack设置为True:
这种情况表示生产者不关心数据是否处理完毕。如果A挂了
A当时的数据就丢掉了没有被处理
二、no_ack不写:
这种情况下,如果A挂了,A的数据会转给B, 如果B挂了,A的数据会
转给C,如果C也挂了,那么在下次启动消费者时会转给第一次启动的消费者
这种情况下,消费者处理完毕会通知RabbitMQ,RabbitMQ就从队列里删除
该数据。只有收到通知才从队列中删除。
'''
consumer: 改以下两处就会将所有消息完全处理
def callback(ch, method, properties, body):
print("--->:",ch)
time.sleep(10)
print("received: ", body)
# 2、加上这句,通知给RabbitMQ说这个消息已经处理完了,可以从队列里删了,如果no_ack=False这里必须要写
ch.basic_ack(delivery_tag=method.delivery_tag) channel.basic_consume(callback,
queue='q1',
# no_ack=True 1、将这句注释表示消费者处理一条就通知RabbitMQ
)
查看队列里当前消息数量:
RabbitMQ基本示例,轮询机制,no_ack作用的更多相关文章
- RabbitMQ消息分发轮询和Message Acknowledgment
一.消息分发 RabbitMQ中的消息都只能存储在Queue中,生产者(下图中的P)生产消息并最终投递到Queue中,消费者(下图中的C)可以从Queue中获取消息并消费. 多个消费者可以订阅同一个Q ...
- 【python】-- RabbitMQ 安装、基本示例、轮询机制
RabbitMQ MQ全称为Message Queue, 是一种分布式应用程序的的通信方法,它是消费-生产者模型的一个典型的代表,producer往消息队列中不断写入消息,而另一端consumer则可 ...
- 通过 PowerShell 支持 Azure Traffic Manager 外部端点和权重轮询机制
Jonathan TulianiAzure网络 - DNS和 Traffic Manager高级项目经理 在北美 TechEd 大会上,我们宣布了 Azure Traffic Manager将支持 ...
- RabbitMQ消息分发轮询
一,前言 如果我们一个生产者,对应多个消费者,rabbitmq 会发生什么呢 二,消息分发轮询 前提条件:1个生产者 ----> 多个消费者,且no_ack=True (启动三次生产者) ① ...
- kafka Poll轮询机制与消费者组的重平衡分区策略剖析
注意本文采用最新版本进行Kafka的内核原理剖析,新版本每一个Consumer通过独立的线程,来管理多个Socket连接,即同时与多个broker通信实现消息的并行读取.这就是新版的技术革新.类似于L ...
- 12.nodejs事件轮询机制
一:nodejs事件轮询机制 就是 函数的执行顺序 <script type="text/javascript"> setImmediate(function(){ ...
- nginx基本配置与参数说明以及Nginx中的upstream轮询机制介绍
转自:http://blog.csdn.net/happydream_c/article/details/54943802 一.nginx简介 Nginx (发音为[engine x])专为性能优化而 ...
- OSChinaclient源代码学习(3)--轮询机制的实现
主要以OSChina Androidclient源代码中Notice的轮询机制进行解读. 一.基础知识 一般IM(即使通讯)的实现有两种方式:推送和轮询,推送就是server主动向client发送消息 ...
- 面试题: nodejs 的事件轮询机制
setTimeout(function(){ console.log('setTimeout()执行了') },0) setImmediate(function(){ console.log('set ...
随机推荐
- 仓储模式Repository的选择与设计
首次接触仓储的概念来自Eric Evans 的经典著作<领域驱动设计-软件核心复杂性应对之道>,但书中没有具体实现.如何实现仓储模式,在我这几年的使用过程中也积累了一些具体的实施经验.根据 ...
- Linux上安装Zookeeper以及一些注意事项
最近打算出一个系列,介绍Dubbo的使用. 分布式应用现在已经越来越广泛,Spring Could也是一个不错的一站式解决方案,不过据我了解国内目前貌似使用阿里Dubbo的公司比较多,一方面这个框架也 ...
- 函数式编程之-bind函数
Bind函数 Bind函数在函数式编程中是如此重要,以至于函数式编程语言会为bind函数设计语法糖.另一个角度Bind函数非常难以理解,几乎很少有人能通过简单的描述说明白bind函数的由来及原理. 这 ...
- ASP.NET Core多环境配置文件问题
前言 在我们开发的过程中,往往会有这几个环境,Dev.QA.Pre和Pro. 当然不同的环境可能大家的叫法会有点不一样. 最常遇到的问题,或许就是不同环境的配置文件问题! 一个环境一个配置文件是很常见 ...
- Docker最全教程——从理论到实战(四)
往期内容链接 https://www.cnblogs.com/codelove/p/10030439.html https://www.cnblogs.com/codelove/p/10036608. ...
- JsonRequestBehavior不存在问题,JsonRequestBehavior属于哪个dll
1.C#.Net.C++.JScript.VB语法 获取或设置一个值,该值指示是否允许来自客户端的 HTTP GET 请求. 命名空间: System.Web.Mvc程序集: System.Web.M ...
- VisualStudio移动开发(C#、VB.NET)Smobiler开发平台——VoiceRecorder控件的使用方式.Net移动开发
一. 样式一 我们要实现上图中的效果,需要如下的操作: 从工具栏上的“Smobiler Components”拖动一个VoiceRecorder控件和一个ImageButton控件到 ...
- VBA批量导入图片到多Word文档并加标题(会飞的鱼)
感谢会飞的鱼大牛~ Public fp$, obmapp As Object Sub kk() 文件夹浏览器 Application.ScreenUpdating = False Set fso = ...
- Nunit的尝试
(ps:没有代码,只有理论) 单元测试 单元测试(Unit Test)的一个测试用例(Test Case)是一小段代码,用于测试一个小的程序功能的行为是否正常,保证开发的功能子项能正确完成并实现其基本 ...
- MySQL高级特性之分区表
对于用户而言,分区表是一个独立的逻辑表,但是在底层由多个物理子表组成.实现分区的代码实际上是对一组底层表的句柄对象的封装,对分区表的请求都会通过句柄对象转化成对存储引擎的接口调用 意义 MySQL在创 ...