条件锁condition与Queue()
在学习之前你应该先了解锁和队列基础
import queue
import time
import random
import threading
import asyncio
import logging
# from queue import Empty
logging.basicConfig(level = logging.INFO,format = '%(asctime)s - %(levelname)s -->%(funcName)s at line %(lineno)d: \n %(message)s')
log= logging.getLogger()
# queue.qsize 不可以限制,作为应答式condition
q_init = queue.Queue(5) async def jobs(item):
time.sleep(random.randint(1,3))
status = random.randint(0, 1)
if status == 0:
return ("success",item)
else:
return ("failed",item) async def do_work(item):
logging.info("do something %s,time start %s" % (item, time.asctime()))
a =await jobs(item)
return a def async_runner(checker):
new_loop = asyncio.new_event_loop()
asyncio.set_event_loop(new_loop)
loop = asyncio.get_event_loop()
task = asyncio.ensure_future(do_work(checker))
loop.run_until_complete(asyncio.wait([task]))
st = task.result()
return st def worker_consumer(q_init,cond):
while True:
if q_init.empty():
break
if cond.acquire():
if not q_init.empty():
cond.notify()
checker = q_init.get()
st = async_runner(checker)
if st[0] in ["success", "failed"]:
logging.info("%s task finished status is %s" % (st[1], st[0]))
logging.info("报告大王刚摘的%s个蟠桃已经吃完了..." % checker)
q_init.task_done()
cond.release() def producer(cond,q_init):
item = 1
while True:
if cond.acquire():
if q_init.qsize() <5:
q_init.put(item)
logging.info("孩儿们,刚从蟠桃园摘了%s 个蟠桃给你们尝尝..." % item)
cond.notify()
else:
cond.wait()
cond.release()
item += 1
if item >= 11:
break
q_init.join() if __name__ == '__main__':
# 消费者>生产者
thread_num=5
cond=threading.Condition()
producer = [threading.Thread(target=producer,args=(cond,q_init)) for i in range(1)]
consumer = [threading.Thread(target=worker_consumer, args=(q_init,cond)) for i in range(thread_num)]
for p in producer:
p.start()
for k in consumer:
k.start()
# block main thread of producer
for pr in producer:
pr.join()
for m in consumer:
m.join()
结果:
2019-12-21 22:14:23,853 - INFO -->producer at line 56:
孩儿们,刚从蟠桃园摘了1 个蟠桃给你们尝尝...
2019-12-21 22:14:23,853 - INFO -->producer at line 56:
孩儿们,刚从蟠桃园摘了2 个蟠桃给你们尝尝...
2019-12-21 22:14:23,853 - INFO -->producer at line 56:
孩儿们,刚从蟠桃园摘了3 个蟠桃给你们尝尝...
2019-12-21 22:14:23,853 - INFO -->producer at line 56:
孩儿们,刚从蟠桃园摘了4 个蟠桃给你们尝尝...
2019-12-21 22:14:23,853 - INFO -->producer at line 56:
孩儿们,刚从蟠桃园摘了5 个蟠桃给你们尝尝...
2019-12-21 22:14:23,854 - INFO -->do_work at line 22:
do something 1,time start Sat Dec 21 22:14:23 2019
2019-12-21 22:14:24,856 - INFO -->worker_consumer at line 45:
1 task finished status is failed
2019-12-21 22:14:24,857 - INFO -->worker_consumer at line 46:
报告大王刚摘的1个蟠桃已经吃完了...
2019-12-21 22:14:24,857 - INFO -->producer at line 56:
孩儿们,刚从蟠桃园摘了7 个蟠桃给你们尝尝...
2019-12-21 22:14:24,859 - INFO -->do_work at line 22:
do something 2,time start Sat Dec 21 22:14:24 2019
2019-12-21 22:14:27,860 - INFO -->worker_consumer at line 45:
2 task finished status is failed
2019-12-21 22:14:27,860 - INFO -->worker_consumer at line 46:
报告大王刚摘的2个蟠桃已经吃完了...
2019-12-21 22:14:27,861 - INFO -->do_work at line 22:
do something 3,time start Sat Dec 21 22:14:27 2019
2019-12-21 22:14:29,861 - INFO -->worker_consumer at line 45:
3 task finished status is success
2019-12-21 22:14:29,861 - INFO -->worker_consumer at line 46:
报告大王刚摘的3个蟠桃已经吃完了...
2019-12-21 22:14:29,862 - INFO -->do_work at line 22:
do something 4,time start Sat Dec 21 22:14:29 2019
2019-12-21 22:14:31,863 - INFO -->worker_consumer at line 45:
4 task finished status is success
2019-12-21 22:14:31,863 - INFO -->worker_consumer at line 46:
报告大王刚摘的4个蟠桃已经吃完了...
2019-12-21 22:14:31,864 - INFO -->do_work at line 22:
do something 5,time start Sat Dec 21 22:14:31 2019
2019-12-21 22:14:32,865 - INFO -->worker_consumer at line 45:
5 task finished status is failed
2019-12-21 22:14:32,865 - INFO -->worker_consumer at line 46:
报告大王刚摘的5个蟠桃已经吃完了...
2019-12-21 22:14:32,866 - INFO -->do_work at line 22:
do something 7,time start Sat Dec 21 22:14:32 2019
2019-12-21 22:14:34,867 - INFO -->worker_consumer at line 45:
7 task finished status is failed
2019-12-21 22:14:34,867 - INFO -->worker_consumer at line 46:
报告大王刚摘的7个蟠桃已经吃完了...
2019-12-21 22:14:34,867 - INFO -->producer at line 56:
孩儿们,刚从蟠桃园摘了9 个蟠桃给你们尝尝...
2019-12-21 22:14:34,867 - INFO -->producer at line 56:
孩儿们,刚从蟠桃园摘了10 个蟠桃给你们尝尝...
2019-12-21 22:14:34,868 - INFO -->do_work at line 22:
do something 9,time start Sat Dec 21 22:14:34 2019
2019-12-21 22:14:37,869 - INFO -->worker_consumer at line 45:
9 task finished status is failed
2019-12-21 22:14:37,869 - INFO -->worker_consumer at line 46:
报告大王刚摘的9个蟠桃已经吃完了...
2019-12-21 22:14:37,870 - INFO -->do_work at line 22:
do something 10,time start Sat Dec 21 22:14:37 2019
2019-12-21 22:14:38,871 - INFO -->worker_consumer at line 45:
10 task finished status is failed
2019-12-21 22:14:38,871 - INFO -->worker_consumer at line 46:
报告大王刚摘的10个蟠桃已经吃完了...
条件锁condition与Queue()的更多相关文章
- 条件锁Condition
"""设计场景:timo先说一句,亚索再说一句timo: timo队长正在待命yasuo: 面对疾风吧timo: timo整装待发yasuo: 哈杀gay "& ...
- 死磕 java同步系列之ReentrantLock源码解析(二)——条件锁
问题 (1)条件锁是什么? (2)条件锁适用于什么场景? (3)条件锁的await()是在其它线程signal()的时候唤醒的吗? 简介 条件锁,是指在获取锁之后发现当前业务场景自己无法处理,而需要等 ...
- java并发多线程显式锁Condition条件简介分析与监视器 多线程下篇(四)
Lock接口提供了方法Condition newCondition();用于获取对应锁的条件,可以在这个条件对象上调用监视器方法 可以理解为,原本借助于synchronized关键字以及锁对象,配备了 ...
- python线程condition条件锁应用实例
import time import threading # 吃火锅鱼丸 guo = [] suo = threading.Condition() #条件锁 # 生产者负责生产 class Produ ...
- Python的条件锁与事件共享
1:事件机制共享队列: 利用消息机制在两个队列中,通过传递消息,实现可以控制的生产者消费者问题要求:readthread读时,writethread不能写:writethread写时,readthre ...
- python线程条件变量Condition(31)
对于线程与线程之间的交互我们在前面的文章已经介绍了 python 互斥锁Lock / python事件Event , 今天继续介绍一种线程交互方式 – 线程条件变量Condition. 一.线程条件变 ...
- 深入理解java:2.3.2. 并发编程concurrent包 之重入锁/读写锁/条件锁
重入锁 Java中的重入锁(即ReentrantLock) 与JVM内置锁(即synchronized)一样,是一种排它锁. ReentrantLock提供了多样化的同步,比如有时间限制的同步(定 ...
- 关于一点pthread_cond_t条件锁的思考以及实验
转:http://blog.csdn.net/aniao/article/details/5802015 APUE上,关于条件锁.其中有这么几条总结: 1.使用条件锁前必须先锁住对应的互斥锁. 2.条 ...
- Linux 开发之线程条件锁那些事
2019独角兽企业重金招聘Python工程师标准>>> 条件锁即在一定条件下触发,那什么时候适合用条件锁呢,那当然是你在等待一个符合的条件下触发.一个常用的例子就是在线程中无限循环执 ...
随机推荐
- rtp传输h264
---恢复内容开始--- 基本概念的理解 H.264的主要目标:1.高的视频压缩比2.良好的网络亲和性 解决方案:VCL video coding layer 视频编码层NAL network abs ...
- 生产环境容器落地最佳实践 --JFrog 内部K8s落地旅程
引言 Kubernetes已经成为市场上事实上领先的编配工具,不仅对技术公司如此,对所有公司都是如此,因为它允许您快速且可预测地部署应用程序.动态地伸缩应用程序.无缝地推出新特性,同时有效地利用硬件资 ...
- 【Unity|C#】基础篇(13)——特性(Attribute)
[学习资料] <C#图解教程>(第24章):https://www.cnblogs.com/moonache/p/7687551.html 电子书下载:https://pan.baidu. ...
- Ubuntu系统测评
首次使用ubuntun系统 华为云可以免费试用30天,嘻嘻,正好熟悉一下linux命令 1.登录 login: 先输入用户名:root 在输入密码:******** 这个是在配置云服务器的时候自己设置 ...
- PHP代码安全杂谈
虽然PHP是世界上最好的语言,但是也有一些因为弱类型语言的安全性问题出现.WordPress历史上就出现过由于PHP本身的缺陷而造成的一些安全性问题,如CVE-2014-0166 中的cookie伪造 ...
- SQL语句中count(1)count(*)count(字段)用法的区别(转)
SQL语句中count(1)count(*)count(字段)用法的区别 在SQL语句中count函数是最常用的函数之一,count函数是用来统计表中记录数的一个函数, 一. count(1)和cou ...
- AVR单片机丢固件原因分析和解决方案
一.硬件方面 除了下面列举的方面,还需要评估下其他措施. 1.电源因素,禁干扰. 只要用廉价劣质的开关电源,不管哪个单片机,都存在EEPROM丢数据和单片机程序丢失的情况. 1.转接板走线,直接接到了 ...
- 用MyEclipse远程debug
第一步 编辑 tomcat下的文件startup.sh文件,我的路径是 /root/apache-tomcat-6.0.24/bin/startup.sh 命令:vim startup.sh将decl ...
- maven打包忽略test文件夹
当在项目中的test中写了单元测试后,在mvn install打包时会自动进行所有单元测试,所以这时需要忽略test文件夹 有两种方法: 1.用命令的方式:mvn install -Dmaven.te ...
- 【强化学习RL】必须知道的基础概念和MDP
本系列强化学习内容来源自对David Silver课程的学习 课程链接http://www0.cs.ucl.ac.uk/staff/D.Silver/web/Teaching.html 之前接触过RL ...