锁,threading local,以及生产者和消费者模型
1.锁:Lock(一次放行一个)
线程安全,多线程操作时,内部会让所有的线程排队处理。
线程不安全:+人=>排队处理
以后锁代码块
v=[]
lock=threading.Lock()#声明锁
def func(arg):
lock.acquire()#上锁
v.append(arg)
time.sleep(0.1)
m=v[-1]
print(arg,m)
lock.release()#解锁
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
0 0
1 1
2 2
3 3
4 4
5 5
6 6
7 7
8 8
9 9
2.锁:Rlock(一次放一个)
支持递归锁,锁多次
v = []
lock = threading.RLock()
def func(arg):
lock.acquire()
# lock.acquire() v.append(arg)
time.sleep(0.01)
m = v[-1]
print(arg,m) lock.release()
# lock.release() for i in range(10):
t =threading.Thread(target=func,args=(i,))
t.start()
0 0
1 1
2 2
3 3
4 4
5 5
6 6
7 7
8 8
9 9
3.一次放多个:BoundedSemaphore
threading.BoundedSemaphore(指定一次放几个就放几个),信号量
import time
import threading
lock=threading.BoundedSemaphore(5)#指定几个就每次执行几个线程
def func(arg):
lock.acquire()
print(arg)
time.sleep(3)
lock.release()
for i in range(20):
t=threading.Thread(target=func,args=(i,))
t.start()
4.条件锁Condition(一次放指定个数,用户输入几个就放几个)******
方法一:
import time
import threading
lock=threading.Condition()#声明放的方式
def func(arg):
lock.acquire()
lock.wait()#上锁
print(arg)
time.sleep(2)
lock.release()
for i in range(20):
t=threading.Thread(target=func,args=(i,))
t.start()
while 1:
user=int(input(">>>"))
lock.acquire()
lock.notify(user)#重点操作
lock.release()
方法二:
def xxx():
input('>>>')
return True
def func(arg):
lock.wait_for(xxx)
print(arg)
time.sleep(1)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
5.Event(一次放所有)
import threading
import time
lock=threading.Event()声明一次放掉全部的线程
def func(arg):
lock.wait()加锁红灯
print(arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
input('>>>')
lock.set()解锁绿灯
lock.clear()再次红灯
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
input('>>>')
lock.set()绿灯
总结:
线程安全:列表和字典是线程安全的,队列。
为什么要加锁?
非线程安全的可以人为加锁,控制一段代码!
6.threading.local
作用:
内部自动为每个线程维护一个空间(字典),用于当前存取属于自己的值,保证线程之间的数据隔离。
应用:
import threading
import time
v=threading.local()
def func(arg):
v.phone=arg
time.sleep(2)
print(v.phone,arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
原理:
import threading
import time
v=threading.local()
def func(arg):
v.phone=arg
time.sleep(2)
print(v.phone,arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
7.线程池:控制最多开指定的线程
import threading
from concurrent.futures import ThreadPoolExecutor
import time
def func(a1,a2):
time.sleep(2)
print(a1,a2)
pool = ThreadPoolExecutor(5)#创建线程池,最多5个线程
for i in range(20):
#去线程池中申请一个线程,让线程执行该函数
pool.submit(func,i,20)
8.生产者消费者模型
import threading
import queue
import time
q=queue.Queue()#线程安全
def func(id):
"""
生产者
:param id:
:return:
"""
while 1:
time.sleep(2)
q.put('包子')
print('厨子%s,做了一个包子' %id)
for i in range(1,5):
t=threading.Thread(target=func,args=(i,))
t.start()
def usera(id):
"""
消费者
:param id:
:return:
"""
while 1:
q.get()
print('第%s个顾客吃了一个包子' %id)
for i in range(1,8):
t=threading.Thread(target=usera,args=(i,))
t.start()
队列:先进先出
扩展:
栈:后进先出
内容补充:
线程池在python2中是没有的,线程不能太多,会造成线程的上下切换,影响效率
进程和线程的区别?
1.进程是CPU资源分配的最小单元
线程是CPU计算的最小单元
2.一个进程中可以有多个线程,
3.对于python来说,进程线程和其他语言有差异,是由gill锁造成的,gill锁保证一个进程中,同一时刻只能有一个线程能被CPU调度
进程是进行数据隔离
线程是CPU工作的最小单元,共享进程中的所有资源,每个线程分担一些任务,最终执行
锁,threading local,以及生产者和消费者模型的更多相关文章
- 20181229(守护进程,互斥锁,IPC,生产者和消费者模型)
一.守护进程 守护进程:一个进程B守护另一个进程A,当被守护的进程A结束,进程B也就结束了.(不一定同生,但会同死) 两个特点: ①守护进程会在主进程代码执行结束后就终止 ②守护进程内无法再开启子进程 ...
- 守护进程,互斥锁,IPC,生产者与消费者模型
守护进程: b 进程守护 a进程,当a进程执行完毕时,b进程会跟着立马结束 守护进程用途: 如果父进程结束了,子进程无需运行了,就可以将子进程设置为父进程的守护进程 例如我们qq视频聊天时,当我们退出 ...
- 守护进程,互斥锁,IPC,队列,生产者与消费者模型
小知识点:在子进程中不能使用input输入! 一.守护进程 守护进程表示一个进程b 守护另一个进程a 当被守护的进程结束后,那么守护进程b也跟着结束了 应用场景:之所以开子进程,是为了帮助主进程完成某 ...
- python并发编程之守护进程、互斥锁以及生产者和消费者模型
一.守护进程 主进程创建守护进程 守护进程其实就是'子进程' 一.守护进程内无法在开启子进程,否则会报错二.进程之间代码是相互独立的,主进程代码运行完毕,守护进程也会随机结束 守护进程简单实例: fr ...
- python多线程+生产者和消费者模型+queue使用
多线程简介 多线程:在一个进程内部,要同时干很多事情,就需要同时执行多个子任务,我们把进程内的这些子任务叫线程. 线程的内存空间是共享的,每个线程都共享同一个进程的资源 模块: 1._thread模块 ...
- Java线程(学习整理)--4---一个简单的生产者、消费者模型
1.简单的小例子: 下面这个例子主要观察的是: 一个对象的wait()和notify()使用情况! 当一个对象调用了wait(),那么当前掌握该对象锁标记的线程,就会让出CPU的使用权,转而进入该对 ...
- Python之生产者&、消费者模型
多线程中的生产者和消费者模型: 生产者和消费者可以用多线程实现,它们通过Queue队列进行通信. import time,random import Queue,threading q = Queue ...
- 【java线程系列】java线程系列之线程间的交互wait()/notify()/notifyAll()及生产者与消费者模型
关于线程,博主写过java线程详解基本上把java线程的基础知识都讲解到位了,但是那还远远不够,多线程的存在就是为了让多个线程去协作来完成某一具体任务,比如生产者与消费者模型,因此了解线程间的协作是非 ...
- python queue和生产者和消费者模型
queue队列 当必须安全地在多个线程之间交换信息时,队列在线程编程中特别有用. class queue.Queue(maxsize=0) #先入先出 class queue.LifoQueue(ma ...
- 人生苦短之我用Python篇(队列、生产者和消费者模型)
队列: queue.Queue(maxsize=0) #先入先出 queue.LifoQueue(maxsize=0) #last in fisrt out queue.PriorityQueue( ...
随机推荐
- 前端需要注意哪些SEO
1.合理的title.description.keywords:搜索对这三项的权重逐个减小,title值强调重点即可,重要关键词不要超过2次,而且要靠前,不同页面title要有所不同:descript ...
- 【1】mongoDB 的安装及启动
MongoDB是一个面向文档(document-oriented)的数据库,不是关系型数据库.与关系型数据库相比,面向文档的数据库没有"行"的概念,取而代之的是"文档&q ...
- JavaScript基础篇详解
全部的数据类型: 基本数据类型: undefined Number Boolean null String 复杂数据类型: object ①Undefined: >>>声明但未初始化 ...
- hibernate+spring mvc,解决hibernate对象懒加载,json序列化失败
在使用spring MVC时,@ResponseBody 注解的方法返回一个有懒加载对象的时候出现了异常,以登录为例: @RequestMapping("login") @Resp ...
- K8S 笔记,请坚持
service 通过 selector 来选择指定 label 的 pod. 如何访问 service 呢?集群内部访问,使用 cluster ip:集群外部访问,使用 NodePort. clust ...
- Linux_NFS/Samba服务器
目录 目录 网络共享的解决方案 搭建NFS服务 服务器端19216801 客户端19216802 autofs自动挂载nfs共享 搭建Samba服务 服务器端 客户端 网络共享的解决方案 Linux/ ...
- k8s集群上线web静态网站
环境准备 一台部署节点,一台master节点,还有两台节点node1,node2 完好的k8s集群环境 思路1: 在node1和node2节点上通过宿主机与容器之间目录映射和端口映射上线静态网站(或动 ...
- Nginx 的方向代理及配置
最近有打算研读nginx源代码,看到网上介绍nginx可以作为一个反向代理服务器完成负载均衡.所以搜罗了一些关于反向代理服务器的内容,整理综合. 一 概述 反向代理(Reverse Proxy)方式 ...
- 发布项目到github上web服务器来运行
$ git add dist Administrator@LuoTong- MINGW32 /D/react_workspace (master) $ git commit -m "git ...
- CentOS7设置hostname、hosts、静态IP地址、关闭防火墙
针对新安装或者克隆后的虚拟机配置 1. 设置hostname 方法1: centos7 里面修改hostname的方式有所改变,修改/etc/hosts和/etc/sysconfig/network两 ...