锁,threading local,以及生产者和消费者模型
1.锁:Lock(一次放行一个)
线程安全,多线程操作时,内部会让所有的线程排队处理。
线程不安全:+人=>排队处理
以后锁代码块
v=[]
lock=threading.Lock()#声明锁
def func(arg):
lock.acquire()#上锁
v.append(arg)
time.sleep(0.1)
m=v[-1]
print(arg,m)
lock.release()#解锁
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
0 0
1 1
2 2
3 3
4 4
5 5
6 6
7 7
8 8
9 9
2.锁:Rlock(一次放一个)
支持递归锁,锁多次
v = []
lock = threading.RLock()
def func(arg):
lock.acquire()
# lock.acquire() v.append(arg)
time.sleep(0.01)
m = v[-1]
print(arg,m) lock.release()
# lock.release() for i in range(10):
t =threading.Thread(target=func,args=(i,))
t.start()
0 0
1 1
2 2
3 3
4 4
5 5
6 6
7 7
8 8
9 9
3.一次放多个:BoundedSemaphore
threading.BoundedSemaphore(指定一次放几个就放几个),信号量
import time
import threading
lock=threading.BoundedSemaphore(5)#指定几个就每次执行几个线程
def func(arg):
lock.acquire()
print(arg)
time.sleep(3)
lock.release()
for i in range(20):
t=threading.Thread(target=func,args=(i,))
t.start()
4.条件锁Condition(一次放指定个数,用户输入几个就放几个)******
方法一:
import time
import threading
lock=threading.Condition()#声明放的方式
def func(arg):
lock.acquire()
lock.wait()#上锁
print(arg)
time.sleep(2)
lock.release()
for i in range(20):
t=threading.Thread(target=func,args=(i,))
t.start()
while 1:
user=int(input(">>>"))
lock.acquire()
lock.notify(user)#重点操作
lock.release()
方法二:
def xxx():
input('>>>')
return True
def func(arg):
lock.wait_for(xxx)
print(arg)
time.sleep(1)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
5.Event(一次放所有)
import threading
import time
lock=threading.Event()声明一次放掉全部的线程
def func(arg):
lock.wait()加锁红灯
print(arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
input('>>>')
lock.set()解锁绿灯
lock.clear()再次红灯
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
input('>>>')
lock.set()绿灯
总结:
线程安全:列表和字典是线程安全的,队列。
为什么要加锁?
非线程安全的可以人为加锁,控制一段代码!
6.threading.local
作用:
内部自动为每个线程维护一个空间(字典),用于当前存取属于自己的值,保证线程之间的数据隔离。
应用:
import threading
import time
v=threading.local()
def func(arg):
v.phone=arg
time.sleep(2)
print(v.phone,arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
原理:
import threading
import time
v=threading.local()
def func(arg):
v.phone=arg
time.sleep(2)
print(v.phone,arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
7.线程池:控制最多开指定的线程
import threading
from concurrent.futures import ThreadPoolExecutor
import time
def func(a1,a2):
time.sleep(2)
print(a1,a2)
pool = ThreadPoolExecutor(5)#创建线程池,最多5个线程
for i in range(20):
#去线程池中申请一个线程,让线程执行该函数
pool.submit(func,i,20)
8.生产者消费者模型
import threading
import queue
import time
q=queue.Queue()#线程安全
def func(id):
"""
生产者
:param id:
:return:
"""
while 1:
time.sleep(2)
q.put('包子')
print('厨子%s,做了一个包子' %id)
for i in range(1,5):
t=threading.Thread(target=func,args=(i,))
t.start()
def usera(id):
"""
消费者
:param id:
:return:
"""
while 1:
q.get()
print('第%s个顾客吃了一个包子' %id)
for i in range(1,8):
t=threading.Thread(target=usera,args=(i,))
t.start()
队列:先进先出
扩展:
栈:后进先出
内容补充:
线程池在python2中是没有的,线程不能太多,会造成线程的上下切换,影响效率
进程和线程的区别?
1.进程是CPU资源分配的最小单元
线程是CPU计算的最小单元
2.一个进程中可以有多个线程,
3.对于python来说,进程线程和其他语言有差异,是由gill锁造成的,gill锁保证一个进程中,同一时刻只能有一个线程能被CPU调度
进程是进行数据隔离
线程是CPU工作的最小单元,共享进程中的所有资源,每个线程分担一些任务,最终执行
锁,threading local,以及生产者和消费者模型的更多相关文章
- 20181229(守护进程,互斥锁,IPC,生产者和消费者模型)
一.守护进程 守护进程:一个进程B守护另一个进程A,当被守护的进程A结束,进程B也就结束了.(不一定同生,但会同死) 两个特点: ①守护进程会在主进程代码执行结束后就终止 ②守护进程内无法再开启子进程 ...
- 守护进程,互斥锁,IPC,生产者与消费者模型
守护进程: b 进程守护 a进程,当a进程执行完毕时,b进程会跟着立马结束 守护进程用途: 如果父进程结束了,子进程无需运行了,就可以将子进程设置为父进程的守护进程 例如我们qq视频聊天时,当我们退出 ...
- 守护进程,互斥锁,IPC,队列,生产者与消费者模型
小知识点:在子进程中不能使用input输入! 一.守护进程 守护进程表示一个进程b 守护另一个进程a 当被守护的进程结束后,那么守护进程b也跟着结束了 应用场景:之所以开子进程,是为了帮助主进程完成某 ...
- python并发编程之守护进程、互斥锁以及生产者和消费者模型
一.守护进程 主进程创建守护进程 守护进程其实就是'子进程' 一.守护进程内无法在开启子进程,否则会报错二.进程之间代码是相互独立的,主进程代码运行完毕,守护进程也会随机结束 守护进程简单实例: fr ...
- python多线程+生产者和消费者模型+queue使用
多线程简介 多线程:在一个进程内部,要同时干很多事情,就需要同时执行多个子任务,我们把进程内的这些子任务叫线程. 线程的内存空间是共享的,每个线程都共享同一个进程的资源 模块: 1._thread模块 ...
- Java线程(学习整理)--4---一个简单的生产者、消费者模型
1.简单的小例子: 下面这个例子主要观察的是: 一个对象的wait()和notify()使用情况! 当一个对象调用了wait(),那么当前掌握该对象锁标记的线程,就会让出CPU的使用权,转而进入该对 ...
- Python之生产者&、消费者模型
多线程中的生产者和消费者模型: 生产者和消费者可以用多线程实现,它们通过Queue队列进行通信. import time,random import Queue,threading q = Queue ...
- 【java线程系列】java线程系列之线程间的交互wait()/notify()/notifyAll()及生产者与消费者模型
关于线程,博主写过java线程详解基本上把java线程的基础知识都讲解到位了,但是那还远远不够,多线程的存在就是为了让多个线程去协作来完成某一具体任务,比如生产者与消费者模型,因此了解线程间的协作是非 ...
- python queue和生产者和消费者模型
queue队列 当必须安全地在多个线程之间交换信息时,队列在线程编程中特别有用. class queue.Queue(maxsize=0) #先入先出 class queue.LifoQueue(ma ...
- 人生苦短之我用Python篇(队列、生产者和消费者模型)
队列: queue.Queue(maxsize=0) #先入先出 queue.LifoQueue(maxsize=0) #last in fisrt out queue.PriorityQueue( ...
随机推荐
- 用configmap管理配置
一.ConfigMap介绍管理配置: ConfigMap介绍 Secret 可以为 Pod 提供密码.Token.私钥等敏感数据:对于一些非敏感数据,比如应用的配置信息,则可以用 ConfigMap ...
- Python学习之==>第三方模块的安装、模块导入
一.模块&包 1.模块 模块实质上就是一个Python文件,它是用来组织代码的.意思就是把Python代码写在里面,文件名就是模块的名称.例如:random.py,random就是模块的名称. ...
- Oracle 无备份情况下的恢复--密码文件/参数文件
13.1 恢复密码文件 密码文件(linux 为例)在$ORACLE_HOME/dbs目录下,文件名的前缀是orapw,后接数据库实例名. [oracle@DSI backup]$ cd /u01/a ...
- Spring的应用上下文ApplicationContext
HttpServletRequest request = ((ServletRequestAttributes) RequestContextHolder.getRequestAttributes() ...
- MySQL学习-MySQL内置功能_索引与慢查询
1.索引基础 1.1 介绍 (1.)为何要有索引? 一般的应用系统,读写比例在10:1左右,而且插入操作和一般的更新操作很少出现性能问题,在生产环境中,我们遇到最多的,也是最容易出问题的,还是一些复杂 ...
- 安装Git并关联
下载git 打开git bash 生成key将 key绑定到帐号 输入命令 ssh-keygen -t rsa -C 'LoginName' 根据命令生成的地址找到对应文件复制密钥 打开github登 ...
- window环境rabbitMQ安装和php扩展安装
下面的安装步骤,已经在2018-11-27试验通过. 1.安装前的准备 phpinfo查看php的版本.系统是多少位的,php版本是否是线程安全,php.ini文件的路径 2.安装rabbitMQ 安 ...
- 【Linux命令】解压相关命令
xxx.tar.gz : tar xvzf xxx.tar.gz xxx.tar.bz2 : tar -vxjf xxx.tar.bz2
- CVE 2019 0708 安装重启之后 可能造成 手动IP地址丢失.
1. 最近两天发现 更新了微软的CVE 2019-0708的补丁之后 之前设置的手动ip地址会变成 自动获取, 造成ip地址丢失.. 我昨天遇到两个, 今天同事又遇到一个.微软做补丁也不走心啊..
- [知乎]自己真是Know Nothing 历史上有哪些细思恐极的事件?
作者:敖让链接:https://www.zhihu.com/question/38374479/answer/652432284来源:知乎著作权归作者所有.商业转载请联系作者获得授权,非商业转载请注明 ...