锁,threading local,以及生产者和消费者模型
1.锁:Lock(一次放行一个)
线程安全,多线程操作时,内部会让所有的线程排队处理。
线程不安全:+人=>排队处理
以后锁代码块
v=[]
lock=threading.Lock()#声明锁
def func(arg):
lock.acquire()#上锁
v.append(arg)
time.sleep(0.1)
m=v[-1]
print(arg,m)
lock.release()#解锁
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
0 0
1 1
2 2
3 3
4 4
5 5
6 6
7 7
8 8
9 9
2.锁:Rlock(一次放一个)
支持递归锁,锁多次
v = []
lock = threading.RLock()
def func(arg):
lock.acquire()
# lock.acquire() v.append(arg)
time.sleep(0.01)
m = v[-1]
print(arg,m) lock.release()
# lock.release() for i in range(10):
t =threading.Thread(target=func,args=(i,))
t.start()
0 0
1 1
2 2
3 3
4 4
5 5
6 6
7 7
8 8
9 9
3.一次放多个:BoundedSemaphore
threading.BoundedSemaphore(指定一次放几个就放几个),信号量
import time
import threading
lock=threading.BoundedSemaphore(5)#指定几个就每次执行几个线程
def func(arg):
lock.acquire()
print(arg)
time.sleep(3)
lock.release()
for i in range(20):
t=threading.Thread(target=func,args=(i,))
t.start()
4.条件锁Condition(一次放指定个数,用户输入几个就放几个)******
方法一:
import time
import threading
lock=threading.Condition()#声明放的方式
def func(arg):
lock.acquire()
lock.wait()#上锁
print(arg)
time.sleep(2)
lock.release()
for i in range(20):
t=threading.Thread(target=func,args=(i,))
t.start()
while 1:
user=int(input(">>>"))
lock.acquire()
lock.notify(user)#重点操作
lock.release()
方法二:
def xxx():
input('>>>')
return True
def func(arg):
lock.wait_for(xxx)
print(arg)
time.sleep(1)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
5.Event(一次放所有)
import threading
import time
lock=threading.Event()声明一次放掉全部的线程
def func(arg):
lock.wait()加锁红灯
print(arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
input('>>>')
lock.set()解锁绿灯
lock.clear()再次红灯
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
input('>>>')
lock.set()绿灯
总结:
线程安全:列表和字典是线程安全的,队列。
为什么要加锁?
非线程安全的可以人为加锁,控制一段代码!
6.threading.local
作用:
内部自动为每个线程维护一个空间(字典),用于当前存取属于自己的值,保证线程之间的数据隔离。
应用:
import threading
import time
v=threading.local()
def func(arg):
v.phone=arg
time.sleep(2)
print(v.phone,arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
原理:
import threading
import time
v=threading.local()
def func(arg):
v.phone=arg
time.sleep(2)
print(v.phone,arg)
for i in range(10):
t=threading.Thread(target=func,args=(i,))
t.start()
7.线程池:控制最多开指定的线程
import threading
from concurrent.futures import ThreadPoolExecutor
import time
def func(a1,a2):
time.sleep(2)
print(a1,a2)
pool = ThreadPoolExecutor(5)#创建线程池,最多5个线程
for i in range(20):
#去线程池中申请一个线程,让线程执行该函数
pool.submit(func,i,20)
8.生产者消费者模型
import threading
import queue
import time
q=queue.Queue()#线程安全
def func(id):
"""
生产者
:param id:
:return:
"""
while 1:
time.sleep(2)
q.put('包子')
print('厨子%s,做了一个包子' %id)
for i in range(1,5):
t=threading.Thread(target=func,args=(i,))
t.start()
def usera(id):
"""
消费者
:param id:
:return:
"""
while 1:
q.get()
print('第%s个顾客吃了一个包子' %id)
for i in range(1,8):
t=threading.Thread(target=usera,args=(i,))
t.start()
队列:先进先出
扩展:
栈:后进先出
内容补充:
线程池在python2中是没有的,线程不能太多,会造成线程的上下切换,影响效率
进程和线程的区别?
1.进程是CPU资源分配的最小单元
线程是CPU计算的最小单元
2.一个进程中可以有多个线程,
3.对于python来说,进程线程和其他语言有差异,是由gill锁造成的,gill锁保证一个进程中,同一时刻只能有一个线程能被CPU调度
进程是进行数据隔离
线程是CPU工作的最小单元,共享进程中的所有资源,每个线程分担一些任务,最终执行
锁,threading local,以及生产者和消费者模型的更多相关文章
- 20181229(守护进程,互斥锁,IPC,生产者和消费者模型)
一.守护进程 守护进程:一个进程B守护另一个进程A,当被守护的进程A结束,进程B也就结束了.(不一定同生,但会同死) 两个特点: ①守护进程会在主进程代码执行结束后就终止 ②守护进程内无法再开启子进程 ...
- 守护进程,互斥锁,IPC,生产者与消费者模型
守护进程: b 进程守护 a进程,当a进程执行完毕时,b进程会跟着立马结束 守护进程用途: 如果父进程结束了,子进程无需运行了,就可以将子进程设置为父进程的守护进程 例如我们qq视频聊天时,当我们退出 ...
- 守护进程,互斥锁,IPC,队列,生产者与消费者模型
小知识点:在子进程中不能使用input输入! 一.守护进程 守护进程表示一个进程b 守护另一个进程a 当被守护的进程结束后,那么守护进程b也跟着结束了 应用场景:之所以开子进程,是为了帮助主进程完成某 ...
- python并发编程之守护进程、互斥锁以及生产者和消费者模型
一.守护进程 主进程创建守护进程 守护进程其实就是'子进程' 一.守护进程内无法在开启子进程,否则会报错二.进程之间代码是相互独立的,主进程代码运行完毕,守护进程也会随机结束 守护进程简单实例: fr ...
- python多线程+生产者和消费者模型+queue使用
多线程简介 多线程:在一个进程内部,要同时干很多事情,就需要同时执行多个子任务,我们把进程内的这些子任务叫线程. 线程的内存空间是共享的,每个线程都共享同一个进程的资源 模块: 1._thread模块 ...
- Java线程(学习整理)--4---一个简单的生产者、消费者模型
1.简单的小例子: 下面这个例子主要观察的是: 一个对象的wait()和notify()使用情况! 当一个对象调用了wait(),那么当前掌握该对象锁标记的线程,就会让出CPU的使用权,转而进入该对 ...
- Python之生产者&、消费者模型
多线程中的生产者和消费者模型: 生产者和消费者可以用多线程实现,它们通过Queue队列进行通信. import time,random import Queue,threading q = Queue ...
- 【java线程系列】java线程系列之线程间的交互wait()/notify()/notifyAll()及生产者与消费者模型
关于线程,博主写过java线程详解基本上把java线程的基础知识都讲解到位了,但是那还远远不够,多线程的存在就是为了让多个线程去协作来完成某一具体任务,比如生产者与消费者模型,因此了解线程间的协作是非 ...
- python queue和生产者和消费者模型
queue队列 当必须安全地在多个线程之间交换信息时,队列在线程编程中特别有用. class queue.Queue(maxsize=0) #先入先出 class queue.LifoQueue(ma ...
- 人生苦短之我用Python篇(队列、生产者和消费者模型)
队列: queue.Queue(maxsize=0) #先入先出 queue.LifoQueue(maxsize=0) #last in fisrt out queue.PriorityQueue( ...
随机推荐
- 阶段3 1.Mybatis_09.Mybatis的多表操作_2 完成account表的建立及实现单表查询
mybatis中的多表查询: 示例:用户和账户 一个用户可以有多个账户 一个账户只能属于一个用户(多个账户也可以属于同一个用户) ...
- 【工具安装】kali linux 安装教程
日期:2019-07-14 16:36:21 介绍:使用最新版的 VMware 来安装 kali linux 0x01.下载镜像 首先需要安装 VMware,安装步骤点这里. VMware 安装教程 ...
- windows环境下PostgreSQL的安装
1.首先在如下链接下载PostgreSQL的压缩包,我这里下载的是postgresql-12.1-1-windows-x64-binaries.zip. https://www.enterprised ...
- Workflow License invalid!!
2019/08/23-17:02:16 >> INFO >> main >> org.hibernate.cfg.HbmBinder.bindRootPersist ...
- 【笔记】云主机当跳板,ssh tunnel远程登录树莓派
问题 想要在外网登录家中局域网的树莓派,家里的网络外网ip的会变,而且不适合对公网暴露端口.调研了一番,发现可以使用云主机当跳板,结合ssh隧道实现远程登录到局域网中的树莓派 关于ssh隧道的原理可以 ...
- [Usaco2017 Jan]Promotion Counting
n只奶牛构成了一个树形的公司,每个奶牛有一个能力值pi,1号奶牛为树根.问对于每个奶牛来说,它的子树中有几个能力值比它大的.Inputn,表示有几只奶牛 n<=100000接下来n行为1-n号奶 ...
- 深入理解java:2. 多线程机制
引言 很多人都对其中的一些概念不够明确,如同步.并发等等,让我们先理清一些概念,以免产生误会. 多线程:指的是这个程序(一个进程)运行时,产生了不止一个线程. 并行与并发: 并行:多个cpu实例或者多 ...
- python+selenium上传文件——input标签
我们要区分出上传按钮的种类,大体上可以分为两种: 第一种普通上传:将本地文件路径作为一个值,放在input标签中,通过form表单将这个值提交给服务器: 第二种插件上传:是通过Flash.JavaSc ...
- [Vim] 01 凡人操作
历史评价 编辑器之神 一个凡人的自我修养 成神是不可能成神的,只能是先入个门,然后一点一点学 Vim 官网 三种模式 插入模式(注意看光标) 命令模式(注意看光标) 编辑模式(注意看光标) 其实还有一 ...
- [转帖]深度解析区块链POW和POS的区别
深度解析区块链POW和POS的区别 Proof of Work 还有Proof of Stake 之前理解程了 state ... 股权的意思 还有 delegated proof of Stake ...