一、进程同步

1、同步锁(又叫互斥锁)

加锁的代码以后,同一时间内只能被一个进程执行

 from multiprocessing import Process, Lock

 def fun(loc):

       loc.acquire()    #加锁
pass #这里的代码只能被一个进程执行
loc.release() #释放锁 if __name__ =="__mian__": loc = Locke() #创建锁对象
p = Process(target=fun,args=(loc,))
p.start()

加锁语法

2、信号量

信号量相当于有多把钥匙的锁。同一时间允许多个进程执行加锁的代码

信号量中有一个计数器,进来一个进程计数器+1,出去一个进程计数器-1

 from multiprocessing import Process, Semaphore

 def fun():

     s.acquire()   #信号量中计数器+1
pass #这里的代码最多能被4个进程同时执行
s.release() #信号量中计数器-1 if __name__ =="__main__":
s = Semaphore(4)
p = Process(target=fun,args=(m,))
p.start()

信号量语法

3、事件

e = Event()   创建一个事件对象,有两个状态,True和False,默认是False

e.wait()   事件状态为false时等待

e.set()   将事件状态设置为True

e.clear()   将事件状态改为False

二、进程通信

1、守护进程

将一个进程设置为守护进程:   p.daemon = True

# 正常情况下,子进程和主进程异步执行,所以子进程的执行不会受主进程状态的影响,但设为守护进程后,守护进程会随着主进程代码的结束而结束。

# 主进程代码结束不意味着主进程结束,主进程是要等子进程都结束才结束的,给子进程收尸。

# 如果一个子进程设置为了守护进程,它里面就不能再开子进程了。

2、队列

队列是进程安全的。因为它里边的数据取一次就没了,在进程通信时推荐使用。

q = Queue(n)    创建队列对象,能容纳 n 个元素

q.put()    往队列中添加数据,队列满时会等待

q.get()     从队列中取数据,队列空时会等待

q.full()    判断队列是否满了

q.empty()   判断队列是否为空

q.get_nowait()   或  q.get(False)   取数据时不等待

q.put_nowait()    或  q.put(False)   添加数据时不等待

3、生产者消费者模型

就是使用缓冲区将多个进程解耦

一般使用队列,一个进程往里放数据,一个进程取数据,也就是一个生产,一个消费

4、joinablequeue

升级版队列,比队列多了两个方法task_done和join,其他用法一样

q.task_done()   给队列发送一个信号

q.join()   队列接收一个信号

joinablequele相当于内部有一个计数器,put一个数据,计数器+1,然后取一个数据后用task_done()发一个信号,join接收信号,程序阻塞,当jion接收到和计数器相同的信号数量时结束阻塞。

python记录_day31 进程同步和进程通信的更多相关文章

  1. python全栈开发day32-进程创建,进程同步,进程间的通信,进程池

    一.内容总结 1.进程创建 1) Process:两种创建一个新进程的方法: 1.实例化Process,通过args=(,)元组形式传参,2创建类继承Process,类初始化的时候传参数 2) p.j ...

  2. python 守护进程、同步锁、信号量、事件、进程通信Queue

    一.守护进程 1.主进程创建守护进程 其一:守护进程会在主进程代码执行结束后就终止 其二:守护进程内无法再开启子进程,否则抛出异常:AssertionError: daemonic processes ...

  3. python核心高级学习总结4-------python实现进程通信

    Queue的使用 Queue在数据结构中也接触过,在操作系统里面叫消息队列. 使用示例 # coding=utf-8 from multiprocessing import Queue q = Que ...

  4. python之并发编程(线程\进程\协程)

    一.进程和线程 1.进程 假如有两个程序A和B,程序A在执行到一半的过程中,需要读取大量的数据输入(I/O操作),而此时CPU只能静静地等待任务A读取完数据才能继续执行,这样就白白浪费了CPU资源.是 ...

  5. Linux 进程通信之 ——信号和信号量总结

    如今最经常使用的进程间通信的方式有:信号,信号量,消息队列,共享内存.       所谓进程通信,就是不同进程之间进行一些"接触",这种接触有简单,也有复杂.机制不同,复杂度也不一 ...

  6. python 管道、数据共享、进程池

    一.管道(Pipe)(了解) (详情参考:https://www.cnblogs.com/clschao/articles/9629392.html) 进程间通信(IPC)方式二:管道(不推荐使用,了 ...

  7. python并发编程之multiprocessing进程(二)

    python的multiprocessing模块是用来创建多进程的,下面对multiprocessing总结一下使用记录. 系列文章 python并发编程之threading线程(一) python并 ...

  8. Python 基础之 线程与进程

    Python 基础之 线程与进程 在前面已经接触过了,socket编程的基础知识,也通过socketserver 模块实现了并发,也就是多个客户端可以给服务器端发送消息,那接下来还有个问题,如何用多线 ...

  9. 计算机网络:套接字(Socket)| Python socket实现服务器端与客户端通信,使用TCP socket阿里云ECS服务器与本机通信

    所谓套接字(Socket),就是对网络中不同主机上的应用进程之间进行双向通信的端点的抽象.一个套接字就是网络上进程通信的一端,提供了应用层进程利用网络协议交换数据的机制.从所处的地位来讲,套接字上联应 ...

随机推荐

  1. C++中的string常用函数用法

    标准c++中string类函数介绍   注意不是CString 之所以抛弃char*的字符串而选用C++标准程序库中的string类,是因为他和前者比较起来,不必 担心内存是否足够.字符串长度等等,而 ...

  2. java 之 dom4j解析xml

    *dom4j,是一个组织,针对xml解析,提供解析器dom4j *dom4j不是javase的一部分,想要使用需要导入dom4j提供的jar包 *第一步:创建lib文件夹,将压缩文件放到此处 *第二步 ...

  3. AtCoder Beginner Contest 117 解题报告

    果然abc都是手速场. 倒序开的qwq. D题因为忘记1e12二进制几位上界爆了一发. A - Entrance Examination 就是除一下就行了... 看样例猜题意系列. #include& ...

  4. 强化学习策略梯度方法之: REINFORCE 算法(从原理到代码实现)

    强化学习策略梯度方法之: REINFORCE 算法 (从原理到代码实现) 2018-04-01  15:15:42   最近在看policy gradient algorithm, 其中一种比较经典的 ...

  5. 几个优化SQL查询的方法

    1.什么是执行计划 执行计划是数据库根据SQL语句和相关表的统计信息作出的一个查询方案,这个方案是由查询优化器自动分析产生的,比如一条SQL语句如果用来从一个 10万条记录的表中查1条记录,那查询优化 ...

  6. Java String 函数常用操作 & format() 格式化输出,代码详解

    package _String_; import java.util.*; import java.math.*; import java.lang.*; public class _Strings ...

  7. 正则解析json数据

    http://tool.chinaz.com/regex http://tool.oschina.net/regex/

  8. Tomcat 跨域问题的解决

    先下载CORS对应的Jar: 下载链接: https://download.csdn.net/download/u010739157/10565169 在tomcat的Web.xml中加上如下配置: ...

  9. 利用JavaScriptSOAPClient直接调用webService --完整的前后台配置与调用示例

    JavaScriptSoapClient下载地址:https://archive.codeplex.com/?p=javascriptsoapclient JavaScriptSoapClient的D ...

  10. [转]C++中const、volatile、mutable的用法

    原文:https://blog.csdn.net/imJaron/article/details/79657642 const意思是“这个函数不修改对象内部状态”. 为了保证这一点,编译器也会主动替你 ...