一、内容总结

  1.进程创建

    1)   Process:两种创建一个新进程的方法:

        1.实例化Process,通过args=(,)元组形式传参,2创建类继承Process,类初始化的时候传参数

    2)  p.join(),阻塞主进程,执行完p进程后,释放

    3)   守护进程 ,守护主程序代码执行完毕,p.daemon = True     

import time
from multiprocessing import Process def func():
while True:
print('is alive')
time.sleep(0.5) def wahaha():
i = 0
while i < 5:
print('第%s秒'%i)
time.sleep(1)
i += 1 if __name__ == '__main__':
p2 = Process(target=wahaha)
p2.start()
p1 = Process(target=func)
p1.daemon = True # 设置p1为守护进程
p1.start()
time.sleep(3)
print('主进程')
p2.join() # 守护进程会等待子进程结束后才结束守护

守护进程代码

    4)  p.terminate() 不会立即结束,会等待主进程回收资源等

 # python和进程
    # multiprocessing模块
    # 主进程
    # 父子进程
        # 父进程需要等待子进程执行结束之后才结束
            # 负责回收子进程的一些资源
        # 进程与进程之间数据隔离
            # 子进程可以在创建之初接收参数
            # 但是不能直接返回值
        # 异步 父子进程之间的工作是互不干扰的
    # 开启一个子进程
        # multiprocessing.Process
        # 第一种方式
            # 实例化创建一个进程
            # start开启一个进程
        # 第二种方式
            # 采用面向对象的形式来创建进程
                # 继承Process
                # 在init处传参数
                # 重写run方法
    # 子进程的控制
        # join         

  2.进程的同步

    1)、锁 Lock

      加锁,维护了数据的安全,但降低了程序的效率,但所有的效率都必须建立在数据安全的基础上;

      但凡涉及到并发编程我们都要考虑共享数据的安全性,我需要在并发部分对数据操作格外小心,

      如果涉及到数据的不安全就要加锁控制。

#  查票的例子
import os,time
from multiprocessing import Lock,Process
import json def search(i):
with open('db') as f:
ticket_count = json.load(f)
print('%s查到了还剩余:%s张余票!' % (i,ticket_count['count'])) def buy(i):
with open('db') as f:
ticket_count = json.load(f)
time.sleep(0.2) # 模拟请求数据库数据网络传输时延
if ticket_count['count'] > 0:
ticket_count['count'] -= 1
print('%s号买到了车票!'% i)
time.sleep(0.2) # # 模拟写入数据库数据网络传输时延
with open('db', 'w') as f:
json.dump(ticket_count, f) def get_ticket(lock, i):
search(i)
with lock: buy(i)
# 两种加锁方式
#
# def get_ticket(lock, i):
# search(i) # 查票不用加锁,都可以查
# lock.acquire()
# buy(i) # 买票加锁
# lock.release() if __name__ == '__main__':
lock = Lock()
for i in range(10):
p = Process(target=get_ticket,args=(lock,i))
p.start()

查车票的例子

    lock内部实现进程间的通信,使得谁acquire了锁,谁realease了在多个拥有lock参数子进程中透明。

    2)、信号量 Semaphore 锁+计数器

      

# 4人KTV的例子

# def ktv(sema,i):
# sema.acquire()
# print('%s 走进ktv!' % i)
# time.sleep(random.randint(1,5))
# print('%s 走出KTV!!!'% i)
# sema.release() def ktv(sema,i):
with sema:
print('%s 走进ktv!' % i)
time.sleep(random.randint(1,5))
print('%s 走出KTV!!!'% i) if __name__ == '__main__':
sema = Semaphore(4)
for i in range(10):
p = Process(target=ktv, args=(sema, i))
p.start()

4人KTV的例子

    3)、事件Event

       控制子进程阻塞还是执行的一个机制:

      wait方法:

        如果is_set() 标志位为False,则阻塞 wait(n)可以设置阻塞n秒后继续执行,但标志位不会改变,还是False

    如果is_set() 标志位为True,效果相当于pass

      控制标志:

        is_set():判断标志位状态

        set():设置标志位为True

        clear():设置标志位False

import time, random
from multiprocessing import Process,Event e = Event()
# print(e.is_set()) 会打印12次,数数吧哈哈 def traffic_light(e):
print('\033[1;31m红灯亮了\033[0m')
while True:
time.sleep(2)
if e.is_set():
print('\033[1;31m红灯亮了\033[0m')
e.clear()
else:
print('\033[1;32m绿灯亮了\033[0m')
e.set() def car(e, i):
if not e.is_set():
print('car%s 在等待红灯' % i)
e.wait()
print('car%s 通过' % i) if __name__ == '__main__':
e = Event()
traffic_light1 = Process(target=traffic_light, args=(e,))
traffic_light1.daemon = True
traffic_light1.start()
li = []
for i in range(10):
p = Process(target=car, args=(e, i))
p.start()
li.append(p)
time.sleep(random.randint(0, 3))
for p in li:
p.join()
print('主程序结束!')

事件红绿灯的例子

  3.进程间的通信

    1.队列Queue

      # IPC 进程之间的通信

      empty():# 多进程的情况下 不准:

      full():# 多进程的情况下 不准:

      put():#队列慢 会引起程序的阻塞:

      get():#队列空 会引起程序的阻塞:

      put_nowait(): # 不会阻塞,但容易丢失数据

      get_nowait():# 不会阻塞,但满的话会报错

      

from multiprocessing import Process,Queue

def num(q,i):
q.put({i:i**i}) if __name__ == '__main__':
q = Queue()
for i in range(10):
p = Process(target=num, args=(q,i))
p.start() for j in range(10):
print(q.get())

利用Queue进行进程通信的例子

    2.管道

    3.Manager

  4.进程池

    pool

  

二、预习和扩展

python全栈开发day32-进程创建,进程同步,进程间的通信,进程池的更多相关文章

  1. python全栈开发,Day40(进程间通信(队列和管道),进程间的数据共享Manager,进程池Pool)

    昨日内容回顾 进程 multiprocess Process —— 进程 在python中创建一个进程的模块 start daemon 守护进程 join 等待子进程执行结束 锁 Lock acqui ...

  2. python 全栈开发,Day128(创建二维码,扫码,创建玩具的基本属性)

    昨日内容回顾 1.app播放音乐 plus.audio.createPlayer(文件路径/URL) player.play() 播放音乐 player.pause() 暂停播放 player.res ...

  3. Python 全栈开发【第0篇】:目录

    Python 全栈开发[第0篇]:目录   第一阶段:Python 开发入门 Python 全栈开发[第一篇]:计算机原理&Linux系统入门 Python 全栈开发[第二篇]:Python基 ...

  4. Python全栈开发【模块】

    Python全栈开发[模块] 本节内容: 模块介绍 time random os sys json & picle shelve XML hashlib ConfigParser loggin ...

  5. 自学Python全栈开发第一次笔记

           我已经跟着视频自学好几天Python全栈开发了,今天决定听老师的,开始写blog,听说大神都回来写blog来记录自己的成长. 我特别认真的跟着这个视频来学习,(他们开课前的保证书,我也写 ...

  6. python全栈开发中级班全程笔记(第二模块、第四章)(常用模块导入)

    python全栈开发笔记第二模块 第四章 :常用模块(第二部分)     一.os 模块的 详解 1.os.getcwd()    :得到当前工作目录,即当前python解释器所在目录路径 impor ...

  7. Python全栈开发【面向对象进阶】

    Python全栈开发[面向对象进阶] 本节内容: isinstance(obj,cls)和issubclass(sub,super) 反射 __setattr__,__delattr__,__geta ...

  8. Python全栈开发【面向对象】

    Python全栈开发[面向对象] 本节内容: 三大编程范式 面向对象设计与面向对象编程 类和对象 静态属性.类方法.静态方法 类组合 继承 多态 封装 三大编程范式 三大编程范式: 1.面向过程编程 ...

  9. Python全栈开发【基础四】

    Python全栈开发[基础四] 本节内容: 匿名函数(lambda) 函数式编程(map,filter,reduce) 文件处理 迭代器 三元表达式 列表解析与生成器表达式 生成器 匿名函数 lamb ...

随机推荐

  1. python学习笔记8--面向对象编程

    一.面向对象编程 面向对象--Object Oriented Programming,简称oop,是一种程序设计思想.在说面向对象之前,先说一下什么是编程范式,编程范式你按照什么方式来去编程,去实现一 ...

  2. ubuntu上zip格式解压乱码解决

    在windows上压缩的文件,是以系统默认编码中文来压缩文件.由于zip文件中没有声明其编码,所以linux上的unzip一般以默认编码解压,中文文件名会出现乱码. 虽然2005年就有人把这报告为bu ...

  3. Java SE之Java工作原理

     在Java中引入了虚拟机的概念,即在机器和编译程序之间加入了一层抽象的虚拟的机器.这台虚拟的机器在任何平台上都提供给编译程序一个的共同的接口.编译程序只需要面向虚拟机,生成虚拟机能够理解的代码,然后 ...

  4. Linux监控工具Spotlight on Unix

    1.介绍 Spotlight on Unix是一款Linux系统运行状况的监控工具,可以安装在Windows下,监控Linux服务器的运行状况. 监控项目包括:CPU.内存.交换空间.虚拟内存等的使用 ...

  5. 20165230田坤烨《网络对抗》Exp1 PC平台逆向破解

    实践目标 本次实践的对象是一个名为pwn1的linux可执行文件. 该程序正常执行流程是:main调用foo函数,foo函数会简单回显任何用户输入的字符串. 该程序同时包含另一个代码片段,getShe ...

  6. JNI打通java和c

    1.JNI简介 The Java Native Interface (JNI) is a programming framework that enables Java code running in ...

  7. Django中全局Context处理器

    1.模板标签和模板变量 模板标签在{% %}中定义: {% if is_logged_in %} Thanks for logging in! {% else %} Please log in. {% ...

  8. ubuntu cron 及 crontab 自动执行任务

    Add the below line (with tweaks) to the end of /etc/crontab: 30 23 * * * root shutdown -h now At 23: ...

  9. mac使用influxdb和grafana

    mac使用influxdb和grafana influxdb安装以及配置 brew update brew install influxdb ln -sfv /usr/local/opt/influx ...

  10. Child Process模块

    目录 exec() execSync() execFile() spawn() fork() send() 参考链接 child_process模块用于新建子进程.子进程的运行结果储存在系统缓存之中( ...