五:守护进程

正常情况下,主进程默认等待子进程调用结束之后再结束
守护进程在主进程所有代码执行完毕之后,自动终止
kill -9 进程号 杀死进程.

守护进程的语法:
进程对象.daemon = True
设置该进程为守护进程
必须要写在start()方法之前赋值
为主进程守护,主进程如果代码执行结束了,该守护进程自动结束

#(1)基本语法
#例:

from multiprocessing import Process
import time
def func():
print("子进程start")
time.sleep(1)
print("子进程end") if __name__ == "__main__":
p = Process(target=func)
p.daemon = True
p.start()
time.sleep(1)
print("主进程执行结束")

结果为:

子进程start

主进程执行结束

因为为守护主进程,主进程结束子进程立即结束

(2) 多个子进程的情况
当多个子进程并发执行时,默认主进程等待子进程
如果标记该子进程是守护进程
当主进程执行完毕所有代码之后,守护进程立刻终止
主进程的代码执行到最后一行,就意味着函数代码执行完毕,就应该杀掉守护进程
其他非守护进程继续正常执行,主进程仍然等待直到结束
最后主进程在真正的释放结束
#例:

from multiprocessing import Process
import time
def func1():
count = 1
while True:
print("*" * count)
time.sleep(0.5)
count +=1 def func2():
print("func2 start")
time.sleep(3)
print("func2 end") if __name__ == "__main__":
p1 = Process(target=func1)
p1.daemon = True
p1.start() p2 = Process(target=func2)
p2.start() print("主进程代码执行结束...")

运行结果为:

主进程代码执行结束...
func2 start
func2 end
(3)守护进程的实际作用:监控报活

#例:

from multiprocessing import Process
import time
def alive():
# 服务器向另外一个服务器发送消息
# 给监控服务器发送报活消息
# 如果监控服务器没有收到报活消息,就判定1号主机异常
while True:
print("1号服务主机...I am OK")
time.sleep(0.8) def func():
print("用来统计当前主机的服务器日志,打包变成文件")
time.sleep(3) if __name__ == "__main__":
p1 = Process(target=alive)
p1.daemon = True
p1.start() p2 = Process(target=func)
p2.start() # 模拟好比这个程序结束了,那么服务器挂掉了
p2.join()
print("... ... ...")

输出结果为:

1号服务主机...I am OK

用来统计当前主机的服务器日志,打包变成文件

1号服务主机...I am OK

1号服务主机...I am OK

1号服务主机...I am OK

... ... ...

首先由p2的阻塞,p2没有执行结束前,p2.join()后的主进程语句执行不了,等p2结束执行join后面的,然后主进程程序结束,在异步运行的p1守护进程随即结束运行。

六: 锁(Lock)

lock.acquire()# 上锁

lock.release()# 解锁

 

#同一时间允许一个进程上一把锁 就是Lock

加锁可以保证多个进程修改同一块数据时,同一时间只能有一个任务可以进行修改,即串行的修改,没错,速度是慢了,但牺牲速度却保证了数据安全。

#同一时间允许多个进程上多把锁 就是[信号量Semaphore]

信号量是锁的变形: 实际实现是 计数器 + 锁,同时允许多个进程上锁

# 互斥锁Lock:互斥锁就是进程的相互排斥
#谁先抢到自由,谁就上锁改资源内容,为了保证数据的同步性
#注意: 多个锁一起上,不开锁,会造成死锁,上锁和解锁是一对的

(1)锁的基本用法

from multiprocessing import Process, Lock
#例1:
# 创建一把锁
lock = Lock()
# 上锁
lock.acquire()
print("") # 解锁
lock.release() #例2:
# 死锁 : 只上锁,不解锁,会阻塞,产生死锁
lock.acquire()
print(111)
lock.release() print(222) lock.acquire()
print(333)
#lock.release()
lock.acquire()
print(444)

例2的输出结果没有444,因为没有上一个锁解一个锁,造成死锁

(1)模拟抢票软件

比如12306抢票软件,实际上是吧mysql数据库中的内容读出来先与存在redis 的内存中。
内存的读写的速度极快,不需要再刻意的加延迟等待,即可把该有的数据更新或者返回。
等待抢票的高峰期过了,在慢慢把内存中的数据更新回MySQL当中。

#例:(ticket内的内容为:{"count": 5},让十个人抢票)

from multiprocessing import Process,Lock
import json,time
# 读取票数,更新票数
def wr_info(sign,dic=None):
if sign == "r":
with open("ticket",mode="r",encoding="utf-8") as fp:
dic = json.load(fp)
return dic
elif sign == "w":
with open("ticket",mode="w",encoding="utf-8") as fp:
json.dump(dic,fp) # 获取实际抢票的逻辑
def get_ticket(person):
# 读取数据库的实际票数
dic = wr_info("r")
# with open("ticket",mode="r",encoding="utf-8") as fp:
# dic = json.load(fp)
time.sleep(0.5)
if dic['count'] > 0:
print("%s抢到票了" % (person))
dic["count"] -= 1
# 更新数据库
wr_info("w",dic)
# with open("ticket",mode="w",encoding="utf-8") as fp:
# json.dump(dic,fp)
else:
print("%s没有买到这个票" % (person)) # 用ticket来进行函数的统一调用
def ticket(person,lock):
# 查询票数
dic = wr_info("r")
# with open("ticket",mode="r",encoding="utf-8") as fp:
# dic = json.load(fp)
print("%s 查询余票 : %s" % (person,dic["count"]))
lock.acquire() # 开始抢票
get_ticket(person)
lock.release() if __name__ == "__main__":
lock = Lock()
for i in range(10):
p = Process(target=ticket,args=("person%s" % (i),lock) )
p.start() 

输出结果为:

person2 查询余票 : 5

person1 查询余票 : 5

person6 查询余票 : 5

person7 查询余票 : 5

person0 查询余票 : 5

person4 查询余票 : 5

person9 查询余票 : 5

person3 查询余票 : 5

person5 查询余票 : 5

person8 查询余票 : 5

person2抢到票了

person1抢到票了

person6抢到票了

person7抢到票了

person0抢到票了

person4没有买到这个票

person9没有买到这个票

person3没有买到这个票

person5没有买到这个票

person8没有买到这个票

查询剩余票数是并发的一起的,在抢票的时候也是一起抢的,谁抢到了就会对剩余票数进行更新,抢到票的就会对剩余票数加锁,已免数据错乱。

(3)区分同步和异步
# 在产生进程对象的时候,进程之间是异步,上锁之后,进程之间变成同步

from multiprocessing import Process,Lock
def func(num, lock):
lock.acquire()
print("走到上锁这个地方,变成一个同步程序,先来的进行先执行,后来的进程后执行,按次序依次执行")
print(num)
lock.release() if __name__ == "__main__":
# lock互斥锁, 进程之间数据不共享
# 但是lock对象底层是通过socket来互相发送数据,不管多少进程,都是同一个lock锁
lock = Lock()
for i in range(10):
p = Process(target=func, args=(i, lock))
# 1. 10个子进程异步执行,是并发操作
p.start()

七.Semaphore(信号量)

信号量Semaphore是一个计数器,控制对公共资源或者临界区域的访问量,信号量可以指定同时访问资源或者进入临界区域的进程数。每次有一个进程获得信号量时,计数器-1,若计数器为0时,其他进程就停止访问信号量,一直阻塞直到其他进程释放信号量。

上述讲的Lock,属于互斥锁,也就是一把钥匙配备一把锁,同时只允许锁住某一个数据。而信号量则是多把钥匙配备多把锁,也就是说同时允许锁住多个数据。

#例:

from multiprocessing import Process,Semaphore
import random,time def ktv(person,sem):
# 上锁
sem.acquire()
print("%s进入ktv唱歌" % (person))
time.sleep(random.randrange(3,8))
print("%s走出ktv离开" % (person))
# 解锁
sem.release() if __name__ == "__main__":
# 同一时间最多允许4个进程执行ktv任务,剩下的进程等待
sem = Semaphore(4)
for i in range(10):
p = Process( target=ktv,args=("person%s" %(i),sem))
p.start()

每次运行4个进程,打一次打印是:

person2进入ktv唱歌
person1进入ktv唱歌
person4进入ktv唱歌
person0进入ktv唱歌

紧接着:

person2进入ktv唱歌
person1进入ktv唱歌
person4进入ktv唱歌
person0进入ktv唱歌
person1走出ktv离开
person8进入ktv唱歌
person4走出ktv离开
person9进入ktv唱歌

最后所有打印为:

person2进入ktv唱歌
person1进入ktv唱歌
person4进入ktv唱歌
person0进入ktv唱歌
person1走出ktv离开
person8进入ktv唱歌
person4走出ktv离开
person9进入ktv唱歌
person2走出ktv离开
person3进入ktv唱歌
person0走出ktv离开
person6进入ktv唱歌
person9走出ktv离开
person7进入ktv唱歌
person8走出ktv离开
person5进入ktv唱歌
person3走出ktv离开
person6走出ktv离开
person5走出ktv离开
person7走出ktv离开

Python 之并发编程之进程中(守护进程(daemon)、锁(Lock)、Semaphore(信号量))的更多相关文章

  1. Python 之并发编程之线程中

    四.线程锁lock(线程的数据安全) 在数据量较大的时候,线程中的数据会被并发,所有数据会不同步,以至于数据会异常. 下面还介绍了两种的上锁方法. 例: from threading import T ...

  2. 《java并发编程实战》读书笔记10--显示锁Lock,轮询、定时、读写锁

    第13章 显示锁 终于看到了这本书的最后一本分,呼呼呼,真不容易.其实说实在的,我不喜欢半途而废,有其开始,就一定要有结束,否则的话就感觉哪里乖乖的. java5.0之前,在协调对共享对象的访问时可以 ...

  3. java并发编程(四)守护进程 线程阻塞的四种情况

    转载请注明出处:http://blog.csdn.net/ns_code/article/details/17099981 守护线程   Java中有两类线程:User Thread(用户线程).Da ...

  4. Python 3 并发编程多进程之守护进程

    Python 3 并发编程多进程之守护进程 主进程创建守护进程 其一:守护进程会在主进程代码执行结束后就终止 其二:守护进程内无法再开启子进程,否则抛出异常:AssertionError: daemo ...

  5. python 之 并发编程(守护进程、互斥锁、IPC通信机制)

    9.5 守护进程 主进程创建守护进程 其一:守护进程会在主进程代码执行结束后就立即终止 其二:守护进程内无法再开启子进程,否则抛出异常:AssertionError: daemonic process ...

  6. python并发编程-进程理论-进程方法-守护进程-互斥锁-01

    操作系统发展史(主要的几个阶段) 初始系统 1946年第一台计算机诞生,采用手工操作的方式(用穿孔卡片操作) 同一个房间同一时刻只能运行一个程序,效率极低(操作一两个小时,CPU一两秒可能就运算完了) ...

  7. python并发编程之进程1(守护进程,进程锁,进程队列)

    进程的其他方法 P = Process(target=f,) P.Pid 查看进程号  查看进程的名字p.name P.is_alive()  返回一个true或者False P.terminate( ...

  8. 并发编程(二)--利用Process类开启进程、僵尸进程、孤儿进程、守护进程、互斥锁、队列与管道

    一.multiprocessing模块 1.multiprocessing模块用来开启子进程,并在子进程中执行我们定制的任务(比如函数),该模块与多线程模块threading的编程接口类似. 2.mu ...

  9. 并发编程(二)——利用Process类开启进程、僵尸进程、孤儿进程、守护进程、互斥锁、队列与管道

    Process类与开启进程.守护进程.互斥锁 一.multiprocessing模块 1.multiprocessing模块用来开启子进程,并在子进程中执行我们定制的任务(比如函数),该模块与多线程模 ...

随机推荐

  1. python换源

    pip源的更新 引用自:PyPI使用国内源 # coding: utf-8 import platform import os os_type = platform.system() if " ...

  2. 【原】docker-compose 管理docker的多容器配置

    docker-compose管理docker的多容器配置,实现docker的自动化. version: '3.4' x-defaults: &defaults restart: unless- ...

  3. HTML中的meta元素

    <meta>元素必须放在<head>标记内,而且必须写在HTML文件前1024B之内 <meta>元素的主要目的是提供有关这份HTML文件的相关信息.例如编码方式, ...

  4. 【Android】数据存储和访问

    一.SharedPreferences 2.SQLite

  5. DataGrid DataGridTextColumn 樣式

    <DataGridTextColumn.ElementStyle> <Style TargetType="TextBlock" > <Setter P ...

  6. spark实验(二)--eclipse安装scala环境(2)

    此次在eclipse中的安装参考这篇博客https://blog.csdn.net/lzxlfly/article/details/80728772 Help->Eclipse Marketpl ...

  7. js的JSON新方法和历史记录管理

    今天看妙味的视频,一下是一些简单的笔记: 1.JSON的一些新方法: JSON.stringify(); JSON.parse(); 第一个是把js脚本转换成JSON的字符串形式. 而第二个则是吧这种 ...

  8. Kubernetes的控制器之Deployment的定义

    Deploy 的控制器定义参数介绍 [root@master manifests]# kubectl explain deploy KIND: Deployment VERSION: extensio ...

  9. ES5-bind用法及与以前的apply和call

    当我们调用一个函数的时候,函数中的this一般是指向调用者的.但是我们其实可以在调用函数的时候,传入一个对象,让函数中的this指向我们传入的对象,而不是调用者本身. apply,call,bind都 ...

  10. 关于archive(feature)

    配置如下archive命令,可以记录登录到设备,具体配置了哪些命令: R3(config)#archiveR3(config-archive)#log configR3(config-archive- ...