python特有的协程
#转载请联系
什么是协程呢?
线程包含在进程里面,协程包含在线程里面。协程也是和进程、线程一样,可以实现多任务。协程的切换开销比线程更小,不需要保存和恢复线程的状态。最通俗易懂的说法就是,协程是就是一个可以暂停、可以挂起的函数。
说到可以暂停,可以挂起,我们肯定第一时间想起yield。其实yield生成器就能实现协程。
import time def work1():
while True:
print("我是任务1")
yield
time.sleep(1) def work2():
while True:
print("我是任务2")
yield
time.sleep(1) w1 = work1() # 取得work1函数的生成器
w2 = work2() # 取得work2函数的生成器 while True:
next(w1)
next(w2) 输出:
我是任务1
我是任务2
我是任务1
我是任务2
我是任务1
我是任务2
......
......
......
......
你看,在一个进程里面,没有开线程,只有一个主进程主线程,也能实现多任务。因此说协程也能实现多任务,实现的方式是通过yield生成器来实现的。我们先唤醒第一个生成器,执行到yield,暂停。然后我们再唤醒第二个生成器,执行到yield,暂停。再唤醒第一个生成器,依次循环。(用while True来实现依次唤醒)
------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
如果你觉得yield太难了,不知道怎么用。那么,你可以用greenlet模块中的greenlet类来实现协程。这个类是对yield的封装,相对而言比较简单。
import time import greenlet def work1():
while True:
print("我是任务1")
g2.switch() # 转换到任务2
time.sleep(1) def work2():
while True:
print("我是任务2")
g1.switch() # 转换到任务1
time.sleep(1) g1 = greenlet.greenlet(run=work1)
g2 = greenlet.greenlet(run=work2)
g1.switch() # 转换到任务1,其实就是开始执行任务1的意思 输出:
我是任务1
我是任务2
我是任务1
我是任务2
我是任务1
我是任务2
......
......
greenlet类虽然能实现协程,但是每个任务都要用switch()方法转换到另一个任务。如果很多很多任务,每个任务都要带这么一段代码,是不是很烦。还要考虑切换顺序什么的。所以,greenlet又被封装到gevent模块的spawn类里。
-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
gevent的原理是当一个greenlet遇到IO(指的是input output 输入输出,比如网络、文件操作等)操作时,比如访问网络,就自动切换到其他的greenlet,等到IO操作完成,再在适当的时候切换回来继续执行。由于IO操作非常耗时,经常使程序处于等待状态,有了gevent为我们自动切换协程,就保证总有greenlet在运行,而不是等待IO。这个切换原理是和线程、进程的切换原理是一样的。
import gevent
import time
from gevent import monkey # 这个类一定要这样子导入才能识别! monkey.patch_all() # 如果不打这个补丁的话,系统是识别不了原生python代码的time.sleep的
# 所以就不能按在适当的时候切换任务 def work1(n):
i = 0
while True:
print("我是任务1")
time.sleep(1)
i += 1
if i>n:
break def work2(n):
i = 0
while True:
print("我是任务2")
time.sleep(2)
i += 1
if i>n:
break g1 = gevent.spawn(work1,4) # 开启g1协程,且阻塞主线程,直到g1协成任务执行完毕,再解主线程的阻塞
g2 = gevent.spawn(work2,4)
g1.join()
g2.join()
print("我会在哪里?") 输出:
我是任务1
我是任务2
我是任务1
我是任务2
我是任务1
我是任务1
我是任务2
我是任务1
我是任务2
我是任务2
我会在哪里?
注意点:
1.用gevent创建协程时,如果没有导入monkey模块,打补丁的话,是不能识别原生的python代码的休眠time.sleep的。
2.monkey模块的导入,一定要from gevent import monkey
3.join方法既可以启动协程,又可以阻塞主线程,等到该协程完成任务后再解阻塞。
python特有的协程的更多相关文章
- Python中Paramiko协程方式详解
什么是协程 协程我们可以看做是一种用户空间的线程. 操作系统对齐存在一无所知,需要用户自己去调度. 比如说进程,线程操作系统都是知道它们存在的.协程的话是用户空间的线程,操作系统是不知道的. 为什么要 ...
- [转载]Python 3.5 协程究竟是个啥
http://blog.rainy.im/2016/03/10/how-the-heck-does-async-await-work-in-python-3-5/ [译] Python 3.5 协程究 ...
- [译] Python 3.5 协程究竟是个啥
转自:http://blog.rainy.im/2016/03/10/how-the-heck-does-async-await-work-in-python-3-5/ [译] Python 3.5 ...
- python中的协程及实现
1.协程的概念: 协程是一种用户态的轻量级线程.协程拥有自己的寄存器上下文和栈. 协程调度切换时,将寄存器上下文和栈保存到其他地方,在切换回来的时候,恢复先前保存的寄存器上下文和栈. 因此,协程能保留 ...
- Python基础之协程
阅读目录 一 引子 二 协程介绍 三 Greenlet模块 四 Gevent模块 引子 之前我们学习了线程.进程的概念,了解了在操作系统中 进程是资源分配的最小单位,线程是CPU调度的最小单位. 按道 ...
- python线程、协程、I/O多路复用
目录: 并发多线程 协程 I/O多路复用(未完成,待续) 一.并发多线程 1.线程简述: 一条流水线的执行过程是一个线程,一条流水线必须属于一个车间,一个车间的运行过程就是一个进程(一个进程内至少一个 ...
- 协程及Python中的协程
1 协程 1.1协程的概念 协程,又称微线程,纤程.英文名Coroutine.一句话说明什么是线程:协程是一种用户态的轻量级线程.(其实并没有说明白~) 我觉得单说协程,比较抽象,如果对线程有一定了解 ...
- python中和生成器协程相关的yield from之最详最强解释,一看就懂(四)
如果认真读过上文的朋友,应该已经明白了yield from实现的底层generator到caller的上传数据通道是什么了.本文重点讲yield from所实现的caller到coroutine的向下 ...
- python中和生成器协程相关yield from之最详最强解释,一看就懂(二)
一. 从列表中yield 语法形式:yield from <可迭代的对象实例> python中的列表是可迭代的, 如果想构造一个生成器逐一产生list中元素,按之前的yield语法,是在 ...
随机推荐
- 数据结构7——DP优化
斜率优化/单调队列优化/四边形优化
- tcp四次撒手
转自:http://www.cnblogs.com/cy568searchx/p/3711670.html 由于TCP连接是全双工的,因此每个方向都必须单独进行关闭.这个原则是当一方完成它的数据发送任 ...
- LTE/EPC中,MME怎么找到UE的HSS的?
http://bbs.c114.net/forum.php?mod=viewthread&tid=486247 HSS---归属用户服务器,我的理解:一般来说只有一个,或者是一个分布式数据库. ...
- Mybatis学习系列(一)入门简介
MyBatis简介 Mybatis是Apache的一个Java开源项目,是一个支持动态Sql语句的持久层框架.Mybatis可以将Sql语句配置在XML文件中,避免将Sql语句硬编码在Java类中.与 ...
- PAT 1045 快速排序
https://pintia.cn/problem-sets/994805260223102976/problems/994805278589960192 著名的快速排序算法里有一个经典的划分过程:我 ...
- Java面试题(下)
这部分主要是开源Java EE框架方面的内容,包括hibernate.MyBatis.spring.Spring MVC等,由于Struts 2已经是明日黄花,在这里就不讨论Struts 2的面试题, ...
- [C/C++] C++声明和定义的区别
·变量定义:用于为变量分配存储空间,还可为变量指定初始值.程序中,变量有且仅有一个定义. ·变量声明:用于向程序表明变量的类型和名字. ·定义也是声明:当定义变量时我们声明了它的类型和名字. ·ext ...
- TCP/IP Note2
TCP/IP寻址 TCP/IP使用32个比特或者4个0到255之间的数字来为计算机编址. 1. IP地址 每个计算机必须有一个IP地址才能够连入Internet中. 每个IP包必须有一个地址才能够发送 ...
- 【转】64位ORACLE客户端上plsql无法识别ORACLE_HOME解决方案
转自:http://www.2cto.com/database/201503/386267.html 中文显示问号 转自:http://zhidao.baidu.com/link?url=qJDmsa ...
- [NOIP2018 TG D2T1]旅行
题目大意:$NOIP\;TG\;D2T1$ 题解:一棵树的很简单,第一个点一定是$1$,只需要对每个节点,找最小的没有访问过的节点访问即可,我写的是$O(n\log_2n)$. 考虑基环树的部分,一个 ...