day13学python 协程+事件驱动
协程+事件驱动
协程 (微线程)--用处多,重点
当调度切换时 靠寄存器上下文和栈保存 要使用时再调用(即可不会因io传输数据卡壳 从而耗时无法继续进行)实现并行
优缺点:
优点:
1 无需同线程上下文切换 消耗cpu
2 修改数据无需加锁(协程都是单线程串行 无需加锁)
3 cpu支持大量协程
缺点:
1无法调用多核资源(本身是单线程) --指的是cpu只用单核运作
============================================================================================================
接下来介绍两种协程切换的 模板与方法
1.greenlet协程切换(手动挡)
2.gevent协程切换(自动挡)
greenlet 模板(手动切换)
import greenlet
def test1():
print(1)
gr2.switch()
print(3)
gr2.switch()
def test2():
print(2)
gr1.switch()
print(4)
if __name__=='__main__':
gr1=greenlet.greenlet(test1) #启动协程 函数名作为参数
gr2=greenlet.greenlet(test2)
gr1.switch()
注意
1 需要调用到另一函数时 用函数协程的switch函数
2 gr1=greenlet.greenlet(test1) #调用greenlet函数 启动协程 函数名作为参数
3 调用顺序
①main函数实例化并启动线程 务必随后进入协程 上例为进入test1()-->gr1.switch()
②当遇到gr2.switch() 语句 将从test1函数转为执行test2函数
③最后按顺序执行输出1 2 3 4
gevent 模板(自动切换)
import gevent
from gevent import monkey
monkey.patch_all() #把当前程序所有的io操作都单独做上标记
def f1():
print(1)
gevent.sleep(5) #gevent中的休眠函数 模拟IO操作长耗时 当协程遇到IO即向下切换
print(5)
def f2():
print(2)
gevent.sleep(3) #遇到IO继续向下切换 如若都有IO 则反复切换 直到时间结束
print(4)
def f3():
print(3)
gevent.sleep(0) #即使0秒 也代表切换协程信号
print(3.1)
gevent.joinall([
gevent.spawn(f1), #启动协程,以列表形式储存
gevent.spawn(f2),
gevent.spawn(f3)
])
注意:
1 gevent为第三方库 已对实现并发,同步、异步编程进行封装 (推荐使用)
2 原理:当遇到I/O操作将自动切换 进行下一协程的运行 若还有i/o则再向下 随后再从头循环 如若都有I/O 则反复切换 直到时间结束
目的:①节省时间 最终花费最长协程消耗的时间
②节约内存,内存消耗远小于进程交替
3 from gevent import monkey
monkey.patch_all() //这两句把当前程序所有的i/o操作都单独做上标记--运用与基本网络爬虫中(或那些不会被系统直接认出I/O操作的语句)
4 gevent的实例化:
gevent.joinall([
gevent.spawn(f1), # 加入协程,以列表形式储存
gevent.spawn(f2), #调用gevent.joinall(列表)
gevent.spawn(f3) #gevent.spawn(f2), 启动协程 亦可再其后补充参数---spawn(函数名,‘参数’)
])
5 gevent.sleep(5) #gevent中的休眠函数 模拟I/O操作长耗时 (当协程遇到I/O即向下切换)
gevent.sleep(0) #即使0秒 也代表切换协程切换信号 因此向下切换协程
============================================================================================================
事件驱动:
定义:通常 在收到一个请求后,放入一个事件列表,让主进程通过非阻塞I/O的方式来处理信息
举个例子:
模拟鼠标键盘输入时,常常要对鼠标点击进行相应,首先如何获得鼠标点击呢?
运用事件驱动的思想:
1. 有一个事件(消息)队列;
2. 鼠标按下时,往这个队列中增加一个点击事件(消息)--随后继续等待接收鼠标下一次点击(避免卡顿)
3. 有个循环,不断从队列取出事件,根据不同的事件,调用不同的函数,如onClick()、onKeyDown()等;
4. 事件(消息)一般都各自保存各自的处理函数指针,这样,每个消息都有独立的处理函数;
注意:
1 左侧事件源 只管理自己项目 (例:鼠标,键盘输入) 接收到后丢给队列 自己继续接收
2 右侧处理线程一步步去取得 不同任务并调用对应函数解决
好处: 避免cpu资源浪费 若一个线程堵塞 无法进行其他操作(简称卡机)因此使用协程
day13学python 协程+事件驱动的更多相关文章
- 一起学Python:协程
一:协程-yield 协程,又称微线程,纤程.英文名Coroutine. 协程是啥 协程是python个中另外一种实现多任务的方式,只不过比线程更小占用更小执行单元(理解为需要的资源). 为啥说它是一 ...
- Python自动化 【第十篇】:Python进阶-多进程/协程/事件驱动与Select\Poll\Epoll异步IO
本节内容: 多进程 协程 事件驱动与Select\Poll\Epoll异步IO 1. 多进程 启动多个进程 进程中启进程 父进程与子进程 进程间通信 不同进程间内存是不共享的,要想实现两个进程间 ...
- day-5 python协程与I/O编程深入浅出
基于python编程语言环境,重新学习了一遍操作系统IO编程基本知识,同时也学习了什么是协程,通过实际编程,了解进程+协程的优势. 一.python协程编程实现 1. 什么是协程(以下内容来自维基百 ...
- Python协程与Go协程的区别二
写在前面 世界是复杂的,每一种思想都是为了解决某些现实问题而简化成的模型,想解决就得先面对,面对就需要选择角度,角度决定了模型的质量, 喜欢此UP主汤质看本质的哲学科普,其中简洁又不失细节的介绍了人类 ...
- Python 协程总结
Python 协程总结 理解 协程,又称为微线程,看上去像是子程序,但是它和子程序又不太一样,它在执行的过程中,可以在中断当前的子程序后去执行别的子程序,再返回来执行之前的子程序,但是它的相关信息还是 ...
- 终结python协程----从yield到actor模型的实现
把应用程序的代码分为多个代码块,正常情况代码自上而下顺序执行.如果代码块A运行过程中,能够切换执行代码块B,又能够从代码块B再切换回去继续执行代码块A,这就实现了协程 我们知道线程的调度(线程上下文切 ...
- 从yield 到yield from再到python协程
yield 关键字 def fib(): a, b = 0, 1 while 1: yield b a, b = b, a+b yield 是在:PEP 255 -- Simple Generator ...
- 关于python协程中aiorwlock 使用问题
最近工作中多个项目都开始用asyncio aiohttp aiomysql aioredis ,其实也是更好的用python的协程,但是使用的过程中也是遇到了很多问题,最近遇到的就是 关于aiorwl ...
- 用yield实现python协程
刚刚介绍了pythonyield关键字,趁热打铁,现在来了解一下yield实现协程. 引用官方的说法: 与线程相比,协程更轻量.一个python线程大概占用8M内存,而一个协程只占用1KB不到内存.协 ...
随机推荐
- vs code 配置spring boot开发环境
一.环境变量 jdk环境变量一键设置 管理員运行 - 一支小白 - 博客园https://www.cnblogs.com/startnow/p/7416533.html 二.安装插件 1.Java E ...
- SpringBoot29 登录逻辑、登录状态判断
1 知识点扫盲 浏览器和服务器之间时通过session来确定连接状态的,浏览器第一次请求时服务端会自动生成一个session,并将这个sessionId传回给浏览器,浏览器将这个sessionId存放 ...
- Oracle 日志报错导致的 “没有登录” 问题
遇到的问题是日志空间满了,导致Oracle无法登陆,但用PL/SQL登录仅会提示“没有登录” # 首先检查日志空间是否满了,并删除过期日志 rman target sysdba/password@or ...
- 如何清除保存的FTP用户名和密码
很多人习惯登陆FTP时选择保存密码,这样下次只需打开地址就可以进入FTP的页面了.这样确实方便,但如果遇到更换别的FTP用户名登陆,该怎么办?相信不少人还真答不出.重装浏览器,或者重装系统?呵呵, ...
- 746. Min Cost Climbing Stairs 最不费力的加权爬楼梯
[抄题]: On a staircase, the i-th step has some non-negative cost cost[i] assigned (0 indexed). Once yo ...
- pkg-config的妙用
1.每个lib下都会有个pkg-config文件夹,里面有相应pc文件 修改里面内容可以改变pkg-config显示 2.将.pc文件所在路径添加到PKG_CONFIG_PATH中如: export ...
- Mysql中自定义函数编程
1.语法 1.1 新建函数 Create function function_name(参数列表) returns 返回值类型 函数体 (1)函数名,应该合法的标识符,并且不应该与已有的关键字冲突. ...
- oracle 环境变量(中文显示乱码)
NLS_LANGSIMPLIFIED CHINESE_CHINA.ZHS16GBK
- Android动态加载--JVM 类加载机制
动态加载,本质上是通过JVM类加载机制将插件模块加载到宿主apk中,并通过android的相关运行机制,实现插件apk的运行.因此熟悉JVM类加载的机制非常重要. 类加载机制:虚拟机把描述类的数据从C ...
- 用kettle实现数据库迁移之oracle到mysql
项目完成后,需要把历史oracle 的数据库转移mysql 用kettle 转换数据. 步骤: 1.打开spoon.bat,文件-->新建-->转换,点击“主对象树”,DB连接右键“新建” ...