初识asyncio协程

一、基本概念

​ 要想了解学习协程相关知识要先对以下几个概念先行了解:

  • 阻塞

    ​ 阻塞状态是指程序未得到某所需计算资源时的挂起状态,简单说就是程序在等待某个操作未执行完前无法执行其他操作。

  • 非阻塞

    ​ 非阻塞状态是指在等待某项操作执行完前可以继续运行其他操作,也就是不会被阻塞。

  • 同步

    ​ 不同程序单元为了完成某项任务,在执行过程中以某种通信方式保证协调一致,假如有一个售票窗口,你必须等前面的人买完票,轮到你才能买,简言之同步意味着有序。

  • 异步

    ​ 不同程序单元为了完成某项任务,在执行过程中无需进行通信也能完成任务,例如爬虫,只要抓取目标url即可,无需关心其它抓取目标,简言之异步意味着无序。

  • 并发

    ​ 简单说就是操作系统在处理多个任务时快速切换,例如你在看电视时来电话了,此时你选择关闭电视,接完电话再打开看,这样的过程就是并发;

  • 并行

    ​ 简单说就是操作系统同时处理多个任务,例如你在看电视时来电话了,此时你选择边看电视边接电话,这样的过程就是并行。

  • 协程

    ​ 协程拥有自己的寄存器上下文和栈。协程调度切换时,将寄存器上下文和栈保存到其他地方,在切回来的时候,恢复先前保存的寄存器上下文和栈。因此协程能保留上一次调用时的状态,即所有局部状态的一个特定组合,每次过程重入时,就相当于进入上一次调用的状态。

二、asyncio 异步I/O

asyncio是用来编写并发代码的库,被用作多个提供高性能异步框架的基础,往往是构建I/O密集型和高层级结构化网络代码的最佳选择。

​ 在了解asyncio的使用方法前,首先有必要先介绍一下,这几个贯穿始终的概念:

  • event_loop事件循环:程序开启一个无限的事件循环,程序员会把一些函数注册到事件循环上。当满足事件发生的时候,调用相应的协程函数。

  • coroutine协程:协程对象,指一个使用async关键字定义的函数,它的调用不会立即执行函数,而是会返回一个协程对象。协程对象需要注册到事件循环,由事件循环调用。

  • task任务:一个协程对象就是一个原生可以挂起的函数,任务则是对协程进一步封装,其中包含任务的各种状态。

  • future对象:代表将来执行或没有执行的任务的结果,与task没有本质上的区别。

  • async/await关键字:python3.5 用于定义协程的关键字,async定义一个协程,await用于挂起阻塞的异步调用接口。

三、定义一个协程

​ 干看概念总归是难以理解并记住的,下面动手来实现一个协程

from collection.abc import Coroutine

async def a(name):
print('hello',name) if __name__ == '__main__':
test = a('world') # 输出 hello world
print(isinstance(test,Coroutine)) # 输出 True

通过以上的实例我们就完成了一个最简单的协程,可以发现其与普通函数不同的仅仅是在函数名前加了async

四、协程的工作流程

一个完整的协程工作流程如下:

  • 定义/创建一个协程对象

  • 将协程转为task任务

  • 定义事件循环容器

  • 将task任务放到事件循环容器触发

参照下面示例可以完整了解这个流程:

import asyncio

async def a(name):  # 定义一个协程
print('hello',name) if __name__ == "__main__":
coroutine = a('world') # 第一步,定义一个协程对象
task = asyncio.ensure_future(coroutine) # 第二步,将协程转换成task任务
loop = asyncio.get_event_loop() # 第三步,定义一个事件循环容器
loop.run_until_complete(task) # 第四步,将task任务放到事件循环容器

五、阻塞和await

​ 在程序运行过程中遇到耗时的操作时会挂起该协程,转而执行别的协程,当挂起的协程运行完毕时再从别的协程切换回去,不等当前这个协程运没运行完毕。举个例子:假如有协程A和协程B,当协程A遇到阻塞耗时的操作时便转向运行协程B,当协程A的耗时操作结束再从协程B切换回去,不管协程B有没有运行完毕。

​ 由前面asyncio的概念可以知道,使用await可以挂起一个协程。

import asyncio

async def a(name):
await asyncio.sleep(3) # 模拟耗时的操作,不用time.sleep是因为time模块不支持异步
print('hello',name) if __name__ == "__main__":
coroutine = a('world')
loop = asyncio.get_event_loop()
loop.run_until_complete(coroutine)

补充说明await后面的对象必须的格式:

  • 原生协程(coroutine)对象
  • 一个由types.coroutine()修饰的生成器
  • 一个包含_await方法的对象返回的一个迭代器

    简言之就是协程,任务,Future三种

总结:至此我们已经初步了解了什么是异步,什么是asyncio,以及协程的工作流程,并进行了实践。

一、初识asyncio协程的更多相关文章

  1. 二、深入asyncio协程(任务对象,协程调用原理,协程并发)

      由于才开始写博客,之前都是写笔记自己看,所以可能会存在表述不清,过于啰嗦等各种各样的问题,有什么疑问或者批评欢迎在评论区留言. 如果你初次接触协程,请先阅读上一篇文章初识asyncio协程对asy ...

  2. python并发编程之asyncio协程(三)

    协程实现了在单线程下的并发,每个协程共享线程的几乎所有的资源,除了协程自己私有的上下文栈:协程的切换属于程序级别的切换,对于操作系统来说是无感知的,因此切换速度更快.开销更小.效率更高,在有多IO操作 ...

  3. 后台程序处理 (一)python asyncio 协程使用

    由于脚本需要在完成事件处理后N秒检查事件处理结果,当执行失败时再执行另一个事件处理. 想要最小化完成这个功能.同时在第一时间就将执行完毕的结果反馈给接口. 因此想到使用协程. 使用之前先翻阅了一下现有 ...

  4. python---异步IO(asyncio)协程

    简单了解 在py3中内置了asyncio模块.其编程模型就是一个消息循环. 模块查看: from .base_events import * from .coroutines import * #协程 ...

  5. asyncio协程与并发

    并发编程 Python的并发实现有三种方法. 多线程 多进程 协程(生成器) 基本概念 串行:同时只能执行单个任务 并行:同时执行多个任务 在Python中,虽然严格说来多线程与协程都是串行的,但其效 ...

  6. python asyncio 协程调用task步骤

    import asyncio async def compute(x, y): print("Compute %s + %s ..." % (x, y)) await asynci ...

  7. python 并发专题(十三):asyncio (二) 协程中的多任务

    . 本文目录# 协程中的并发 协程中的嵌套 协程中的状态 gather与wait . 协程中的并发# 协程的并发,和线程一样.举个例子来说,就好像 一个人同时吃三个馒头,咬了第一个馒头一口,就得等这口 ...

  8. python并发编程之Queue线程、进程、协程通信(五)

    单线程.多线程之间.进程之间.协程之间很多时候需要协同完成工作,这个时候它们需要进行通讯.或者说为了解耦,普遍采用Queue,生产消费模式. 系列文章 python并发编程之threading线程(一 ...

  9. python并发编程之进程、线程、协程的调度原理(六)

    进程.线程和协程的调度和运行原理总结. 系列文章 python并发编程之threading线程(一) python并发编程之multiprocessing进程(二) python并发编程之asynci ...

随机推荐

  1. PAT甲级——A1121 Damn Single【25】

    "Damn Single (单身狗)" is the Chinese nickname for someone who is being single. You are suppo ...

  2. 7_3.springboot2.x启动配置原理_3.事件监听机制

    事件监听机制配置在META-INF/spring.factories ApplicationContextInitializer SpringApplicationRunListenerioc容器中的 ...

  3. 继承关系中子类使用@Data注解问题

    HashSet中使用@Data注解问题 平时习惯使用lombok工具,免去了我们写get.set方法之类的,当然了,我们使用@Data注解后,equals().hashCode().toString( ...

  4. springboot整合jpa和mybatis实现主从复制

    百度多方参考终于配出我自己的了,以下仅供参考 参考https://www.cnblogs.com/cjsblog/p/9712457.html 代码 首先数据源配置 spring.datasource ...

  5. ps axu 参数说明

    问题:1.ps axu  看到进程的time不清楚什么意思 ru: resin    31507  0.2  1.3 3569452 98340 ?       Sl   Jul28   7:11 / ...

  6. JavaScript中定义函数的几种方式

    函数的组成:函数名 + 函数体 1.使用function关键字定义函数 -- 具有优先级,优先将function关键字定义的函数优先执行 function  functionName(arg0, ar ...

  7. CF755F PolandBalls and Gifts

    题意:给你一个礼物的置换.有k个人忘带了礼物.一个人无法获得礼物为他自己没有带礼物或给他带礼物的那个人没有带礼物.求选择k个人,没有获得礼物的人数的最小值和最大值. n,k<=1e6. 标程: ...

  8. 小程序怎样控制rich-text中的<img>标签自适应

    小程序通过rich-text实现字符串转化为html,即 <rich-text node="{{html}}"></rich-text>.如果html字符串 ...

  9. UVA - 11327

    UVA - 11327https://vjudge.net/problem/28358/origin求欧拉函数的前缀和,二分查找到那个位置,再从它开始暴力gcd找 #include <iostr ...

  10. leetcode-142-环形链表②

    题目描述: 方法一:O(n) O(n) # Definition for singly-linked list. # class ListNode(object): # def __init__(se ...