python--selectors
import socket
from selectors import DefaultSelector, EVENT_READ, EVENT_WRITE
# 会根据当前的操作系统选择一个合适的文件描述符,Linux下是epoll,Windows下则是select
selector = DefaultSelector()
class Fetcher:
def __init__(self, host):
self.client = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
self.client.setblocking(False) # 设置非阻塞socket
self.host = host
def get_url(self):
try:
self.client.connect((self.host, 80))
except BlockingIOError:
# 也可以做一些其他的事
pass
# 将socket注册一个事件,self.client.fileno()是当前socket的文件描述符,
# EVENT_WRITE表示可写,因为我们连接建立好之后要send一个请求(相当于写数据),所以等待一个可写状态
# 并且绑定一个回调函数,如果连接建立好了,说明可以写了,那么就调用相应的回调函数
selector.register(self.client.fileno(), EVENT_WRITE, self.send_request)
def send_request(self, key):
# 这里的参数key指的便是调用当前函数的socket
# 调用了之后,我们就不再监视了,因此要取消注册,key.fd指的便是key(当前socket)的fd(file descriptor)
selector.unregister(key.fd)
self.client.send("GET {} HTTP/1.1\r\nHost:{}\r\nConnection:close\r\n\r\n".format("/", self.host).encode("utf-8"))
# 这时候便将我们的请求发出去了,但是我们还要继续注册新的socket
# EVENT_READ指的是可读,我们发送一个请求之后要等待服务器返回数据(相当于读数据),所以等待一个可读状态
# 当满足可读状态,那么调用相应的回调函数读取数据
selector.register(self.client.fileno(), EVENT_READ, self.read_data)
def read_data(self, key):
data = b""
recv = self.client.recv(1024)
if recv:
data += recv
else:
# 值获取完毕,那么取消注册
selector.unregister(key.fd)
print(str(data, encoding="utf-8", errors="ignore"))
def loop_forever():
# 事件循环,为什么需要事件循环
# 因为我们上面绑定的回调函数没办法自动调用,所以我们必须创建一个事件循环,不断地从里面取出满足状态的socket
while 1:
ready = selector.select()
for key, mask in ready:
# key.data就是我们注册的回调的函数
call_back = key.data
# 将key也就是相应的socket主动传进去
call_back(key)
if __name__ == '__main__':
fetcher = Fetcher("www.baidu.com")
fetcher.get_url()
loop_forever()
可以看到,这种编程模式将我们的代码割的四分五裂。因此程序员更喜欢使用同步的方式编写异步代码
python--selectors的更多相关文章
- Python/ selectors模块及队列
Python/selectors模块及队列 selectors模块是可以实现IO多路复用机制: 它具有根据平台选出最佳的IO多路机制,比如在win的系统上他默认的是select模式而在linux上它默 ...
- Python - selectors 模块
selectors 模块 它的功能与 linux 的 epoll,还是 select 模块, poll 等类似: 实现高效的 I/O multiplexing , 常用于非阻塞的 socket ...
- Python selectors实现socket并发
selectors模块 此模块允许基于选择模块原语构建高级别和高效的I / O多路复用. 鼓励用户使用此模块,除非他们想要精确控制使用的os级别的原语. 注:selectors也是包装了select高 ...
- python selectors模块实现 IO多路复用机制的上传下载
import selectorsimport socketimport os,time BASE_DIR = os.path.dirname(os.path.abspath(__file__))''' ...
- Day15 - Python基础15 模块学习-selectors
本节内容 1:Python/selectors模块 2:selsect实例 1:Python/selectors模块及队列 selectors模块是可以实现IO多路复用机制: 它具有根据平台选出最佳 ...
- Python 运维之路
第一章:Python基础知识 1.Python 变量了解 .Python 二进制 .Python 字符编码 4.Python if条件判断 5.Python while循环 6.Python for循 ...
- (转)python异步编程--回调模型(selectors模块)
原文:https://www.cnblogs.com/zzzlw/p/9384308.html#top 目录 0. 参考地址 1. 前言 2. 核心类 3. SelectSelector核心函数代码分 ...
- python 利用selectors实现异步I/O
它的功能与linux的epoll,还是select模块,poll等类似:实现高效的I/O multiplexing, 常用于非阻塞的socket的编程中: 简单介绍一下这个模块,更多内容查看 pyt ...
- python异步编程--回调模型(selectors模块)
目录 0. 参考地址 1. 前言 2. 核心类 3. SelectSelector核心函数代码分析 3.1 注册 3.2 注销 3.3 查询 4. 别名 5. 总结 6. 代码报错问题 1. 文件描述 ...
- python 全栈开发,Day44(IO模型介绍,阻塞IO,非阻塞IO,多路复用IO,异步IO,IO模型比较分析,selectors模块,垃圾回收机制)
昨日内容回顾 协程实际上是一个线程,执行了多个任务,遇到IO就切换 切换,可以使用yield,greenlet 遇到IO gevent: 检测到IO,能够使用greenlet实现自动切换,规避了IO阻 ...
随机推荐
- Hadoop执行bin/stop-all.sh时no namenode to stop异常
1 先关闭hadoop所有服务 命令: bin/stop-all.sh 2 格式化namenode 命令: bin/hadoop namenode -format 3 重新启动所有服务 命令: bin ...
- elasticsearch this is not a http port
访问的是elastic search的tcp端口,需换成http端口. elastic search默认tcp端口9300,http端口9200 如果浏览器中访问http://localhost:92 ...
- [C/C++] C++常见面试题
参考:http://blog.csdn.net/shihui512/article/details/9092439 1.new.delete.malloc.free之间的关系 malloc和free都 ...
- Delphi函数详解:全局函数,内部函数,类的成员函数,类的静态方法
1. Delphi中的全局函数 //要点: 需要给其他单元调用, 必须在 interface 声明, 但必须在 uses 区后面 unit Unit1; interface uses Window ...
- ES 1.7安装ik分词elasticsearch-analysis-ik-1.2.5
IK简介 https://www.cnblogs.com/yjf512/p/4789239.html https://www.cnblogs.com/xing901022/p/5910139.html ...
- ASP.NET页面之间传值QueryString(1)
QueryString是一种非常简单的传值方式,他可以将传送的值显示在浏览器的地址栏中.如果是传递一个或多个安全性要求不高或是结构简单的数值时,可以使用这个方法.但是对于传递数组或对象的话,就不能用这 ...
- DataBase -- Employees Earning More Than Their Managers My Submissions Question
Question: The Employee table holds all employees including their managers. Every employee has an Id, ...
- [bzoj] 1257 余数之和sum || 数论
原题 给出正整数n和k,计算j(n, k)=k mod 1 + k mod 2 + k mod 3 + - + k mod n的值,其中k mod i表示k除以i的余数. \(\sum^n_{i=1} ...
- cdh版本的hadoop安装及配置(伪分布式模式) MapReduce配置 yarn配置
安装hadoop需要jdk依赖,我这里是用jdk8 jdk版本:jdk1.8.0_151 hadoop版本:hadoop-2.5.0-cdh5.3.6 hadoop下载地址:链接:https://pa ...
- MySQL 服务器安装及命令使用
本文来自实验楼相关部分的文档和实验操作过程. 一.MySQL简介 MySQL是一种关系数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,提高了速度并提高了灵活性.My ...