IO 多路复用
IO 多路复用
多路复用也是要用单线程来处理客户端并发,与其他模型相比多出了select这个模块。 程序不再直接问操作系统要数据,而是先发起一个select调用,select会阻塞直到其中某个socket准备就绪,此时应用程序再发起系统调用来获取数据,由于select已经帮我们确认了某个socket一定是就绪态,所以后续的recv,send,等操作可以立即完成,不会阻塞。简单的说,select相当于一个中间者,专门帮你看着socket,那个socket准备好了select就返回那个。
你可以把select当做托儿所,把你的socket交给它来看管,当某个socket 要上厕所或者要吃饭的时候,select就会把它交给你。
io多路复用
用一个线程来并发处理所有的客户端
原来我们是直接问操作系统要数据
如果是io操作 没有数据就会进入阻塞状态
非io操作 没有数据就会抛出异常,然后继续询问操作系统
在多路复用模型中 要先问select模块 哪些socket已经准备就绪 然后在处理这些已经就绪的select,既然是已经就绪,那么执行recv,或是send 就不会再阻塞 select模块就只有select一个函数
参数1:r_list需要被select检测是否是可读状态的客户端,把所有的socket放到该列表中,select会负责从中找出读取数据的socket
参数2:w_list需要被select检测是否可写的客户端 把所有的socket,select会负责从中找到可以写入数据的socket
参数3:x_list存储着要被检测异常条件。。。忽略即可
返回一个元组 包含三个列表
readables 已经处于可读状态的socket 即数据已经到达缓冲区
writeables 已经处于可写的状态的socket 即缓冲区没满,可以发送
从可读或可写的列表中拿出所有的socket 依次处理他们即可
服务器:
import socket
import select
s = socket.socket()
s.bind(("127.0.0.1",6666))
s.listen()
#在多路复用中 一旦交给select交给你一个socket一定意味着该socket已经准备就绪 可读或者可写
r_list = []
w_list =[]
#存储需要发送的数据 以及对应的socket 把socket作为key 数据作为value
data_dic = {}
while True:
readables,writeables,_ = select.select(r-_list,w_list,[])
#接收数据以及服务器建立连接
for i in readables:
if i ==s:#如果是服务器 就执行accept
c,addr = i.accept()
r_list.append(i)
else:#是一个客户端 那就recv收数据
try ;
data = i.recv(1024)
#Linux中对方强行下线 或是Windows中正常下线
if not data:
i.close()
r_list.remove(i)
continue
print(data)
#发送数据 不清楚目前是否可以发送数据,所以交给select来检测
w_list.append(i)
#把要发送的数据先存着,等select告诉你这个连接可以发送时在发送
data_dic[i]=data
except ConnectionResetError:#Windows强行下线
i.close()
r_list.remove(i)#从检测列表中删除
for i in writeables:
try:
i.send(data_dic[i].upper())#返回数据
#data_dic.pop(i)
#w_list.remove(i)
except ConnectionResetError:#对面下线异常
i.close()
finally:
data_dic.pop[i]
w_list.remove(i)#从检测列表中删除
#客户端
import socket
c = socket.socket()
c.connect((“127.0.0.1”,6666))
print('connect....')
while True:
msg = input(">>>>").strip()
if not msg:continue
c.send(msg.encode.('utf-8')
data = c.recv(1024)
print(data.decode.('utf-8')
IO 多路复用的更多相关文章
- Python(七)Socket编程、IO多路复用、SocketServer
本章内容: Socket IO多路复用(select) SocketServer 模块(ThreadingTCPServer源码剖析) Socket socket通常也称作"套接字" ...
- IO多路复用概念性
sellect.poll.epoll三者的区别 先来了解一下什么是进程切换 为了控制进程的执行,内核必须有能力挂起正在CPU上运行的进程,并恢复以前挂起的某个进程的执行,这种行为为进程的切换,任务切换 ...
- IO多路复用之select总结
1.基本概念 IO多路复用是指内核一旦发现进程指定的一个或者多个IO条件准备读取,它就通知该进程.IO多路复用适用如下场合: (1)当客户处理多个描述字时(一般是交互式输入和网络套接口),必须使用I/ ...
- IO多路复用之poll总结
1.基本知识 poll的机制与select类似,与select在本质上没有多大差别,管理多个描述符也是进行轮询,根据描述符的状态进行处理,但是poll没有最大文件描述符数量的限制.poll和selec ...
- IO多路复用之epoll总结
1.基本知识 epoll是在2.6内核中提出的,是之前的select和poll的增强版本.相对于select和poll来说,epoll更加灵活,没有描述符限制.epoll使用一个文件描述符管理多个描述 ...
- python中的IO多路复用
在python的网络编程里,socetserver是个重要的内置模块,其在内部其实就是利用了I/O多路复用.多线程和多进程技术,实现了并发通信.与多进程和多线程相比,I/O多路复用的系统开销小,系统不 ...
- socket的IO多路复用
IO 多路复用 I/O多路复用指:通过一种机制,可以监视多个描述符,一旦某个描述符就绪(一般是读就绪或者写就绪),能够通知程序进行相应的读写操作. Linux Linux中的 select,poll, ...
- IO多路复用及ThreadingTCPServer源码阅读
IO多路复用 socket模块是阻塞的,通过socket建立的服务端可以接收多个请求,但只能同时处理一个请求,其他请求都被阻塞.可以通过IO多路复用解决这个问题,socketserver内部使用的就是 ...
- 【知乎网】Linux IO 多路复用 是什么意思?
提问一: Linux IO多路复用有 epoll, poll, select,知道epoll性能比其他几者要好.也在网上查了一下这几者的区别,表示没有弄明白. IO多路复用是什么意思,在实际的应用中是 ...
- Python自动化之IO多路复用
单线程.多线程和异步对比图 灰色的是阻塞 IO多路复用 用户空间与内核空间 现在操作系统都是采用虚拟存储器,那么对32位操作系统而言,它的寻址空间(虚拟存储空间)为4G(2的32次方).操作系统的核心 ...
随机推荐
- 启动CDH的cloudera-scm-server报错Error: JAVA_HOME is not set and Java could not be found
1 报错信息如下 +======================================================================+| Error: JAVA_HOME ...
- Spring的jdbcTemplate操作-未完整
1 spring框架一站式框架(1)针对javaee三层,每一层都有解决技术(2)在dao层,使用 jdbcTemplate 2 spring对不同的持久化层技术都进行封装
- 20165237 2017-2018-2 《Java程序设计》第6周学习总结
20165237 2017-2018-2 <Java程序设计>第6周学习总结 教材学习内容总结 1.String类的常用方法: public int length() public boo ...
- nginx 模块配置
第一个 当前活跃的连接数 nginx握手的数 连接数 总的请求数
- 第四节:tensorflow图的基本操作
基本使用 使用图(graph)来表示计算任务 激活会话(Session)执行图 使用张量(tensor)表示数据 定义变量(Variable) 使用feed可以任意赋值或者从中获取数据,通常与占位符一 ...
- 【Ubuntu】如何修改IP
前几天有幸捣鼓了一下Ubuntu系统,和Linux系统差不多,在这里说说如何修改IP 1,首先使用命令ifconfig查看当前IP,如图 2,编辑文件,输入命令 ...
- python3编码(encode,decode)
python3默认编码为unicode,由str类型进行表示.二进制数据使用byte类型表示. 字符串通过编码转换成字节码,字节码通过解码成为字符串 encode:str --> bytes d ...
- async_retrying
from async_retrying import retry import aiohttp import asyncio @retry(attempts=6) async def fetch(): ...
- 最全的libcurl库资源整理
C++ 用libcurl库进行http 网络通讯编程 百度登陆协议分析!!!用libcurl来模拟百度登陆 C++使用libcurl做HttpClient 使用libcurl库进行HTTP的下载 li ...
- vmware Harbor 复制功能试用
vmware Harbor 复制功能试用 Harbor基于策略的Docker镜像复制功能,可在不同的数据中心.不同的运行环境之间同步镜像,并提供友好的管理界面,大大简化了实际运维中的镜像管理工作. 功 ...