(二)通过fork编写一个简单的并发服务器
概述
那么最简单的服务端并发处理客户端请求就是,父进程用监听套接字监听,当有连接过来时那么监听套接字就变成了已连接套接字(源和目的的IP和端口都包含了),这时候就可以和客户端通信,但此时其他客户端无法连接进来,因为这个套接字被占用,所以就会产生一个子进程来处理和客户端的通信,也就是这个连接套接字由子进程处理,而父进程继续用监听套接字的形式来等待下一个连接请求。
代码段
服务器程序
#!/usr/bin/env python
# -*- coding: utf-8 -*-
# Author: rex.cheny
# E-mail: rex.cheny@outlook.com import socket
import os, time, sys def echoStr(connFd):
print("新连接:", connFd.getpeername())
while True:
bytesData = connFd.recv(1024)
data = bytesData.decode(encoding="utf-8")
print("收到客户端消息:", data)
if data == "Bye":
return
else:
time.sleep(1)
connFd.send(data.encode(encoding="utf-8")) def main():
sockFd = socket.socket()
sockFd.bind(("", 5555))
sockFd.listen(5) print("等待客户端连接......")
while True:
connFd, remAddr = sockFd.accept() try:
pid = os.fork()
if pid == 0:
# 说明当前运行在子进程中
sockFd.close() # 关闭监听套接字
echoStr(connFd) # 执行回显函数
# connFd.close() # 关闭连接套接字,这里是否要显示的关闭和客户端的连接套接字与个人编程风格有关,因为客户端发送完数据后就主动调用了close()
exit(0) # 子进程退出
else:
"""
关闭连接套接字,这时候并不会关闭服务器与客户端的TCP连接,因为connFd这个套接字的会被子进程所使用,所以该套接字的引用
计数器为1,只有为0时才会被关闭。
"""
connFd.close()
except Exception as err:
print(err) if __name__ == '__main__':
main()
客户端程序
#!/usr/bin/env python
# -*- coding: utf-8 -*-
# Author: rex.cheny
# E-mail: rex.cheny@outlook.com import socket def echoStr(sockFd, data):
sockFd.send(data)
bytesData = sockFd.recv(1024)
data = bytesData.decode(encoding="utf-8")
print(data) def main():
sockFd = socket.socket()
sockFd.connect(("127.0.0.1", 5555)) for i in range(1, 11):
data = "第:" + str(i) + " 条消息。"
echoStr(sockFd, data.encode(encoding="utf-8")) echoStr(sockFd, "Bye".encode(encoding="utf-8"))
sockFd.close() if __name__ == '__main__':
main()
结果演示

这时候就实现了多个客户端并发连接服务器端。这里只是演示了一种最简单也是最原始的一种方式,因为fork一个进程系统开销很大所以虽然是并发但是不适用大规模并发的情况下。无论是多进程或者是进程池或者是多线程并发其实效率都不高当然这是相对来讲,你想一想1000个请求难道要启动1000个线程或者进程吗?显然不现实。在面对大量并发请求的时候就要用到多路复用或者是异步,这个后面章节会讲。不过需要先明白多路复用和并发处理其实是两个概念,多路复用主要解决不阻塞问题而并发是同时处理问题,我上面这种FORK的形式虽然是并发的,但是单一进程内其实还是阻塞的,无论是对服务器进程还是客户端进程它们内部都是阻塞的。
我们这次通过后台运行查看一下网络和进程状态。
# 这样来运行服务器程序
python3 ./server.py >> ./log.txt &

当有客户端连接进来是这样的,子进程PID是65686而它的PID也就是父进程ID是65623;网络监控显示有一个TCP连接成功建立

当客户端执行完毕之后是这样的,服务器显示的连接套接字时TIME_WAIT状态,而之前fork的子进程变成了僵尸进程。TIME_WAIT过一会儿就消失掉,但是这个僵尸进程会一直存在,直到父进程退出。

僵尸进程
上面最后一个图中的 “Z” 就表示僵尸进程。
接下来我们改进一下服务器程序来解决一下僵尸进程问题,客户端不变。
#!/usr/bin/env python
# -*- coding: utf-8 -*-
# Author: rex.cheny
# E-mail: rex.cheny@outlook.com import socket
import os, time, sys
import signal def echoStr(connFd):
print("新连接:", connFd.getpeername())
while True:
bytesData = connFd.recv(1024)
data = bytesData.decode(encoding="utf-8")
print("收到客户端消息:", data)
if data == "Bye":
return
else:
time.sleep(1)
connFd.send(data.encode(encoding="utf-8")) def sigChld(signum, frame):
"""
僵尸进程处理函数这两个参数是必须的
:param signum: 发生的信号
:param frame: 发生信号的时候的函数调用栈
:return:
""" """
waitpid() 用于清理僵尸进程,返回值为已终止的子进程ID和进程终止状态
pid 进程号,如果是-1表示等待第一个终止的子进程
os.WNOHANG 参数,默认为0也就是os.WNOHANG,表示在内核没有通知有已终止的子进程时不阻塞
"""
pid, status = os.waitpid(-1, os.WNOHANG)
while pid > 0:
print("child ", pid, " is terminated")
return def main():
sockFd = socket.socket()
sockFd.bind(("", 5555))
sockFd.listen(5) """
调用signal函数,第一个参数是信号名,第二个是信号处理函数。这个signal函数就是对系统调用signal函数的简单封装。
这个函数必须在fork第一个子进程之前做且只能做一次。
"""
signal.signal(signal.SIGCHLD, sigChld)
print("等待客户端连接......")
while True:
connFd, remAddr = sockFd.accept() try:
pid = os.fork()
if pid == 0:
# 说明当前运行在子进程中
sockFd.close() # 关闭监听套接字
echoStr(connFd) # 执行回显函数
# connFd.close() # 关闭连接套接字,这里是否要显示的关闭和客户端的连接套接字与个人编程风格有关,因为客户端发送完数据后就主动调用了close()
exit(0) # 子进程退出
else:
"""
关闭连接套接字,这时候并不会关闭服务器与客户端的TCP连接,因为connFd这个套接字的会被子进程所使用,所以该套接字的引用
计数器为1,只有为0时才会被关闭。
"""
connFd.close()
except Exception as err:
print(err) if __name__ == '__main__':
main()
SIGCHLD信号的含义是一个进程终止或者停止,将该信号发送给父进程,父进程的wait或者waitpid可以捕捉这个信号。

这时候可以看到通信完毕后已经不存在僵尸进程了。
僵尸进程会被init或者systemd进程接管,而他们会使用wait来清理这些僵尸进程,所以当我们使用fork子进程的时候都要wait他们防止他们变成僵尸进程。wait和waitpid都可以清理僵尸进程,但是略有不同:
- 调用wait的时候如果没有已经终止的子进程那么调用wait的进程将会被阻塞在这里直到出现一个被终止的子进程
- 调用waitpid我们可以通过参数指定pid号也可以指定如果没有已经终止的子进程是否要阻塞,这样体验就会好很多。
如果你这里调用wait将会发生什么呢?已上面的程序为例你同时启动5个客户端,在服务器就会fork5个子进程处理,当通信完毕需要清理僵尸进程的时候有很大可能会清理小于5个。因为5个中断信号几乎同时到达,第一个到达的时候阻塞在wait,而后面相继到达,Unix的信号是不排队的,也就是被阻塞期间产生一次或多次最终只提交一次。
Python自带的一个叫做socketserver模块里面有一个ForkingMixIn的其核心实现就是fork加信号处理。
需要知道的事情
服务器进程崩溃会怎么样

与服务器之间的网络中断会怎么样

(二)通过fork编写一个简单的并发服务器的更多相关文章
- 【实验 1-1】编写一个简单的 TCP 服务器和 TCP 客户端程序。程序均为控制台程序窗口。
在新建的 C++源文件中编写如下代码. 1.TCP 服务器端#include<winsock2.h> //包含头文件#include<stdio.h>#include<w ...
- 编写一个简单的java服务器程序
import java.net.*;import java.io.*; public class server{ ); //监听在80端口 Socket sock = server.accept(); ...
- 【实验 1-2】编写一个简单的 UDP 服务器和 UDPP 客户端程序。程序均为控制台程序窗口。
1.服务器 #include<winsock2.h> //包含头文件#include<stdio.h>#include<windows.h>#pragma comm ...
- c#编写一个简单的http服务器
先来张我的帅照哈哈哈 好了不臭美了 上代码 世间万物 只有想不到 没有做不到 哈哈哈 仔细阅读代码 我要凑够 150个字 哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈 ...
- 如何编写一个简单的Linux驱动(二)——完善设备驱动
前期知识 1.如何编写一个简单的Linux驱动(一)——驱动的基本框架 2.如何编写一个简单的Linux驱动(二)——设备操作集file_operations 前言 在上一篇文章中,我们编写设备驱动遇 ...
- 使用CEF(二)— 基于VS2019编写一个简单CEF样例
使用CEF(二)- 基于VS2019编写一个简单CEF样例 在这一节中,本人将会在Windows下使用VS2019创建一个空白的C++Windows Desktop Application项目,逐步进 ...
- 如何编写一个简单的Linux驱动(二)——设备操作集file_operations
前期知识 如何编写一个简单的Linux驱动(一)--驱动的基本框架 前言 在上一篇文章中,我们学习了驱动的基本框架.这一章,我们会在上一章代码的基础上,继续对驱动的框架进行完善.要下载上一篇文章的全部 ...
- 编写一个简单的C++程序
编写一个简单的C++程序 每个C++程序都包含一个或多个函数(function),其中一个必须命名为main.操作系统通过调用main来运行C++程序.下面是一个非常简单的main函数,它什么也不干, ...
- 使用Java编写一个简单的Web的监控系统cpu利用率,cpu温度,总内存大小
原文:http://www.jb51.net/article/75002.htm 这篇文章主要介绍了使用Java编写一个简单的Web的监控系统的例子,并且将重要信息转为XML通过网页前端显示,非常之实 ...
随机推荐
- Metasploit远程调用Nessus出错
Metasploit远程调用Nessus出错 从Nessus 7.1开始,Metaspliot远程调用Nessus创建新的扫描任务,会出现以下错误信息: [*] New scan added ...
- 关于DataTable序列化的事儿
今天写了一个小demo,从数据库中读取到了dataTable,想序列化成json字符串,然后传到前端,进行页面展示,其实很简单的一个步骤,谁知道它出错了!!! 出错的原因是:序列化类型为XX的对象时检 ...
- 如何让Qt程序在运行时获取UAC权限
在pro文件中加入以下语句: QMAKE_LFLAGS += /MANIFESTUAC:\"level=\'requireAdministrator\' uiAccess=\'false\' ...
- [R]R语言的module工程化
很遗憾,这还是一个挖坑的问题,解决方案并不是很确定. 需求是,大多数的语言都提供import包或module的功能,避免全部代码写到一个文件中,方便管理与维护. 如常用的database模块,每次写R ...
- pip install
pip install <包名> 或 pip install -r requirements.txt 通过使用 == >= <= > < 来指定版本,不写则安装最新 ...
- mysql_Navicat数据库破解
Navicat Premium 12.1.16.0安装与激活 Navicat Premium 12是一套数据库开发管理工具,支持连接 MySQL.Oracle等多种数据库,可以快速轻松地创建.管理和维 ...
- Flask的上下文源码剖析
先写一段Flask程序 from flask import Flask app = Flask(__name__) @app.route('/') def hello_world(): return ...
- 菜鸡谈OO 第二单元总结
“欢迎来到(玄学)多线程的新世界” Homework1 单部傻瓜电梯调度 Part1 多线程设计策略 第一次学到了线程这个概念,与之前的编程体验大有不同.最大的区别在于从原本的线性发生程序变成了多个行 ...
- git mvn 使用
git 更换远程仓库地址: stps:先删除远程仓库地址,然后再添加 [git remote rm origin] 删除现有远程仓库 [git remote add origin url]添加新远程仓 ...
- python基础之函数式编程
一.定义: 函数作为参数作用:将核心逻辑传入方法体,使该方法的适用性更广,体现了面向对象的开闭原则: 函数作为返回值作用:逻辑连续,当内部函数被调用时,不脱离当前的逻辑. 二.高阶函数: 1.定义:将 ...