shell模拟“多线程”
shell中并没有真正意义上的多线程,要实现“多线程”可以启动多个子进程,并将子进程放入后台执行来模拟多线程,最大程度利用CPU性能。
循环中执行并行代码
#!/bin/bash
date
for i in `seq 1 5`
do
{
echo "sleep 5"
sleep 5
} &
done
wait
date
执行结果如下:
Thu Oct 19 19:58:43 CST 2017 sleep 5 sleep 5 sleep 5 sleep 5 sleep 5 Thu Oct 19 19:58:48 CST 2017
由此我们可以看出,所有的for循环下的指令都可以同时执行,使用wait命令等待所有子进程结束。
这样能够提供脚本运行的效率,但是我们又不能无限制的让这个for循环去启动子进程,所以就需要我们对这个进程数进行设置。
#!/bin/bash
date
trap "exec 5>&-; exec 5 <&-; exit 0" 2
THREAD_NUM=10
tmp_fifofile="/tmp/$$.fifo"
mkfifo "$tmp_fifofile"
exec 5<>"$tmp_fifofile"
rm $tmp_fifofile
for ((i=0;i<$THREAD_NUM;i++));do
echo
done >&5
for i in `seq 1 50`
do
read -u5
{
sleep 1
echo "----------"
echo >&5
} &
done
wait
exec 5>&-
date
trap "exec 5>&-; exec 5 <&-; exit 0" 2#接收信号2(Ctrl +C )的操作,并关闭描述符5
THREAD_NUM=10#允许的最大进程数。
tmp_fifofile="/tmp/$$.fifo"#以脚本运行的当前进程ID号作为文件名。
mkfifo "$tmp_fifofile"#新建一个随机FIFO管道文件。
exec 5<>"$tmp_fifofile"#定义文件描述符5指向这个FIFO管道文件(对文件描述符5的所有操作等同于对管道文件)。
rm $tmp_fifofile#删除管道文件,删除与否都无所谓。
echo
done >&5```#使用一个for循环向管道中输入$THREAD_NUM个空行;>符号为输出重定向;&符号表示5为文件描述符,也就是说&5表示文件描述符5。
`read -u5`#表示从文件描述符5(管道)中读取行,每次读一行,如果读完了就会挂起,直到管道中再次有可读的行。
`echo >&5`#再次向管道中写入空行,避免挂起的for循环停止执行。
`} &`#将进程放到后台,表明for循环中的`sleep 1`与`----------`这两条指令有10个进程在后台同时执行
`wait`等待所有进程执行完成
`exec 5>&-`#删除文件描述符5
### 关联详解
#### Linux文件描述符
文件描述符在形式上是一个非负整数。实际上,它是一个索引值,指向内核为每一个进程所维护的该进程打开文件的记录表。当程序打开一个现有文件或者创建一个新文件时,内核向进程返回一个文件描述符。在程序设计中,一些涉及底层的程序编写往往会围绕着文件描述符展开。但是文件描述符这一概念往往只适用于UNIX、Linux这样的操作系统。
每个Unix进程(除了可能的守护进程)应均有三个标准的POSIX文件描述符,对应于三个标准流:
| 整数值 | 名称 | <unistd.h>符号常量 | <stdio.h>文件流 |
|----|----|----|----|
|0|Standard input|STDIN_FILENO|stdin
|1|Standard output|STDOUT_FILENO|stdout
|2|Standard error|STDERR_FILENO|stderr
我们可以使用exec指令自行定义、绑定文件描述符,文件描述符一般从3~(n-1)可以使用,n=ulimit -n的数值。
#### 管道
Linux管道包含两种
- 匿名管道
- 命名管道
管道有一个特点,如果管道中没有数据,那么取管道数据的操作就会滞留,直到管道内进入数据,然后读出后才会终止这一操作;同理,写入管道的操作如果没有读取管道的操作,这一动作就会滞留。
##### 匿名管道
在Unix或类Unix操作系统的命令行中,匿名管道使用ASCII中垂直线|作为匿名管道符,匿名管道的两端是两个普通的,匿名的,打开的文件描述符:一个只读端和一个只写端,这就让其它进程无法连接到该匿名管道。
##### 命名管道
命名管道也称FIFO,从语义上来讲,FIFO其实与匿名管道类似,但值得注意:
- 在文件系统中,FIFO拥有名称,并且是以设备特俗文件的形式存在的;
- 任何进程都可以通过FIFO共享数据;
- 除非FIFO两端同时有读与写的进程,否则FIFO的数据流通将会阻塞;
- 匿名管道是由shell自动创建的,存在于内核中;而FIFO则是由程序创建的(比如mkfifo命令),存在于文件系统中。
shell模拟“多线程”的更多相关文章
- Linux shell模拟多线程拷贝
#!/bin/sh #日志文件 log_file=/data/threadcp.log a=$(date +%H%M%S) echo -e "startTime:\t$a" #最大 ...
- shell 中用管道模拟多线程
shell 中用管道模拟多线程 这里以两个例子来对比多线程和单进程 单线程的例子 # config.txt在这个例子和多线程的例子中都会用到 [root@ns_10.2.1.242 test]$ ca ...
- Linux下模拟多线程的并发并发shell脚本
分享一个在Linux下模拟多线程的并发脚本,使用这个脚本可以同时批量在定义数量的服务器上执行相关命令,比起普通for/while循环只能顺序一条一条执行的效率高非常多,在管理大批服务器时非常的实用. ...
- php模拟多线程
一:应该知道的: php本身是不支持多线, 但是php的好搭档,apache和linux是支持的,故lamp才是最佳组合,还在使用win服务器的现在知道为什么要用linux吧.既然是模拟的, 就不是真 ...
- php使用curl模拟多线程发送请求
每个PHP文件的执行是单线程的,但是php本身也可以用一些别的技术实现多线程并发比如用php-fpm进程,这里用curl模拟多线程发送请求.php的curl多线程是通过不断调用curl_multi_e ...
- adb shell模拟点击事件(input tap)
前言:appium定位也不是万能的,有些元素还是定位不到,这个时候只能换一个方式定位了,可以使用这个adb shell模拟点击. 1.input可以实现的功能 输入文本信息:input text gu ...
- 利用curl 模拟多线程
所谓多线程就是多个 程序同时运行,单线程:执行一段逻辑,等待完成后 在执行另外一个. 多线程:几个逻辑同时进行处理,不需要相互等待,提高了总的执行时间 接下来就用curl实现多线程 实现逻辑 1. f ...
- 通过curl模拟多线程抓取网页(curl_multi_*)
curl请求多个url,以前都是使用循环来处理.最近发现可以通过curl_multi_*系列函数来模拟多线程.比对一下,发现如果请求的url只有几个,2种方案耗时差不多,但是url比较多,差距就非常明 ...
- PHP+shell实现多线程的方法
PHP+shell实现多线程的方法 这里介绍怎样借助shell脚本实现多线程. 先写个简单的php代码.这里为了让脚本运行时间更长.方便看效果,sleep一下.呵呵.先看下test.php的代码:ls ...
随机推荐
- moco入门
前提:moco是什么?有什么用 Moco是针对HTTP集成而生的,不过,现在也有人把它用在其它需要一个模拟服务器的场景中.比如,在移动开发中,有人开发一个移动应用,需要有一个远端服务,但在开发时,这个 ...
- padright padleft
在 C# 中可以对字符串使用 PadLeft 和 PadRight 进行轻松地补位. PadLeft(int totalWidth, char paddingChar) //在字符串左边用 paddi ...
- Windows内置系统账户:Local system/Network service/Local Service 区别
LocalSystem 账户 LocalSystem是预设的拥有本机所有权限的本地账户,这个账户跟通常的用户账户没有任何关联,也没有用户名和密码之类的凭证.这个服务账户可以打开注册表的HKEY_LO ...
- [leetcode]112. Path Sum路径和(是否有路径)
Given a binary tree and a sum, determine if the tree has a root-to-leaf path such that adding up all ...
- 11-st跳舞消耗体力最少
/* 炫舞家 ST 时间限制:3000 ms | 内存限制:65535 KB 难度:3 描述 ...
- hreeJS加载Obj资源后如何实现内存释放?
问题: 我利用ThreeJS做了一个在同一个场景下动态加载Obj的页面,具体功能是:点击按钮A:加载A模型,点击按钮B:加载B模型...现在的问题是,前面已经加载过的模型,无法实现释放,内存一直在累加 ...
- python使用input()来接受字符串时一直报错“xxx is not defined”
报错信息: “Please input your guess: gussTraceback (most recent call last): File "coinGuessGame.py& ...
- python基础之删除文件及删除目录的方法-乾颐堂
下面来看一下python里面是如何删除一个文件及文件夹的~~ 首先引入OS模块 import os 删除文件: os.remove() 删除空目录: os.rmdir() 递归删除空目录: os.re ...
- eclipse 远程调试mapreduce
使用环境:centos6.5+eclipse(4.4.2)+hadoop2.7.0 1.下载eclipse hadoop 插件 hadoop-eclipse-plugin-2.7.0.jar 粘贴到 ...
- arm家族小检阅