shell脚本中的多线程

很多场景中会用到多线程,例如备份数据库,有100个库,正常备份效率极其低下。有了多线程原本可能需要10个小时备份,现在分10个线程同时去干,只要一个小时就解决了。今天就介绍下shell中如何使用多线程去完成一些操作,提高我们的效率。

首先我们需要了解以下一些知识点:

1、文件描述符

[root@localhost ~]# touch file1         #先创建一个文件

[root@localhost ~]# exec 6<> file1   #通过exec的方式向当前进程号中丢入一个文件描述符6,关联文件为file1

[root@localhost ~]# ll /proc/$$/fd    #查看当前进程号的文件描述符

total 0

lrwx------ 1 root root 64 Jun 19 13:38 0 -> /dev/pts/0

lrwx------ 1 root root 64 Jun 19 13:38 1 -> /dev/pts/0

lrwx------ 1 root root 64 Jun 19 13:38 2 -> /dev/pts/0

lrwx------ 1 root root 64 Jun 19 13:39 255 -> /dev/pts/0

lrwx------ 1 root root 64 Jun 19 13:38 6 -> /root/file1    #我们丢进来的文件描述符,关联着file1文件

[root@localhost ~]# echo "this is test file" >/proc/$$/fd/6       #向当前进程号的文件描述符6中写入一段内容

[root@localhost ~]# cat file1     #查看file1文件,发现与我们刚写入文件描述符中的内容一致

this is test file

===================================================================================

[root@localhost ~]# rm -rf file1   #删除文件file1

[root@localhost ~]# ll /proc/$$/fd/6    #查看当前进程号中文件描述符6的状态,不难看出对应file1文件的状态问deleted

lrwx------ 1 root root 64 Jun 19 13:38 /proc/14530/fd/6 -> /root/file1 (deleted)

[root@localhost ~]# cp  /proc/$$/fd/6 file1   #拷贝文件描述符6为file1

[root@localhost ~]# cat file1   #查看file1文件,内容与删除一样,未变。有一点,这个复原的file1文件不再是原来的了,因为文件描述符状态依旧为deleted

this is test file

[root@localhost ~]# exec 6<&-      #释放文件描述符

==================================================================================

2、命名管道

[root@localhost ~]# ls *.txt | grep test  #  | 为我们的匿名管道

test2.txt

test.txt

[root@localhost ~]# mkfifo file-fifo   #创建一个命名管道文件file-fifo

[root@localhost ~]# file file-fifo        #查看文件类型为name pipe,命令管道文件,它的特点是1、即拿即用,用完就消失 2、先进先出

file-fifo: fifo (named pipe)

==============================================================================

#起两个终端测试一下

#终端一

[root@localhost ~]# grep "vd" file-fifo

#终端二

[root@localhost ~]# ls /dev/ > file-fifo

操作完终端二后你会发现终端一马上就会有结果显示,但是你再次grep "vd"的时候则没有任何结果,这就是命名管道文件的特点,即拿即用,用完消失。

==================================================================================

看完上面两个知识点,就进入到我们脚本的正题,如何实现多线程。

脚本如下:

#!/bin/bash
##################
#多线程批量创建用户
#dingxiang
##################
#定义20个线程,以及fifo文件名称
thread=20
file=$(pwd)/file_thread
#创建fifo文件,丢个文件描述符6进去,把fifo文件删掉
mkfifo $file
exec 6<> $file
rm -rf $file #向文件描述符6中写入20个空行
for i in `seq $thread`
do
        echo >&6
done #创建alice1-alice500个用户
for j in `seq 500`
do
#read -u 读文件描述符6
        read -u 6
#创建用户,因为每次拿20个空行,所以创建完之后再还20个空行回去
        {
        useradd alice$j
        echo "123123" | passwd --stdin alice$j  &>/dev/null
        echo "alice$j creat....."
        echo >&6
        }&
done
#等待上面所有的操作结束
wait
#释放文件描述符,echo;all is ok
exec 6>&-
echo "all is ok......."

执行脚本会发现,用户创建成功给予的提示是一组一组刷出来的,而不是之前一个个的创建,一个个的提示。

事实上这样并不是真正意义上的多线程,只是伪多线程,但在实际场景中真的很好用。

转载于:https://blog.51cto.com/13760226/2411191

shell脚本(多线程批量创建用户)的更多相关文章

  1. (转)通过shell脚本实现批量添加用户和设置随机密码以及生产环境如何批量添加

    通过shell脚本实现批量添加用户和设置随机密码以及生产环境如何批量添加 原文:http://www.21yunwei.com/archives/4773 有一个朋友问我如何批量创建用户和设置密码 , ...

  2. shell脚本,批量创建10个系统帐号并设置密码为随机8位字符串。

    [root@localhost wyb]# cat user10.sh #!/bin/bash #批量创建10个系统帐号wangyb01-wangyb10并设置密码(密码为随机8位字符串). > ...

  3. shell脚本实例-实现监控tcp的链接状态另一种方式批量创建用户

    Array实现TCP的链接状态 #!/usr/bin/bash declare -A status type=`ss -an | grep :80|awk '{print $2}'` for i in ...

  4. Linux 下批量创建用户(shell 命令)

    第一种方法: 用shell批量创建用户,分为2中:1,批量创建的用户名无规律 :2.批量创建的用户名有规律首先,来说下批量创建的用户名无规律的shell:先把需要批量创建的用户名用一个文本文档列出来, ...

  5. shell编写一个批量添加用户脚本

                                                          shell编写一个批量添加用户脚本 5.1问题 本例要求在虚拟机server0上创建/roo ...

  6. [工具] 分布式系统下批量创建用户及分发公钥打通ssh通道的脚本

    在分布式系统下偶尔会有这样的需求,要增加一个服务时,需要在集群的所有节点上创建同一个用户,然后打通ssh通道,再分发软件包.配置.执行命令.启动服务... 这个问题的根源是如何集中配置和管理系统,专业 ...

  7. shell批量创建用户随机密码

    批量创建用户随机密码企业面试题3:批量创建10个系统帐号usr01-usr10并设置密码(密码为随机8位字符串). #! /bin/bash . /etc/init.d/functions Path= ...

  8. SERVER 2012 R2 core域环境下批量创建用户

      Write by xiaoyang 转载请注明出处 步骤一:创建域 基本配置 1.         输入命令进入配置 2.         输入8进入网络配置 3.         选择要配置的网 ...

  9. linux系统批量创建用户和生成8位随机密码

    1.1    脚本案例 批量创建20个用户,用户名为user1-user20,并生成8位随机登录密码,用户组采用键盘输入的方式,并将用户名及登录密码保存到/tmp/create_user.txt普通文 ...

随机推荐

  1. 001_manifest.json手册

    manifest.json 是一个 JSON 格式的文件,是每个 WebExtension必须包含的唯一文件. 使用manifest.json,您可以指定扩展名的基本元数据,如名称和版本,还可以指定扩 ...

  2. centos8系统下docker安装jenkins

    前提是已经安装好docker 1.下载jenkins(最新版本) docker pull jenkins/jenkins 2.创建用于存放jenkins的文件夹 mkdir /home/var/jen ...

  3. python--爬虫(XPath与BeautifulSoup4)

    获取页面内容除使用正则意外,还可以使用XPath,其原理是将html代码转换为xml格式,然后使用XPath查找html节点或元素. 选取节点 XPath使用路径表达式来选取XML文档中的节点或节点集 ...

  4. kepp running 团队视频分析初步总结

    一.遇码则码队视频讨论: 时    间:2020.03.31 方    式:视频会议 参加人员:温学智,胡海靖,莫佳亮 二.视频讨论会议截图: 三.纪要内容: (1).主要功能和界面显示: 温学智:在 ...

  5. SQLAlchemy查询

    SQLAlchemy查询 结果查询: from databases.wechat import User from config import session def search(): result ...

  6. docker+nginx 微信支付回调

    制作微信支付发现回调有问题: docker-compose中接口要映射对应地址 然后再进行访问

  7. Pytest系列(16)- 分布式测试插件之pytest-xdist的详细使用

    如果你还想从头学起Pytest,可以看看这个系列的文章哦! https://www.cnblogs.com/poloyy/category/1690628.html 前言 平常我们功能测试用例非常多时 ...

  8. Python Requests-学习笔记(11)-请求与响应对象

    任何时候调用requests.*()你都在做两件主要的事情.其一,你在构建一个 Request 对象, 该对象将被发送到某个服务器请求或查询一些资源.其二,一旦 requests 得到一个从 服务器返 ...

  9. sprigboot 异常 Failed to start component [StandardEngine[Tomcat].StandardHost[localhost].Tomc...

    java.util.concurrent.ExecutionException: org.apache.catalina.LifecycleException: Failed to start com ...

  10. 正整数的二进制表示中1的个数计算(使用移位或者n&(n-1))

    第一种:使用n&(n-1)表示来计算有多少个1 int n=127; int count=0; while (n!=0){ count++; n=n&(n-1); } 第二种:使用移位 ...