Shell脚本并发及并发数的控制

https://www.jianshu.com/p/701952ffb755
正常情况下,Shell脚本是串行执行的,一条命令执行完才会执行接下来的命令。如下代码:

!/bin/bash

for i in seq 1 10
do
echo $i
done

echo “----end----”
脚本执行的结果如下:

1
2
3
4
5
6
7
8
9
10
----end----
echo $1 命令串行执行,如果命令耗时较长导致总时间较长。如果命令之间没有互相依赖关系时,可以让命令并行执行,并行执行的方法就是在命令后加上 & 符号。

!/bin/bash

for i in seq 1 10
do
echo $i &
done

echo “----end----”
脚本执行的结果如下:

1
2
3
5
4
----end----
10
7
8
9
6
可以看到,这样不能保证命令的执行顺序,有的时候需要保证for循环所有命令执行完后再向后执行接下来的命令。可以使用 wait 实现

!/bin/bash

for i in seq 1 10
do
echo $i &
done

wait
echo “----end----”
脚本执行的结果如下:

1
2
3
6
9
10
4
5
7
8
----end----
问题还没有结束,当需要并行执行的命令数量特别多的时候,特别是执行命令的资源占用较多时,直接用 & 实现并行容易将服务器资源占用打满,影响其他程序运行。
使用管道和令牌原理实现并发控制。

#!/bin/bash
#Step1 创建有名管道
[ -e ./fd1 ] || mkfifo ./fd1

#创建文件描述符,以可读(<)可写(>)的方式关联管道文件,这时候文件描述符3就有了有名管道文件的所有特性
exec 3<> ./fd1

#关联后的文件描述符拥有管道文件的所有特性,所以这时候管道文件可以删除,我们留下文件描述符来用就可以了
rm -rf ./fd1

#Step2 创建令牌
for i in seq 1 2;
do
# echo 每次输出一个换行符,也就是一个令牌
echo >&3
done

#Step3 拿出令牌,进行并发操作
for line in seq 1 10;
do
read -u3 # read 命令每次读取一行,也就是拿到一个令牌
{
echo $line
echo >&3 # 执行完一条命令会将令牌放回管道
}&
done

wait

exec 3<&- # 关闭文件描述符的读
exec 3>&- # 关闭文件描述符的写
小礼物走一走,来简书关注我

作者:不智鱼
链接:https://www.jianshu.com/p/701952ffb755
來源:简书
简书著作权归作者所有,任何形式的转载都请联系作者获得授权并注明出处。

猜你喜欢

转载自blog.csdn.net/qq_42720245/article/details/84066597