在業(yè)務(wù)開發(fā)過程中,經(jīng)常會(huì)在后臺(tái)寫一些shell腳本處理數(shù)據(jù),但估計(jì)很多人不知道shell腳本也可以支持多線程,而且非常簡(jiǎn)單。本篇文章主要就是介紹shell實(shí)現(xiàn)多進(jìn)程以及進(jìn)程數(shù)量控制。
為了更好的說明問題,我們結(jié)合例子講解,假設(shè)需求就是掃描url.txt文件,然后判斷里面的URL是否失效。url.txt文件的內(nèi)容是一行一個(gè)URL,如:
#!/bin/bash
#判斷是否有參數(shù)
if [ $# != 1 ] ;then
echo "The parameters you enter is not correct !";
exit -1;
fi
#循環(huán)讀出URL并判斷狀態(tài)碼
while read line
do
{
isok=`curl -I -o /dev/null -s -w %{http_code} $line`
if [ "$isok" = "200" ]; then
echo $line "OK"
else
echo $line "no"
fi
}
done $1
echo "執(zhí)行結(jié)束"
#!/bin/bash
#判斷是否有參數(shù)
if [ $# != 1 ] ;then
echo "The parameters you enter is not correct !";
exit -1;
fi
#循環(huán)讀出URL并判斷狀態(tài)碼
while read line
do
{
isok=`curl -I -o /dev/null -s -w %{http_code} $line`
if [ "$isok" = "200" ]; then
echo $line "OK"
else
echo $line "no"
fi
}
}
done $1
wait
echo "執(zhí)行結(jié)束"
#!/bin/bash
#允許的進(jìn)程數(shù)
THREAD_NUM=200
#定義描述符為9的管道
mkfifo tmp
exec 9>tmp
#預(yù)先寫入指定數(shù)量的換行符,一個(gè)換行符代表一個(gè)進(jìn)程
for ((i=0;i$THREAD_NUM;i++))
do
echo -ne "\n" 1>9
done
if [ $# != 1 ] ;then
echo "The parameters you enter is not correct !";
exit -1;
fi
while read line
do
{
#進(jìn)程控制
read -u 9
{
#isok=`curl -I -o /dev/null -s -w %{http_code} $line`
if [ "$isok" = "200" ]; then
echo $line "OK"
else
echo $line "no"
fi
echo -ne "\n" 1>9
}
}
done $1
wait
echo "執(zhí)行結(jié)束"
rm tmp