前言目前我掌握的基礎語言,php(最為熟悉,項目裡代碼都是用其實現),bash shell(營運利器),c(acm專用),這裡面能實現多線程的貌似只有c,但是我c只是用來學習和實現演算法和資料結構,因此工作中我想要類比多進程並行作業,就只能依靠bash shell指令碼了技能點shell指令碼裡實現並行作業,需要用到
- for迴圈
- &後台運行符
- wait等待所有子進程結束
思路
- 我們可以通過寫一個for迴圈,控制每次需要大量操作的次數,
- 然後封裝一個方法,方法裡進行大量操作,並將此方法用&符號放在後台運行
- 每個迴圈結束前用wait函數,確保當前批量處理操作全部完成
樣本我們準備批量的執行建立目錄操作,目錄名稱為數字,從1開始到100,每次大量建立20個無並發時代碼如下:
#!/bin/bash#開始時間begin=$(date +%s)#測試根目錄root_dir="/home/wzy/wzy_scripts/file_scripts/test"if [ ! -d $root_dir ]; thenmkdir -p $root_dirficd $root_dir#迴圈建立10000個目錄for ((i=0; i<10000; ))domkdir $ii=$(expr $i + 1)done#結束時間end=$(date +%s)spend=$(expr $end - $begin)echo "花費時間為$spend秒"
已耗用時間:
並行作業我們每次並發建立200個目錄,因此迴圈執行50次即可實現建立10000個目錄的工作代碼如下:
#!/bin/bash#開始時間begin=$(date +%s)#測試根目錄root_dir="/home/wzy/wzy_scripts/file_scripts/test"if [ ! -d $root_dir ]; thenmkdir -p $root_dirficd $root_dir#大量建立目錄函式function create_dir(){mkdir $1}#迴圈建立10000個目錄count=10000rsnum=200cishu=$(expr $count / $rsnum)for ((i=0; i<$cishu;))dostart_num=$(expr $i \* $rsnum + $i)end_num=$(expr $start_num + $rsnum)for j in `seq $start_num $end_num`docreate_dir $j &donewaiti=$(expr $i + 1)done#結束時間end=$(date +%s)spend=$(expr $end - $begin)echo "花費時間為$spend秒"
主要是分頁處理和&以及wait的使用已耗用時間:
總結通過&、wait和for迴圈來進行並行作業能顯著的提高效率,大家可以參考這個方法用在自己的日常工作中,我是在建立多個mysql庫的時候掌握了這個方法!