bash shell實現並發多進程操作

來源:互聯網
上載者:User
前言目前我掌握的基礎語言,php(最為熟悉,項目裡代碼都是用其實現),bash shell(營運利器),c(acm專用),這裡面能實現多線程的貌似只有c,但是我c只是用來學習和實現演算法和資料結構,因此工作中我想要類比多進程並行作業,就只能依靠bash shell指令碼了技能點shell指令碼裡實現並行作業,需要用到
  1. for迴圈
  2. &後台運行符
  3. wait等待所有子進程結束
思路
  1. 我們可以通過寫一個for迴圈,控制每次需要大量操作的次數,
  2. 然後封裝一個方法,方法裡進行大量操作,並將此方法用&符號放在後台運行
  3. 每個迴圈結束前用wait函數,確保當前批量處理操作全部完成
樣本我們準備批量的執行建立目錄操作,目錄名稱為數字,從1開始到100,每次大量建立20個無並發時代碼如下:
#!/bin/bash#開始時間begin=$(date +%s)#測試根目錄root_dir="/home/wzy/wzy_scripts/file_scripts/test"if [ ! -d $root_dir ]; thenmkdir -p $root_dirficd $root_dir#迴圈建立10000個目錄for ((i=0; i<10000; ))domkdir $ii=$(expr $i + 1)done#結束時間end=$(date +%s)spend=$(expr $end - $begin)echo "花費時間為$spend秒"

已耗用時間:

並行作業我們每次並發建立200個目錄,因此迴圈執行50次即可實現建立10000個目錄的工作代碼如下:
#!/bin/bash#開始時間begin=$(date +%s)#測試根目錄root_dir="/home/wzy/wzy_scripts/file_scripts/test"if [ ! -d $root_dir ]; thenmkdir -p $root_dirficd $root_dir#大量建立目錄函式function create_dir(){mkdir $1}#迴圈建立10000個目錄count=10000rsnum=200cishu=$(expr $count / $rsnum)for ((i=0; i<$cishu;))dostart_num=$(expr $i \* $rsnum + $i)end_num=$(expr $start_num + $rsnum)for j in `seq $start_num $end_num`docreate_dir $j &donewaiti=$(expr $i + 1)done#結束時間end=$(date +%s)spend=$(expr $end - $begin)echo "花費時間為$spend秒"

主要是分頁處理和&以及wait的使用已耗用時間:

總結通過&、wait和for迴圈來進行並行作業能顯著的提高效率,大家可以參考這個方法用在自己的日常工作中,我是在建立多個mysql庫的時候掌握了這個方法!

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.