最近一直在學習Shell,以前一直覺得Shell文法很難,不好學,現在總算有一些收穫了。其實Shell指令碼就是一堆linux命令的集合,把指令碼裡每一步的命令搞懂是什麼意思,然後整個指令碼的意思就搞出來了;同樣要通過指令碼完成一項工作,就把這項工作分解成若干的小命令,然後把小命令集合起來就可以了。至於什麼awk、sed、正則,都要靠自己平常的積累。
①查詢一個服務某天的請求次數:
cat renren-1.log|grep "MSG without parse">tempawk '{a[$1]++}END{for(i in a)print i,a[i]}' temp
②第一列相同,第二列相加:
awk '{a[$1]+=$2}END{for(m in a)print m,a[m]}'
③查詢包含log字元的檔案名稱:
find . -name "*.log*" -type f | xargs ls -l
④查詢批量服務某一天請求次數:
#!/bin/bash#查詢批量服務某一天請求次數find . -name "*log*" -type f | xargs ls -l > logs_llawk '{print $8}' logs_ll > logscat logs | while read linedo echo $line echo 2013-08-01 cat $line | egrep ">>>|MSG without parse" | grep "2013-08-01" | wc -ldone
⑤查詢批量服務某一天請求次數,過濾掉請求次數為0的請求:
#!/bin/bash#查詢批量服務某一天請求次數,過濾掉請求次數為0的請求find . -name "*log*" -type f | xargs ls -l > logs_llawk '{print $8}' logs_ll > logscat logs | while read lineCOUNT=`cat $line | egrep ">>> |MSG without parse" | grep "2013-07-02" | wc -l`do if [ $COUNT -ne 0 ]; then echo $line 2013-07-02 echo $COUNT else echo $line >/dev/null fidone
⑥查詢批量服務某個月請求次數,過濾掉請求次數為0的請求:
#!/bin/bash#查詢批量服務某個月請求次數,過濾掉請求次數為0的請求find . -name "*log*" -type f | xargs ls -l > logs_llawk '{print $8}' logs_ll > logsfor day in `seq 30`do cat logs | while read line COUNT=`cat $line | egrep ">>> |MSG without parse" | grep "2013-08-$day" | wc -l` do if [ $COUNT -ne 0 ]; then echo $line 2013-08-$day echo $COUNT else echo $line >/dev/null fi donedone
⑦統計輸出一個服務在某段時間的請求次數和對應的日期:
cat $line | egrep ">>> |MSG without parse" |awk '{print $1}' >>log.tmpcat log.tmp |sort |uniq -c
⑧查詢批量服務在所有日期的請求次數,並過濾掉請求次數為0的請求,輸出服務名、日期和對應的請求次數:
#!/bin/bash#查詢批量服務在所有日期的請求次數,並過濾掉請求次數為0的請求,輸出服務名、日期和對應的請求次數find . -name "*log*" -type f | xargs ls -l > logs_llawk '{print $6,$8}' logs_ll > logsawk '{print $2}' logs>logcat log | while read linedo cat $line | egrep ">>> |MSG without parse" | awk '{print $1}' > $line.tmp echo $line cat $line.tmp |sort | uniq -cdone
本文出自 “虹貓仗劍走天涯” 部落格,請務必保留此出處http://ailurus.blog.51cto.com/4814469/1300406