UNIX_ Perl之單行命令特技

標籤：

轉自：superdebug.blog.chinaunix.net

替換

將所有C程式中的foo替換成bar，舊檔案備份成.bak

perl -p -i.bak -e ‘s/\bfoo\b/bar/g‘ *.c

很強大的功能，特別是在大程式中做重構。記得只有在UltraEdit用過。 如果你不想備份，就直接寫成 perl -p -i -e 或者更簡單 perl -pie， 恩，pie這個單詞不錯

將每個檔案中出現的數值都加一

perl -i.bak -pe ‘s/(\d+)/ 1 + $1 /ge‘ file1 file2 ....

將分行符號\r\n替換成\n

perl -pie ‘s/\r\n/\n/g‘ file

同dos2unix命令。

將分行符號\n替換成\r\n

perl -pie ‘s/\n/\r\n/g‘ file

同unix2dos命令。

取出檔案的一部分

顯示欄位0-4和欄位6，欄位的分隔字元是空格

perl -lane ‘print "@F[0..4] $F[6]"‘ file

很好很強大，同 awk ‘print $1, $2, $3, $4, $5, $7‘。參數名稱lane也很好記。

如果欄位分隔符號不是空格而是冒號，則用

perl -F: -lane ‘print "@F[0..4]\n"‘ /etc/passwd

顯示START和END之間的部分

perl -ne ‘print if /^START$/ .. /^END$/‘ file

恐怕這個操作只有sed才做得到了吧……

相反，不顯示START和END之間的部分

perl -ne ‘print unless /^START$/ .. /^END$/‘ file

顯示開頭50行：

perl -pe ‘exit if $. > 50‘ file

同命令 head -n 50

不顯示開頭10行：

perl -ne ‘print unless 1 .. 10‘ file

顯示15行到17行：

perl -ne ‘print if 15 .. 17‘ file

每行取前80個字元：

perl -lne ‘print substr($_, 0, 80) = ""‘ file

每行丟棄前10個字元：

perl -lne ‘print substr($_, 10) = ""‘ file

搜尋

尋找comment字串：

perl -ne ‘print if /comment/‘ duptext

這個就是普通的grep命令了。

尋找不含comment字串的行：

perl -ne ‘print unless /comment/‘ duptext

反向的grep，即grep -v。

尋找包含comment或apple的行：

perl -ne ‘print if /comment/ || /apple/‘ duptext

相同的功能就要用到egrep了，文法比較複雜，我不會……

計算

計算欄位4和倒數第二欄位之和：

perl -lane ‘print $F[4] + $F[-2]‘

要是用awk，就得寫成 awk ‘{i=NF-1;print $5+$i}‘

排序和反轉

檔案按行排序：

perl -e ‘print sort <>‘ file

相當於簡單的sort命令。

檔案按段落排序：

perl -00 -e ‘print sort <>‘ file

多個檔案按檔案內容排序，並返回合并後的檔案：

perl -0777 -e ‘print sort <>‘ file1 file2

檔案按行反轉：

perl -e ‘print reverse <>‘ file1

相應的命令有嗎？有……不過挺偏，tac（cat的反轉）

數值計算

10進位轉16進位：

perl -ne ‘printf "%x\n",$_‘

10進位轉8進位： perl -ne ‘printf "%o\n",$_‘

16進位轉10進位：

perl -ne ‘print hex($_)."\n"‘

8進位轉10進位：

perl -ne ‘print oct($_)."\n"‘

簡易計算機。

perl -ne ‘print eval($_)."\n"‘

其他

啟動互動式perl：

perl -de 1

查看包含路徑的內容：

perl -le ‘print for @INC‘

備忘

與One-Liner相關的Perl命令列參數：

-0<數字> (用8進位表示)指定記錄分隔字元($/變數)，預設為換行 -00 段落模式，即以連續換行為分隔字元 -0777 禁用分隔字元，即將整個檔案作為一個記錄 -a 自動分隔模式，用空格分隔$_並儲存到@F中。相當於@F = split ‘‘。分隔字元可以使用-F參數指定 -F 指定-a的分隔字元，可以使用Regex -e 執行指定的指令碼。 -i<副檔名> 原地替換檔案，並將舊檔案用指定的副檔名備份。不指定副檔名則不備份。 -l 對輸入內容自動chomp，對輸出內容自動添加換行 -n 自動迴圈，相當於 while(<>) { 指令碼; } -p 自動迴圈+自動輸出，相當於 while(<>) { 指令碼; print; }

1-->顯示曆史命令使用頻率

[email protected]:~$ history | perl -F"\||<\(|;|\`|\\$\(" -alne ‘foreach (@F) { print $1 if /\b((?!do)[a-z]+)\b/i }‘ | sort | uniq -c | sort -nr
    169 ls
     98 vim
     90 python
     27 man

 

2-->將每個檔案中出現的數值都加一

perl -i.bak -pe ‘s/(\d+)/ 1 + $1 /ge‘ file1 file2 ....

[email protected]:~$ cat ptt1.txt
204.108.13.15 abc [] ServerPath=/home/html/pics 62ms
214.92.113.13 xxx [code=5] ServerPath=/home/html/pages 32ms

[email protected]:~$ perl -i.bak -pe ‘s/(\d+)/ 1 + $1 /ge‘ ptt1.txt    

匹配servrerpath後的字元並列印出來

[email protected]:~$ perl -ne  ‘print "$1\n" if  /ServerPath=(\S+)/g‘ ptt1.txt
/home/html/pics
/home/html/pages

 

 3-->查看包含路徑的內容：

perl -le ‘print for @INC‘

 

4-->取出檔案的一部分

顯示欄位0-4和欄位6，欄位的分隔字元是空格

perl -lane ‘print "@F[0..4] $F[6]"‘ file

很好很強大，同 awk ‘print $1, $2, $3, $4, $5, $7′。參數名稱lane也很好記。

如果欄位分隔符號不是空格而是冒號，則用

perl -F: -lane ‘print "@F[0..4]\n"‘ /etc/passwd

顯示START和END之間的部分

perl -ne ‘print if /^START$/ .. /^END$/‘ file

恐怕這個操作只有sed才做得到了吧……

相反，不顯示START和END之間的部分

perl -ne ‘print unless /^START$/ .. /^END$/‘ file

顯示開頭50行：

perl -pe ‘exit if $. > 50‘ file

同命令 head -n 50

不顯示開頭10行：

perl -ne ‘print unless 1 .. 10‘ file

顯示15行到17行：

perl -ne ‘print if 15 .. 17‘ file

每行取前80個字元：

perl -lne ‘print substr($_, 0, 80) = ""‘ file

每行丟棄前10個字元：

perl -lne ‘print substr($_, 10) = ""‘ file

 

5-->準備關鍵詞測試時經常需要進行UrlEncode和UrlDecode

以下是2個常用的單行Perl指令碼（Regex）：輸入為日誌或關鍵詞列表

Urlencode：對 \n 不轉碼

perl -p -e ‘s/([^\w\-\.\@])/$1 eq "\n" ? "\n":sprintf("%%%2.2x",ord($1))/eg‘ keywords.list

UrlDecode：

perl -p -e ‘s/%(..)/pack("c", hex($1))/eg‘ query.log

 

備忘

與One-Liner相關的Perl命令列參數

-0<數字>
    (用8進位表示)指定記錄分隔字元($/變數)，預設為換行
-00
    段落模式，即以連續換行為分隔字元
-0777
    禁用分隔字元，即將整個檔案作為一個記錄
-a
    自動分隔模式，用空格分隔$_並儲存到@F中。相當於@F = split ”。分隔字元可以使用-F參數指定
-F
    指定-a的分隔字元，可以使用Regex
-e
    執行指定的指令碼。
-i<副檔名>
    原地替換檔案，並將舊檔案用指定的副檔名備份。不指定副檔名則不備份。
-l
    對輸入內容自動chomp，對輸出內容自動添加換行
-n
    自動迴圈，相當於 while(<>) { 指令碼; }
-p
    自動迴圈+自動輸出，相當於 while(<>) { 指令碼; print; }

UNIX_ Perl之單行命令特技