参考链接
unix 常用命令 perl 实现 sed awk tr nl
perl 和sed,awk,tr,grep,nl等常用命令替换
sed
task | sed | perl |
Replace 12 with twelve | sed 's/12/twelve/g' |
perl -pe 's/12/twelve/g' |
Replace the word sh with Bourne Shell | sed -e 's/ sh / Bourne Shell /g' [1] |
perl -pe 's//bsh/b/Bourne Shell/g' [2] |
Remove lines 2 to 4 from stream | sed '2,4d' |
perl -nle 'print if $.<2 || $.>4' |
awk
task | awk | perl |
Print second field (whitespace-separated) | awk '{print $2}' |
perl -lane 'print $F[1]' |
Count lines starting with X | awk '/^X/ {++x} END {print x}' |
perl -nle '++$x if /^X/; print $x if eof' |
Add numbers in second column and print sum | awk '{sum+=$2} END {print sum}' |
perl -lane '$sum+=$F[1]; print $sum if eof' |
tr
task | tr | perl |
ROT13 | tr 'A-Za-z' 'N-ZA-Mn-za-m' |
perl -pe 'y/A-Za-z/N-ZA-Mn-za-m/' |
Remove carriage return from DOS files [3] | tr -d '/r' |
perl -pe 'tr//r//d' |
grep
task | grep | perl |
Print only lines containing 12 | grep '12' |
perl -nle 'print if /12/' |
Print only lines not containing 12 | grep -v '12' |
perl -nle 'print if !/12/' |
nl
task | nl | perl |
Insert line numbers (lined up) | nl -ba |
perl -nle 'printf "%6s %s/n", $., $_' |
Perl命令行Perl参数:可以让短小的Perl程序运行在Perl命令行.
1:-e
可以让Perl程序在Perl命令行上运行.
例如,我们可以在Perl命令行上运行"HelloWorld"程序而不用把它写入文件再运行.
$perl-e'print"HelloWorld\n"'
多个-e也可以同时使用,运行顺序根据它出现的位置.
$perl-e'print"Hello";'-e'print"World\n"'
象所有的Perl程序一样,只有程序的最后一行不需要以;结尾.
2:-M
可以象通常一样引用模
$perl-MLWP::Simple-e'getstore("http://www.163.com/","163.html"'##下载整个网页
-M+模块名和use模块名一样
第三部分:隐式循环
3:-n
增加了循环的功能,使你可以一行一行来处理文件
$perl-n-e'print;'1.txt#####$perl-ne'print;'1.txt
这与下面的程序一样.
- LINE:
- while(<>){
- print;
- }
<>打开Perl命令行里的文件,一行行的读取.每一行缺省保存在$_
$perl-n-e'print"$.-$_"'file
上面的这一行可以写成
- LINE:
- while(<>;){
- print"$.-$_"
- }
输出当前行数$.和当前行$_.
4:-p,和-n一样,但是还会打印$_的内容
如果想在循环的前后做些处理,可以使用BEGIN或ENDblock.下面的这一行计算文件里的字数.
$perl-ne'END{print$t}@w=/(\w+)/g;$t+=@w'file.txt
每一行所有匹配的字放入数组@w,然后把@w的元素数目递加到$t.ENDblock里的print最后输出文件总字数.
还有两个参数可以让这个程序变得更简单.
5:-a
打开自动分离(split)模式.空格是缺省的分离号.输入根据分离号被分离然后放入缺省数组@F
使用-a,上面的命令可以写成这样:
$perl-ane'END{print$x}$x+=@F'file.txt##使用了-a
6:-F
把缺省的分离号改为你想要的.例如把分离号定为非字符,上面的命令可以改为:
$perl-F'\W'-ane'END{print$x}$x+=@F'file.txt
下面通过Unixpassword文件来介绍一个复杂的例子.Unixpassword是文本文件,每一行是一个用户记录,
由冒号:分离.第7行是用户的登录shell路径.我们可以得出每一个不同shell路径被多少个用户使用:
$perl -F':' -ane '$s{$F[6]}++;'\>;-e'END{print"$_=$s{$_}"for keys %s }' /etc/passwd
虽然现在不是一行,但是你可以看出使用参数可以解决什么问题.
第四部分:RecordSeparators数据分隔符
$/和$\--输入,输出分隔号.
$/用来分隔从文件句柄里读出的数据,缺省$/分隔号是\n,这样每次从文件句柄里就会一行行的读取
$\缺省是空字符,用来自动加到要print的数据尾端.这就是为什么很多时候print都要在末尾加上\n.
$/和$\可与-n-p一起使用.在Perl命令行上相对应为-0(零)和-l(这是L).
-0后面可以跟一个16进制或8进制数值,这个值用来付给$/.
-00打开段落模式,-0777打开slurp模式(即可以一次把整个文件读入),这与把$/设为空字符和undef一样效果.
单独使用-l有两个效果:
第一:自动chomp输入分隔号
第二:把$/值付给$\(这样print的时候就会自动在末尾加\n)
1:-l参数,用来给每一个输出加\n.例如
$perl-le'print"HelloWorld"'
第五部分:原位编辑
使用已有的参数我们可以写出很有效的Perl命令行程序.常见的UnixI/O重定向:
$perl-pe'somecode'>output.txt
这个程序从input.txt读取数据,然后做一些处理再输出到output.txt.你当然也可以把输出重定向到同一个文件里.
上面的程序可以通过-i参数做的更简单些.
2:-i
把源文件更名然后从这个更名的源文件里读取.最后把处理后的数据写入源文件.
如果-i后跟有其他字符串,这个字符串与源文件名合成后来生成一个新的文件名.
此文件会被用来储存原始文件以免被-i参数覆盖.
这个例子把所有php字符替换为perl:
$perl-i-pe's/\bPHP\b/Perl/g'file.txt
程序读取文件的每一行,然后替换字符,处理后的数据重新写入(即覆盖)源文件.
如果不想覆盖源文件,可以使用
$perl-i.bak-pe's/\bPHP\b/Perl/g'file.txt
这里处理过的数据写入file.txt,file.txt.bak是源文件的备份.
perl经典的例子
问题:
遇到一问题:
aaa@domain.com2
aaa@domain.com111
bbb@home.com2222
bbb@home.com1
类似这种输出,我想把他们变换成下面形式:
aaa@domain.com113
bbb@home.com2223
就是将相同邮箱名称后面的数字相加。各位大侠能否给些思路如何用perl来实现。
答案:perl-anle'$cnt{$F[0]}+=$F[1];END{print"$_\t$cnt{$_}"forkeys%cnt}'urfile
如果熟悉了上面几个Perl命令行参数的用法,上面的这个命令应该很好理解:
每次读取urfile的一行,由于使用了-a,打开自动分离(split)模式.空格是缺省的分离号.输入根据分离号被分离然后放入缺省数组@F中,
以文件的第一行为例子$F[0]就是aaa@domain.com,$F[1]就是2
$cnt{$F[0]}+=$F[1]就是一个哈希数组,以$F[0]为key,$F[1]为value,把相同key的数值都叠加起来.然后把文件的每一行都这样处理一次.
END{}就是在循环完之后再处理.里面的意思就是打印这个%cnt哈希数组.这个哈希数组的key就是邮箱名称,value就是叠加后的数字.
下面的是上面行命令的文本形式:
- #!/usr/bin/perl
- usestrict;
- usewarnings;
- my%hash;
- while(<>){
- chomp;
- my@array=split;
- $hash{$array[0]}+=$array[1];
- }
- END{
- foreach(keys%hash){
- print"$_\t$hash{$_}\n";
- }
- }
完