【转】shell脚本常用命令

原文传送门：http://blog.csdn.net/lionfire/article/details/6634254

Shell脚本是Linux开发工作中常用的工具，但是我一直没有找到一个适合自己的简明扼要的HandBook。在工作过程中整理了一下，贴在这里已备查看。

Shell中的特殊符号

•  $  美元符号。用来表示变量的值。如变量NAME的值为Mike，则使用$NAME就可以得到“Mike”这个值。
• #  井号。除了做为超级用户的提示符之外，还可以在脚本中做为注释的开头字母，每一行语句中，从#号开始的部分就不执行了。
•  “”  双引号。shell不会将一对双引号之间的文本中的大多数特殊字符进行解释，如#不再是注释的开头，它只表示一个井号“#”。但$仍然保持特殊含义。（在双引号中的$加变量名，即：$PARAM_NAME，依然会转换成变量的值。）
  • 双引号对于某些特殊符号是不起作用的， 例如：”,$,\,`(反引号)
  • 双引号和单引号不能嵌套。即：echo ‘””’  输出””,  echo “’’” 输出’’
•  ‘’  单引号。shell不会将一对单引号之间的任何字符做特殊解释。（在双引号中的$加变量名，即：$PARAM_NAME，不会转换成变量的值。）
  • 例如：echo ‘$HOME’    (结果:$HOME)
• ``  倒引号。命令替换。在倒引号内部的shell命令首先被执行，其结果输出代替用倒引号括起来的文本，不过特殊字符会被shell解释。
• \  斜杠。用来去掉在shell解释中字符的特殊含义。在文本中，跟在\后面的一个字符不会被shell特殊解释，但其余的不受影响。
•  []中括号， 主要是用来测试条件的，通常放在if语句的后面。注意，表判断时中括号内侧需要有空格，且if与中括号之间需有空格。如if [ "$a" == "abc" ]
• {}大括号，主要是和$符号配合，作为字符串连接来使用
  • echo ${HOME}ismydir   （结果：/home/xiongguoanismydir）

2           预定义的变量

2.1          特殊变量

• $      shell变量名的开始，如$var
• |      管道，将标准输出转到下一个命令的标准输入
• $#     记录传递给Shell的自变量个数
• #      注释开始
• &      在后台执行一个进程
• ？     匹配一个字符
• *      匹配0到多个字符(与DOS不同，可在文件名中间使用，并且含.)
• $-     使用set及执行时传递给shell的标志位  （这是个啥意思？）
• $!     最后一个子进程的进程号 
• $?     取最近一次命令执行后的退出状态(返回码)
• $*     传递给shell script的参数
• $@     所有参数，个别的用双引号括起来
• $0     当前shell的名字
• $n     位置参数，如f a b c，其中，f为函数名或shell脚本名，则$0表示f，$1表示第一个参数a
• $$     进程标识号(Process Identifier Number, PID)
• >      输出重定向
• <      输入重定向
• >>    输出重定向（追加方式）
• []      列出字符变化范围，如[a-z]

2.2          代值变量

• * 任意字符串 
• ? 一个任意字符 
• [abc] a, b, c三者中之一 
• [a-n] 从a到n的任一字符 

2.3          特殊字符的表达

• \b 退回  
• \c 打印一行时没有换行符 这个我们经常会用到
• \f 换页
• \r 回车
• \t 制表
• \v 垂直制表
• \\ 反斜线本身

2.4          其他字符

• 分号; 表示一行结束
•  圆括号() 表示在新的子shell中执行括号内的命令（这样可以不改变当前shell的状态。）但是圆括号在单/双引号内失去作用，只作为普通字符。
• 花括号{}
  • 分割命令的用法
  • 与圆括号相似，但是：1. 花括号内的命令在当前shell中执行；2.花括号必须作为命令的第一个字符出现。
  • 引用变量的用法
  • 在$后面，表示变量名的开始和结束，如var='abc'，则${var}.txt表示abc.txt。
• 方括号 相当与test命令，用来执行测试条件，通常用在需要判断条件的语句后面，例如：if,while等等。

3           设置变量

• 格式：VARNAME=value （i.e. PARAM=’hello’） 注意：1. 等号的前后不能有空格 2.如果变量的值是一个命令的执行结果，请加上反引号（`）。

4           引用变量

• $VARNAME
  •  e.i.  echo $HOME   （结果：/home/xiongguoan）
• 变量默认值
  • 在引用一个变量的时候可以设定默认值。如果在此之前，该变量已经设定了值，则此默认值无效。如果此时变量没有被设定值，则使用此默认值（但是没有改变此变量的值）。
  • echo Hello ${UNAME:-there}     #其中there是UNAME的默认值
  • 其他关于默认值与判读变量的方法：

利用大括号表示变量替换

表示形式	说明
${VARIABLE}	基本变量替换。大括号限定变量名的开始和结束
${VARIABLE:-DEFAULT}	如果VARIABLE没有值，则这种表示形式返回DEFAULT的值
${VARIABLE:=DEFAULT}	如果VARIABLE没有值，则这种表达形式返回DEFAULT的值。另外，如果VARIABLE没有设置，则把DEFAULT的值赋予它
${VARIABLE:+VALUE}	如果VARIABLE被设置，则这种表示形式返回VALUE；否则，返回一个空串
${# VARIABLE}	这种表示形式返回VARIABLE值的长度，除非VARIABLE是* 或者@在为*或者@的特殊情况下，则返回$@所表示的元素的个数。要记住，$ @保存传给该脚本的参数清单
${VARIABLE:?MESSAGE}	如果VARIABLE没有值，则这种表示形式返回MESSAGE的值。Shell也显示出VARIABLE的名字，所以这种形式对捕获得错误很有用

注意：

使用${VALIABLE:?MESSAGE},如果发现此变量此时没有值，则脚本停止运行并显示行号和变量名称。 主要用于调试。  

5           位置变量

• 使用$1,$2,$3…$9,${10},${11}…来代表输入的参数。其中$0代表被执行的命令或者脚本的名字。$1,$2…代表输入的第1,2…个参数
  • 例子：

# cat count.sh#!/bin/sh
A=$1             # 将位置$1的数值读入，并赋给变量A
B=$2             # 将位置$2的数值读入，并赋给变量B
C=$[$A+$B]       # 将变量A与B的值相加，将结果赋给C
echo $C          # 显示C的数值
结果：
# ./count.sh  3  6
9
# ./count.sh 34  28
62

• $#代表参数的数量 ；#@代表“$1"、"$2"、"$3"之意，每个变量是独立的；$* 代表"$1c$2$3"，其中c为分隔字符，默认为空格键，所以本例中代表"$1 $2 $3"之意。

 6           运算符和优先级

 Shell运算符和它们的优先级顺序

级别	运算符	说明
13	-, +	单目负、单目正
12	!, ~	逻辑非、按位取反或补码
11	* , / , %	乘、除、取模
10	+, -	加、减
9	<< , >>	按位左移、按位右移
8	< =, > =,  < , >	小于或等于、大于或等于、小于、大于
7	= = , ! =	等于、不等于
6	&	按位与
5	^	按位异或
4	|	按位或
3	&&	逻辑与
2	| |	逻辑或
1	=, + =, - =, * =, /=, % =, & =, ^ =, | =, << =, >> =	赋值、运算且赋值

 7           source / export / let / unset

• source： 正常情况下，脚本中执行的参数设置只能影响到shell脚本本身的执行环境，不能影响到调用此shell的脚本。使用source命令执行脚本，可以让脚本影响到父shell的环境（即调用此shell的当前shell）。例如：source env.sh
• export： 在bash下，使用export建立环境变量后，会影响到子shell脚本和当前shell的环境变量
• unset： 删除环境变量
  

#export newval=1
#echo $newval
1
#unset newval
#echo $newval
(ß此处为空行,newval已经被删除)

• let： 在bash中只用此命令可以建立一个临时的变量，此变量不会影响到子shell

8           shell中的表达式

• shell 输出重定向
  • 　　管道  |

就管道符前的命令的输出作为管道符后的命令的输入。 

ls | grep ‘.txt’   将ls的输出作为grep 的输入。 grep从输入中找出所有包含.txt的行。 

• • 　　输出  >

将右尖括号前的命令的输入重定向到尖括号后的文件中。 

例如：ls *.sh > list.txt  将当前目录下所有末尾名为sh的文件的列表写入到list.txt 

• • 　　输入 <

将左箭头后面的文件作为左箭头前的命令的输入。

例如：grep “a” < test.sh  将test.sh中找到所有包含a的行 

• • 　　错误输出重定向

默认bash有3个标准输入输出设备。

0 标准输入 1 标准输出 2错误输出 

如果执行脚本的时候发生错误，会输出到2上。

例如：./test.sh  2> /dev/null    #/dev/null相当于垃圾回收站。这条命令的意思是，将错误输出信息丢弃，不显示在屏幕上。

/test.sh > a.log 2>&1  //将标准输出和错误输出信息写入到a.log文件中。 该命令也可写为 /test.sh  &>a.log

• tee

将此命令的输入分叉，一支输出到屏幕一支可以重定向到其他位置。

例如： ./test.sh | tee >a.txt 2>&1

运行test.sh，通过tee输出到a.txt，同时屏幕上可以看到输出。并且将错误输出重定向到标准输出( 2>&1 )

• cpio
  • 　　文件或目录打包

find . -name '*.sh' | cpio -o > shell.cpio 　　将当前目录及其子目录下的sh文件打包成一个文件库为shell.cpio。　

ls *.sh | cpio -o > shell.cpio 　　将当前目录下的sh文件(不含子目录)打包成一个文件库为shell.cpio。　

• • 　　压缩

文件打包完成后,即可用Unix中的compress命令（/usr/bin下）压缩打包文件。对一般的文本文件,压缩率较高,可达81％。

例如：compress shell.cpio则将文件库压缩为shell.cpio.Z（自动添加.Z并删除shell.cpio ）。　

• • 　　解压

uncompress shell.cpio.Z则自动还原为shell.cpio。　

• • 　　解包展开

将按原目录结构解包展开到当前所在目录下。若以相对路径打包的，当解包展开时，也是以相对路径存放展开的文件数据；若以绝对路径打包的，当解包展开时，也是以绝对路径存放展开的文件数据。因此注意若为相对路径,应先进入相应的目录下再展开。

cd /u1
　cpio –id < shell.cpio 解压到当期目录。　
　cpio –iud < shell.cpio 则文件若存在将被覆盖，即强制覆盖。
　cpio –id < shell.cpio env.sh 解压缩env.sh

• • 　　显示包内的文件

cpio –it < shell.cpio 　

• exec

将此命令后的参数作为命令在当前的shell中执行，当前的shell或者脚本不再执行。

例如： exec ls 当前进程替换为ls，执行结束后就退出了。

例如：在a.sh 中包含exec b.sh 则当a.sh 执行到此句后，被b.sh替换，a.sh中此句后的语句不会再被执行。 

• fork

将此命令的参数，新建一个进程来执行 

例如：在a.sh 中包含fork b.sh 则当a.sh 执行到此句后，被b.sh替换，a.sh中此句后的语句继续执行。b.sh在新的进程中同时执行。 

• expr

格式：expr argument operator argument一般用于整数的运算（operator前后必须有空格）。 例如：

#newval=1
#echo $newval
1
#newval=`expr $newval + 1`
#echo $newval
2
#newval=$newval+1
#echo $newval
2+1

•  test

测试，通常用在需要判断的语句后面，例如：if,while,等等。很多时候可以和中括号[]互换。

i=1
if test”$ i” == “1”
then
echo true
else
echo false
fi 

•  exit

退出当前的shell，执行结果可以在shell中用$?查看

例如：exit 2

• read

从标准输入读取数据。

$ read var1 var2 var3 
Hello my friends 
$ echo $var1 $var2 $var3 
Hello my friends 
$ echo $var1 
Hello 
$ read -p "Please input a string" str
hello_world
$echo $str
hello_world

• shift

每次调用的时候，将参数列表中的第一个参数去掉。这样可以循环得到第一个参数。

#cat t.sh
sum=0
until [ $# -eq 0 ]
do
echo $*
sum=`expr $sum + $1`
shift
done
echo result is: $sum 
#./t.sh 1 2 3
1 2 3
2 3
3      

附件一：Linux 易被遗漏的命令解析

• grep
  • 　　grep ‘string’ filename

grep ‘list’ mytxt.txt 在mytxt.txt中寻找包含list字符串的所有行

• • 　　“-v” : 相反的。 即不包含字符串。

grep –v ‘list’ mytxt.txt
cat mytxt | grep ‘list’ 将cat mytxt作为源， 从中查找包含list字符串的行

• find

-atime n ： 指查找系统中最后n*24小时访问的文件；
-ctime n ： 指查找系统中最后n*24小时被改变状态的文件；
-mtime n ： 指查找系统中最后n*24小时被修改的文件。
find ./ -name "*.txt" -exec grep "bin" {} \; 在当前目录下(包含子目录)，查找所有txt文件并找出含有字符串"bin"的行
find ./ -name "*.txt" -exec rm {} \;  在当前目录下(包含子目录)，删除所有txt文件

• du

显示文件的大小

#du *.txt
1230   myfile1.txt
456    myfile2.txt

• awk

#last -n 5
root　　pts/1　　192.168.0.1　　Tue　　Feb　　10　　11:21　　still　　logged in
root　　pts/1　　192.168.0.1　　Tue　　Feb　　10　　00:46　　02:28　　(01:41)
root　　tty1　　　　　　　　　　　Fri　　Sep　　5　　 14:09　　14:10　　(00:01)

#last -n 5 | awk '{print $1 "\t" $3}'
root　　pts/1　　192.168.0.1
root　　pts/1　　192.168.0.1
root　　tty1　　 Fri

NF表示每一行（$0)拥有的字段总数
NR表示目前awk所处理的是“第几行”数据
FS表示目前的分隔符，默认是空格键

#last -n 5 | awk '{print $1 "\t lines: " NR "\t Columes: " NF}'
root　　lines:1　　columes:10
root　　lines:2　　columes:10
root　　lines:3　　columes:9

#cat /etc/passwd | awk '{FS=":"} $3 < 10 {print $1 "\t" $3}'
root:x:0:0:root:/root:/bin/bash　　#这是因为读入第一行的时候，变量$1,$2...默认是以空格键为分隔的，定义的FS只能在第二行后开始生效。可改为：awk 'BEGIN {FS=":"} $3 < 10 {print $1 "\t" $3}'
bin　　1
daemon　　2
...

如果有一个文件pay.txt，内容为：
Name　　1st　　2nd　　3rd
VBird　　1100　　1100　　1100
DMTsai　　2200　　2200　　2200
Bird2　　3300　　3300　　3300

#cat pay.txt | awk '{if(NR==1) printf "%10s　　%10s　　%10s　　%10s　　%10s\n", $1, $2, $3, $4, "Total"} NR>2{total=$2 + $3 + $4 printf "%10s　　%10s　　%10s　　%10s　　%10.2f\n", $1, $2, $3, $4, total}'
Name　　1st　　2nd　　3rd　　4th
VBird　　1100　　1100　　1100　　3300
DMTsai　　2200　　2200　　2200　　6600
Bird2　　3300　　3300　　3300　　9900

• 前后台运行

 ./test.sh &  将某个程序在后台启动起来，只需要在命令的最后加上 & 符号。

当按下^z的时候，当前的应用程序就会切换到后台，但是此时的状态是停止的状态。

• • 　　使用jobs命令可以看到当前在后台运行的程序的列表。

#jobs
[1]+ stopped top
[2]+stopped find | grep *.txt > a.log

• • 　　使用bg命令可以将某个后台程序继续运行。

#bg %2
#jobs
[1]+ stopped top
[2]+ Running find | grep *.txt > a.log

• • 　　将后台运行的程序切回到前台

#fg %2   //将find 命令切回到前台

• shell的执行选项

-n 测试shell script语法结构，只读取shell script但不执行 
-x 进入跟踪方式，显示所执行的每一条命令，用于调度 
-a Tag all variables for export 
-c "string" 从strings中读取命令 
-e 非交互方式 
-f 关闭shell文件名产生功能 
-h locate and remember functions as defind 
-i 交互方式 
-k 从环境变量中读取命令的参数 
-r 限制方式 
-s 从标准输入读取命令 
-t 执行命令后退出(shell exits) 
-u 在替换中如使用未定义变量为错误 
-v verbose,显示shell输入行

• alias

alias abc=ls   建立别名，  abc为命令ls的别名

• xargs

执行本命令的第一个参数，并将xargs的输入作为被执行命令的参数

例如：find . -name '*.c' | xargs cat   将本目录及其子目录下所有的C文件使用cat命令显示其内容。

附件二：Bash中影响环境变量的命令

Shell有若干以变量为工作对象的命令，其中有些命令似乎重复了。例如，可以用declare、export和typeset命令来创建全局（或转出）的变量。typeset命令是declare的同义词。

• Declare 命令

 语法：declare [options] [name [= value]]

用于显示或设置变量。

declare命令使用四个选项：

-f   只显示函数名

-r   创建只读变量。只读变量不能被赋予新值或取消设置，除非使用declare或者typeset命令

-x   创建转出（exported）变量

-i   创建整数变量。如果我们想给一个整数变量赋予文本值，实际上是赋予0使用+ 代替-，可以颠倒选项的含义。

如果没有使用参数，则declare显示当前已定义变量和函数的列表。让我们关注一下-r选项：

$ declare  –r  title=" paradise Lost"
$ title = " Xenogenesis"
bash: title: read-only variable
$ declare title= " Xenogenesis"
$ echo $title
Xecogenesis
$ typeset title = " The Longing Ring”
$ echo $title
The Longing Ring

这个示例表明，只有declare或typeset命令可以修改只读变量的值。

•  export命令

语法：

 export [options] [name [= value]]

用于创建传给子Shell的变量。

export命令使用四个选项：

--   表明选项结束。所有后续参数都是实参

-f   表明在“名-值”对中的名字是函数名

-n   把全局变量转换成局部变量。换句话说，命名的变量不再传给子Shell

-p   显示全局变量列表

 如果没有用参数，则假定是一个-p参数，并且显示出全局变量的列表： 

$ export
declare –x ENV = "/home/medined/ . bashrc"
declare –x HISTFILESIZE = "1000"
…
declare –xi numPages = "314"
declare –xr title = "The Longing Ring"
declare –xri numChapters = "32"

这种显示的一个有趣的特性是，它告诉我们哪些变量只能是整数、是只读的，或者二者皆可。

•  let命令

 语法：let expression

用于求整数表达式的值。

 let命令计算整数表达式的值。它通常用来增加计数器变量的值。 

• local 命令 

语法：       local [name [= value]]

用于创建不能传给子Shell的变量。这个命令仅在过程内部有效。 

简单说来，local命令创建的变量不能被子Shell存取。因此，只能在函数内部使用local命令。我们可以在命令行或脚本中使用“变量=值”这种形式的赋值命令。如果使用local时不带实参，那么当前已定义的局部变量列表就送往标准输出显示。 

# ! /bin/bash
count=1
for element in $@
do
   echo " $element is element $count"
   let count+=1
done

下面是这个脚本运行结果示例：

$ chmod + x let
$ . /let one two three
one is element 1
two is element 2
three is element 3 

注意：如果我们习惯在表达式中使用空格，那么要用双引号把表达式括起来，如：
let "count + =1"
否则会导致语句错误。

• readonly命令

 语法：       readonly [options] [name[ = value]]

用于显示或者设置只读变量。

Readonly命令使用两个选项：

--    表明选项结束。所有后续参数都是实参

-f    创建只读函数 

如果没有用参数，则readonly显示当前已定义的只读变量和函数的列表。 

• set命令 

语法：       set [--abefhkmnptuvxidCHP] [-o option] [name [= value]]

用于设置或者重置各种Shell选项。

set 命令可实现很多不同的功能——并非其中所有的功能都与变量有关。由于本节的其他命令重复了通过set命令可用的那些变量选项，所以这里对set命令不做详细说明。

• shift命令 

语法  shift [n]

用于移动位置变量。 

shift命令调整位置变量，使$3的值赋予$2，而$2的值赋予$1。当执行shift命令时，这种波动作用影响到所定义的各个位置变量。往往使用shift命令来检查过程参数的特定值——如为选项设置标志变量时。

• typeset命令 

语法：typeset [options] [name [= value]]

用于显示或者设置变量。 

typeset 命令是declare命令的同义词。 

• unset命令 

语法：unset [options] name [name …]

用于取消变量定义。

unset命令使用两个选项：

--  表明选项结束，所有后续参数都是实参

-f  创建只读函数 

unset命令从Shell环境中删除指定的变量和函数。注意，不能取消对PATH、IFS、PPID、PS1、PS2、UID和EUID的设置。如果我们取消RANDOM、SECONDS、LINENO或HISTCMD等变量的设置，它们就失去特有属性。