zoukankan      html  css  js  c++  java
  • linux每日命令(35):grep命令

    Linux系统中grep命令是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹 配的行打印出来。grep全称是Global Regular Expression Print,表示全局正则表达式版本,它的使用权限是所有用户。

    grep的工作方式是这样的,它在一个或多个文件中搜索字符串模板。如果模板包括空格,则必须被引用,模板后的所有字符串被看作文件名。搜索的结果被送到标准输出,不影响原文件内容。

    grep可用于shell脚本,因为grep通过返回一个状态值来说明搜索的状态,如果模板搜索成功,则返回0,如果搜索不成功,则返回1,如果搜索的文件不存在,则返回2。我们利用这些返回值就可进行一些自动化的文本处理工作。

    一.命令格式:

    grep [-abcEFGhHilLnqrsvVwxy][-A<显示列数>][-B<显示列数>][-C<显示列数>][-d<进行动作>][-e<范本样式>][-f<范本文件>][--help][范本样式][文件或目录...]
    

    二.命令功能:

    用于过滤/搜索的特定字符。可使用正则表达式能多种命令配合使用,使用上十分灵活。

    三.命令参数:

    参数 描述
    -a 或 --text : 不要忽略二进制的数据。
    -A<显示行数> 或 --after-context=<显示行数> : 除了显示符合范本样式的那一列之外,并显示该行之后的内容。
    -b 或 --byte-offset : 在显示符合样式的那一行之前,标示出该行第一个字符的编号。
    -B<显示行数> 或 --before-context=<显示行数> : 除了显示符合样式的那一行之外,并显示该行之前的内容。
    -c 或 --count : 计算符合样式的列数。
    -C<显示行数> 或 --context=<显示行数>或-<显示行数> : 除了显示符合样式的那一行之外,并显示该行之前后的内容。
    -d <动作> 或 --directories=<动作> : 当指定要查找的是目录而非文件时,必须使用这项参数,否则grep指令将回报信息并停止动作。
    -e<范本样式> 或 --regexp=<范本样式> : 指定字符串做为查找文件内容的样式。
    -E 或 --extended-regexp : 将样式为延伸的普通表示法来使用。
    -f<规则文件> 或 --file=<规则文件> : 指定规则文件,其内容含有一个或多个规则样式,让grep查找符合规则条件的文件内容,格式为每行一个规则样式。
    -F 或 --fixed-regexp : 将样式视为固定字符串的列表。
    -G 或 --basic-regexp : 将样式视为普通的表示法来使用。
    -h 或 --no-filename : 在显示符合样式的那一行之前,不标示该行所属的文件名称。
    -H 或 --with-filename : 在显示符合样式的那一行之前,表示该行所属的文件名称。
    -i 或 --ignore-case : 忽略字符大小写的差别。
    -l 或 --file-with-matches : 列出文件内容符合指定的样式的文件名称。
    -L 或 --files-without-match : 列出文件内容不符合指定的样式的文件名称。
    -n 或 --line-number : 在显示符合样式的那一行之前,标示出该行的列数编号。
    -q 或 --quiet或--silent : 不显示任何信息。
    -r 或 --recursive : 此参数的效果和指定"-d recurse"参数相同。
    -s 或 --no-messages : 不显示错误信息。
    -v 或 --revert-match : 显示不包含匹配文本的所有行。
    -V 或 --version : 显示版本信息。
    -w 或 --word-regexp : 只显示全字符合的列。
    -x --line-regexp : 只显示全列符合的列。
    -y 此参数的效果和指定"-i"参数相同。

    四. 规则表达式

    grep 的规则表达式

    表达式 描述
    ^ 锚定行的开始 如:'^grep'匹配所有以grep开头的行。
    $ 锚定行的结束 如:'grep$'匹配所有以grep结尾的行。
    . 匹配一个非换行符的字符 如:'gr.p'匹配gr后接一个任意字符,然后是p。
    * 匹配零个或多个先前字符 如:'*grep'匹配所有一个或多个空格后紧跟grep的行。
    .* 一起用代表任意字符。
    [] 匹配一个指定范围内的字符,如'[Gg]rep'匹配Grep和grep。
    [^] 匹配一个不在指定范围内的字符,如:'[^A-FH-Z]rep'匹配不包含A-F和H-Z的一个字母开头,紧跟rep的行。
    (..) #标记匹配字符,如'(love)',love被标记为1。
    < 锚定单词的开始,如:'<grep'匹配包含以grep开头的单词的行。
    > 锚定单词的结束,如'grep>'匹配包含以grep结尾的单词的行。
    x{m} 重复字符x,m次,如:'0{5}'匹配包含5个o的行。
    x{m,} 重复字符x,至少m次,如:'o{5,}'匹配至少有5个o的行。
    x{m,n} 重复字符x,至少m次,不多于n次,如:'o{5,10}'匹配5--10个o的行。
    w 匹配文字和数字字符,也就是[A-Za-z0-9],如:'Gw*p'匹配以G后跟零个或多个文字或数字字符,然后是p。
    W w的反置形式,匹配一个或多个非单词字符,如点号句号等。
     单词锁定符,如: 'grep'只匹配grep。

    POSIX字符:

    为了在不同国家的字符编码中保持一至,POSIX(The Portable Operating System Interface)增加了特殊的字符类,如[:alnum:]是[A-Za-z0-9]的另一个写法。要把它们放到[]号内才能成为正则表达式,如[A- Za-z0-9]或[[:alnum:]]。在linux下的grep除fgrep外,都支持POSIX的字符类。

    字符 描述
    [:alnum:] 文字数字字符
    [:alpha:] 文字字符
    [:digit:] 数字字符
    [:graph:] 非空字符(非空格、控制字符)
    [:lower:] 小写字符
    [:cntrl:] 控制字符
    [:print:] 非空字符(包括空格)
    [:punct:] 标点符号
    [:space:] 所有空白字符(新行,空格,制表符)
    [:upper:] 大写字符
    [:xdigit:] 十六进制数字(0-9,a-f,A-F)

    五. 使用实例

    1. 查找指定进程

    命令:

    ps -ef|grep uwsgi
    

    输出:

    [root@localhost autoAweme]# ps -ef|grep uwsgi
    root      30568    795  0 12月01 ?      00:00:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      30578  30568  0 12月01 ?      00:00:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      59379    795  1 12月04 ?      00:13:13 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    root      59406  59379  0 12月04 ?      00:00:03 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    root     112483  86053  0 09:29 pts/1    00:00:00 grep --color=auto uwsgi
    
    

    说明:

    除最后一条记录外,其他的都是查找出的进程;最后一条记录结果是grep进程本身,并非真正要找的进程。

    2. 查找指定进程时,不显示grep 本身进程

    命令:

    ps aux | grep uwsgi | grep -v "grep"
    ps aux|grep [u]wsgi 
    ps aux|grep /[u]wsgi 
    

    输出:

    [root@localhost test]# ps -aux | grep uwsgi 
    root      30568  0.0  1.3 310244 53696 ?        S    12月01   0:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      30578  0.0  1.2 310244 49556 ?        S    12月01   0:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      59379  1.5  1.3 457952 50236 ?        Sl   12月04  13:50 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    root      59406  0.0  1.3 467760 53104 ?        S    12月04   0:03 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    root      87765  0.0  0.0 112704  1016 pts/1    R+   10:14   0:00 grep --color=auto uwsgi
    [root@localhost test]# ps -aux | grep uwsgi | grep -v "grep"
    root      30568  0.0  1.3 310244 53696 ?        S    12月01   0:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      30578  0.0  1.2 310244 49556 ?        S    12月01   0:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      59379  1.5  1.3 457952 50236 ?        Sl   12月04  13:50 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    root      59406  0.0  1.3 467760 53104 ?        S    12月04   0:03 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    
    [root@localhost test]# ps -aux | grep [u]wsgi
    root      30568  0.0  1.3 310244 53696 ?        S    12月01   0:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      30578  0.0  1.2 310244 49556 ?        S    12月01   0:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      59379  1.5  1.3 457952 50236 ?        Sl   12月04  13:45 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    root      59406  0.0  1.3 467760 53104 ?        S    12月04   0:03 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    [root@localhost test]# ps -aux | grep [u]wsgi
    root      30568  0.0  1.3 310244 53696 ?        S    12月01   0:23 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      30578  0.0  1.2 310244 49556 ?        S    12月01   0:00 /home/hc/project/envs/pgc/bin/uwsgi --ini /home/hc/project/pgc.ini
    root      59379  1.5  1.3 457952 50236 ?        Sl   12月04  13:45 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    root      59406  0.0  1.3 467760 53104 ?        S    12月04   0:03 /home/hc/project/envs/autoAweme/bin/uwsgi --ini /home/hc/project/autoAweme.ini
    
    

    3. 查找指定进程个数

    命令:

    ps -ef|grep uwsgi -c
    ps -ef|grep -c uwsgi
    

    输出:

    [root@localhost autoAweme]# ps -ef|grep uwsgi -c
    5
    [root@localhost autoAweme]# ps -ef|grep -c uwsgi 
    5
    

    4. 从文件中读取关键词进行搜索

    命令:

    cat 3.log | grep -f 4.log 
    

    输出:

    [root@localhost test]# cat 3.log 
    1
    2
    3
    [root@localhost test]# cat 4.log 
    1
    12
    5
    43
    [root@localhost test]# cat 3.log | grep -f 4.log 
    1
    [root@localhost test]# cat 4.log | grep -f 3.log 
    1
    12
    43
    
    

    说明:

    cat 3.log | grep -f 4.log 从3.log文件中匹配出含有4.log中关键字的行并输出
    cat 4.log | grep -f 3.log 从4.log文件中匹配出含有3.log中关键字的行并输出
    如:4.log中的关键字有1,12,5,43四个,在3.log中无论是完全匹配还是部分匹配只能匹配到1,并输出
    在 3.log中关键字为1,2,3, 所以在4.log中匹配3时,能完全匹配到含有1,2,3的行,并把匹配部分着色表示输出

    5. 从文件中读取关键词进行搜索 且显示行号

    命令:

    cat 4.log | grep -nf 3.log
    

    输出:

    [root@localhost test]# cat 4.log | grep -nf 3.log 
    1:1
    2:12
    4:43
    [root@localhost test]# cat 3.log | grep -nf 4.log 
    1:1
    
    

    说明:

    输出4.log文件中含有从3.log 文件中读取出的关键词的内容行,并显示每一行的行号,冒号(:)左边是行号,右边是匹配的内容

    6. 从文件中查找关键词

    命令:

    grep "1" 4.log 
    

    输出:

    [root@localhost test]# cat 4.log 
    1
    12
    "1"
    5
    43
    [root@localhost test]# grep  1  4.log 
    1
    12
    "1"
    [root@localhost test]# grep  '1'  4.log 
    1
    12
    "1"
    [root@localhost test]# grep  "1"  4.log 
    1
    12
    "1"
    [root@localhost test]# grep  "1" 4.log 
    "1"
    
    
    

    说明:

    有无引号,或者单双引号 效果是一样的,但是加上引号可读性好一点。另外如果要查询带引号的内容,需要用进行转义

    7. 从多个文件中查找关键词

    命令:

    grep '1' 3.log 4.log 
    

    输出:

    [root@localhost test]# grep '1' 3.log 4.log 
    3.log:1
    4.log:1
    4.log:12
    4.log:"1"
    [root@localhost test]# grep -n 1 3.log 4.log 
    3.log:1:1
    4.log:1:1
    4.log:2:12
    4.log:3:"1"
    
    

    说明:

    多文件时,输出查询到的信息内容行时,会把文件的命名放在在行的最左边输出并且加上":"作为标示符分隔,如果用了-n展示行号,则第二个:的左边是行号,最右边的是匹配内容

    8.找出以1开头的行内容

    命令:

    cat 4.log |grep ^1
    

    输出:

    [root@localhost test]# cat 4.log 
    1
    12
    "1"
    5
    43
    [root@localhost test]# cat 4.log |grep ^1
    1
    12
    
    

    9.找出非1开头的行内容

    命令:

    cat 4.log |grep ^[^1]
    

    输出:

    [root@localhost test]# cat 4.log |grep ^[^1]
    "1"
    5
    43
    
    

    10.找出以3结尾的行内容

    命令:

    cat 4.log |grep 3$
    

    输出:

    [root@localhost test]# cat 4.log |grep 3$
    43
    
    

    11.在当前目录中,查找后缀有 log 字样的文件中包含 1 字符串的文件,并打印出该字符串的行

    命令:

     grep 1 *log
    

    输出:

    [root@localhost test]# ls
    1.log  2.log  2.log.back  3.log  4.log
    [root@localhost test]# grep 1 *log
    3.log:1
    4.log:1
    4.log:12
    4.log:"1"
    
    

    12 . 以递归的方式查找符合条件的文件

    命令:

     grep -r 仅此一条 /home/hc
    

    输出:

    [root@localhost hc]# grep -r 仅此一条 /home/hc
    /home/hc/test/2.log.back:仅此一条,我是第五行
    [root@localhost hc]# 
    
    

    说明:
    查找指定目录/home/hc 及其子目录(如果存在子目录的话)下所有文件中包含字符串"仅此一条"的文件,并打印出该字符串所在行的内容

    13.反向查找

    命令:

    grep -v 仅此一条 *
    

    输出:

    [root@localhost test]# ls
    1.log  2.log  2.log.back  3.log  4.log
    [root@localhost test]# grep 仅此一条 *
    2.log.back:仅此一条,我是第五行
    [root@localhost test]# grep -v 仅此一条 *
    1.log:hnlinux
    1.log:
    1.log:hpython.cn
    1.log:
    1.log:ubuntu
    1.log:
    1.log:ubuntu linux
    1.log:
    1.log:redhat
    1.log:
    1.log:Redhat
    1.log:
    1.log:linuxmint
    2.log:linux
    2.log:
    2.log:Redhat
    2.log.back:第一行
    2.log.back:第二行
    2.log.back:我是log2第3行
    2.log.back:第四行
    3.log:1
    3.log:2
    3.log:3
    4.log:1
    4.log:12
    4.log:"1"
    4.log:5
    4.log:43
    
    

    说明:
    查找当前目录下所有文件,找出其中不包含"仅此一条"的行

  • 相关阅读:
    为什么电影里的黑客都不屑用鼠标? (转)
    专注做好一件事(转) focus---这个世界上最成功的人,他们在某一领域获得成功之后,可通过经营杠杆进入任何他们想要涉足的领域。而这都得依赖于他们曾极致的专注在做好一件事情上。
    世间万物都是遵循某种类似的规律,谁先把握了这些规律,谁就最早成为了强者。
    走的时候不要太急,有时间要停下来想一想当初为什么而走,这样,才会走的更稳,走的更明白。
    Android笔记: Android版本号
    Android笔记:真机调试无法输出Log 信息的问题
    阿里云服务器试用
    Android笔记:利用InputStream和BufferedReader 进行字节流 字符流处理
    Android笔记:java 中的数组
    Android笔记:C memory copy
  • 原文地址:https://www.cnblogs.com/huchong/p/10069521.html
Copyright © 2011-2022 走看看