grep简介

1. grep是linux中最为常用的三大文本（awk，sed，grep）处理工具之一
2. grep它能使用正则表达式搜索文本，并把匹配的行打印出来。
3. grep全称是Global Regular Expression Print，表示全局正则表达式打印，它的使用权限是所有用户。
4. grep家族总共有三个：grep，egrep，fgrep（自己了解区别）

grep语法

grep pattern [file...]

• grep "搜索字符串" [filename]
• grep "正则表达式" [filename]
• 在文件中搜索所有 pattern 出现的位置, pattern 既可以是要搜索的字符串,也可以是一个正则表达式.
• 注意：在输入要搜索的字符串时最好使用双引号/而在模式匹配使用正则表达式时，注意使用单引号

grep常用选项

示例

• 查询/home/tomcat10086/logs/catalina-2019-12-03.out 文件中 所有包含‘csv’的行
  
• 查询/home/tomcat10086/logs/catalina-2019-12-03.out 文件中 所有‘csv’
  
• 查询/home/tomcat10086/logs/catalina-2019-12-03.out 文件中 所有包含‘csv’的行并显示行号

模式匹配

1. 直接输入要匹配的字符串，这个可以用fgrep（fast grep）代替来提高查找速度，比如我要匹配一下error.txt文件中printf的个数：fgrep -c "printf" error.txt

2. 使用基本正则表达式，下面谈关于基本正则表达式的使用：

主要参数

grep命令使用简单实例

# 显示所有以d开头的文件中包含 搜索字符串的行。
grep ‘搜索字符串’ d*
# 显示在aa，bb，cc文件中匹配搜索字符串的行。
grep ‘搜索字符串’ aa bb cc
# 显示所有包含每个字符串至少有5个连续小写字符的字符串的行。
grep ‘[a-z]\{5\}’ aa
# 如果west被匹配，则es就被存储到内存中，并标记为1，然后搜索任意个字符(.*)，这些字符后面紧跟着 另外一个es(\1)，找到就显示该行。如果用egrep或grep -E，就不用”\”号进行转义，直接写成’w(es)t.*\1′就可以了。
grep ‘west.*\1′ aa
# 多个文件查询
grep "sort" *.doc       #输出以doc结尾文件中包含 sort 的行
#行匹配:输出匹配行的计数
grep -c "48" data.doc   #输出文档中含有48字符的行数
#显示匹配行和行数
grep -n "48" data.doc       #显示所有匹配48的行和行号
#显示非匹配的行
grep -vn "48" data.doc      #输出所有不包含48的行
#显示非匹配的行
grep -vn "48" data.doc      #输出所有不包含48的行
#大小写敏感
grep -i "ab" data.doc       #输出所有含有ab或Ab的字符串的行

grep命令使用复杂实例

# 不区分大小写地搜索。默认情况区分大小写，
grep -i pattern files 
# 只列出匹配的文件名
grep -l pattern files 
# 列出不匹配的文件名
grep -L pattern files 
# 只匹配整个单词，而不是字符串的一部分(如匹配’magic’，而不是’magical’)，
grep -w pattern files 
# 匹配的上下文分别显示[number]行
grep -C number pattern files
# 查找当前目录（包含子目录）的字符串：
grep -r pattern  *
# 查找当前目录（包含子目录）的字符串，并输出行号：
grep -rn pattern *
# 显示匹配 pattern1 或 pattern2 的行
grep pattern1 | pattern2 files 
# 显示既匹配 pattern1 又匹配 pattern2 的行
grep pattern1 files | grep pattern2 
# 即可显示行号信息
grep -n pattern files  
# 可查找总行数
grep -c pattern files  

正则表达式的应用 (注意：最好把正则表达式用单引号括起来)

# \< 和 \> 分别标注单词的开始与结尾。
#‘^’：指匹配的字符串在行首
#‘$’：指匹配的字符串在行尾

grep man *  # 会匹配 ‘Batman’、’manic’、’man’等，
grep ‘\<man’ *  # 匹配’manic’和’man’，但不是’Batman’，
grep ‘\<man\>’ #只匹配’man’，而不是’Batman’或’manic’等其他的字符串。
grep '[239].' data.doc  #输出所有含有以2,3或9开头的，并且是两个数字的行
grep '^[^48]' data.doc      #不匹配行首是48的行
#使用扩展模式匹配
grep -E '219|216' data.doc

cat/more/tail 与 grep组合使用

• cat+grep

# 搜索  catalina-2019-12-03.out 文件中 所有包含  'csv' 的行
cat -n catalina-2019-12-03.out | grep 'csv'

• more +grep

# 搜索  catalina-2019-12-03.out 文件中 所有包含  'csv' 的行
more   catalina-2019-12-03.out | grep 'csv'

• tail +grep

# 动态搜索  catalina-2019-12-03.out 文件中 所有包含  'csv' 的行
tail -f catalina-2019-12-03.out | grep 'csv'

find命令

在 Linux 命令中，find用于在指定目录下查找文件。任何位于参数之前的字符串都将被视为欲查找的目录名，其支持按名称查找、按正则表达式查找、按文件大小查找、按文件权限查找等多种查询方式。如果在使用该命令时，不设置任何参数，则find命令将在当前目录下查找子目录与文件，并且将查找到的子目录和文件全部进行显示。

语法：find + 目标目录(路径) + <选项> + 参数

常用选项列表和含义：

-perm <权限数值>    查找符合指定的权限数值的文件或目录
-type <文件类型>    只寻找符合指定的文件类型的文件
-name <范本样式>    指定字符串作为寻找文件或目录的范本样式
-expty    寻找文件大小为 0 Byte 的文件，或目录下没有任何子目录或文件的空目录
-ls    假设find指令的回传值为ture，就将文件或目录名称列出到标准输出
-maxdepth <目录层级>    设置最大目录层级
-mindepth <目录层级>    设置最小目录层级
-exec <执行指令>    假设find指令的回传值为true，就执行该指令
-ok <执行指令>    此参数的效果和指定-exec类似，但在执行指令之前会先询问用户，若回答y或Y，则放弃执行命令

# 查找当前目录及其子目录下所有文件和文件夹
find .  

# 在/testLinux目录下查找以.txt结尾的文件名                               
find /tmp/cg/testLinux -name "*.txt"    

# 组合查找文件名以file1开头（与、或、非）file2开头的文件
find . -name "file1*" -a -name "file2*"      # 与and
find . -name "file1*" -o -name "file2*"      # 或or
find . -name "file1*" -not -name "file2*"    # 非not
find . -name "file1*" ! -name "file2*"       # 非not

# 根据文件类型进行搜索
find . -type f     # f为普通文件，d为目录，l为链接

# 基于目录深度进行搜索
find . -maxdepth 2 -type f   # 最大深度为2的文件

# 基于文件权限进行搜索
find . -type f -name "*.txt" ! -perm 777    # 权限为777的以.txt结尾的文件

# 借助-exec命令，将当前目录及子目录下所有.txt格式的文件以File:文件名的形式打印出来
find . -type f -name "*.txt" -exec printf "File: %s\n" {} \;

# 借助-exec命令，将当前目录及子目录下所有 3 天前的.txt格式的文件复制一份到old目录
find . -type f -mtime +3 -name "*.txt" -exec cp {} old \;

grep命令

命令行下常用于查找过滤文本文件内容的命令。grep 指令用于查找文件中包含指定的范本样式的文本内容，如果发现某文件的内容符合所指定的范本样式，预设 grep 指令会把含有范本样式的那一列显示出来。若不指定任何文件名称，或是所给予的文件名为 -，则 grep 指令会从标准输入设备读取数据。

# 语法
grep [-abcEFGhHilLnqrsvVwxy][-A<显示行数>][-B<显示行数>][-C<显示行数>][-d<进行动作>][-e<范本样式>][-f<范本文件>][--help][范本样式][文件或目录...]

一些常用参数：

• -A<显示行数> 或 --after-context=<显示行数> : 除了显示符合范本样式的那一行之外，并显示该行之后的内容。
• -B<显示行数> 或 --before-context=<显示行数> : 除了显示符合样式的那一行之外，并显示该行之前的内容。
• -c 或 --count : 计算符合样式的列数。
• -C<显示行数> 或 --context=<显示行数>或-<显示行数> : 除了显示符合样式的那一行之外，并显示该行之前后的内容。
• -e<范本样式> 或 --regexp=<范本样式> : 指定字符串做为查找文件内容的样式。
• -E 或 --extended-regexp : 将样式为延伸的正则表达式来使用。
• -H 或 --with-filename : 在显示符合样式的那一行之前，表示该行所属的文件名称。
• -i 或 --ignore-case : 忽略字符大小写的差别。
• -L 或 --files-without-match : 列出文件内容不符合指定的样式的文件名称。
• -n 或 --line-number : 在显示符合样式的那一行之前，标示出该行的行数号。
• -o 或 --only-matching : 只显示匹配PATTERN 部分。
• -r 或 --recursive : 此参数的效果和指定"-d recurse"参数相同。
• -v 或 --invert-match : 显示不包含匹配文本的所有行。
• -V 或 --version : 显示版本信息。
• -x --line-regexp : 只显示全列符合的列。

# 当前目录中，查找后缀有 file 字样的文件中包含 test 字符串的文件，并打印出该字符串的行
grep test *file 

# 以递归的方式查找符合条件的文件。例如，查找指定目录/etc/acpi 及其子目录（如果存在子目录的话）下所有文件中包含字符串"update"的文件
grep -r update /etc/acpi 

# 反向查找,通过"-v"参数可以打印出不符合条件行的内容。查找文件名中包含 test 的文件中不包含test 的行
grep -v test *test*

# 查询含有特定文本的文件，并拿到这些文本所在的行
grep -n '2019-10-24 00:01:11' *.log

# 查找匹配的总行数
grep -c "被查找的字符串" 文件名

# 从文件内容查找与正则表达式匹配的行
grep –e "正则表达式" 文件名

# 查找时不区分大小写
grep –i "被查找的字符串" 文件名

# 从文件内容查找不匹配指定字符串的行
grep –v "被查找的字符串" 文件名

find与grep结合

# 从根目录开始查找所有扩展名为 .log 的文本文件，并找出包含 "ERROR" 的行
find / -type f -name "*.log" | xargs grep "ERROR"

# 从当前目录开始查找所有扩展名为 .in 的文本文件，并找出包含 "thermcontact" 的行
find . -name "*.in" | xargs grep "thermcontact"

很多时候，我们并不需要列出文件的全部内容，而是从文件中找到包含指定信息的那些行，要实现这个目的，可以使用 grep 命令。

grep 命令作为 Linux 文本处理三剑客的一员，另外两个是 sed 和 awk，它们会在后续章节中作详细介绍。

grep 命令的由来可以追溯到 UNIX 诞生的早期，在 UNIX 系统中，搜索的模式（patterns）被称为正则表达式（regular expressions），为了要彻底搜索一个文件，有的用户在要搜索的字符串前加上前缀 global（全面的），一旦找到相匹配的内容，用户就像将其输出（print）到屏幕上，而将这一系列的操作整合到一起就是 global regular expressions print，而这也就是 grep 命令的全称。

grep命令能够在一个或多个文件中，搜索某一特定的字符模式（也就是正则表达式），此模式可以是单一的字符、字符串、单词或句子。

正则表达式是描述一组字符串的一个模式，正则表达式的构成模仿了数学表达式，通过使用操作符将较小的表达式组合成一个新的表达式。正则表达式可以是一些纯文本文字，也可以是用来产生模式的一些特殊字符。为了进一步定义一个搜索模式，grep 命令支持如表 1 所示的这几种正则表达式的元字符（也就是通配符）。

需要注意的是，在基本正则表达式中，如通配符 *、+、{、|、( 和 )等，已经失去了它们原本的含义，而若要恢复它们原本的含义，则要在之前添加反斜杠 ，如 *、+、{、|、( 和 )。

grep 命令是用来在每一个文件或中（或特定输出上）搜索特定的模式，当使用 grep 时，包含指定字符模式的每一行内容，都会被打印（显示）到屏幕上，但是使用 grep 命令并不改变文件中的内容。

grep 命令的基本格式如下：

[root@localhost ~]# grep [选项] 模式 文件名

这里的模式，要么是字符（串），要么是正则表达式。而此命令常用的选项以及各自的含义如表 2 所示。

注意，如果是搜索多个文件，grep 命令的搜索结果只显示文件中发现匹配模式的文件名；而如果搜索单个文件，grep 命令的结果将显示每一个包含匹配模式的行。

【例 1】假设有一份 emp.data 员工清单，现在要搜索此文件，找出职位为 CLERK 的所有员工，则执行命令如下：

[root@localhost ~]# grep CLERK emp.data
#忽略输出内容

而在此基础上，如果只想知道职位为 CLERK 的员工的人数，可以使用“-c”选项，执行命令如下：

[root@localhost ~]# grep -c CLERK emp.data
#忽略输出内容

【例 2】搜索 emp.data 文件，使用正则表达式找出以 78 开头的数据行，执行命令如下：

[root@localhost ~]# grep ^78 emp.data
#忽略输出内容

grep 命令的功能非常强大，通过利用它的不同选项以及变化万千的正则表达式，可以获取任何我们所需要的信息。本节所介绍的 grep 命令，只介绍了它的一部分基础知识，比如说，grep 命令可用的选项还有很多，且用法也五花八门，不过对于初学者来说，本节所介绍的内容已经足以应付多数 Linux 系统的日常工作了。

Linux文本处理（Linux三剑客）
6.1 Linux cat
6.2 Linux more
6.3 Linux head
6.4 Linux less
6.5 Linux tail
6.6 Linux grep（Linux三剑客之一）
6.7 Linux sed（Linux三剑客之一）
6.8 Linux sed命令高级用法精讲
6.9 Linux awk（Linux三剑客之一）
6.10 Linux awk命令高级用法