linux中grep命令详解
前言
在linux命令行中,经常需要对当前获取的一堆数据进行过滤、提取和分析,其中grep命令是其中非常重要的命令之一,比如,在生产环境服务器上,经常使用到下面这个命令
ps -ef | grep java
显然,grep的作用就是帮助筛选出那些运行中的java进程
grep 作用
文本搜索工具,根据用户指定的“模式”(过滤条件),对目标文本逐行进行匹配,并打印输出匹配到的行;
模式:由正则表达式的元字符串及文本字符串所编写的过滤条件
grep 完整语法结构
grep [options] [pattern] file
命令 参数 匹配模式 文件数据
上述语法结构中,经常可配合下面的参数一起使用
-i : 忽略大小写;
-o : 仅显示匹配到目标字符串;
-v : 显示不能被匹配到的字符串(反转);
-E : 支持使用扩展的正则表达式字符串;
-q : 静默模式,不输出任何信息
grep 命令里的匹配模式,就是你想要找出来的数据,可以是普通的文字符号,也可以是正则表达式;
grep常用的参数总结
参数选项 | 解释说明 |
---|---|
-V | 排除匹配结果 |
-n | 显示匹配行与行号 |
-i | 不区分大小写 |
-c | 只统计匹配行数 |
-E | 使用egrep命令 |
-o | 只输出匹配内容 |
-w | 只输出过滤的单词 |
-F | 不适用正则表达式 |
-l | 列出包含匹配项的文件名 |
-L | 列出不包含匹配项的文件名 |
grep中常用正则表达式
一、基本常用正则表达式汇总
表达式 | 解释说明 |
---|---|
^ | 用于模式最左侧,如 “^yu” 即匹配以yu开头的单词 |
$ | 用于模式最右侧,如 “yu$” 即匹配以yu结尾的单词 |
^$ | 组合符,表示空行 |
. | 匹配任意一个且只有一个字符,不能匹配空行 |
| 转义字符 | |
* | 重匹配前一个字符连续出现0次或1次以上 |
.* | 匹配任意字符 |
^.* | 组合符,匹配任意多个字符开头的内容 |
.*$ | 组合符,匹配任意多个字符结尾的内容 |
[abc] | 匹配 [] 内集合中的任意一个字符,a或b或c,也可以写成 [ac] |
[^abc] | 匹配除了 ^后面的任意一个字符,a或b或c,[]内 ^ 表示取反操作 |
案例演示
素材准备,将系统中账户密码输出到一个pwd.txt文件中
自定义一个names.txt 的文件,内容如下
1、找出names.txt中的注释行,并过滤空行
grep "^#" names.txt -v | grep "^$" -v
2、输出以h开头的行,不区分大小写
这里重点考察对 “^” 的使用
grep -i "^h" names.txt
3、输出以/bin/bash结尾的行
grep -n "bin/bash$" pwd.txt
4、过滤非空的行
grep '^$' names.txt -v
5、匹配文本中至少包含一个 is 的行
grep -i ".is" names.txt
6、匹配文本中包含数字的行
考察对 [abc] 类似的用法
- [a-z] 匹配所有小写单个字母
- [A-Z] 匹配所有大写单个字母
- [a-zA-Z] 匹配所有单个大小写字母
- [0-9] 匹配所有单个数字
- [0-9a-zA-Z] 匹配所有数字和字母
grep "[0-9]" names.txt
二、扩展正则表达式使用
表达式 | 解释说明 |
---|---|
+ | 表示匹配前一个字符一次或多次 |
? | 表示匹配前一个字符0次或1次 |
() | 将一个或多个字符捆绑在一起,当作整体进行处理 |
{n,m} | 匹配目标字符,最少n次,最多m次 |
{n,m} | 匹配目标字符,最少n次,上不封顶 |
> | 匹配位于 目标字符开头的字符串,即截止到 < 前面的字符为止,精确匹配 |
< | 匹配位于 目标字符结尾的字符串,即截止到 > 前面的字符为止,精确匹配 |
案例演示
1、筛选前一个字符包含e的的文本行
grep -E 'e+' names.txt
2、筛选前一个字符包含he的出现0次或者1次的文本行
grep -E 'he?' names.txt
3、找出文本中包含 “hi” 或 “java” 的文本行
grep -E -i 'hi|java' names.txt
4、找出文本中包含 good和glad的文本
这里考察使用小括号() 分组的用法,下面有一个测试文本文件,内容如下
grep -E 'g(oo|la)d' test1.txt
5、找出文本中的 o 字符出现的次数最少2次,最多7次的文本行
考察dui {n,m}的用法,表示匹配的字符最少n次,最多m次
grep -E 'o{2,7}' test1.txt
6、找出文本中的 o 字符出现的次数最少3次
grep -E 'o{3,}' test1.txt
7、找出文本中root用户和zcy用户
如果像下面这样直接使用grep命令查找,可以看到zcy这个字符串开头的账户有多个,显然不符合预期
grep -E '^(root|zcy)' pwd.txt
这就需要使用到 > 这个表达式了,改进之后,再次执行就符合预期的目标了
grep -E '^(root|zcy)\>' pwd.txt
三、常用grep 正则表达式参数汇总
下面提供一些grep相关的可选参数,方便遇到问题时快速查阅
表达式 | 解释说明 |
---|---|
-a 或 –text | 不要忽略二进制的数据。 |
-A<显示行数> 或 –after-context=<显示行数> | 除了显示符合范本样式的那一列之外,并显示该行之后的内容。 |
-b 或 –byte-offset | 在显示符合样式的那一行之前,标示出该行第一个字符的编号。 |
-B<显示行数> 或 –before-context=<显示行数> | 除了显示符合样式的那一行之外,并显示该行之前的内容。 |
-c 或 –count | 计算符合样式的列数。 |
-C<显示行数> 或 –context=<显示行数>或-<显示行数> | 除了显示符合样式的那一行之外,并显示该行之前后的内容 |
-d <动作> 或 –directories=<动作> | 当指定要查找的是目录而非文件时,必须使用这项参数,否则grep指令将回报信息并停止动作 |
-e<范本样式> 或 –regexp=<范本样式> | 指定字符串做为查找文件内容的样式。 |
-E 或 –extended-regexp | 将样式为延伸的正则表达式来使用。 |
-f<规则文件> 或 –file=<规则文件> | 指定规则文件,其内容含有一个或多个规则样式,让grep查找符合规则条件的文件内容,格式为每行一个规则样式。 |
-F 或 –fixed-regexp | 将样式视为固定字符串的列表。 |
-G 或 –basic-regexp | 将样式视为普通的表示法来使用。 |
-h 或 –no-filename | 在显示符合样式的那一行之前,不标示该行所属的文件名称。 |
-H 或 –with-filename | 在显示符合样式的那一行之前,表示该行所属的文件名称。 |
-i 或 –ignore-case | 忽略字符大小写的差别。 |
-l 或 –file-with-matches | 列出文件内容符合指定的样式的文件名称。 |
-L 或 –files-without-match | 列出文件内容不符合指定的样式的文件名称。 |
-n 或 –line-number | 在显示符合样式的那一行之前,标示出该行的列数编号。 |
-o 或 –only-matching | 只显示匹配PATTERN 部分。 |
-q 或 –quiet或–silent | 不显示任何信息。 |
-r 或 –recursive | 此参数的效果和指定”-d recurse”参数相同 |
-s 或 –no-messages | 不显示错误信息 |
-v 或 –invert-match | 显示不包含匹配文本的所有行 |
-V 或 –version | 显示版本信息。 |
-w 或 –word-regexp | 只显示全字符合的列 |
-x –line-regexp | 只显示全列符合的列 |
-y | 此参数的效果和指定”-i”参数相同 |
其他grep相关案例总结
1、统计出zcy 账户出现的次数
grep -c '^zcy' pwd.txt
2、匹配zcy这个账户,匹配结果最多展示2条
grep -m 2 '^zcy' pwd.txt
3、匹配多文件下,存在某个字符串的内容
grep "zcy" ./f1/pwd.txt ./f2/word.txt
4、找出系统密码中那些仅包含2位数或者3位数的内容
grep -n -E "\<[0,9]{2,3}\>" ./pwd.txt
5、匹配那些以大写字母开头的行
grep -n -E "^[A-Z]" names.txt
6、从多个账户中匹配出任意一个符合要求的
grep -n -E "^(root|zcy|nobidy)\>" ./pwd.txt
7、递归找出当前root目录下所有文件中包括zcy字符的文件
grep -r '^zcy' /root
本文来自博客园,作者:海_纳百川,转载请注明原文链接:https://www.cnblogs.com/chentiao/p/16626503.html,如有侵权联系删除