第十六章 在文件中搜索文本工具:grep命令 和egrep命令

第十六章 在文件中搜索文本工具:grep命令 和egrep命令

名词解释

grep(global search regular expression(RE)and print out the line,全面搜索正则表达式并把行打印出来)
grep是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来。

选项

- -a :不要忽略二进制数据
- -A <显示行数>:除了显示符合范本样式的那一行之外,并显示该行之后的内容。
- -b :在显示符合范本样式的那一行之外,并显示该行所有的内容。
- -B <显示行数>:除了显示符合范本样式的那一行之外,并显示该行之前的内容。
- -c ,--count : 计算符合范本样式的行数。
- -C <显示列数>或-<显示列数>:除了显示符合范本样式的那一行之外,并显示 该行 的前后行内容。
- -d <进行动作>:当指定要查找的是目录而非文件时,必须使用这项参数,否则grep命令将汇报信息并停止动作。-d recurse 递归查找的意思。
- -e <范本样式>:指定字符串作为查找文件内容的范本样式。
- -E :将范本样式为延伸的普通表示法来使用,意味着能使用扩展正则表达式。
- -f <范本文件>:指定范本文件,其内容有一个或多个 范本样式,让grep查找符合范本条件的文件内容,格式为每一行的范本样式。
- -F :将范本样式视为固定字符串的列表。
- -G :将范本样式视为普通的表示法来使用。
- -h :在显示符合范本样式的那一列之前,不表示该列所属的文件名称。
- -H :在显示符合范本样式的那一列之前,表示该列的文件名称。
- -i :忽略字符大小写的差别。
- -l :列出文件内容符合指定的范本样式的文件名称。
- -L :列出文件内容不合符指定的范本样式的文件名称。
- -n :在显示符合范本昂是的那一行之前,并打印行号。
- -q :不显示任何信息。
- -R / -r :此参数的效果和指定"-d recurse" 一样,递归查找的意思。
- -s :不显示错误信息。
- -v :反转查找。
- -w :只显示全字符合的列(全字匹配)。
- -x :只显示全列符合的列。
- -y :此参数效果跟"-i" 相同。
- -o :只输出文件中匹配到的部分。
-  -Z : --null   print 0 byte after FILE name

grep 命令常见用法

在文件中搜索一个单词,命令会返回一个包含"match_pattern"的文本行:

grep match_pattern file_name
grep "match_pattern" file_name

在多个文件中查找:

grep "match_pattern" file_1 file_2 file_3 ...

输出除了‘match_pattern’之外的所有行 -v选项:

grep -v "match_pattern" file_name

标记匹配颜色 --color=auto 选项:

grep "match_pattern" file_name --color=auto

使用正则表达式-E选项:

grep -E "[1-9]+" test.txt  #匹配文件里的所有数字
或者
egrep "[1-9]+" test.txt

例子:
[root@ceshi grep]# echo "this 1 is 2 a 3 test 4 line." | grep -o -E "[1-9]+"  
1
2
3
4

只输出文件中匹配到的部分-o 选项:

[root@ceshi grep]# echo "this is a test line." | grep -o -E "[a-z]+\."
line.

或者
[root@ceshi grep]# echo "this is a test line." | egrep -o "[a-z]+\."
line.

统计文件或者文本中包含匹配字符串的行数-c 选项:

[root@ceshi grep]# grep -c "a" test.txt 
2

输出包含匹配字符串的行数,并打印行号 -n 选项:

[root@ceshi grep]# grep -n "a" test.txt  
1:aaaaaaaaaa
2:aaaaaaaaaa

或者
[root@ceshi grep]# cat test.txt | grep "a" -n
1:aaaaaaaaaa
2:aaaaaaaaaa

多个文件查找:
[root@ceshi grep]# grep -n "a" test.txt test2.txt 
test.txt:1:aaaaaaaaaa
test.txt:2:aaaaaaaaaa
test2.txt:1:aaaaaaaaaa
test2.txt:2:aaaaaaaaaa

打印匹配到的字符所在的字符位置(字节偏移)和字符:

[root@ceshi grep]# echo "this is a test line." | grep -b -o "test"
10:test

#一行中字符串所在的位置从该行的第一个字符开始计算,起始值为0;选项-b -o 一般总是配合使用。

搜索多个文件并查找匹配文本在那些文件中:

#搜索文件内容包含a 的文件名都打印出来
[root@ceshi grep]# grep -l "a" test.txt test2.txt   
test.txt
test2.txt

grep递归搜索文件

在多级目录中对文本进行递归搜索:

[root@ceshi grep]# grep "a" . -r -n
./test.txt:1:aaaaaaaaaa
./test.txt:2:aaaaaaaaaa
./test2.txt:1:aaaaaaaaaa
./test2.txt:2:aaaaaaaaaa

或者
[root@ceshi grep]# grep "a" . -d recurse -n
./test.txt:1:aaaaaaaaaa
./test.txt:2:aaaaaaaaaa
./test2.txt:1:aaaaaaaaaa
./test2.txt:2:aaaaaaaaaa

# .代表当前目录
# -r 、-R、-d recurse 都是递归查找的意思

忽略匹配样式中的字符大小写:

[root@ceshi grep]# echo "Hello WorlD" | grep -i "hello" 
Hello

选项-e指定多个匹配样式:

例1:
[root@ceshi grep]# echo "this is a text line" | grep -e "is" -e "line" -o
is
is
line

[root@ceshi grep]# echo this is a text line | grep -e "is" -e "line" -o -w
is
line

# -w:全自符匹配,也就是完全匹配字符串,而不是模糊匹配

例2:
#也可以使用-f选项来匹配多个样式,在样式文件中逐行写出需要匹配的字符。
[root@ceshi grep]# cat test3.txt 
aaa
aaaa
111
bbb
22222222222
bbbb
6666666666
ccc
cccc
#匹配出test3.txt 文件中包含 aaa bbb ccc ddd的字符
[root@ceshi grep]# echo "aaa bbb ccc ddd
" | grep -f test3.txt -o
aaa
bbb
ccc
#由于test3.txt中没有ddd,所有没有匹配到,也没有被打印。

在grep搜索结果中包括 或者 排除指定文件:

#在目录中查找所以.php和.html文件中递归搜索字符"main()"
grep "main()" . -r --include *.{php,html}

#在搜索结果中排除所有README文件
grep "main()" . -r --exclude "README"

#在搜索结果中排除filelist文件列表里的文件
grep "main()" . -r --exclude-from filelist

使用0值字节后缀的grep与xargs

[root@ceshi grep]# echo "aaa" > file1
[root@ceshi grep]# echo "bbb" > file2    
[root@ceshi grep]# echo "ccc" > file3 

#在所有file开头文件中查找包含“aaa”的文件,然后删除匹配文件
[root@ceshi grep]# grep "aaa" file* -lZ | xargs -0 rm 

[root@ceshi grep]# ls
a.php  b.html  file2  file3  test2.txt  test3.txt  test.txt

#执行后file1倍删除掉了。
#grep 输出用-Z 选项来指定以0值字节作为终结符文件名(\0)
#xargs -0来读取输入并用0值字节终结符 分隔文件名,然后删除匹配文件,-Z和-l 通常联合使用。

grep静默输出:

[root@ceshi grep]# grep -q "test" file2
[root@ceshi grep]# echo $?
1

#-q 不显示任何信息;如果命令运行成功返回0,失败则非0,一般用于条件测试。
#用echo $? 测试 条件成功与否。

打印出匹配文本之前或者之后的行:

#显示匹配某个结果之后的3行,使用-A 选项:
[root@ceshi grep]# seq 10 | grep "5" -A 3
5
6
7
8

#显示匹配某个结果之前的3行,使用-B 选项:
[root@ceshi grep]# seq 10 | grep "5" -B 3
2
3
4
5

#显示匹配某个结果前3行和后3行,使用-C 选项:
[root@ceshi grep]# seq 10 | grep "5" -C 3
2
3
4
5
6
7
8

egrep命令

egrep也是在文件内查找指定的字符串。egrep类似grep -E 使用效果,使用语法及参数 参考grep指令,与grep不同点在于 解读字符串的方法。

(grep -E :将范本样式为延伸的普通表示法来使用,意味着能使用扩展正则表达式。)

egrep解读方法:extended regular expression

grep的解读方法:basic regular expression

前者比后者表达更规范。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


用的openwrt路由器,家里宽带申请了动态公网ip,为了方便把2280端口映射到公网,发现经常被暴力破解,自己写了个临时封禁ip功能的脚本,实现5分钟内同一个ip登录密码错误10次就封禁这个ip5分钟,并且进行邮件通知使用步骤openwrt为19.07.03版本,其他版本没有测试过安装bashmsmtpopkg
#!/bin/bashcommand1&command2&wait从Shell脚本并行运行多个程序–杨河老李(kviccn.github.io)
1.先查出MAMP下面集成的PHP版本cd/Applications/MAMP/bin/phpls-ls 2.编辑修改.bash_profile文件(没有.bash_profile文件的情况下回自动创建)sudovim~/.bash_profile在文件的最后输入以下信息,然后保存退出exportPATH="/Applications/MAMP/bin/php/php7.2.20/b
1、先输入locale-a,查看一下现在已安装的语言2、若不存在如zh_CN之类的语言包,进行中文语言包装:apt-getinstalllanguage-pack-zh-hans3、安装好后我们可以进行临时修改:然后添加中文支持: locale-genzh_CN.UTF-8临时修改> export LC_ALL='zh_CN.utf8'> locale永久
BashPerlTclsyntaxdiff1.进制数表示Languagebinaryoctalhexadecimalbash2#[0~1]0[0~7]0x[0~f]or0X[0~f]perl0b[0~1]0[0~7]0x[0~f]tcl0b[0~1]0o[0~7]0x[0~f]bashdifferentbaserepresntationreference2.StringlengthLanguageStr
正常安装了k8s后,使用kubect工具后接的命令不能直接tab补全命令补全方法:yum-yinstallbash-completionsource/usr/share/bash-completion/bash_completionsource<(kubectlcompletionbash)echo"source<(kubectlcompletionbash)">>~/.bashrc 
参考这里启动jar包shell脚本修改过来的#!/bin/bash#默认应用名称defaultAppName='./gadmin'appName=''if[[$1&&$1!=0]]thenappName=$1elseappName=$defaultAppNamefiecho">>>>>>本次重启的应用:$appName<
#一个数字的行#!/bin/bashwhilereadlinedon=`echo$line|sed's/[^0-9]//g'|wc-L`if[$n-eq1]thenecho$linefidone<1.txt#日志切割归档#!/bin/bashcd/data/logslog=1.logmv_log(){[-f$1]&&mv$1$2
#文件增加内容#!/bin/bashn=0cat1.txt|whilereadlinedon=[$n+1]if[$n-eq5]thenecho$lineecho-e"#Thisisatestfile.\n#Testinsertlineintothisfile."elseecho$linefidone#备份/etc目录#
# su - oraclesu: /usr/bin/ksh: No such file or directory根据报错信息:显示无法找到文件 /usr/bin/ksh果然没有该文件,但是发现存在文件/bin/ksh,于是创建了一个软连接,可以规避问题,可以成功切换到用户下,但无法执行系统自带命令。$. .bash_profile-ksh: .: .b
history显示历史指令记录内容,下达历史纪录中的指令主要的使用方法如果你想禁用history,可以将HISTSIZE设置为0:#exportHISTSIZE=0使用HISTIGNORE忽略历史中的特定命令下面的例子,将忽略pwd、ls、ls-ltr等命令:#exportHISTIGNORE=”pwd:ls:ls-ltr:”使用HIS
一.命令历史  1.history环境变量:    HISTSIZE:输出的命令历史条数,如history的记录数    HISTFILESIZE:~/.bash_history保存的命令历史记录数    HISTFILLE:历史记录的文件路径    HISTCONTROL:     ignorespace:忽略以空格开头的命令
之前在网上看到很多师傅们总结的linux反弹shell的一些方法,为了更熟练的去运用这些技术,于是自己花精力查了很多资料去理解这些命令的含义,将研究的成果记录在这里,所谓的反弹shell,指的是我们在自己的机器上开启监听,然后在被攻击者的机器上发送连接请求去连接我们的机器,将被攻击者的she
BashOne-LinersExplained,PartI:Workingwithfileshttps://catonmat.net/bash-one-liners-explained-part-oneBashOne-LinersExplained,PartII:Workingwithstringshttps://catonmat.net/bash-one-liners-explained-part-twoBashOne-LinersExplained,PartII
Shell中变量的作用域:在当前Shell会话中使用,全局变量。在函数内部使用,局部变量。可以在其他Shell会话中使用,环境变量。局部变量:默认情况下函数内的变量也是全局变量#!/bin/bashfunctionfunc(){a=99}funcecho$a输出>>99为了让全局变量变成局部变量
1、多命令顺序执行;  命令1;命令2  多个命令顺序执行,命令之间没有任何逻辑联系&&  命令1&&命令2  逻辑与,当命令1正确执行,才会执行命令2||  命令1||命令2  逻辑或,当命令1执行不正确,才会执行命令2例如:ls;date;cd/home/lsx;pwd;who ddif=输入文件of=输
原博文使用Linux或者unix系统的同学可能都对#!这个符号并不陌生,但是你真的了解它吗?首先,这个符号(#!)的名称,叫做"Shebang"或者"Sha-bang"。Linux执行文件时发现这个格式,会把!后的内容提取出来拼接在脚本文件或路径之前,当作实际执行的命令。 Shebang这个符号通常在Unix系统的脚本
1、历史命令history[选项][历史命令保存文件]选项:-c:  清空历史命令-w:  把缓存中的历史命令写入历史命令保存文件 ~/.bash_historyvim/etc/profile中的Histsize可改存储历史命令数量历史命令的调用使用上、下箭头调用以前的历史命令使用“!n”重复执行第n条历史
目录1.Shell脚本规范2.Shell脚本执行3.Shell脚本变量3.1环境变量3.1.1自定义环境变量3.1.2显示与取消环境变量3.1.3环境变量初始化与对应文件的生效顺序3.2普通变量3.2.1定义本地变量3.2.2shell调用变量3.2.3grep调用变量3.2.4awk调用变量3.3
   http://www.voidcn.com/blog/wszzdanm/article/p-6145895.html命令功能:显示登录用户的信息命令格式:常用选项:举例:w显示已经登录的用户及正在进行的操作[root@localhost~]#w 11:22:01up4days,21:22, 3users, loadaverage:0.00,0.00,0.00USER