Shell中的grep、awk和sed的常用命令和语法

常用的grep选项有：

-c 只输出匹配行的计数。

-i 不区分大小写（只适用于单字符）。

-h 查询多文件时不显示文件名。

-l 查询多文件时只输出包含匹配字符的文件名。

-n 显示匹配行及行号。

-s 不显示不存在或无匹配文本的错误信息。

-v 显示不包含匹配文本的所有行。

$ grep“sort”*.doc ( #在当前目录下所有. d o c文件中查找字符串”s o r t”) $ grep “sort it” * (#或在所有文件中查询单词”sort it”)

2.行匹配

$ grep -c “48″ data.f

$ 4 (#g r e p返回数字4，意义是有4行包含字符串”4 8″。)

$ grep “48″ data.f (#显示包含”4 8″字符串的4行文本)

7. 查询空行，查询以某个条件开头或者结尾的行。

结合使用^和$可查询空行。使用- n参数显示实际行数

[root@mypc oid2000]# grep -n “^$” 111.txt (返回结果 2: #说明第二行是空行) [root@mypc oid2000]# grep -n “^abc” 111.txt （#查询以abc开头的行）

[root@mypc oid2000]# grep -n “abc$” 111.txt (#查询以abc结尾的行)

8. 匹配特殊字符,查询有特殊含义的字符，诸如$ . ‘ ” * [] ^ | \ + ? ,必须在特定字符前加\。

[root@mypc oid2000]# grep “\.” 111.txt (#在111.txt中查询包含”.”的所有行) [root@mypc oid2000]# grep “my\.conf” 111.txt (#查询有文件名my. c o n f的行)

9. 目录的查询

[root@mypc oid2000]# ls -l |grep “^d” (#如果要查询目录列表中的目录)

[root@mypc oid2000]# ls -l |grep “^d[d]“ (#在一个目录中查询不包含目录的所有文件)

[root@mypc]# ls -l |grpe “^d…..x..x” (#查询其他用户和用户组成员有可执行权限的目录集合)

Awk的常用命令语法

awk [-F filed-s eparator] “commands” input-file(s)

[ - F域分隔符]是可选的,a w k使用空格作为缺省的域分隔符

1.2保存a w k输出

$ awk ‘{print $0}’ input-files > out-files (#重定向保存输出)

$ awk ‘{print $0}’ input-files | tee out-files (#使用t e e命令，输出到文件的同时输出到屏幕)

1.3 常用的awk命令举例

[root@mypc /]# awk ‘$0 ~ /user/’ /etc/passwd (#如果某域含有user就将该行打

印出来)

# ifconfig | awk ‘/inet/{print $2}’ | awk -F: ‘{print $2}’ (#在上面的基础上再抽取，这个命令可以让你直接得到本机的ip地址)

Sed的常用命令语法

1．行的匹配

# sed -n ‘2p’ /etc/passwd 打印出第2行

# sed -n ‘1,3p’ /etc/passwd 打印出第1到第3行

# sed -n ‘$p’ /etc/passwd 打印出最后一行

# sed -n ‘/user/’p /etc/passwd 打印出含有user的行

# sed -n ‘/\$/’p /etc/passwd 打印出含有$元字符的行，$意为最后一行

2．插入文本和附加文本(插入新行)

# sed -n ‘/FTP/p’ /etc/passwd 打印出有FTP的行

# sed ‘/FTP/ a\ 456′ /etc/passwd 在含有FTP的行后面新插入一行，内容为456 # sed ‘/FTP/ i\ 123′ /etc/passwd在含有FTP的行前面新插入一行，内容为123 # sed ‘5 a\ 123′ /etc/passwd 在第5行后插入一新行，内容为123

# sed ‘5 i\ “12345″‘ /etc/passwd 在第5行前插入一新行，内容为”12345″3．删除文本

# sed ‘1d’ /etc/passwd 删除第1行

# sed ‘1,3d’ /etc/passwd 删除第1至3行

# sed ‘/user/d’ /etc/passwd 删除带有user的行

4．替换文本,替换命令用替换模式替换指定模式，格式为：

#sed ’s/user/USER/’ /etc/passwd 将第1个user替换成USER,g表明全局替换

#sed ’s/user/USER/g’ /etc/passwd 将所有user替换成USER

#sed ’s/user/#user/’ /etc/passwd 将第1个user替换成#user,如用于屏蔽作用#sed ’s/user//’ /etc/passwd 将第1个user替换成空

#sed -e '/^#/d' /etc/https://www.360docs.net/doc/615745388.html,f | sed -e '/^$/d' |more

5. 快速一行命令

下面是一些一行命令集。（[ ]表示空格，[ ]表示t a b键）

‘s / \ . $ / / g’ 删除以句点结尾行

‘-e /abcd/d’ 删除包含a b c d的行

‘s / [ ] [ ] [ ] * / [ ] / g’ 删除一个以上空格，用一个空格代替

‘s / ^ [ ] [ ] * / / g’ 删除行首空格

‘s / \ . [ ] [ ] * / [ ] / g’ 删除句点后跟两个或更多空格，代之以一个空格‘/ ^ $ / d’ 删除空行

‘s / ^ . / / g’ 删除第一个字符

‘s /COL \ ( . . . \ ) / / g’ 删除紧跟C O L的后三个字母

‘s / ^ \ / / / g’ 从路径中删除第一个\

‘s / [ ] / [ ] / / g’ 删除所有空格并用t a b键替代

‘S / ^ [ ] / / g’ 删除行首所有t a b键

‘s / [ ] * / / g’ 删除所有t a b键

如果使用s e d对文件进行过滤，最好将问题分成几步，分步执行，且边执行边测试结果。

经验告诉我们，这是执行一个复杂任务的最有效方式。