AWK、SED、CUT及其他知识

本文命令已在AIX系统中验证。

AWK-扫描文件中每一行

逐行扫描文件，从第一行到最后一行，寻找匹配的特定模式的行，并在这些行上进行你想要的操作。如果没有指定处理动作，则把匹配的行显示到标准输出(屏幕)

输出使用{print }

1，输出某一列，print $列号

awk ‘{print $1}’文件名输出文件中每一行的第一列

awk ‘{print $1 $3}’文件名输出文件中每一行的第一列和第三列

{print $0}与{print}不做限制，输出所有

2,对行内容转换，print 字符

awk '{print “A”}’文件名

将每一行内容使用A进行替换

awk '{print 5}' 文件名

将每一行内容使用5进行替换

数字不需引号，其余字符需要引号。

指定不同的分隔符，如分隔符不为空格使用-F指定

awk -F”:”‘{print $1 $3}’文件名

使用冒号作为新的分隔符。

awk -F'[:\t]' '{print $1,$3}' 文件名

使用冒号或空格作为分割符，其中\t 表示TAB键,\n表示换行、回车。

如需在输出时修改每一列信息

如修改为第一列XX 第二列XX 第三列XX

awk -F":" '{print "1st:" $1 "\t2nd:" $2 "\t3rd:"$3}' 文件名

表示在第一列前加上1st：第二列前加上2nd: 第三列前加上3st:

原文件内容

A:a:1

B:b:2

C:c:3

D:d:4

E:e:5

F:f:6

输出如下：

1st:A 2nd:a 3rd:1

1st:B 2nd:b 3rd:2

1st:C 2nd:c 3rd:3

1st:D 2nd:d 3rd:4

1st:E 2nd:e 3rd:5

1st:F 2nd:f 3rd:6

使用\n效果如下：

awk -F":" '{print "1st:" $1 "\n2nd:" $2 "\n3rd:"$3}' awk1

1st:A

2nd:a

3rd:1

1st:B

2nd:b

3rd:2

1st:C

2nd:c

3rd:3

1st:D

2nd:d

3rd:4

1st:E

2nd:e

3rd:5

1st:F

2nd:f

3rd:6

awk '/^(AA|BB)/' awk1

输出以A或B开始的行，^表示行开头,A和B可以使用词组，如AA|BB|CC，表示AA、BB、CC开头的行均被输出。

awk ‘/^[AB]/{print $2}’文件名

输出以A或B开始的行，只输出第2列，

该种输出方式只能一个单词，如ABC，表示以A、B、C开头的行均被输出。

awk -F: '{print NR ,$1}' awk1

输出是增加行号,NR 表示行号

awk -F: '$3~/[0-9]$/{print $1}' awk1

~表示匹配，匹配第三列，如果以数字结尾（0-9，$表示结尾），输出第一列。

awk -F: '$3~/[0-9]/{print $1}' awk1

awk -F: '$3~/^[0-9]/{print $1}' awk1

以上两句表示匹配以0-9开始的第三列。

awk -F: '$1=="b"||$2=="b"' awk1

如果第一列为b，或者第二列为b，打印该行，||表示“或”，&&表示“且”。

awk -F: '$1=="B"&&$2=="b"' awk1

数字无需引号，==表示等于，!=表示不等于，也可使用>、<

awk -F: '/A/{print $2}' awk1

如果行中有A字符，输出第二列

awk -F: '/A/{print $3+10}' awk1

如果行中有A字符，输出第三列，并在第三列结果加上10。如果输出结果为字符，加10后只输出10。

创建如下文件

name1

new york

teacher

name2

shanghai

doctor

name3

beijing

manager

该文件每三行为一条信息

将信息进行重新输出，三行输出到一行中。

awk 'BEGIN { FS="\n"; RS=""} {print $1 ","$2"," $3} ' awk2

name1,new york,teacher

name2,shanghai,doctor

name3,beijing,manager

FS="\n"表示每个字段由换行符作为分割符，RS=""记录分割符为””。

把输出结果放置为一行

awk '{printf("%s,",$1)}' awk2

awk '{if($1<$2) print $1}' awk3

如果第一列值小于第二列，输出第一列

查看ps –ef中的请求号

ps-ef|grep prodappl |awk '{print $2}'

将ps-ef|grep prodappl这个命令的第二列进行输出

查看系统中的用户名，用户名存在/etc/passwd文件中，信息以冒号为分割符，第一列为用户名。

cat /etc/passwd |awk -F: '{print $1}'

或者

awk -F: '{print $1}' /etc/passwd

SED

Sed不变更文件内容，将输出内容进行编辑再输出。

Sed 1d 文件名

将文件中第一行删除再输出，1表示第一行，d表示删除，s表示替换

Sed 1,5d 文件名

将文件中1-5行删除再输出。

sed '/A/d' awk1

将文件中含有Ａ的行删除再输出，//表示搜索。d表示删除，p表示打印输出。

sed '/A/!d' awk1

!表示否定，表示不含A的删除，或者含A的不删除。

sed ‘/^$/d’ awk1

删除文件的空白行。^ 表开头，$ 表尾部，这两者之间没有任何字符，代表该行是一空白行。

新建文件awk4如下：

1

11

111

1111

11111

不显示三位数

sed '/[0-9]\{3\}/d' awk4

在样式[0-9]\{3\}中，\{3\} 表示要寻找的是3 个数字组成的字符串。

sed '/[0-9]\{3\}/p' awk4

sed使用p时会将不符合的也进行显示，需要添加-n加以限制。

sed –n '/[0-9]\{3\}/p' awk4

sed -n 's/1/2/p' awk4

s表示替换，将每一行中的1替换为2，但是每行只替换一次

sed -n 's/1/2/gp' awk4

g表示全局替换

sed 's/^.//' awk4

将每行开始的第一个字符替换成空。

^. 表示每行开始的第一个字符，

^…表示每行开始的三个字符。

…$ 表示每行结尾的三个字符

sed -n '/AAA/s/234/567/p' 文件名

将含有AAA字符的行中的234 替换成567 并输出。

sed -n '2,4s/B/567/p' 文件名

将第二至第四行中的B替换成567并输出。

sed -n '/A/,/D/s/B/567/p' 文件名

将含有A字符到D字符的（ABCD）的行中的B替换成567 并输出。

即含有A、或含有B、或含有C、或含有D的行中B替换成567

本文知识已在AIX系统中验证。

时间

date命令表示时间，用法可参考man date

$ date

Tue Apr 26 15:37:30 BEIST 2016

对时间进行格式化输出，如输出格式为年-月-日时：分：秒

$ date +%Y-%m-%d" "%H:%M:%S

2016-04-26 15:39:04

“ “表示在日期和时间之间增加一个空格

$ date +%Y%m%d

20160426

日期为+% 加格式

大写Y表示年，四位数

小写y表示年，两位数，后两位

小写m，表示月份，两位数0-12

小写d表示日期，两位数0-31

大写D表示具体日期，格式为月/日/年

大写H表示小时，0-24

小写h表示月份的英文，如四月显示Apr

大写M表示分钟，两位数0-59

大写S表示秒数，两位数0-59

小写r表示时分秒，格式如时（12小时）：分：秒AM/PM 大写R表示时分，格式如时（24小时）：分

date +%Y

date +%y

CUT命令

剪切内容.

cat 文件名| cut –c 5

读取文件，将每一行的第五个字符进行输出。

cat 文件名| cut –c 5

将每一行的5至8位置的字符输出。

C表示字符（character），b表示字节（byte）

cut -f "1 2 3" -d : /etc/passwd

将文件中第1，2,3列输出，并以冒号为分割符，f表示那几列，d表示分割符，d与f 需要搭配使用。

cut -f 1,4 -d : /etc/passwd

将第一列与第四列输出并以冒号为分割符

cut -f 1-2,4 -d : /etc/passwd

将1,2，4列输出并以冒号为分割符

其他知识

ps –ef >1.txt

将ps –ef的结果放入文件1.txt中，如不存在文件则新建文件，

>会覆盖已存在文件，

>>追加至已存在文件的最后。

脚本中需要执行命令

如将本机hostname赋值给某一变量，命令使用``包含，`为英文状态下键盘1左侧按键。

mname=`hostname`

表示将hostname这个命令输出的结果赋值给mname变量。

mtime=`date +%Y%m%d`

表示将date +%Y%m%d这个命令输出的结果赋值给mtime变量。

在脚本中使用mtime变量，${mtime}

Filename=${mtime}”.txt”