awk是一个强大的文本分析工具
调用awk
1.命令行方式
awk [-F field-separator] 'commands' input-file(s)
其中,commands 是真正awk命令,[-F域分隔符]是可选的。 input-file(s) 是待处理的文件。
在awk中,文件的每一行中,由域分隔符分开的每一项称为一个域。通常,在不指名-F域分隔符的情况下,默认的域分隔符是空格。
2.shell脚本方式
将所有的awk命令插入一个文件,并使awk程序可执行,然后awk命令解释器作为脚本的首行,一遍通过键入脚本名称来调用。
相当于shell脚本首行的:#!/bin/sh
可以换成:#!/bin/awk
3.将所有的awk命令插入一个单独文件,然后调用:
awk -f awk-script-file input-file(s)
其中,-f选项加载awk-script-file中的awk脚本,input-file(s)跟上面的是一样的。
1.awk工作流程:读入有'\n'换行符分割的一条记录,然后将记录按指定的域分隔符划分域,填充域,$0则表示所有域,$n表示第n个域,默认域分隔符是“空白键”或者“tab键”,-F 指定域分隔符。示例:
#last -n 5 |awk '{print $1}'
只显示最近登录的5个帐号
#cat /etc/passwd |awk -F ':' '{print $1}'
只n显示/etc/passwd的账户
#cat /etc/passwd |awk -F ':' '{print $1"\t"$7}'
只显示/etc/passwd的账户和账户对应的shell,输出它们两个之间以tab键分隔
#cat /etc/passwd |awk -F ':' 'BEGIN {print "name,shell"} {print $1","$7} END {print "The end"}'
只显示/etc/passwd的账户和账户对应的shell,输出它们之间以逗号分隔,并给所有行添加列名name,shell,在最后一行输出“The end”
2.搜索,支持正则表达式。示例:
#awk -F: '/root/' /etc/passwd
root:x:0:root:/root:/bin/bash
搜索/etc/passwd有root关键字的所有行
#awk -F: '/^root/' /etc/passwd
找root开头的
#awk -F: '/root/{print $7}' /etc/passwd
搜索/etc/passwd有root关键字的所有行,只显示对应的shell
3.awk内置的变量
ARGC 命令行参数个数
ARGV 命令行参数排列
ENVIRON 支持队列中系统环境变量的使用
FILENAME awk浏览的文件名
FNR 浏览文件的记录数
FS 设置输入域分隔符,等价于命令行 -F选项
NF 浏览记录的域的个数
NR 已读的记录数
OFS 输出域分隔符
ORS 输出记录分隔符
RS 控制记录分隔符
示例:
#awk -F ':' '{print "filename:" FILENAME ",linenumber:" NR ",columns:" NF ",linecontent:"$0}' /etc/passwd
统计/etc/passwd:文件名,每行的行号,每行的列数,对应的完整行内容
用printf代替print
#awk -F ':' '{printf("filename:%10s,linenumber:%s,columns:%s,linecontent:%s\n",FILENAME,NR,NF,$0)}' /etc/passwd