欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  网络运营

详解Linux中的awk命令

程序员文章站 2023-10-30 17:32:40
简介 awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大。简单来说awk就是把文件逐行的读入,以空格为默认分隔符将...

简介

awk是一个强大的文本分析工具,相对于grep的查找,sed的编辑,awk在其对数据分析并生成报告时,显得尤为强大。简单来说awk就是把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行各种分析处理。

awk有3个不同版本: awk、nawk和gawk,未作特别说明,一般指gawk,gawk 是 awk 的 gnu 版本。

awk其名称得自于它的创始人 alfred aho 、peter weinberger 和 brian kernighan 姓氏的首个字母。实际上 awk 的确拥有自己的语言: awk 程序设计语言 , 三位创建者已将它正式定义为“样式扫描和处理语言”。它允许您创建简短的程序,这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表,还有无数其他的功能。

一、选项参数说明

awk是一种处理文本文件的语言,我们可以使用awk --help查看一下它的选项参数,如下:

详解Linux中的awk命令

二、基本用法

1、行匹配语句,此处awk后只能跟单引号,格式如下:

awk '{匹配的内容}' 匹配的文件名称

例如:

现有如下测试文件test:

详解Linux中的awk命令

使用如下命令输出文中每行的1、4项内容:

awk '{print $1,$4}' test

详解Linux中的awk命令

也可以添加如下内容使其格式化输出:

awk '{printf "%-8s %-10s\n",$1,$4}' test 

详解Linux中的awk命令

2、指定分隔符

awk '{printf "%-8s %-10s\n",$1,$4}' test 

例如:

有如下test文件:

详解Linux中的awk命令

执行如下命令,使用逗号分割输出每行的第一、二项内容:

awk -f, '{print $1,$2}' test

详解Linux中的awk命令

也可以使用内建变量,格式如下:

 awk 'begin{fs=","} {print $1,$2}' test

详解Linux中的awk命令

对于使用多个分隔符,首先使用空格分割,然后再使用其他分割符进行分割:

awk -f '[ ,]' '{print $1,$2,$4}' test

详解Linux中的awk命令

3、设置变量

awk -v

例如:

现有如下数据:

详解Linux中的awk命令

执行如下命令,每行第一项加1:

awk -va=1 '{print $1,$1+a}' test

详解Linux中的awk命令

也可以使用如下命令设置多个变量:

awk -va=1 -vb=s '{print $1,$1+a,$1b}' test

详解Linux中的awk命令

4、通过awk脚本来运行awk命令

awk -f awk脚本 文件名

例如:

awk -f file.awk test

三、运算符

详解Linux中的awk命令

例如:

1、过滤第一列大于2的行

awk '$1>2' test

详解Linux中的awk命令

2、过滤等于2的列

awk '$1==2 {print $1,$3}' test

详解Linux中的awk命令

3、过滤第一列大于2并且第二列等于are的行

awk '$1>2 && $2=="are" {print $1,$2,$3}' test

四、内建变量

详解Linux中的awk命令

例如:

awk 'begin{printf "%4s %4s %4s %4s %4s %4s %4s %4s %4s\n","filename","argc","fnr","fs","nf","nr","ofs","ors","rs";printf "---------------------------------------------\n"} {printf "%4s %4s %4s %4s %4s %4s %4s %4s %4s\n",filename,argc,fnr,fs,nf,nr,ofs,ors,rs}' test

详解Linux中的awk命令

awk -f\' 'begin{printf "%4s %4s %4s %4s %4s %4s %4s %4s %4s\n","filename","argc","fnr","fs","nf","nr","ofs","ors","rs";printf "---------------------------------------------\n"} {printf "%4s %4s %4s %4s %4s %4s %4s %4s %4s\n",filename,argc,fnr,fs,nf,nr,ofs,ors,rs}' test

详解Linux中的awk命令

awk '{print nr,fnr,$1,$2,$3}' test

详解Linux中的awk命令

awk '{print $1,$2,$5}' ofs=" $ " test

详解Linux中的awk命令

五、使用正则,字符串匹配

例如:

1、输出第二列包含“th”并打印第二列与第四列。

awk '$2 ~ /th/ {print $2,$4}' test

详解Linux中的awk命令

~表示模式开始,//中存放匹配的模式。

2、输出包含“re”的行

awk '/re/ ' test

详解Linux中的awk命令

六、忽略大小写

awk 'begin{ignorecase=1} /this/' test

详解Linux中的awk命令

七、模式取反

awk '$2 !~ /th/ {print $2,$4}' test

详解Linux中的awk命令

awk '!/th/ {print $2,$4}' test

详解Linux中的awk命令

八、awk脚本

关于awk脚本,需要注意begin和end两个关键词:

(1)begin{存放执行前的语句};

(2)end{存放处理完所有的行后要执行的语句}。

例如:

现有数据如下:

详解Linux中的awk命令

我们的awk脚本内容如下:

详解Linux中的awk命令

执行结果如下:

详解Linux中的awk命令

总结

以上所述是小编给大家介绍的linux中的awk命令,希望对大家有所帮助

相关标签: linux awk 命令