语句Linux常用命令之awk

awk命令  时间:2021-02-12  阅读:()

L i n ux常用命令之awklinux教程http://ww w.linuxprob e.c o m/

标题 awk命令的使用

作用 awk是非常好用的数据处理工具主要处理每一行的字段内的数据默认的字段的分割符为空格键或[tab]键

一、 awk脚本的基本结构awk 'BEGIN{print "start"} pattern {commands} END{print "ends"} 'file //一个awk脚本通常由 BEGIN语句块、能够使用模式匹配的通用语句块、 END语句块3部分组成这三部分是可选的任意一部分都可以不出现在脚本中

//通常是被单引号或双引号括住的

例如 awk 'BEGIN{i=0} {i++}END{print i} ' filenameawk "BEGIN{i=0} {i++}END{print i} " filename

二、 awk的执行过程awk 'BEGIN {commands} pattern{commands}END{commands} ' f ilename

[1]第一步执行BEGIN{commands}语句块中的语句

[2]第二步从文件或标准输入stdin读取一行然后执行pattern{commands}语句块它逐行扫描文件第一行到最后一行重复这个过程直到文件全部被读取完毕

[3]第三步 当读至输入流末尾时候执行END{commands}语句块

BEGIN语句块在awk开始从输入流中读取行之前被执行这是一个可选的语句块。 比如变量的初始化、打印输出表格的表头等语句通常可以写在BEGIN语句块中。

END语句块在awk从输入流读取完所有的行之后执行 比如打印所有行的分析结果这类信息汇总都是在END语句块中完成。

三、 awk内置变量

[1] $n是当前行的按照指定域分隔符默认是空格或[T AB] ]键分割后的第n个字段 比如n为1表示第1个字段 n为2表示第2个字段

[2] $0则是记录了执行过程中当前行的文本内容

[3]NF每一行($0)拥有的字段总数

[4]NR 目前awk所处理的"第几行"数据

[5]FNR表示当前所处理的文本内的"第几行"数据

[6]FS 目前的域分割符号可以通过FS字段指定文本的域分割符

[7]OFS输出字段的分割符默认是一个空格

[8]ORS输出的记录分割符默认是一个换行

[9]ARG IN D命令行中处理的当前文件的位置从1开始

[10]AR G C命令行参数的数目

[11]AR GV命令行参数的数组

四、 awk实例

例1 pay.txt文件内容格式:姓名、第一个月工资、第二个月工资、第三个月工资将每一个人的三月工资总和计算出来

Name 1st 2nd 3th

VBird 2300 3400 2500

Bmtsai 2000 2000 2300

Bird2 4300 4200 4100

命令 awk 'NR==1{printf ("%10s%10s%10s%10s%10s\n", $1, $2, $3,$4, "Total") } NR>=2{total=$2+$3+$4; printf ("%10s%10s%10s%10s%10s\n",$1, $2, $3, $4,total) } ' pay.txt

输出

解释 NR表示当前处理的行数行号 如果满足NR==1即处理的是第一行的内容Name 1st 2nd 3th就执行后面的括弧中的打印printf命令如果满足NR>=2那么就会执行第一个括弧中的命令{total=$2+$3+$4; printf

("%10s%10s%10s%10s%10s\n", $1, $2, $3, $4,total) } 。所以 awk命令格式中的pattern决定了是否对当前输入的行执行其后面的commands。

例2将a.dat的第一列内容和第二列内容相加a. dat内容 b.dat内容

命令 awk

'BEGIN{i=0; j=0}FNR==NR{array[i++]=$1;next} {total=array[j ]+$1;printarray[j ] ,$1,total; j++} ' a.dat b.dat

或awk

'BEGIN{i=0; j=0}ARGIND==1{array[i++]=$1}ARGIND==2{total=array[j ]+$1;print array[j ] ,$1,total; j++} ' a.dat b.dat

输出结果

解释 NR和FNR是awk内置变量表示行号 NR表示处理的记录的行数 FNR表示当前处理的文件的行数 因为awk的参数可以同时跟多个文件名并且按照其出现的顺序逐个输入并处理而NR 表示截止当前处理的总的行数而FNR表示当前所处理的文

件的行数。能能够导致读入下一个输入行并返回到脚本的顶部这可以避免对当前输入行执行其他的操作过程。

例3去除重复记录--假设某文件test.da记录如下

命令 awk ' !a[$0]++{print $0} ' test.da

输出

解释 awk默认数组的初始值是0 当记录已经出现在的数组a中的时候那么!a[$0]为假所以就不会执行后面的print $0

linux教程http://www. linuxprobe. com/

酷锐云香港(19元/月) ,美国1核2G 19元/月,日本独立物理机,

酷锐云是一家2019年开业的国人主机商家,商家为企业运营,主要销售主VPS服务器,提供挂机宝和云服务器,机房有美国CERA、中国香港安畅和电信,CERA为CN2 GIA线路,提供单机10G+天机盾防御,提供美国原生IP,支持媒体流解锁,商家的套餐价格非常美丽,CERA机房月付20元起,香港安畅机房10M带宽月付25元,有需要的朋友可以入手试试。酷锐云自开业以来一直有着良好的产品稳定性及服务态度,支...

Hosteons:洛杉矶/纽约/达拉斯免费升级10Gbps端口,KVM年付21美元起

今年1月的时候Hosteons开始提供1Gbps端口KVM架构VPS,目前商家在LET发布消息,到本月30日之前,用户下单洛杉矶/纽约/达拉斯三个地区机房KVM主机可以从1Gbps免费升级到10Gbps端口,最低年付仅21美元起。Hosteons是一家成立于2018年的国外VPS主机商,主要提供VPS、Hybrid Dedicated Servers及独立服务器租用等,提供IPv4+IPv6,支持...

Ftech:越南vps,2核/2G/20G SSD/1Gbps不限流量/可安装Windows系统,$12.5月

ftech怎么样?ftech是一家越南本土的主机商,成立于2011年,比较低调,国内知道的人比较少。FTECH.VN以极低的成本提供高质量服务的领先提供商之一。主营虚拟主机、VPS、独立服务器、域名等传统的IDC业务,数据中心分布在河内和胡志明市。其中,VPS提供1G的共享带宽,且不限流量,还可以安装Windows server2003/2008的系统。Ftech支持信用卡、Paypal等付款,但...

awk命令为你推荐
google地球打不开谷歌地球 打不开怎么办 急啊~无线路由器限速设置无线路由器限速怎么设置!无线路由器限速设置wifi怎么设置限速打开网页出现错误为什么打不开网页,出错拂晓雅阁我对电脑操作不熟悉,想买一本自学的电脑书籍,是电脑入门那一类的,最好还有办公软件应用那一类的flash导航条FLASH导航条 怎么加入链接?网站运营一般网站如何运营手机区号有的手机号中间的号码是地区区号,那是什么卡数码资源网哪个网站可以直接在线做照片?功能要齐全的`镜像文件是什么什么叫镜像文件,作用是什么?
中国域名注册 域名估价 php主机租用 新网域名解析 wordpress主机 host1plus hawkhost 国外空间服务商 suspended seovip 新站长网 网通服务器ip 申请个人网页 绍兴高防 gspeed 股票老左 速度云 域名和空间 vip购优惠 免费高速空间 更多