AWK(一)

本章内容:awk介绍;awk基本用法;awk变量;awk格式化;awk操作符;awk条件判断;awk循环;awk数组;awk函数;调用系统命令

1:AWK介绍

(一)awk:Aho, Weinberger, Kernighan,报告生成器,格式化文本输出 
有多种版本:New awk(nawk),GNU awk( gawk) 
gawk:模式扫描和处理语言 
基本用法: awk [options] ‘program’ var=value file…
awk [options] -f programfile var=value file…
awk [options] ‘BEGIN{ action;… } pattern{ action;… } END{ action;… }’ file …
awk 程序通常由:BEGIN语句块、能够使用模式匹配的通用语句块 、END语句块,共3部分组成       program通常是被单引号或双引号中
选项:
-F 指明输入时用到的字段分隔符
-v var=value: 自定义变量
  AWK语言
(1)基本格式:awk [options] ‘program’ file…
(2)program:pattern{action statements;..}
(3)pattern和action:
pattern部分决定动作语句何时触发及触发事件
BEGIN,END
action statements对数据进行处理,放在{}内指明
print, printf
(4)分割符、域和记录
awk执行时,由分隔符分隔的字段(域)标记$1,$2..$n称为域标识。$0为所有域,注意:和shell中变量$符含义不同
文件的每一行称为记录
省略action,则默认执行 print $0 的操作
 AWK工作原理
第一步:执行BEGIN{action;… }语句块中的语句
第二步:从文件或标准输入(stdin)读取一行,然后执行pattern{ action;… }语句块,它逐行扫描文件,从第一行到最后一行重复这个过程,直到文件全部被读取完毕。
第三步:当读至输入流末尾时,执行END{action;…}语句块
BEGIN语句块在awk开始从输入流中读取行之前被执行,这是一个可选的语句块,比如变量初始化、打印输出表格的表头等语句通常可以写在BEGIN语句块中
END语句块在awk从输入流中读取完所有的行之后即被执行,比如打印所有行的分析结果这类信息汇总都是在END语句块中完成,它也是一个可选语句块
pattern语句块中的通用命令是最重要的部分,也是可选的。如果没有提供pattern语句块,则默认执行{ print },即打印每一个读取到的行,awk读取的每一行都会执行该语句块

2:AWK基本用法

print格式: print item1, item2, …

要点:

(1) 逗号分隔符

(2) 输出的各item可以字符串,也可以是数值;当前记录的字段、变量或awk的表达式

(3) 如省略item,相当于print $0

示例

awk ‘{print “hello,awk”}’

AWK(一)

awk –F”:”  ‘{print}’ /etc/passwd

1

awk –F: ‘{print $1}’ /etc/passwd

2

awk –F: ‘{print $0}’ /etc/passwd

3

awk –F: ‘{print $1”\t”$3}’ /etc/passwd

AWK(一)

tail –3 /etc/fstab |awk ‘{print $2,$4}’

AWK(一)

3:AWK变量

变量:内置和自定义变量

FS:输入字段分隔符,默认为空白字符
awk -v FS=’:’ ‘{print $1,FS,$3}’ /etc/passwd

AWK(一)
awk –F: ‘{print $1,$3,$7}’ /etc/passwd

AWK(一)

OFS:输出字段分隔符,默认为空白字符

awk -v FS=‘:’ -v OFS=‘:’ ‘{print $1,$3,$7}’ /etc/passwd

AWK(一)

RS:输入记录分隔符,指定输入时的换行符
awk -v RS=’ ‘ ‘{print }’ /etc/passwd

AWK(一)

ORS:输出记录分隔符,输出时用指定符号代替换行
awk -v RS=’ ‘ -v ORS=’###’‘{print }’ /etc/passwd

AWK(一)

NF:字段数量
awk -F: ‘{print NF}’ /etc/passwd,引用内置变量不用$

AWK(一)
awk -F: ‘{print $(NF-1)}’ /etc/passwd

AWK(一)0

NR:记录号
awk ‘{print NR}’ /etc/fstab

AWK(一)

 

FNR:各文件分别计数,记录号
awk ‘{print FNR}’ /etc/fstab /etc/inittab

AWK(一)

FILENAME:当前文件名
awk ‘{print FILENAME,NR,$0}’ /etc/fstab

AWK(一)0

ARGC:命令行参数的个数
awk ‘{print ARGC}’ /etc/fstab /etc/inittab

AWK(一)0
awk ‘BEGIN {print ARGC}’ /etc/fstab /etc/inittab

AWK(一)

ARGV:数组,保存的是命令行所给定的各参数
awk ‘BEGIN {print ARGV[0]}’ /etc/fstab /etc/inittab

AWK(一)

代表第一个参数

awk ‘BEGIN {print ARGV[1]}’ /etc/fstab /etc/inittab

AWK(一)

代表第二个参数

自定义变量(区分字符大小写)
(1) -v var=value
(2) 在program中直接定义

示例:
awk -v test=’hello gawk’ ‘{print test}’ /etc/fstab

AWK(一)

awk -v test=’hello gawk’  ‘BEGIN{print test, “is haha” }’

AWK(一)0

awk –F:‘{sex=“male”;print $1,sex,age;age=18}’ /etc/passwd

AWK(一)

调用文件

{sex=”male”;print $1,sex,age;age=18}

awk -F: -f abc.txt /etc/passwd

AWK(一)0

 

本文来自投稿,不代表Linux运维部落立场,如若转载,请注明出处:http://www.178linux.com/90758

(0)
曲吉福曲吉福
上一篇 2018-01-01 20:27
下一篇 2018-01-01 20:46

相关推荐

  • 2016年8月11号学习博客

    shell脚本编程 shell脚本是包含一些命令或声明,并符合一定格式的文本文件 shell脚本的用途有: 自动化常用命令 执行系统管理和故障排除 创建简单的应用程序 处理文本或文件 命令查询过程:别名–>内部变量–>hash–>$PATH ~]#bash -n 检测脚本语法错误 ~]#bash -x 顺…

    Linux干货 2016-08-15
  • 从Linux小白到大牛——与狼共舞的日子3

    马哥教育网络班21期+第3周课程练习 1、列出当前系统上所有已经登录的用户的用户名,注意:同一个用户登录多次,则只显示一次即可。 [root@localhost ~]# who root :0   2016-07-23 08:55 (:0) wangsining pts…

    Linux干货 2016-07-26
  • LVS DR模式

    一、测试环境说明 操作系统:CentOS6.7-X64 IP_VS版本:1.2.26 DR:10.10.10.130 VIP:10.10.10.140 RS1:10.10.10.131 RS2:10.10.10.132 二、LVS-DR模式原理 a)客户端发送一个请求(源地址为CIP,目标地址为VIP,我们简称为CIP:VIP)到LVS的DR b)通过在调度…

    Linux干货 2016-09-19
  • mysql主从复制及zabbix监控从服务器

    Mysql备份: 备份系统的构建,要注意的要点: 第一:能容忍最多丢失多少数据; 第二:恢复数据需要在多长时间内完成; 第三:需要恢复哪些数据:备份时要考虑备份完整; (1)必须做还原测试,用于测试备份的可用性; (2)还原演练;不是一个人能够完成的; 备份类型: 完全备份:就是备份整个数据集,是从时间轴上划分的,完整数据集;; 部分备份:只备份数据子集; …

    Linux干货 2016-12-05
  • shell编程、查找命令、压缩文件工具

    shell编程、查找命令、压缩文件工具  shell编程 一、条件测试  1、判断某需求是否满足,需要由测试机制来实现。    测试命令:  ·test Expression  ·[ EXPRESSION ]  ·[[ EXPRESSION ]]   &nbs…

    Linux干货 2016-08-15
  • 笔记–8.2–用户管理,权限管理

    ·硬链接,软链接区别 大小 链接数 设备,分区 类型 硬连接 一样大,显示的是本身的大小 会增加 不能跨分区 是一个文件,相同inode号,忘了位置可通过inode号找到源文件 软链接 不一样大,链接文件大小是路径的大小 不会增加 可以跨分区,跨设备 两个文件,不同inode号,像发小广告,忘了源连接,文件就找不到了 软链接格式:ln -s +绝对路径或相对…

    Linux干货 2016-08-05