awk的基本原理

awk的工作原理
 
一次读取一行文本,按输入分隔符进行切片,切成多个组成部分,将每片直接保存在内建的变量中,$1,$2,$3….,引用指定的变量,可以显示指定断,或者多个断。如果需要显示全部的,需要使用$0来引用。可以对单个片断进行判断,也可以对所有断进行循环判断。其默认分隔符为空格
 
awk的基本用法格式
awk [options] ‘program’ FILE……
 ◦语句之间用分号分隔
[options]
 ◦ -F : 指明输入时用到的字段分隔符
 ◦ -v var=VALUE : 自定义变量 
 在awk中变量的引用不需要加$,而是直接引用
awk用法的简要介绍
第一种模式
awk [options] ‘scripts’ file1,file2…..
 
在这种模式中,scripts主要是命令的堆砌,对输入的文本行进行处理,通过命令print,printf或是输出重定向的方式显示出来,这里经常用到的知识点是:awk的内置变量,以及命令print和printf的使用

第二种模式
awk [options] ‘PATTERN{action}’ file,file2…..
 
在这种模式中,最重要的是5种模式和5种action的使用,以及awk的数组的使用和内置函数
 

第一种模式
1、print
 1、各项目之间使用逗号隔开,而输出时则以空白字符分隔
 2、输出的Item可以为字符串或数值,当前记录的字段(如$1)、变量或awk的表达式,数值会先转换为字符串,而后再输出
 3、print命令后面的Item可以省略,此时其功能相当于print $0,因此,如果想输出空白行,则需要使用print””
 4、如果引用变量$1或其他的,是不能使用引号引起来
 
2、内置变量
  FS : input field seperator,输入的分隔符,默认为空白字符
  OFS: output field seperator,输出的分隔符,默认为空白字符
  RS : input record seperator,输入的换行符
  ORS: output record seperator,输出时的换行符
  NF : number of field ,字段个数 awk ‘{print NF}’ /etc/fstab :打印每行的最后一个字段为第几个字段,这里是数量引用,不是对应的值引用 
awk ‘{print $NF}’ /etc/fstab : 打印每行中的最后一个字段
 

NR : number of record,文件中的行数
 awk ‘{print NR}’ /etc/fstab: 打印行号,其会个行号都显示
 awk ‘END{print NR}’ /etc/fstab: 显示文本的总行数,其只是在文本处理完成后,只显示一次行号
 awk ‘{print NR}’ file1 file2 : 会每把所有文档进行总的编号,而不是单独对文件进行编号 

 FNR : 对每个文件进行行数单独编号
 awk ‘{print FNR}’ file1 file2 : 会对每个文件的行数进行单独的编号显示
 
 FILENAME : awk命令所处理的文件的名称 ◦awk ‘{print FILENAME}’ file1 : 显示当前文件名,但会每行显示一次
 awk ‘END{print FILENAME}’ file1 : 显示当前文件名,但只会显示一次
 
 ARGC : 命令行中参数的个数,其awk命令也算一个参数 ◦awk ‘END{print ARGC}’ /etc/fstab : 显示共有几个参数
 
 ARGV : 其是一个数组,保存的是命令行所给定的各参数
  awk ‘END{print ARGV[0]}’ /etc/fstab : 显示第一个参数,默认第一个参数个awk命令本身
 
算术操作符
  -x : 负值
  +x : 转换为数值
  x^y : 
 x**y : 次方
  x*y : 乘法
  x/y : 除法

格式符
  %c: 显示字符的ASCII码
  %d,%i : 显示十进制整数
  %e,%E: 科学计数法数值显示
  %f : 显示为浮点数
  %g,%G: 以科学数法或浮点形式显示数值
  %s: 显示字符串
  %u: 无符号整数
  %%: 显示%号自身,相当于转义

原创文章,作者:sunhao,如若转载,请注明出处:http://www.178linux.com/80026

(2)
sunhaosunhao
上一篇 2017-07-11 20:43
下一篇 2017-07-11 20:51

相关推荐

  • 20160808作业

    20160808作业 1、每日课堂笔记总结 2、预习 3、每日课堂pdf练习 1、删除/etc/grub2.cfg文件中所有以空白开头的行行首的空白字符 [root@Centos7 ~]# sed '/^[[:space:]]\+/d' /etc/grub2.cfg  # # …

    Linux干货 2016-08-15
  • Bash编程之条件测试

    Bash 包含强大的编程功能,其中包括丰富的可测试文件类型和属性的函数,以及在多数编程语言中可以使用的算术和字符串比较函数。理解不同的测试并认识到 shell 还能把一些操作符解释成 shell 元字符,是学好Bash编程的重要一环。 一、测试命令 Bash中一条命令退出状态码可作为测试条件,执行成功返回0,代表布尔类型true;反之执行失败返回1-255之…

    Linux干货 2016-08-21
  • 四.Linux博客-2016年7月26日ls、通配符、touch、cp、mv、rm、mkdir

    格式说明: 操作 概念 命令 说明及举例 四.ls、通配符、touch、cp、mv、rm、mkdir du -sh /sys 查看文件、文件夹大小 /sys/class/scsi_host/host2/scan 在线扫盘(新加硬盘执行这个命令后才能发现) stat /etc/issue 更详细的看数…

    Linux干货 2016-08-23
  • 文本处理工具 练习

    7.1 练习   1 、找出ifconfig 命令结果中本机的所有IPv4 地址 2 、查出分区空间使用率的最大百分比值   3 、查出用户UID 最大值的用户名、UID 及shell 类型 4 、查出/tmp 的权限,以数字方式显示   5 、统计当前连接本机的每个远程主机IP 的连接数,并按从大到小排序   &nb…

    Linux干货 2016-08-07
  • M20 – 1- 第三周博客(2):Linux用户、组

    一、Linux用户组详解 Linux系统中的每个用户都有一个用户组,系统能对一个用户组中的所有用户进行集中管理。不同Linux系统对用户组的规定有所不同,如Linux下的用户属于和他同名的用户组,这个用户组在创建用户时同时创建。用户组的管理涉及用户组的添加、删除和修改。组的增加、删除和修改实际上就对/etc/group文件的更新。 用户组(group)就是具…

    Linux干货 2016-08-05
  • Linux 下的帮助及文件管理

    1、whatis     whatis command 或 man -f command     仅能提供命令基本的介绍。不提具体用法。     基于数据库的查找,优点:检索速度快;缺点:缺乏实时性    &n…

    2017-07-15