awk的基本原理

awk的工作原理
 
一次读取一行文本,按输入分隔符进行切片,切成多个组成部分,将每片直接保存在内建的变量中,$1,$2,$3….,引用指定的变量,可以显示指定断,或者多个断。如果需要显示全部的,需要使用$0来引用。可以对单个片断进行判断,也可以对所有断进行循环判断。其默认分隔符为空格
 
awk的基本用法格式
awk [options] ‘program’ FILE……
 ◦语句之间用分号分隔
[options]
 ◦ -F : 指明输入时用到的字段分隔符
 ◦ -v var=VALUE : 自定义变量 
 在awk中变量的引用不需要加$,而是直接引用
awk用法的简要介绍
第一种模式
awk [options] ‘scripts’ file1,file2…..
 
在这种模式中,scripts主要是命令的堆砌,对输入的文本行进行处理,通过命令print,printf或是输出重定向的方式显示出来,这里经常用到的知识点是:awk的内置变量,以及命令print和printf的使用

第二种模式
awk [options] ‘PATTERN{action}’ file,file2…..
 
在这种模式中,最重要的是5种模式和5种action的使用,以及awk的数组的使用和内置函数
 

第一种模式
1、print
 1、各项目之间使用逗号隔开,而输出时则以空白字符分隔
 2、输出的Item可以为字符串或数值,当前记录的字段(如$1)、变量或awk的表达式,数值会先转换为字符串,而后再输出
 3、print命令后面的Item可以省略,此时其功能相当于print $0,因此,如果想输出空白行,则需要使用print””
 4、如果引用变量$1或其他的,是不能使用引号引起来
 
2、内置变量
  FS : input field seperator,输入的分隔符,默认为空白字符
  OFS: output field seperator,输出的分隔符,默认为空白字符
  RS : input record seperator,输入的换行符
  ORS: output record seperator,输出时的换行符
  NF : number of field ,字段个数 awk ‘{print NF}’ /etc/fstab :打印每行的最后一个字段为第几个字段,这里是数量引用,不是对应的值引用 
awk ‘{print $NF}’ /etc/fstab : 打印每行中的最后一个字段
 

NR : number of record,文件中的行数
 awk ‘{print NR}’ /etc/fstab: 打印行号,其会个行号都显示
 awk ‘END{print NR}’ /etc/fstab: 显示文本的总行数,其只是在文本处理完成后,只显示一次行号
 awk ‘{print NR}’ file1 file2 : 会每把所有文档进行总的编号,而不是单独对文件进行编号 

 FNR : 对每个文件进行行数单独编号
 awk ‘{print FNR}’ file1 file2 : 会对每个文件的行数进行单独的编号显示
 
 FILENAME : awk命令所处理的文件的名称 ◦awk ‘{print FILENAME}’ file1 : 显示当前文件名,但会每行显示一次
 awk ‘END{print FILENAME}’ file1 : 显示当前文件名,但只会显示一次
 
 ARGC : 命令行中参数的个数,其awk命令也算一个参数 ◦awk ‘END{print ARGC}’ /etc/fstab : 显示共有几个参数
 
 ARGV : 其是一个数组,保存的是命令行所给定的各参数
  awk ‘END{print ARGV[0]}’ /etc/fstab : 显示第一个参数,默认第一个参数个awk命令本身
 
算术操作符
  -x : 负值
  +x : 转换为数值
  x^y : 
 x**y : 次方
  x*y : 乘法
  x/y : 除法

格式符
  %c: 显示字符的ASCII码
  %d,%i : 显示十进制整数
  %e,%E: 科学计数法数值显示
  %f : 显示为浮点数
  %g,%G: 以科学数法或浮点形式显示数值
  %s: 显示字符串
  %u: 无符号整数
  %%: 显示%号自身,相当于转义

原创文章,作者:sunhao,如若转载,请注明出处:http://www.178linux.com/80026

(2)
sunhaosunhao
上一篇 2017-07-11 20:43
下一篇 2017-07-11 20:51

相关推荐

  • bash脚本作业

    1、每隔3秒钟到系统上获取已经登录的用户的信息;如果发现用户hacker登录,则将登录时间和主机记录于日志/var/log/login.log中,并提示该用户退出系统。 2、随机生成10以内的数字,实现猜字游戏,提示比较大或小,相等则退出。 1、求100以内所有正整数之和 2、通过ping命令探测172.16.250.1-254范围内的所有主机的在线状态,…

    Linux干货 2016-08-19
  • iptables的使用

    iptables         firewall:隔离工具;Packets Filter Firewall;工作于主机或网络的边缘,对经由的报文根据预先定义的规则(匹配条件)进行检测,对于能够被规则匹配到的报文实行某预定义的处理机制的一条组件; 硬件防火墙:在硬件级别实现部分顾虑功能;另…

    Linux干货 2016-10-29
  • 系统启动这块的一些实验及基本内容–下

    下面我来讲下grub,grub在编辑的时候可以进入一种模式就是单用户模式,就是当grub.conf文件未写入密码时,普通用户将直接忽略系统密码进入系统,所以这可以称为一个捷径,也可以成为一个漏洞,当然linux的前辈们不可能连这个都想不到,他们也有自己的办法,这就是我们grub的两层加密机制,在选定登陆界面之前可以设置一次,启动内核时也可以设置一次,密码也可…

    Linux干货 2016-09-13
  • 如何查看当前系统版本的版本号

    作为一名系统管理员,了解系统版本号是必然。因为不同大版本之间的命令和启动流程等之间有很大的差异;     一、在/etc/system-release 里面查看         ~]#ls -l /etc/system-release &n…

    Linux干货 2016-07-29
  • 第四周 N28 (用户及权限管理及BRE、ERE应用)

    1、复制/etc/skel目录为/home/tuser1,要求/home/tuser1及其内部文件的属组和其它用户均没有任何访问权限。 # cp -r /etc/skel /home/tuser1 # chmod -R og= /home/tuser1 2、编辑/etc/group文件,添加组hadoop。 hadoop:x:1000: 3、手动编辑/etc…

    2017-12-22
  • bash脚本编程之select语法详解

    shell编程之select select控制结构(在tcsh中不可用)基于Korn Shell中的控制结构 select语句首先显示一个菜单,然后根据用户的选择给变量赋予相应的值,最后执行一系列命令 其语法如下: select varname in list do commands done select 表达式是一种bash的扩展应用,动作包括: 自动用…

    Linux干货 2016-08-24