awk的基本原理

awk的工作原理
 
一次读取一行文本,按输入分隔符进行切片,切成多个组成部分,将每片直接保存在内建的变量中,$1,$2,$3….,引用指定的变量,可以显示指定断,或者多个断。如果需要显示全部的,需要使用$0来引用。可以对单个片断进行判断,也可以对所有断进行循环判断。其默认分隔符为空格
 
awk的基本用法格式
awk [options] ‘program’ FILE……
 ◦语句之间用分号分隔
[options]
 ◦ -F : 指明输入时用到的字段分隔符
 ◦ -v var=VALUE : 自定义变量 
 在awk中变量的引用不需要加$,而是直接引用
awk用法的简要介绍
第一种模式
awk [options] ‘scripts’ file1,file2…..
 
在这种模式中,scripts主要是命令的堆砌,对输入的文本行进行处理,通过命令print,printf或是输出重定向的方式显示出来,这里经常用到的知识点是:awk的内置变量,以及命令print和printf的使用

第二种模式
awk [options] ‘PATTERN{action}’ file,file2…..
 
在这种模式中,最重要的是5种模式和5种action的使用,以及awk的数组的使用和内置函数
 

第一种模式
1、print
 1、各项目之间使用逗号隔开,而输出时则以空白字符分隔
 2、输出的Item可以为字符串或数值,当前记录的字段(如$1)、变量或awk的表达式,数值会先转换为字符串,而后再输出
 3、print命令后面的Item可以省略,此时其功能相当于print $0,因此,如果想输出空白行,则需要使用print””
 4、如果引用变量$1或其他的,是不能使用引号引起来
 
2、内置变量
  FS : input field seperator,输入的分隔符,默认为空白字符
  OFS: output field seperator,输出的分隔符,默认为空白字符
  RS : input record seperator,输入的换行符
  ORS: output record seperator,输出时的换行符
  NF : number of field ,字段个数 awk ‘{print NF}’ /etc/fstab :打印每行的最后一个字段为第几个字段,这里是数量引用,不是对应的值引用 
awk ‘{print $NF}’ /etc/fstab : 打印每行中的最后一个字段
 

NR : number of record,文件中的行数
 awk ‘{print NR}’ /etc/fstab: 打印行号,其会个行号都显示
 awk ‘END{print NR}’ /etc/fstab: 显示文本的总行数,其只是在文本处理完成后,只显示一次行号
 awk ‘{print NR}’ file1 file2 : 会每把所有文档进行总的编号,而不是单独对文件进行编号 

 FNR : 对每个文件进行行数单独编号
 awk ‘{print FNR}’ file1 file2 : 会对每个文件的行数进行单独的编号显示
 
 FILENAME : awk命令所处理的文件的名称 ◦awk ‘{print FILENAME}’ file1 : 显示当前文件名,但会每行显示一次
 awk ‘END{print FILENAME}’ file1 : 显示当前文件名,但只会显示一次
 
 ARGC : 命令行中参数的个数,其awk命令也算一个参数 ◦awk ‘END{print ARGC}’ /etc/fstab : 显示共有几个参数
 
 ARGV : 其是一个数组,保存的是命令行所给定的各参数
  awk ‘END{print ARGV[0]}’ /etc/fstab : 显示第一个参数,默认第一个参数个awk命令本身
 
算术操作符
  -x : 负值
  +x : 转换为数值
  x^y : 
 x**y : 次方
  x*y : 乘法
  x/y : 除法

格式符
  %c: 显示字符的ASCII码
  %d,%i : 显示十进制整数
  %e,%E: 科学计数法数值显示
  %f : 显示为浮点数
  %g,%G: 以科学数法或浮点形式显示数值
  %s: 显示字符串
  %u: 无符号整数
  %%: 显示%号自身,相当于转义

原创文章,作者:sunhao,如若转载,请注明出处:http://www.178linux.com/80026

(2)
sunhaosunhao
上一篇 2017-07-11
下一篇 2017-07-11

相关推荐

  • Centos6.5利用RubyGems的fpm制作zabbix_agent的rpm包,并使用ansible批量部署

    一、 搭建rpm包制作环境 安装gcc [root@lvs1 ~]# yum install gcc 安装make [root@lvs1 ~]# yum install make 安装ruby源(ruby版本必须要在1.9.3以上,centos自带的是1.8的版本,需要自己编译安…

    Linux干货 2016-08-20
  • 推荐-HA专题: 编译安装并配置DRBD

    HA专题: 编译安装并配置DRBD 前言 实验环境 DRBD介绍 安装前准备工作 获取并编译安装DRBD 配置DRBD 分区 配置文件 启动并设置DRBD 格式化并挂载 验证冗余性 总结 前言 上篇我们讲到使用corosync+pacemaker实现MySQL高可用, 但是NFS容易成为单点故障从而导致数据丢失等严重问题, 我们可以使用drbd来实现MySQ…

    Linux干货 2016-04-12
  • 20160802课堂练习题

    练习: 1、  当用户xiaoming对/testdir 目录无执行权限时,意味着无法做哪些操作? 无法cd进入该目录,但可以ls查看到该目录下的文件,其余的任何操作都执行不了。 2、  当用户xiaoqiang对/testdir 目录无读权限时,意味着无法做哪些操作? 能够进入该目录,不能读取到信息;但如果知道有哪些文件及目录是可以创建…

    Linux干货 2016-08-04
  • 启动流程排错和自建linux系统

    一、grub的配置文件/boot/grub/grub.conf default=0        ###设置默认启动项0表示第一个 timeout=5        ##设置超时时间,如果超过5s用户…

    Linux干货 2016-09-18
  • PXE

    BootStraping 系统提供 PXE 简介 PXE(preboot execute environment,预启动执行环境)是由Intel公司开发的最新技术,工作于Client/Server的网络模式,支持工作站通过网络从远端服务器下载映像,并由此支持通过网络启动操作系统,在启动过程中,终端要求服务器分配IP地址,再用TFTP(trivial file…

    Linux干货 2016-11-05
  • Linux Service and Security(Part 2)

    接PART 1 4、SSH端口转发:SSH会自动加密和解密所有SSH客户端与服务端之间的网络数据。但是,SSH还能够将其它TCP端口的网络数据通过SSH链接来转发,并且自动提供了相应的加密及解密服务,这一过程也被叫做“隧道(tunneling)”。telnet,SMTP,LDAP这些TCP应用均能够从中得益,避免了用户名、密码以及隐私信息的明文传输。同时,如…

    Linux干货 2016-10-09