awk中pipe的shell命令调用与close()

    某公司其员工到勤时间表如下, 取名为 arr.dat, 文件中第一栏为员工代号, 第二栏为到达时间. 本示例中将使用该文件为数据示例文件,

1034 7:26

1025 7:27

1101 7:32

1006 7:45

1012 7:46

1028 7:49

1051 7:51

1029 7:57

1042 7:59

1008 8:01

1052 8:05

1005 8:12

要求: 

(1) 将数据arr.dat按员工ID排序, 并在表头附加上执行时的日期

(2) 在arr.dat之前增加一行数据抬头如下" ID Number Arrival Time"

(3) 若八点为上班时间, 请加标注"*" 与迟到时间之后, 并计算平均上班时间.

(4) 将arr.dat重新输出到today.art文件中

答案与解析:

建立文件名为reformat.awk的awk文件, 内容如下

BEGIN {
    FS="[ \t:]"  #此处重新定义输入字段分隔符, 默认值为空白, 此处使用 [ \t:]+ (为正则表达式) 表示 \
  使用 "空吧, tab或 : " 做组成的字符创做分隔符, + 表示可以出现一次或一次以上;
    "date" | getline  #此处为在awk中调用shell的命令, 需要使用 ""括主, 并且需要使用 pipe( | ) 传递给 getline(awk的内建函数, 用于调用shell命令);
    print " Today is ",$2, $3  > "today.art"   #输出重定向, 将输出重定向到today.art中, 并创建文件
    print "====================================" >> "today.art" # 使用>> 而非 > , >> 是在原有文件后面追加, > 是清空文件, 故使用 >>
    print " ID Number Arrival Time" >> "today.art"
    close("today.art")   #此处稍后解释
}
{
    arrival = HM_to_M( $2, $3 )  # 此处为awk中的自定义函数, 在后边定义, 是计算迟到时间, 将时间转换成分钟
    printf(" %s %s:%s %s\n", $1, $2, $3, arrival > 480 ? "*" : " ") | " sort -k 1 >> today.art" 
    # 通过重新定义FS, 将源文件 分割成3 段, 第2, 3段表示的时间, 其中arriva > 480 ? "*" : " "  为判断是否迟到, 迟到的后边增加标记 * , 480 为8点的分钟数
    # 通过 | 将命令暂存到 | 上, 并且不会执行输出, 也不会执行sort命令, 在awk全部执行完毕后, 才会执行
    total += arrival # 计算总的时间, 为了计算后边的平均到达时间
}
END {
    close("today.art")
    close("sort -k 1 >> today.art") 
    #awk中的close()指令, 语法有两种, close( filename ) 和close( 置于pipe之前的command ). 指令close( "sort -k 1 >> today.art" ) 
    #其意思是 close 程序中置于"sort -k 1 >> today.art "之前的pipe, 并立即调用shell来执行sort命令
    printf(" Average Arrival Time : %d:%d\n", arrival/NR/60, (arrival/NR)%60 ) >> "today.art"  #awk中"today.art"若表示文件名, 必须使用"' 括起来, 若不适用, 会被当做变量
    # 计算平均到达时间, NR是内建变量, 表示读入文件的总行数, arrival/NR/60 表示取整得到小时, (arrival/NR)%60 取余数得到分钟数;
}
function HM_to_M( hour, min ) {
    return hour*60 + min
}
# 自定义函数, 计算员工达到的分钟数, 与8点的分钟数480进行比较

 

最后通过 awk -f reformat.awk arr.dat 得到文件 today.art, 内容如下

 Today is  11月 08日

===================================

 ID Number Arrival Time

 1005 8:12 *

 1006 7:45  

 1008 8:01 *

 1012 7:46  

 1025 7:27  

 1028 7:49  

 1029 7:57  

 1034 7:26  

 1042 7:59  

 1051 7:51  

 1052 8:05 *

 1101 7:32  

原创文章,作者:black_fish,如若转载,请注明出处:http://www.178linux.com/58585

(0)
black_fishblack_fish
上一篇 2016-11-11 08:41
下一篇 2016-11-11 08:41

相关推荐

  • 加密解密基础、PKI以及自建私有CA

    加密解密基础、PKI以及自建私有CA 加密是以某种特殊的算法改变原有的信息数据,使得未授权的用户即使获得了已加密的信息,但因不知解密的方法,仍然无法了解信息的内容。 解密就是加密的逆向操作,将加密过的不可读的数据经过处理,能够是之前不可读的信息还原成可读信息。 PKI是Public Key Infrastructure的首字母缩写,翻译过来就是公钥基础设施;…

    Linux干货 2016-12-07
  • 配额限制、RAID、LVM

    配置配额系统 在内核中执行以文件系统为单位启用,对不同组或者用户的策略不同; 根据块或者节点进行限制 软限制(soft limit) 硬限制(hard limit) 初始化(/home) 分区挂载选项( /etc/fstab ):usrquota、grpquota 创建数据库: 将selinux调为禁用状态:Permissive quotacheck -cu…

    Linux干货 2017-04-26
  • http协议简介

        http:Hyper Text Transfer Protocol,超文本传输协议。是互联网上应用最为广泛的一种网络协议。所有的WWW文件都必须遵守这个标准。设计HTTP最初的目的是为了提供一种发布和接收HTML页面的方法。1960年美国人Ted Nelson构思了一种通过计算机处理文本信息的方法,并称之为超文本(hyp…

    Linux干货 2015-11-18
  • shell– 脚本编程

    编程基础 脚本基本格式 变量 运算 条件测试 流程控制 函数 数组 高级字符串操作 高级变量 配置用户环境 编程基础 程序:指令+数据 程序编程风格:     过程式:以指令为中心,数据服务于指令     对象式:以数据为中心,指令服务于数据 shell程序:提供了编程能力,解释…

    Linux干货 2016-08-21
  • 搜索引擎-处理查询

     我们从用户的角度来看,用户不关心什么索引结构是倒排还是签名文件,也不需要知道相关排序算法。用户提交了查询,就需要获取满意的搜索结果。这个搜索结果就是搜索引擎是否提供有效的服务。 1.查询流程 查询流程图: 1)用户提交查询 2)分析查询      查询预处理:    …

    Linux干货 2015-12-10
  • BIND 配置DNS服务器以及子域授权

    1、安装bind      [root@www ~]# yum -y install bind 2、查看安装生成的文件      [root@www ~]# rpm -ql bind | less 3、程序路径     /var/named 4、配置…

    Linux干货 2016-03-22