文本处理工具

本文主要介绍:1、文本查看工具 2、文本统计工具 3、文本比较工具

本文涉及到的命令主要有:

1、文本查看工具:  cat、tac、rev、more、less、head、tail、cut、paste

2、文本统计及整理工具:  wc、sort、uniq

3、文本比较工具:  diff、patch

一、文本查看工具

1、cat   tac   rev 文件查看

  •         cat 语法:cat  [OPTION]… [FILE]…

          常用选项:

-n  显示行号,空白行也算

-b  显示行号,空白行不算

-ns  显示行号,然后重复的行或字符去重显示为一行或一个字符(连续且相同)

-A  显示所有控制符,所有的隐藏字符,TAB、换行之类

-E显示行结束符$

  • tac :功能同cat,但把文本内容按行上下颠倒
  • rev :功能同cat,但把文本内容按列左右颠倒

2、more  和  less  分页查看文件

  • more: 分页显示文件内容,只能向下翻页,不能向上翻

        选项:

-d  能显示提示信息

在more界面中,可以运行:     /string  搜索关键字

q 退出more界面

  • less:分页显示文件内容,既能向上翻页,又能向下翻页

        在less界面时:

/string  向下搜索关键字

?string  向上搜索关键字

n  按照搜索方向,顺向显示下一个匹配到的内容

N  按照搜索方向,逆序显示下一个匹配到的内容

!COMMAND  在less界面下,执行某命令,不用退出less

q 退出less界面

3、head  和  tail  显示文本前或后行内容

  • head:显示文件的前几行,默认是前10行

        语法:head  [OPTION]… [FILE]…

常见选项:

-c #:表示显示文件的前#个字节

-n #:表示显示文件的前#行

-#:与-n 数字  功能一样,显示文件的前几行

  • tail:显示文件的后几行,默认是10行

        语法:tail   [OPTION]  [FILE]…

常见选项:

-n # :显示文件后几行

-#:与-n 数字 功能一样,显示文件的后几行信息

-c #:显示文件的后多少个字节,而不是后几行

-f  file :  跟踪显示文件file新追加的内容,常用于日志监控。相当于 –follow=descriptor

-F  file:跟踪文件名,若文件删除会提示。相当于–follow=name –retry

-F 可与 -f  联用

  •     tailf 类似于tail -f ,当文件不增长是并不访问文件。

4、cut  按列抽取文本

  • cut:字段截取工具,按照指定的分隔符进行分割后显示,默认分隔符为TAB键

        语法:cut  [OPTION]…  [FILE]…

-d   指定分隔符,默认为tab

-f  FILEDS

#   第#个字段

#,#[,#]…   离散的多个字段,如-f1,3,6

#-#    连续的多个字段,如1-9

-c  按字符切割,取第几个字符到第几个字符数显示的内容(例:cut -c 1-9)

–output-delimiter=STRING  指定输出分隔符

5、paste  合并文本

  • paste:合并两个文件同行号的列到一行

         语法:paste  [OPTION]…  [FILE]…

选项:

-d 分隔符  合并时指定分隔符,默认为tab

-s   将一个文件所有行合并成一行显示(一个文件放一行)

二、文本统计工具

1、wc  收集文本统计数据

计数单词总数、行总数、字节总数和字符总数

             例:wc /etc/passwd
41   79   2106   /etc/passwd

行数   字符数    字节数

  •          语法:wc  [OPTION]… FILE

                    -l   计数多少行

-c  计数多少个字节

-w   计数单词数量

-m   计数字符数,1个汉字只算一个字符

-L    显示文件中最长行的长度

2、sort  文本排序

  •         语法:sort  [OPTIONS]… FILE(s) 排序时默认是按字符a-z排序

        常用选项

-r   倒序显示

-R  随机排序

-n  按数字大小排序

-f   忽略字符大小写

-u   删除结果中的重复行(不管相不相邻,都去重)

-t STRING   使用指定字符做为分隔符

-k X   按照使用上面-t字符分隔的X列来整理

3、uniq  去重(连续且相同为重复)

  •         语法:uniq  [OPTION]… [FILE]…

            -c     显示每行重复出现的次数

-d    仅显示重复过的行

-u     仅显示不曾重复的行

连续且完全相同方为重复

常和 sort 命令一起配合使用:

sort userlist.txt | uniq -c

三、文本比较工具

1、diff  比较两个文件之间的区别

  •  语法:diff [OPTIONS]  FILE1   FILE2

        常用选项:

-u  利用重定向,输出“统一的”diff格式文件,最适用于补丁文件

2、patch  复制改变的数据到文件中(可用来打补丁)

  •  语法:patch [OPTIONS]  FILE  PA1TCHFILE

        选项:

-b   自动备份改变了的文件

3、利用  diff  和 patch  给文件打补丁

例: diff -u f1 f2 > foo.patch    (比较文件  f1  与 f2的区别,并将区别重定向于foo.patch)

patch -b f1 foo.patch     (利用foo.patch 和 f1 文件,即可找回  f2 文件)

==>   f1  (原f2的内容)    f1.orig  (原f1的内容)

本文来自投稿,不代表Linux运维部落立场,如若转载,请注明出处:http://www.178linux.com/96474

(3)
bican813bican813
上一篇 2018-04-16 20:32
下一篇 2018-04-17 15:46

相关推荐

  • 从文本处理到脚本编辑

    文本处理工具grep 文本搜索工具,根据用户指定的“模式” 对目标文本逐行进行匹配检查,打印匹配到的行.-o 仅显示匹配到的字符串-v 显示不被模式匹配到的行-n 显示匹配的行数-c 统计匹配的行数-i 忽略字符大小写-q 静默模式,不输出任何信息-A# 后#行-B# 前#行-C# 前后各#行-e 实现多个选项间的逻辑or关系 grep -e ‘…

    Linux笔记 2018-04-24
  • 运维自动化之ansible

    ansible的基本架构 ​ host inventory主机清单 ​ playbook相当于脚本, ​ modules模块 ansible工作原理 ​ 通过执行命令,或ansible playbook,cmdb ansible配置文件 ​ /etc/ansible/ansible.cfg主配置文件,配置ansible工作特性 ​ /etc/ansible/…

    Linux笔记 2018-06-03
  • AWK

    AWK awk介绍 awk:开发人:Aho, Weinberger, Kernighan, 功能:报告生成器,格式化文本输出     有多种版本:New awk(nawk),GNU awk( gawk) gawk功能:模式扫描和处理语言 awk主要功能:格式化显示文档和打印报表 /usr/bin/awk ===>  gawk   的软链接 &nbs…

    Linux笔记 2018-05-21
  • Linux 第一週作業 (6.18–6.24)

    计算机的组成及其功能
    罗列Linux的发行版
    Linux的哲学思想
    一些簡單命令
    如何在Linux系统上获取命令的帮助信息
    Linux发行版的基础目录名称命名法则及功用规定

    Linux笔记 2018-06-23
  • Linux系统软件包管理介绍

    Linux发行版中附带有成千上万的可用包,其中包括了Internet工具、开发工具、办公工具、游戏等,如果你没有选择完整安装,则只会安装这些包的“子集”,如何删除不想要的包,如何安装遗漏的包,学习LInux系统的软件包管理将解决你的这些问题

    2018-04-20