文本处理grep

grep:文本过滤(模式:pattern)工具grep, egrep, fgrep【适合处理比较大的文本】(不支持正则表达式搜索) sed:stream editor,文本编辑工具 awk:Linux上的实现gawk,文本报告生成器

grep(Global search 全局搜索 Regular expression 正则表达式 and Print out the line打印行):支持正则表达式 作用:文本搜索工具,根据用户指定的“模式”对目标文本逐行进行匹配检查;打印匹配到的行 模式:由正则表达式字符及文本字符所编写的过滤条件

grep [OPTIONS] PATTERN(正则表达式) [FILE…]

grep root /etc/passwd grep “$USER” 

/etc/passwd grep ‘$USER’ 

/etc/passwd grep whoami /etc/passwd

命令选项:

–color=auto: 对匹配到的文本着色显示

-v: 显示不被pattern匹配到的行 (显示不包含关键字得行) -i: 忽略字符大小写

-n:显示匹配的行号(与cat –n file|grep root的功能相符)

-c: 统计匹配的行数

-o: 仅显示匹配到的字符串(通常用来与正则表达式的表达式来进行匹配)     

-q: 静默模式,不输出任何信息(与 grep root p &> /dev/null相同)

 -A #: after, 后#行(显示匹配到的行和其后#行)

-B #: before, 前#行(显示匹配到的行和其前#行)

-C #:context, 前后各#行(显示匹配到的前后各#行)

-e:实现多个选项间的逻辑or关系grep –e ‘cat ’ -e ‘dog’ file

-w:匹配整个单词(带有整个单词的行)

-E:使用ERE(扩展的正则表达式 与egrep) -F:相当于fgrep,不支持

            扩展:利用grep来取IP Ifconfig eth0 |grep mask |cut -d: -f 2| cut -d “ ” –f1 正则表达式 REGEXP:由一类特殊字符及文本字符所编写的模式,其中有些字符(元字符)不表示字符字面意义,而表示控制或通配的功能

程序支持:grep, vim, less,nginx等

    分两类: 基本正则表达式:BRE (B=basic 基本的) 扩展正则表达式:ERE (E=extend 扩展的) grep -E, egrep 正则表达式引擎: 采用不同算法,检查处理正则表达式的软件模块PCRE(Perl Compatible Regular Expressions)

元字符分类:字符匹配、匹配次数、位置锚定、分组

man 7 regex(查看其帮助说明)

基本正则表达式元字符:

字符匹配:

. 匹配任意单个字符

[] 匹配指定范围内的任意单个字符

 [^] 匹配指定范围外的任意单个字符

 [:alnum:] 字母和数字 

[:alpha:] 代表任何英文大小写字符,亦即A-Z, a-z

 [:lower:] 小写字母[:upper:] 大写字母

 [:blank:] 空白字符(空格和制表符)

 [:space:]水平和垂直的空白字符(比[:blank:]包含的范围广)

 [:cntrl:] 不可打印的控制字符(退格、删除、警铃…)

 [:digit:] 十进制数字           [:xdigit:]十六进制数字

 [:graph:] 可打印的非空白字符 

[:print:] 可打印字符

 [:punct:] 标点符号

匹配次数:用在要指定次数的字符后面,用于指定前面的字符要出现的次数

  • 匹配前面的字符任意次,包括0次

贪婪模式:尽可能长的匹配(懒惰模式为当寻找到相应的条件时将终止操作 ) .*任意长度的任意字符

\?匹配其前面的字符0或1次

+匹配其前面的字符至少1次

{n}匹配前面的字符n次

{m,n}匹配前面的字符至少m次,至多n次 {,n}匹配前面的字符至多n次

{n,}匹配前面的字符至少n次

位置锚定:定位出现的位置

^ 行首锚定,用于模式的最左侧

$ 行尾锚定,用于模式的最右侧

^PATTERN$ 用于模式匹配整行 ^$ 空行 ^[[:space:]]*$ 空白行 \< 或\b词首锚定,用于单词模式的左侧 > 或\b词尾锚定;用于单词模式的右侧 \匹配整个单词 扩展: 单词边界:除了字母,数字,下划线

分组:() 将一个或多个字符捆绑在一起,当作一个整体进行处理,如:(root)+

分组括号中的模式匹配到的内容会被正则表达式引擎记录于内部的变量中,这些变量的命名方式为: \1, \2, \3, …

\1表示从左侧起第一个左括号以及与之匹配右括号之间的模式所匹配到的字符

示例:(string1+(string2)) \1 :string1+(string2) \2 :string2

后向引用:引用前面的分组括号中的模式所匹配字符,而非模式本身

egrep及扩展的正则表达式: egrep= grep –E

egrep[OPTIONS] PATTERN [FILE…]

扩展正则表达式的元字符:

字符匹配:

. 任意单个字符 [] 指定范围的字符 [^] 不在指定范围的字符

次数匹配:

*:匹配前面字符任意次 ?: 0或1次 +:1次或多次 {m}:匹配m次 {m,n}:至少m,至多n次

位置锚定:

^ :行首 $ :行尾 \<, \b :语首 >, \b :语尾

分组:

() 后向引用:\1, \2, …

或者:

a|b: a或b C|cat: C或cat (C|c)at:Cat或cat

原创文章,作者:GYF,如若转载,请注明出处:http://www.178linux.com/75147

(0)
上一篇 2017-05-09 22:21
下一篇 2017-05-09 22:47

相关推荐

  • 软件包管理rpm和yum基本使用

    RPM是RedHat Package Manager(RedHat软件包管理工具)类似Windows里面的“添加/删除程序”因而广受欢迎。逐渐受到其他发行版的采用。RPM套件管理方式的出现,让Linux易于安装,升级,间接提升了Linux的适用度。 rpm 执行安装包 二进制包(Binary)以及源代码包(Source)两种。二进制包可以直接安装在计算机中,…

    Linux干货 2016-08-29
  • 第十六周作业

    1、源码编译安装LNMP架构环境;     安装nginx:      1)安装依赖包 ]# yum groupinstall “Development Tools” “Development Libraries” -y ]# yum install wget openssl-devel ncurses-de…

    2017-05-02
  • Linux Sysadmin–part1

    一、创建一个10G分区,并格式为ext4文件系统; 1、要求其block大小为2048,预留空间百分比为2,卷标为MYDATA,默认挂载属性包含acl; 2、挂载至/data/mydata目录,要求挂载时禁止程序自动运行,且不更新文件的访问时间戳; ###创建10G分区 ~]# fdisk /dev/sdb Command (m for help): n P…

    2017-09-04
  • bash数据类型探秘

    数组 变量:存储单个元素的内存空间数组:存储多个元素的连续的内存空间,相当于多个变量的在调用变量时最好加双引号,对于字符串中含有空格等字符的能更好的调用集合。数组名和索引索引:编号从0开始,属于数值索引( 偏移量从默认0开始 )注意:索引可支持使用自定义的格式,而不仅是数值格式,即为关联索引, bash4.0版本之后开始支持。bash的数组支持稀疏格式(索引…

    Linux干货 2016-08-24
  • 浅谈TCP三次握手和四次分手

          TCP(Transmission Control Protocol传输控制协议)是一种面向连接的、可靠的、基于字节流的传输层通信协议提供可靠的连接服务,采用三次握手确认建立一个连接,比如我们去访问一个网站,从输入网址到页面显示我们所想要浏览的内容,这个过程其中就包含了小编要说的三次握手和四次挥手。 一、首先我们来了解…

    2017-09-02
  • 开篇

    test 新人报道

    Linux干货 2016-10-28