文本处理grep

grep:文本过滤(模式:pattern)工具grep, egrep, fgrep【适合处理比较大的文本】(不支持正则表达式搜索) sed:stream editor,文本编辑工具 awk:Linux上的实现gawk,文本报告生成器

grep(Global search 全局搜索 Regular expression 正则表达式 and Print out the line打印行):支持正则表达式 作用:文本搜索工具,根据用户指定的“模式”对目标文本逐行进行匹配检查;打印匹配到的行 模式:由正则表达式字符及文本字符所编写的过滤条件

grep [OPTIONS] PATTERN(正则表达式) [FILE…]

grep root /etc/passwd grep “$USER” 

/etc/passwd grep ‘$USER’ 

/etc/passwd grep whoami /etc/passwd

命令选项:

–color=auto: 对匹配到的文本着色显示

-v: 显示不被pattern匹配到的行 (显示不包含关键字得行) -i: 忽略字符大小写

-n:显示匹配的行号(与cat –n file|grep root的功能相符)

-c: 统计匹配的行数

-o: 仅显示匹配到的字符串(通常用来与正则表达式的表达式来进行匹配)     

-q: 静默模式,不输出任何信息(与 grep root p &> /dev/null相同)

 -A #: after, 后#行(显示匹配到的行和其后#行)

-B #: before, 前#行(显示匹配到的行和其前#行)

-C #:context, 前后各#行(显示匹配到的前后各#行)

-e:实现多个选项间的逻辑or关系grep –e ‘cat ’ -e ‘dog’ file

-w:匹配整个单词(带有整个单词的行)

-E:使用ERE(扩展的正则表达式 与egrep) -F:相当于fgrep,不支持

            扩展:利用grep来取IP Ifconfig eth0 |grep mask |cut -d: -f 2| cut -d “ ” –f1 正则表达式 REGEXP:由一类特殊字符及文本字符所编写的模式,其中有些字符(元字符)不表示字符字面意义,而表示控制或通配的功能

程序支持:grep, vim, less,nginx等

    分两类: 基本正则表达式:BRE (B=basic 基本的) 扩展正则表达式:ERE (E=extend 扩展的) grep -E, egrep 正则表达式引擎: 采用不同算法,检查处理正则表达式的软件模块PCRE(Perl Compatible Regular Expressions)

元字符分类:字符匹配、匹配次数、位置锚定、分组

man 7 regex(查看其帮助说明)

基本正则表达式元字符:

字符匹配:

. 匹配任意单个字符

[] 匹配指定范围内的任意单个字符

 [^] 匹配指定范围外的任意单个字符

 [:alnum:] 字母和数字 

[:alpha:] 代表任何英文大小写字符,亦即A-Z, a-z

 [:lower:] 小写字母[:upper:] 大写字母

 [:blank:] 空白字符(空格和制表符)

 [:space:]水平和垂直的空白字符(比[:blank:]包含的范围广)

 [:cntrl:] 不可打印的控制字符(退格、删除、警铃…)

 [:digit:] 十进制数字           [:xdigit:]十六进制数字

 [:graph:] 可打印的非空白字符 

[:print:] 可打印字符

 [:punct:] 标点符号

匹配次数:用在要指定次数的字符后面,用于指定前面的字符要出现的次数

  • 匹配前面的字符任意次,包括0次

贪婪模式:尽可能长的匹配(懒惰模式为当寻找到相应的条件时将终止操作 ) .*任意长度的任意字符

\?匹配其前面的字符0或1次

+匹配其前面的字符至少1次

{n}匹配前面的字符n次

{m,n}匹配前面的字符至少m次,至多n次 {,n}匹配前面的字符至多n次

{n,}匹配前面的字符至少n次

位置锚定:定位出现的位置

^ 行首锚定,用于模式的最左侧

$ 行尾锚定,用于模式的最右侧

^PATTERN$ 用于模式匹配整行 ^$ 空行 ^[[:space:]]*$ 空白行 \< 或\b词首锚定,用于单词模式的左侧 > 或\b词尾锚定;用于单词模式的右侧 \匹配整个单词 扩展: 单词边界:除了字母,数字,下划线

分组:() 将一个或多个字符捆绑在一起,当作一个整体进行处理,如:(root)+

分组括号中的模式匹配到的内容会被正则表达式引擎记录于内部的变量中,这些变量的命名方式为: \1, \2, \3, …

\1表示从左侧起第一个左括号以及与之匹配右括号之间的模式所匹配到的字符

示例:(string1+(string2)) \1 :string1+(string2) \2 :string2

后向引用:引用前面的分组括号中的模式所匹配字符,而非模式本身

egrep及扩展的正则表达式: egrep= grep –E

egrep[OPTIONS] PATTERN [FILE…]

扩展正则表达式的元字符:

字符匹配:

. 任意单个字符 [] 指定范围的字符 [^] 不在指定范围的字符

次数匹配:

*:匹配前面字符任意次 ?: 0或1次 +:1次或多次 {m}:匹配m次 {m,n}:至少m,至多n次

位置锚定:

^ :行首 $ :行尾 \<, \b :语首 >, \b :语尾

分组:

() 后向引用:\1, \2, …

或者:

a|b: a或b C|cat: C或cat (C|c)at:Cat或cat

原创文章,作者:GYF,如若转载,请注明出处:http://www.178linux.com/75147

赞 (0)
GYFGYF
上一篇 2017-05-09 22:21
下一篇 2017-05-09 22:47

相关推荐

  • Nginx 原理

    Web服务器处理并发连接请求的工作模型有以下几种方式: 1、单线程web服务器(Single-threaded web servers)此种架构方式中,web服务器一次处理一个请求,结束后读取并处理下一个请求。在某请求处理过程中,其它所有的请求将被忽略,因此,在并发请求较多的场景中将会出现严重的性能问题。(即一次只能处理一个请求) 2、多进程/多线…

    Linux干货 2017-05-07
  • Linux的发展史

    引言: 开源是什么?什么是Unix 、Linux ?这两种操作系统又有什么关联?    大家当前在用最常见的电脑系统是眼前的Windows ,但为何我们要花学习Linux 的发展史? 通过下面的介绍,我们能大致了解互联网发展的一些问题,以及Linux和Unix的基本概念、历史、发展情况。 一、操作系统介绍 内核(kernel)负责控制硬…

    Linux干货 2016-10-19
  • linux文件权限详解

    基本命令 1.cut : cat /etc/passwd | cut -d’:’ -f7| uniq -c| sort -nr 2.authconfig 修改加密方式 –passalgo=sha256 — update 3.scp 上传文件 -r dir ip:path 传目录 file ip:path传文件 …

    Linux干货 2017-04-03
  • Linux路由实验

    一    实验背景:路由器的功能是将不同网段的主机建立通信,本次试验是在使用linux主机当作路由器,完成主机间通信。如下图所示 二、实验环境:主机A和B为CentOS7.2,主机C和D为CentOS6.8,且C和D上分别都有两块网卡 三、实验步骤     注意:为避免干扰项,需将每台主机…

    Linux干货 2016-09-07
  • MariaDB安装与配置

    MariaDB安装与配置  本文是基于CentOS7.2系统来进行mariadb的安装与配置,安装前请关闭selinux和在iptables规则中开放3306端口,在此次我们直接清空了iptables规则。 Iptables –F vim /etc/selinux/config #SELINUX=enforcing ##注释掉此项## #SELIN…

    Linux干货 2017-02-18
  • linux下安装配置DHCP服务器

    前提是已经安装了 core 及 base 两个组   1 2 3 4 5 # cat /etc/redhat-release   Red Hat Enterprise Linux Server release 6.8 (Santiago)&…

    Linux干货 2017-05-03