文本处理grep

grep:文本过滤(模式:pattern)工具grep, egrep, fgrep【适合处理比较大的文本】(不支持正则表达式搜索) sed:stream editor,文本编辑工具 awk:Linux上的实现gawk,文本报告生成器

grep(Global search 全局搜索 Regular expression 正则表达式 and Print out the line打印行):支持正则表达式 作用:文本搜索工具,根据用户指定的“模式”对目标文本逐行进行匹配检查;打印匹配到的行 模式:由正则表达式字符及文本字符所编写的过滤条件

grep [OPTIONS] PATTERN(正则表达式) [FILE…]

grep root /etc/passwd grep “$USER” 

/etc/passwd grep ‘$USER’ 

/etc/passwd grep whoami /etc/passwd

命令选项:

–color=auto: 对匹配到的文本着色显示

-v: 显示不被pattern匹配到的行 (显示不包含关键字得行) -i: 忽略字符大小写

-n:显示匹配的行号(与cat –n file|grep root的功能相符)

-c: 统计匹配的行数

-o: 仅显示匹配到的字符串(通常用来与正则表达式的表达式来进行匹配)     

-q: 静默模式,不输出任何信息(与 grep root p &> /dev/null相同)

 -A #: after, 后#行(显示匹配到的行和其后#行)

-B #: before, 前#行(显示匹配到的行和其前#行)

-C #:context, 前后各#行(显示匹配到的前后各#行)

-e:实现多个选项间的逻辑or关系grep –e ‘cat ’ -e ‘dog’ file

-w:匹配整个单词(带有整个单词的行)

-E:使用ERE(扩展的正则表达式 与egrep) -F:相当于fgrep,不支持

            扩展:利用grep来取IP Ifconfig eth0 |grep mask |cut -d: -f 2| cut -d “ ” –f1 正则表达式 REGEXP:由一类特殊字符及文本字符所编写的模式,其中有些字符(元字符)不表示字符字面意义,而表示控制或通配的功能

程序支持:grep, vim, less,nginx等

    分两类: 基本正则表达式:BRE (B=basic 基本的) 扩展正则表达式:ERE (E=extend 扩展的) grep -E, egrep 正则表达式引擎: 采用不同算法,检查处理正则表达式的软件模块PCRE(Perl Compatible Regular Expressions)

元字符分类:字符匹配、匹配次数、位置锚定、分组

man 7 regex(查看其帮助说明)

基本正则表达式元字符:

字符匹配:

. 匹配任意单个字符

[] 匹配指定范围内的任意单个字符

 [^] 匹配指定范围外的任意单个字符

 [:alnum:] 字母和数字 

[:alpha:] 代表任何英文大小写字符,亦即A-Z, a-z

 [:lower:] 小写字母[:upper:] 大写字母

 [:blank:] 空白字符(空格和制表符)

 [:space:]水平和垂直的空白字符(比[:blank:]包含的范围广)

 [:cntrl:] 不可打印的控制字符(退格、删除、警铃…)

 [:digit:] 十进制数字           [:xdigit:]十六进制数字

 [:graph:] 可打印的非空白字符 

[:print:] 可打印字符

 [:punct:] 标点符号

匹配次数:用在要指定次数的字符后面,用于指定前面的字符要出现的次数

  • 匹配前面的字符任意次,包括0次

贪婪模式:尽可能长的匹配(懒惰模式为当寻找到相应的条件时将终止操作 ) .*任意长度的任意字符

\?匹配其前面的字符0或1次

+匹配其前面的字符至少1次

{n}匹配前面的字符n次

{m,n}匹配前面的字符至少m次,至多n次 {,n}匹配前面的字符至多n次

{n,}匹配前面的字符至少n次

位置锚定:定位出现的位置

^ 行首锚定,用于模式的最左侧

$ 行尾锚定,用于模式的最右侧

^PATTERN$ 用于模式匹配整行 ^$ 空行 ^[[:space:]]*$ 空白行 \< 或\b词首锚定,用于单词模式的左侧 > 或\b词尾锚定;用于单词模式的右侧 \匹配整个单词 扩展: 单词边界:除了字母,数字,下划线

分组:() 将一个或多个字符捆绑在一起,当作一个整体进行处理,如:(root)+

分组括号中的模式匹配到的内容会被正则表达式引擎记录于内部的变量中,这些变量的命名方式为: \1, \2, \3, …

\1表示从左侧起第一个左括号以及与之匹配右括号之间的模式所匹配到的字符

示例:(string1+(string2)) \1 :string1+(string2) \2 :string2

后向引用:引用前面的分组括号中的模式所匹配字符,而非模式本身

egrep及扩展的正则表达式: egrep= grep –E

egrep[OPTIONS] PATTERN [FILE…]

扩展正则表达式的元字符:

字符匹配:

. 任意单个字符 [] 指定范围的字符 [^] 不在指定范围的字符

次数匹配:

*:匹配前面字符任意次 ?: 0或1次 +:1次或多次 {m}:匹配m次 {m,n}:至少m,至多n次

位置锚定:

^ :行首 $ :行尾 \<, \b :语首 >, \b :语尾

分组:

() 后向引用:\1, \2, …

或者:

a|b: a或b C|cat: C或cat (C|c)at:Cat或cat

原创文章,作者:GYF,如若转载,请注明出处:http://www.178linux.com/75147

(0)
上一篇 2017-05-09 22:21
下一篇 2017-05-09 22:47

相关推荐

  • ifcfg, ip, ss,配置文件 (Blog 7)

    Linux主机接入网络:
    IP/MASK
    GATEWAY
    DNS

    Linux干货 2017-11-27
  • 小练习题。【第四周】

    1、复制/etc/skel目录为/home/tuser1,要求/home/tuser1及其内部文件的属组和其他用户均没有任何访问权限。 home]# chmod g-rwx,o-rwx -R tuser1 2、编辑/etc/group文件,添加组hadoop。 /]# vim /etc/group …

    Linux干货 2016-11-26
  • N27_第六周作业

    请详细总结vim编辑器的使用并完成以下练习题 基本模式:编辑模式(命令模式),输入模式,末行模式 模式转换: 编辑模式–输入模式: i:insert,在光标所在处前方输入 a:append,在光标所在处后方输入 o:在光标所在处的下方新建一行 I:在光标所在行行首输入 A:在光标所在处行尾输入 O:在光标所在处的上方打开一个新行 输入模式&#82…

    Linux干货 2017-10-26
  • Linux系统之用户和组

    Linux系统之用户和组 1、什么是用户 用户:资源获取标识符,资源分配,安全权限模型的核心要素之一 2、没有用户,操作系统可否正常执行? 答案是肯定的 在Linux系统上,用户管理是基于用户名和密码的方式进行资源的分配, Username/UID分为以下类别:     管理员:root, 0  &…

    Linux干货 2016-08-04
  • 用keepalived高可用LVS-dr模型

    环境四个虚拟机 Real server:node1:172.16.100.6         CeotOS 6 Real server:node3:172.16.100.69         CeotOS 7 Director1:172.16.100.67                        CeotOS 7 Director1:172.16.10…

    Linux干货 2017-10-15
  • 编译安装lamp框架

    一、 先说说啥叫lamp     1. lamp简介: Linux Apache Mysql PHP(Python, Perl)的简称,下面说说他们之间的关系         Linux:系统运行平台    &…

    Linux干货 2015-06-18