文本处理工具之grep正则表达式

grep简介

grep 是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来。

Unix的grep家族包括grep、egrep和fgrep。egrep和fgrep的命令只跟grep有很小不同。egrep是grep的扩展,支持更多的re元字符, fgrep就是fixed grep或fast grep,它们把所有的字母都看作单词,也就是说,正则表达式中的元字符表示回其自身的字面意义,不再特殊。linux使用GNU版本的grep。它功能更强,可以通过-G、-E、-F命令行选项来使用egrep和fgrep的功能。

一、grep命令的使用
首先,我们来了解grep命令,grep (global search regular expression and printing),全面搜索正则表达式并把行打印出来)是一种强大的文本搜索工具,它能使用正则表达式搜索文本,并把匹配的行打印出来。Linux中的grep命令包括、grep, egrep和fgrep 。egrep是grep的扩展,支持更多的re元字符,fgrep就是fast grep,搜索字符比较快,但不支持正则表达式。
然后,我们再来熟悉一下grep命令,其命令格式为:grep [options] ‘pattern’ FILE 。其中grep的常见选项:
-v:反向选取,只显示不符合模式的行;
-o:只显示被模式匹配的字串,而不是整个行;
-i:不区分字符的大小写;
-r:递归搜索;
-A #:显示匹配到行时,顺带显示其后面的#个行;
-B #:显示匹配到行时,顺带显示其前面的#个行;
-C #:显示匹配到行时,顺带显示其前后的#个行;
另外 ,为了用户查看显示匹配的结果,可以在grep命令之后输入  “--color=auto”,使结果呈现颜色。
二、 正则表达式
上面我们提到使用grep命令搜索正则表达式,那么我们来学习一下什么是正则表达式。
对于正则表达式,其起源并非在linux 中,正则表达式的“鼻祖”或许可一直追溯到科学家对人类神经系统工作原理的早期研究。而其含义是对字符串操作的一种逻辑公式,就是用事先定义好的一些特定字符、及这些特定字符的组合,组成一个“规则字符串”,这个“规则字符串”用来表达对字符串的一种过滤逻辑。给定一个正则表达式和另一个字符串,我们可以达到如下的目的:
1. 给定的字符串是否符合正则表达式的过滤逻辑(称作“匹配”);
2. 可以通过正则表达式,从字符串中获取我们想要的特定部分。
正则表达式由一些普通字符和一些元字符(metacharacters)组成。元字符不表示字符本身的意义,而用于额外功能性的描述。正则表达式的类型包括基本正则表达式和扩展正则表达式。
三、基本正则表达式
^:锚定行首的符合条件内容,用法格式 "^pattern";
$: 锚定行尾的符合条件内容,用法格式 "pattern$";
*:匹配紧挨着其前面的字符任意次 ;
.:匹配任意单个字符;
.*:匹配任意长度的任意字符(贪婪模式,尽可能的匹配);
r.*h (非锚定), ^r.*h$(锚定)
[] :匹配指定范围内的任意单个字符;
[^]:匹配指定范围外的任意单个字符 ;
[[:space:]]:空白字符;
\?:匹配紧挨着在其前面的字符0次或1次;
\{m,n\}:匹配其前面的字符至少m次,  至多n次;
\{m,\}:至少m次,\{0,n\}:至多n次,0-n次;
\{m\}:精确匹配到m次;
\<:锚定词首,用法格式:\<pattern;
\>: 锚定词尾,用法格式:\>pattern;
\<pattern>:锚定单词;
\(\):分组,用法格式:\(pattern\);
ab任意字符ab:ab.*ab;
a.b任意字符a.b;\(a.b\).*\1 (1的含义是以相同的内容出现)。
四、扩展正则表达式
.: 任意单个字符
[ ] : 匹配指定范围内的任意单个字符;
[^]:匹配指定范围外的任意单个字符 ;
*:匹配紧挨着其前面的字符任意次
+:匹配其前面的字符至少1次
{m,n}:至少m次,至多n次
():分组,支持引用\1,\2
a|b:二选一
\<: 锚定词首,用法格式:\<pattern;
\>: 锚定词尾,用法格式:\>pattern;
^ : 锚定行首的符合条件内容
$ : 锚定行尾的符合条件内容
正则表达式是如何运用在linux的命令中的呢下面我们一起来看看几简单的实例分析正则表达式。
五、 正则表达式与grep命令的实战演    练
1,显示/etc/rc.d/rc.sysinit文件中以不区分大小的h开头的行;
# grep  “^[hH]”  /etc/rc.d/rc.sysinit
2,  显示/etc/passwd中以sh结尾的行;
# grep  “sh$”  /etc/passwd
3,  显示/etc/fstab中以#开头,且后面跟两个或多个空白字符,而后又跟了任意非空白字符的行;
#grep  “^#[[:space:]]\{1,\}[^[:space:]]  /etc/fstab
4,  显示/etc/rc.d/rc.local中符合形为“任意单个字符n任意字符任意单个字符n”模式的行;
# grep  “\(.i\).*\1”  /etc/rc.d/rc.local
5,  查找/etc/inittab中含有“以s开头,并以d结尾的单词”模式的行;
# grep  “\<s[a-zA-Z]*d\>”  /etc/inittab
或#grep  “\<s[^[:space:]]*d\>”  /etc/inittab
6,  查找ifconfig命令结果中的1-255之间的整数;
# grep | -E "\<([1-9]|[1-9][0-9]|1[0-9][0-9]|2[0-4][0-9]|25[0-5])\>"
7,显示/var/log/secure文件中包含“Failed”或“FAILED”的行;而后统计相关的行数
# egrep “(Failed | FAILED )” /var/log/secure  | wc -l
8,在/etc/passwd中取出默认shell为bash,且其用户ID号最小的用户的用户名
# grep "bash$" /etc/passwd | sort -n -t: -k3 | head -1 | cut -d: -f1

原创文章,作者:zsyzgw,如若转载,请注明出处:http://www.178linux.com/30762

(0)
zsyzgwzsyzgw
上一篇 2016-08-08 16:11
下一篇 2016-08-08 16:11

相关推荐

  • Boot目录下内容丢失导致系统无法启动

    Boot目录下内容丢失导致系统无法启动 笔者朋友近期在一次学习过程中不慎将虚拟机中boot目录下内容丢失,导致系统无法启动。当然此前他并不知道是这样,只是应为莫名的弹出框报错所有导致系统无法启动。此后朋友将此故障告知笔者,笔者本身其实也是小白刚刚学习linux不就,但是对这些稀奇古怪的故障感觉很有兴趣,所以笔者就掉进坑里搞了好久才搞出来点眉目来。为了让更多学…

    Linux干货 2016-10-24
  • N28-第二周博客作业

    常用通配符
    *:表示任意长度的任意字符;

    ?:表示任意的单个字符;

    []:表示在指定范围内的单个字符:[a-z];

    [^]:脱字符,是取反的意思,即在指定范围以外的任意字符,如 [^0-9]表示除数字以外的一切字符。

    [:digit:] 表示所有的数字,相当于0-9

    [:lower:] 表示所有的小写字母

    [:upper:] 表示所有的大写字母

    [:alpha:] 表示所有的字母,

    [:alnum:] 相当于[0-9a-z]

    [:space:] 相当于空白字符

    [:punct:] 表示所有的标点符号

    1、Linux上的文件管理类命令都有哪些,其常用的使用方法及其相关示例演示。

    2、bash的工作特性之命令执行状态返回值和命令行展开所涉及的内容及其示例演示。

    3、请使用命令行展开功能来完成以下练习:

    (1)、创建/tmp目录下的:a_c, a_d, b_c, b_d

    (2)、创建/tmp/mylinux目录下的:
    mylinux/
    ├── bin
    ├── boot
    │?? └── grub
    ├── dev
    ├── etc
    │?? ├── rc.d
    │?? │?? └── init.d
    │?? └── sysconfig
    │?? └── network-scripts
    ├── lib
    │?? └── modules
    ├── lib64
    ├── proc
    ├── sbin
    ├── sys
    ├── tmp
    ├── usr
    │?? └── local
    │?? ├── bin
    │?? └── sbin
    └── var
    ├── lock
    ├── log
    └── run

    4、文件的元数据信息有哪些,分别表示什么含义,如何查看?如何修改文件的时间戳信息。

    5、如何定义一个命令的别名,如何在命令中引用另一个命令的执行结果?

    6、显示/var目录下所有以l开头,以一个小写字母结尾,且中间至少出现一位数字(可以有其它字符)的文件或目录。

    7、显示/etc目录下,以任意一个数字开头,且以非数字结尾的文件或目录。

    8、显示/etc目录下,以非字母开头,后面跟了一个字母以及其它任意长度任意字符的文件或目录。

    9、在/tmp目录下创建以tfile开头,后跟当前日期和时间的文件,文件名形如:tfile-2016-05-27-09-32-22。

    10、复制/etc目录下所有以p开头,以非数字结尾的文件或目录到/tmp/mytest1目录中。

    11、复制/etc目录下所有以.d结尾的文件或目录至/tmp/mytest2目录中。

    12、复制/etc/目录下所有以l或m或n开头,以.conf结尾的文件至/tmp/mytest3目录中。

    Linux干货 2017-12-11
  • NFS的应用实例

    实验目的:通过NFS实现共享 实验要求:实验环境下防火墙以及selinux都是要关闭的!!! 实验环境:三台虚拟机,以及相关安装程序 实验过程: 设置服务端centos 6-1 [root@centos6 ~]# yum install mysql-servernfs-utils httpd [root@centos6 ~]# service mysqld …

    2017-05-03
  • M22 xfs文件系统命令总结

    Centos6.0及之前的默认文件系统是ext系列的,而在最新的Centos7上却使用了xfs作为默认的文件系统。在Centos7中xfs文件系统包括如下命令: xfs_admin:修改xfs文件系统的参数,需要先卸载分区 用法:xfs_admin [ -eflpu ] [ -c 0|1 ] [ -L label ] [ -U uuid ] device x…

    Linux干货 2017-03-16
  • 计算机与操作系统

    计算机系统=Hardware+Software Linux操作系统=GNU/kernel+程序 (user space) ————– apps   shell    (人机交互接口) lib call(半层)  (kernel space) —&#…

    Linux干货 2017-02-14
  • 常用的shell命令

    硬件: 1.cpu相关 lscpu:查看cpu的统计信息 cat /proc/cpuinfo :查看cpu详细信息,如每个cpu的型号 2.内存相关 free -m:概要查看内存情况,这里的单位是MB cat  /etc/meminfo   :查看内存详细信息 3.磁盘相关: l…

    Linux干货 2016-08-22