文本处理三剑客-sed

1.文本处理三剑客-sed

#sed语法：
sed  [OPTION]...  {script-only-if-no-other-script}
       [input-file]...

sed理解：是一种流编辑器，一次处理一行内容，处理时把当前处理的行存储在临时缓存中，成为“模式空间”，接着用sed命令处理缓冲区的内容，处理完毕后吧缓冲区内容输出到屏幕接着处理下一行。这样不断重复到末尾。文件内容并没有改变。除非使用重定向输出才会改变内容。

 常用选项

-n 不输出模式空间到屏幕
-e 多点编辑，或
-f 从指定文件中读取编辑脚本
-r 使用扩展表达式
-i 原处编辑

2.sed处理地址范围定界：

1. 不给地址表示对全文处理

2. 单地址 指定行 ‘1‘ 第一行 ;

/ 关键字，可以是正则表达式或其他模糊匹配的符号/

3. 地址范围

'2,10'第二行到第十行 

’2,+10‘第二行再加10行 

/关键字/,/关键字/匹配第一个关键字到第二个关键字之间的内容 ;

4. 步进 

’1~2‘奇数行  

’2~2’偶数行

3.sed编辑命令

d 删除模式空间匹配到的行

[root@localhost testdir]# sed '1d' 1
     2	#
     3	# /etc/fstab
     4	# Created by anaconda on Thu Jul 28 17:47:00 2016

p 显示模式空间中的内容

[root@localhost ~]# sed '2p' /etc/issue
\S
Kernel \r on an \m
Kernel \r on an \m

显示两次的原因因为在模式空间输出一次然后p显示一次，加上-n是表示不输出模式空间到屏幕，如下输出

[root@localhost ~]# sed '2p' /etc/issue
\S
Kernel \r on an \m

a \添加内容 在匹配行后加入文本 \n多行插入

#实例解释
[root@localhost testdir]# sed -e  /UUID/a\XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX -e /UUID/i\ZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZ  file1
     1	
     2	#
     3	# /etc/fstab
     4	# Created by anaconda on Thu Jul 28 17:47:00 2016
     5	#
     6	# Accessible filesystems, by reference, are maintained under '/dev/disk'
     7	# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
     8	#
     9	/dev/mapper/centos-root /                       xfs     defaults        0 0
ZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZZ
    10	UUID=aea23617-8678-414a-bd12-59f03ea9deb0 /boot                   xfs     defaults        0 0
XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX

i \添加内容  在匹配行后加入文本 \n多行插入

#实例解释
[root@localhost testdir]# sed '/^U/i\ZZZZZZZZZZZZZZZZZZZZZ\nNNNNNNNNNNNNNNNNNNNNNN\nssssssssssssssss' file3
#输出结果
ZZZZZZZZZZZZZZZZZZZZZ
NNNNNNNNNNNNNNNNNNNNNN
ssssssssssssssss
UUID=aea23617-8678-414a-bd12-59f03ea9deb0 /boot

c \替换内容 替换单行或多行文本

#实例解释，也支持\n换行
[root@localhost testdir]# sed '/^U/c\relace' file3
#将以U打头的行替换成‘relace’

w /保存新文件路径

[root@localhost testdir]# sed '/^U/w /testdir/5' file3

r /保存文件路径

[root@localhost testdir]# sed '/^U/r /etc/issue' file3

= 在模式空间中打印行号

[root@localhost testdir]# sed '/^U/=' file6

！模式空间匹配到的取反

[root@localhost testdir]# sed '/^U/!=' file6

#ps：sed文件出是不修改原文件内容的，如果要修改可以使用选项-i

[root@localhost testdir]# sed -i '/^U/d' 3

修改之前可以将文件进行备份,在-i选项后面添加备份名可以在修改之前备份该文件

[root@localhost testdir]# sed -i.bak '/^U/d' 3

4.sed搜索替换

s/// 查找替换 支持使用分割符包括s@@@，s### 替换标记;
g:全局替换
p:显示替换成功的行
w 将替换成功的行保存至新文件

#实例操作解释
#1、删除/etc/grub2.conf文件中所有以空白开头的行行首的空白字符
[root@localhost testdir]# sed '/^[[:space:]]\+/d' /etc/grub2.cfg 
#2、删除/etc/fstab文件中所有以#开头，后面至少跟一个空白字符的行的行首的#和空白字符
[root@localhost testdir]# sed 's/^#[[:space:]]\+//' /etc/fstab
#3、在/root/install.log每一行行首增加#号
[root@centos6 ~]# sed -n 's/^/#/p' /root/install.log
#4、在/etc/fstab文件中不以#开头的行的行首增加#号
[root@centos6 ~]# sed 's/^[^#]/#/' /etc/fstab
#5、处理/etc/fstab路径,使用sed命令取出其目录名和基名
取基名
echo "/etc/fst/sd" | sed -r  's@(.*)/([^/]+/?)@\2@'
echo "/etc/fst/sd" | sed   -r 's@(.*/)([^/]+/?)$@\1@' 
echo "/etc/fst/sd/" | sed  's@.*\<@@'
取目录
echo "/etc/fst/sd/" | sed -r  's#[^/]+/?$##'
#6、利用sed 取出ifconfig命令中本机的IPv4地址
[root@centos6 ~]# ifconfig|sed -n '2p'|sed 's/\<B.*//'|sed 's/^.*r:'//
#7、统计centos安装光盘中Package目录下的所有rpm文件的以.分隔倒数第二个字段的重复次数
[root@centos6 Packages]# ls |sed 's/.rpm$'//|sed 's/.*\.'//|sort|uniq -c

5.sed高级应用

首先要了解使用sed两个缓存空间，一个是模式空间，在前面已经说过了

另一个是保持空间

下面几个是sed的高级应用

h: 把模式空间中的内容覆盖至保持空间中

H：把模式空间中的内容追加至保持空间中

g: 从保持空间取出数据覆盖至模式空间

G：从保持空间取出内容追加至模式空间

x: 把模式空间中的内容与保持空间中的内容进行互换

n: 读取匹配到的行的下一行覆盖至模式空间

N：追加匹配到的行的下一行至模式空间

d: 删除模式空间中的行

D：删除当前模式空间开端至\n的内容（不在传至标准输出），放弃之后的命令，但是对剩余模式空间重新执行sed

#实例解释以后补充