了解sed

maru • • Linux干货

本博客分为四个部分：
sed介绍、sed用法、sed高级用法（简略带过）、相关例题。
通过本文可以大致了解sed命令。深度可以当成是课前预习吧。

1、sed介绍
Stream EDitor, 行编辑器
sed是一种流编辑器，它一次处理一行内容。处理时，把 当前处理的行存储在临时缓冲区中，称为“模式空间”（ pattern space），接着用sed命令处理缓冲区中的内容 ，处理完成后，把缓冲区的内容送往屏幕。接着处理下一 行，这样不断重复，直到文件末尾。文件内容并没有改变 ，除非你使用重定向存储输出。Sed主要用来自动编辑一 个或多个文件,简化对文件的反复操作,编写转换程序

2、sed用法
sed [option]… ‘script’ inputfile…  

常用选项：
    -n：不输出模式空间内容到屏幕，即不自动打印
    -e: 多点编辑
        注：通过后面例题，个人理解该命令是用来合并多条地址命令的
    -f：/PATH/SCRIPT_FILE: 从指定文件中读取编辑脚本
        注：用来编写复杂的地址命令
    -r: 支持使用扩展正则表达式
    -i.bak: 备份文件并原处编辑
        -i：直接在原处编辑，此选项慎用

script:
    ‘地址命令’

地址定界：
(1) 不给地址：对全文进行处理
        注意：这里不给地址也要有”，不然会出错
(2) 单地址：
        #: 指定的行
        /pattern/：被此处模式所能够匹配到的每一行
(3) 地址范围：
        #,# 第#行到第#行
        #,+# 第#行到其后#行
        /pat1/,/pat2/
        #,/pat1/         
(4) ~：步进
        1~2 奇数行
        2~2 偶数行

 编辑命令：
     d: 删除模式空间匹配的行
     p: 显示模式空间中的内容
     a []text：在指定行后面追加文本 支持使用\n实现多行追加
     i []text：在行前面插入文本
     c []text：替换行为单行或多行文本
     w /path/somefile: 保存模式匹配的行至指定文件
     r /path/somefile：读取指定文件的文本至模式空间中 匹配到的行后
     =: 为模式空间中的行打印行号
     !:模式空间中匹配行取反处理（跟在要取反部分后面）

    s///：查找替换,支持使用其它分隔符，s@@@，s###
    替换标记：
        g: 行内全局替换
        p: 显示替换成功的行

        w /PATH/TO/SOMEFILE：将替换成功的行保存至文件

3、sed高级（danteng）用法
高级编辑命令：
    h: 把模式空间中的内容覆盖至保持空间中
    H：把模式空间中的内容追加至保持空间中
    g: 从保持空间取出数据覆盖至模式空间
    G：从保持空间取出内容追加至模式空间
    x: 把模式空间中的内容与保持空间中的内容进行互换
    n: 读取匹配到的行的下一行覆盖至模式空间 N：读取匹配到的行的下一行追加至模式空间
    d: 删除模式空间中的行
    D：删除当前模式空间开端至\n的内容（不再传至标准输 出），放弃之后的命令，但是对剩余模式空间重新执行sed
    这一部分功能确实很强大，但是不容易记忆、理解和掌握。掌握基本用法才是王道。

    sed -n ‘n;p’ FILE
    sed ‘1!G;h;$!d’ FILE
    sed ‘$!N;$!D’ FILE
    sed ‘$!d’ FILE
    sed ‘G’ FILE
    sed ‘g’ FILE
    sed ‘/^$/d;G’ FILE
    sed ‘n;d’ FILE
    sed -n ‘1!G;h;$p’ FILE
    看懂并会用以上，则sed神功已成。

4、相关例题解答（大部分都没有标准答案，自己尝试写的）
1
删除/boot/grub/grub.conf文件中所有以空白开头的行行首的空白字符
sed “s@^[[:space:]]+@@” /boot/grub/grub.conf 错误解答
sed ‘s@^[[:space:]]+@@ /boot/grub/grub.conf 正解
这里地址命令默认是使用基本正则表达式，需要写成+

2
删除/etc/fstab文件中所有以#开头，后面至少跟一个空白字符的行 的行首的#和空白字符
sed ‘s@^#[[:space:]]+@@’ /etc/fstab
基本正则表达式的用法

3
在centos6系统/root/install.log每一行行首增加#号
sed ‘s@^@#&@’ /root/install.log
经过实验结果正确。
思路：只要匹配到了行首，就在行首之前加上#替换原行首。

4
在/etc/fstab文件中不以#开头的行的开头增加#号
sed ‘s@^[^#]@#&@’ /etc/fstab
和第三题属于同一类型。

5

处理/etc/fstab路径，使用sed命令取出其目录名和基名

讲道理上面已经解决了一个更为复杂的情况

echo /etc/fstab|sed ‘s@[^/]\+$@@’ 取出目录名

echo /etc/fstab|sed ‘s@^/.*/@@’ 取出基名

以上两种方法足以处理给定形式下的路径名。

拓展思考：

可以考虑怎么解决/etc/fstab/形式下的路径。

echo一个绝对路径给sed命令，取出其基名；取出其目录名；

echo /etc/passwd|sed ‘s@[^/]\+\/?$@@’能够应对结尾带/的特殊情况 取出目录名

echo /etc/passwd|sed ‘s@^/[^/]*/@@’不能应对结尾带/的特殊情况 取出基名

随后想到先去掉结尾可能存在的/不就好了。修改后的解答如下：

echo /etc/passwd/|sed ‘s@/\?$@@’|sed ‘s@^/[^/]*/@@’能够应对结尾出现/的特殊情况取出基名

顺便尝试用-e来合并后两部分的地址命令

最终结果如下：

echo /etc/passwd/|sed -e ‘s@/\?$@@;s@^/[^/]*/@@’

6
利用sed取出ifconfig命令中的本机的ipv4地址
ifconfig|sed -n ‘/\<inet\>/p’ 能够取出inet的行
去过要单独取出inet，需要大量后续处理。

7
统计centos安装光盘中package目录下所有rpm文件的以.分隔倒数第二个字段的重复次数
ls /mnt/yum/Packages|grep -o “[^.]+.rpm$”|cut -d”.” -f1|sort|uniq -c

sed方法暂时没有想好。对于使用sed进行数据统计不了解。

这里我尝试用sed -n ‘/[^.]\+\.rpm$/p’代替grep部分，但是结果是错误的。

8
统计/etc/init.d/functions文件中每个单词的出现次数，并排序
grep和sed两种方法分别实现。
不太清楚怎么依次统计所有单词的出现次数。

9
将文本文件的n和n+1行合并为一行，n为奇数行
上网查的方法。讲道理sed的高级用法虽然强大但真的不容易理解。
sed ‘N;s/\n//’ test.txt
N读取匹配到的行的下一行追加至模式空间
s然后是进行替换，把模式空间中的换行符去掉，从而完成两行合并成一行。

原创文章，作者：maru，如若转载，请注明出处：http://www.178linux.com/74250

赞 (0)
marumaru
1
上一篇 2017-04-25
下一篇 2017-04-25

相关推荐

  • N26-第三周作业

    N26-第三周作业 一、列出当前系统上所有已经登录的用户的用户名，注意：同一个用户登录多次，则只显示一次即可。 [root@promote ~]# who root     tty1         2017-03-10 22:36 lxk…

    Linux干货 2017-03-11

  • nginx

    http http协议：web服务器（类似于httpd）、http reverse proxy（类似于httpd）、imap/pop3 reverse proxy NGINX is a free, open-source, high-performance HTTP server and reverse proxy, as well as an IMAP/P…

    Linux干货 2017-06-25

  • IP命令

    IP命令 ip命令是Linux下较新的功能强大的网络配置工具。 1 功能 ip命令用来显示或操纵Linux主机的路由、网络设备、策略路由和隧道。 2用法 Usage: ip [ OPTIONS ] OBJECT { COMMAND | help } ip [ -force ] -batch filename -force：不要终止批处理模式中的错误 -b：-…

    Linux干货 2017-05-07

  • N28-第二周博客作业

    常用通配符
    *:表示任意长度的任意字符;

    ?:表示任意的单个字符;

    []:表示在指定范围内的单个字符:[a-z];

    [^]:脱字符,是取反的意思,即在指定范围以外的任意字符,如 [^0-9]表示除数字以外的一切字符。

    [:digit:] 表示所有的数字,相当于0-9

    [:lower:] 表示所有的小写字母

    [:upper:] 表示所有的大写字母

    [:alpha:] 表示所有的字母,

    [:alnum:] 相当于[0-9a-z]

    [:space:] 相当于空白字符

    [:punct:] 表示所有的标点符号

    1、Linux上的文件管理类命令都有哪些，其常用的使用方法及其相关示例演示。

    2、bash的工作特性之命令执行状态返回值和命令行展开所涉及的内容及其示例演示。

    3、请使用命令行展开功能来完成以下练习：

    (1)、创建/tmp目录下的：a_c, a_d, b_c, b_d

    (2)、创建/tmp/mylinux目录下的：
    mylinux/
    ├── bin
    ├── boot
    │?? └── grub
    ├── dev
    ├── etc
    │?? ├── rc.d
    │?? │?? └── init.d
    │?? └── sysconfig
    │?? └── network-scripts
    ├── lib
    │?? └── modules
    ├── lib64
    ├── proc
    ├── sbin
    ├── sys
    ├── tmp
    ├── usr
    │?? └── local
    │?? ├── bin
    │?? └── sbin
    └── var
    ├── lock
    ├── log
    └── run

    4、文件的元数据信息有哪些，分别表示什么含义，如何查看？如何修改文件的时间戳信息。

    5、如何定义一个命令的别名，如何在命令中引用另一个命令的执行结果？

    6、显示/var目录下所有以l开头，以一个小写字母结尾，且中间至少出现一位数字（可以有其它字符）的文件或目录。

    7、显示/etc目录下，以任意一个数字开头，且以非数字结尾的文件或目录。

    8、显示/etc目录下，以非字母开头，后面跟了一个字母以及其它任意长度任意字符的文件或目录。

    9、在/tmp目录下创建以tfile开头，后跟当前日期和时间的文件，文件名形如：tfile-2016-05-27-09-32-22。

    10、复制/etc目录下所有以p开头，以非数字结尾的文件或目录到/tmp/mytest1目录中。

    11、复制/etc目录下所有以.d结尾的文件或目录至/tmp/mytest2目录中。

    12、复制/etc/目录下所有以l或m或n开头，以.conf结尾的文件至/tmp/mytest3目录中。

    Linux干货 2017-12-11

  • Linux Basics

    计算机的组成及其功能：             CPU：运算器、控制器、寄存器、缓存             存储器：内存，RAM（Random Access Memory）   …

    Linux干货 2016-09-17

  • 分布式系统的事务处理

    当我们在生产线上用一台服务器来提供数据服务的时候，我会遇到如下的两个问题： 1）一台服务器的性能不足以提供足够的能力服务于所有的网络请求。 2）我们总是害怕我们的这台服务器停机，造成服务不可用或是数据丢失。 于是我们不得不对我们的服务器进行扩展，加入更多的机器来分担性能上的问题，以及来解决单点故障问题。 通常，我们会通过两种手段来扩展我们的数据服务： 1）数…

    Linux干货 2016-08-15

评论列表（1条）

  • renjin
    renjin 2017-04-28 09:39

    对sed命令进行了介绍 ，内容写的很详细，注意一下排版，你的那个代码块还是没有注意到，下次要注意一些。

电话咨询
在线咨询