Linux文本处理三剑客之sed

处理文本工具sed

sed是一种流编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有改变,除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件,简化对文件的反复操作,编写转换程序等

用法:

   sed[option]... 'script' inputfile...

常用选项:

   -n:不输出模式空间内容的自动打印
   -e:多点编辑
   -f /PATH/TO/SCRIPT_FILE:从指定文件中读取编辑脚本
   -r:支持使用扩展正则表达式
   -i:原处编辑

地址命令:

地址定界:

   (1)不给地址:对全文进行处理
   (2)单地址:
           #:指定的行
           /pattern/:被此模式所能匹配到的每一行
   (3)地址范围:
           #,#
           #,+#
           /pat1/,/pat2/
           #,/pat1/
   (4)~:步进
           1~2 奇数行
           2~2 偶数行

编辑命令:

    d:删除模式空间匹配的行
    p:显示模式空间中的内容
    a \text:在行后面追加文本;指出使用\n实现多行追加
    i \text:在行后前面追加文本;指出使用\n实现多行插入
    c \text:替换行为单行或多行文本
    w /path/to/somefile:保存模式空间的行至指定文件
    r /path/to/somefile:读取指定文件的文本至模式空间中匹配到的行后
    =:为模式空间中的行打印行号
    !:模式空间中匹配行取反处理

替换命令:

    s///:查找替换,支持使用其他分隔符,s@@@,s###
        sed 's/要被替换的字符串/新的字符串'
    替换标记:
        g:行内全部替换
        p:显示替换成功的行
        w /PATH/TO/DOMEFILE:将替换成功的行保存至文件中

sed示例:

     使用-n的时候将只打印包含模板的行

    [root@centos7 ~]# sed -n '2p' /etc/passwd
    bin:x:1:1:bin:/bin:/sbin/nologin

     把/etc/passwd下1到4行取出

    [root@centos7 ~]# sed -n '2,4p' /etc/passwd
    bin:x:1:1:bin:/bin:/sbin/nologin
    daemon:x:2:2:daemon:/sbin:/sbin/nologin
    adm:x:3:4:adm:/var/adm:/sbin/nologin

      先取空白行再取空白行的行号,-e是多点编辑

    [root@centos7 ~]# sed -n -e '/^$/p' -e '/^$/=' /etc/rc.d/init.d/functions 

    6

    8

    11

    15

    在匹配到root字符行的下方添加superman

    [root@centos7 ~]# sed '/root/a\superman' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    superman
    bin:x:1:1:bin:/bin:/sbin/nologin

    匹配到的root字符的行被superman替代   

    [root@centos7 ~]# sed '/root/c\superman' /etc/passwd
    superman
    bin:x:1:1:bin:/bin:/sbin/nologin
    daemon:x:2:2:daemon:/sbin:/sbin/nologin
    adm:x:3:4:adm:/var/adm:/sbin/nologin

    把/etc/passwd中的2到5行删除

    [root@centos7 ~]# nl /etc/passwd | sed '2,5d'
     1	root:x:0:0:root:/root:/bin/bash
     6	sync:x:5:0:sync:/sbin:/bin/sync
     7	shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
     8	halt:x:7:0:halt:/sbin:/sbin/halt
     9	mail:x:8:12:mail:/var/spool/mail:/sbin/nologin

    “&”引用前面查找时查找到的整个内容

    [root@centos7 ~]# sed -n 's/root/&superman/p' /etc/passwd
    rootsuperman:x:0:0:root:/root:/bin/bash
    [root@centos7 ~]# sed -n 's/root/superman&/p' /etc/passwd
    supermanroot:x:0:0:root:/root:/bin/bash

    -i可以直接修改文件的内容(危险操作)

    [root@centos7 ~]# nl /etc/passwd > f1
    [root@centos7 ~]# sed -i '2d' f1
    [root@centos7 ~]# cat f1
     1root:x:0:0:root:/root:/bin/bash
     3daemon:x:2:2:daemon:/sbin:/sbin/nologin

删除f1第二行之前先做个备份命名为f1.bak

    [root@centos7 ~]# sed -i.bak '2d' f1

sed练习:

1、删除/etc/grub2.conf文件中所有以空白开头的行行首的空白字符

    cat /etc/grub2.cfg| sed 's@^[[:space:]]\+@@g'

2、删除/etc/fstab文件中所有以#开头,后面至少跟一个空白字符的行的行首的#和空白字符

    cat /etc/fstab | sed 's@^#[[:space:]]\+@@g'

3、在/root/install.log每一行行首增加#号

    sed 's@^@#@g' /root/install.log

4、在/etc/fstab文件中不以#开头的行的行首增加#号

    sed 's@^[^#]@#&@' /etc/fstab

5、处理/etc/fstab路径,使用sed命令取出其目录名和基名

    echo /etc/fstab/abc/ |sed -r 's@(.*/)([^/]+/?$)@\1@'
    echo /etc/fstab/abc/ |sed -r 's@(.*/)([^/]+/?$)@\2@'

6、利用sed 取出ifconfig命令中本机的IPv4地址

    ifconfig | sed -n '2p' | sed -r 's@.*addr:(.*) B.*@\1@'

7、统计centos安装光盘中Package目录下的所有rpm文件的以.分隔倒数第二个字段的重复次数

    ls *.rpm |sed -r 's@.*\.(.*)\.rpm$@\1@' | sort|uniq -c

原创文章,作者:xiaoqing,如若转载,请注明出处:http://www.178linux.com/34595

(0)
上一篇 2016-08-15 09:25
下一篇 2016-08-15 09:25

相关推荐

  • Mysql备份I

    Mysql备份I I备份在什么时候会被需要 硬件故障 机器无法启动 机器突然消失了怎么办 业务出现异常 一定要先select 在操作 类似drop或delete的操作 攻击 程序bug 业务特殊需求  重要数据多处多次多版本备份 至少有2份远程备份文件2处本地备份 II哪些东西需…

    Linux干货 2016-06-09
  • 十.Linux博客-2016年8月12日变量、算术表达式、测试

    格式说明: 操作 概念 命令 说明及举例 十.变量、算术表达式、测试 bash -n +脚本 检查语法错误 .bash_profile 配置文件PATH=$PATH:$HOME/bin:. 加.方便但不安全 unset name 删变量name 小驼峰 第一个单词字母小写,以后单词首字母大写大驼峰 每一个单词首字母都大写 set…

    Linux干货 2016-08-24
  • M22 用户、组学习总结

    Linux系统的登录方式是通过账号和密码。每一个登录账号都有一个主组可能有附加组。Linux内的文件和目录都有所有者和属组,只有相应权限的账户可以对其进行操作,下面我对用户权限相关内容进行了总结。   1、  用户ID,每个用户具有相应的ID号码,主要分为两类:系统ID和用户ID,在Centos6中系统ID为1-499,用户ID >…

    2017-02-22
  • 文本处理三剑客之grep

    文本处理三剑客之grep 正则表达式(regex) 文本处理工具 grep egrep 试验环境:CentOS 7.2 正则表达式 Linux的哲学之一“一切皆文件”,学习Linux应得掌握其基本的文本处理工具,这些工具主要包括: 文件内容:less和cat 文件截取:head和tail 文件抽取:cut 关键字搜索:grep 正则表达式是计算机科…

    Linux干货 2016-08-07
  • Centos6系统救援模式

    CentOS 6系统救援模式 在学习了CentOS 5、6系统启动流程与启动故障排除之后,为了加深印象进行了如下破坏性尝试。 删除/boot目录与/etc/fstab文件后尝试修复系统 1. 首先是第一步删除/boot目录与/etc/fstab 删除/boot /etc/fstab 可以看到虽然boot目录无法删除但是目录中的文件已经全部删掉了。 2. 重新…

    Linux干货 2016-11-24
  • 小东北Eric的学习宣言

      大家好,我是网络班24期新加入的学员,之前工作了几年,一直没有找到一个很明确的工作方向,现在终于可以有一个很明确的努力方向啦,那就是跟着马哥,成为技术大牛,听马哥说过,键盘敲烂,月薪两万,为了这个目标,并且努力超越它,加油!冲!冲!冲!

    Linux干货 2016-10-19