文本处理“三剑客”之SED”

一、SED行编辑器

      sed是stream editor的简称，Sed本质上是一个编辑器，但是它是非交互式的流编辑器。

 

sed的处理流程：

1.读入一行内容到模式空间(Pattern Space)

2.对模式空间里的内容执行sed命令

3.输出模式空间的内容，当输出内容后，模式空间将被清空

4重复以上的操作，直到文件的最后一行。

二、sed命令的语法：

    sed [OPTION]...'script'  [input-file] ...

                       script：地址定界编辑命令

常用选项[OPTION]：

        -n：不输出模式空间中的内容至屏幕；

        -e script, --expression=script：多点编辑；

        -f  /PATH/TO/SED_SCRIPT_FILE

               每行一个编辑命令；

        -r, --regexp-extended：支持使用扩展正则表达式；

        -i[SUFFIX], --in-place[=SUFFIX]：直接编辑原文件 ；

地址定界：

1) 空地址：对全文进行处理；

2) 单地址：#：指定行；

         /pattern/：被此模式所匹配到的每一行；

3) 地址范围

         #,#：从起始行到结束行

         #,+#：如3,8指从第三行(包含第三行)，向下八行。

        #，/pat1/:从第#行开始到能第一次被模式匹配到行结束。

        /pat1/,/pat2/：从能被模式1匹配到行开始到能被模式2匹配到的行结束。

        $：最后一行；

4) 步进：~

         1~2：所有奇数行

         2~2：所有偶数行

编辑命令：

d：删除；删除被模式匹配到行即1、3、5行；

p：显示模式空间中的内容；被模式匹配到的行显示两次。

a  \text：在行后面追加文本“text”，支持使用\n实现多行追加；

i  \text：在行前面插入文本“text”，支持使用\n实现多行插入；

c  \text：把匹配到的行替换为此处指定的文本“text”；第一行被替换为"new line"。

w /PATH/TO/SOMEFILE：保存模式空间匹配到的行至指定的文件中；

把"sedtest.txt"中不是#号开头的行，保存到"newsed.txt"中。

r  /PATH/FROM/SOMEFILE：读取指定文件的内容至当前文件被模式匹配到的行后面；文件合并；

把"newsed.txt"中的内容追加到"sedtest.txt"第6行的后边。

=：为模式匹配到的行打印行号；

!：条件取反；地址定界!编辑命令；显示不是#号开头的行

s///：查找替换，其分隔符可自行指定，常用的有s@@@, s###等；替换标记：

       g：全局替换；

       w /PATH/TO/SOMEFILE：将替换成功的结果保存至指定文件中；

       p：显示替换成功的行；

练习1：将/etc/grub2.cfg文件中所有以空白字符开头的行的行首的空白字符替换成“magedu”；

练习2：输出一个绝对路径给sed命令，取出其目录，其行为类似于dirname；

三、高级编辑命令：

    另外一个缓存空间——保持空间（Hold Space），保持空间用于保存模式空间的内容，模式空间的内容可以复制到保持空间，同样地保持空间的内容可以复制回模式空间。

h：把模式空间中的内容覆盖至保持空间中；

H：把模式空间中的内容追加至保持空间中；

g：把保持空间中的内容覆盖至模式空间中；

G：把保持空间中的内容追加至模式空间中；

x：把模式空间中的内容与保持空间中的内容互换；

n：覆盖读取匹配到的行的下一行至模式空间中；

N：追加读取匹配到的行的下一行至模式空间中；

d：删除模式空间中的行；

D：删除多行模式空间中的所有行；

示例：

sed  -n  'n;p'  FILE：显示偶数行；

sed  '1!G;h;$!d'  FILE：逆序显示文件的内容；

sed  '$!d'  FILE：取出最后一行；

 sed  '$!N;$!D' FILE：取出文件后两行；

sed  '/^$/d;G' FILE：删除原有的所有空白行，而后为所有的非空白行后添加一个空白行；

sed  'n;d'  FILE：显示奇数行；

sed 'G' FILE：在原有的每行后方添加一个空白行；