SED简介

sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”(pattern space)，接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等

模式空间&&保持空间

模式空间

sed处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”(pattern space)

保持空间

保持空间是sed中的另外一个缓冲区，此缓冲区正如其名，不会自动清空，但也不会主动把此缓冲区中的内容打印到标准输出中。而是需要以下sed命令进行处理

定址

可以通过定址来定位你所希望编辑的行，该地址用数字构成，用逗号分隔的两个行数表示以这两行为起止的行的范围（包括行数表示的那两行）。如1，3表示1，2，3行，美元符号($)表示最后一行。范围可以通过数据，正则表达式或者二者结合的方式确定 。

sed命令

调用sed命令有两种形式：

  1. sed [options] 'command' file(s)
  2. 或者
  3. sed [options] -f scriptfile file(s)

command列表
a\:在当前行后面加入一行文本。
示例:

  1. #在第一行添加'this is test file'
  2. sed '1a\this is test file' test.txt

b label:分支到脚本中带有标记的地方，如果分支不存在则分支到脚本的末尾。
示例:

  1. #暂无

c\:用新的文本改变本行的文本。
示例:

  1. #修改第一行的内容为'tctctc'
  2. sed '1c\tctctc' test.txt

d:从模板块（Pattern space）位置删除行，并放弃之后的命令，并对新读取的内容，重头执行sed
示例:

  1. #删除带有'test'的行
  2. sed '/test/d' test.txt
  3. #只删除奇数行
  4. sed '1~2 d' employee.txt

D:删除模板块的第一行，放弃之后的命令，但是对剩余模式空间重新执行sed。
示例:

  1. #在第一行添加'this is test file'
  2. sed '1a\this is test file' test.txt
  3. #例二：读取1，执行N，得出1\n2，执行D，得出2，执行N，得出2\n3，执行D，得出3，依此类推，得出5，执行N，条件失败退出，因无-n参数，故输出5
  4. cat aaa   
  5. This is 1   
  6. This is 2   
  7. This is 3   
  8. This is 4   
  9. This is 5   
  11. sed 'N;D' aaa           
  12. This is 5

i\:在当前行上面插入文本。
示例:

  1. #在第一行上方添加'this is test file'
  2. sed '1i\this is test file' test.txt

h:将当前模式空间中内容覆盖至保持空间
H:将当前模式空间中的内容追加至保持空间
示例:

  1. #注释：读取1，执行h，复制到保持空间，执行s，模式空间得到匹配到的字母a，然后执行y，将a转成A，执行G，追加保持空间内容到模式空间，得
  2. A\nThis is a and a is 1；执行s，重新排列，得出This is 1 and 1 is A；以此类推，得出结果。
  3. cat ddd.sed
  4. h  
  5. {  
  6. s/.*is \(.*\) and .*/\1/  
  7. y/abcde/ABCDE/
  8. G  
  9. s/\(.*\)\n\(.*is \).*\(and \).*\(is \)\(.*\)/\2\5 \3\5 \4\1/  
  10. }  
  12. sed -f ddd.sed ddd  
  13. This is 1 and 1 is A  
  14. This is 2 and 2 is B  
  15. This is 3 and 3 is C  
  16. This is 4 and 4 is D  
  17. This is 5 and 5 is E

g:获得内存缓冲区的内容，并替代当前模板块中的文本。
G:获得内存缓冲区的内容，并追加到当前模板块文本的后面。
示例:

  1. #暂无

l:显示出当前模式空间的内容
示例:

  1. #暂无

n:n命令简单来说就是提前读取下一行，覆盖模型空间前一行（并没有删除，因此依然打印至标准输出），如果命令未执行成功（并非跳过：前端条件不匹配），则放弃之后的任何命令，并对新读取的内容，重头执行sed。
示例:

  1. #从aaa文件中取出偶数行
  2. #注 释：读取This is 1，执行n命令，此时模式空间为This is 2，执行p，打印模式空间内容This is 2，之后读取 This is 3，执行n命令，此时模式空间为This is 4，执行p，打印模式空间内容This is 4，之后读取This is 5，执行n 命令，因为没有了，所以退出，并放弃p命令。
  3. cat aaa 
  4. This is 1    
  5. This is 2    
  6. This is 3    
  7. This is 4    
  8. This is 5    
  10. sed -n 'n;p' aaa         //-n表示隐藏默认输出内容    
  11. This is 2    
  12. This is 4

N:N命令简单来说就是追加下一行到模式空间，同时将两行看做一行，但是两行之间依然含有\n换行符，如果命令未执行成功（并非跳过：前端条件不匹配），则放弃之后任何命令，并对新读取的内容，重头执行sed。
示例:

  1. #从aaa文件中读取奇数行
  2. #注释：读取1，$!条件满足（不是尾行），执行N命令，得出1\n2，执行P，打印得1，读取3，$!条件满足（不是尾行），执行N命令，得出3\n4，执行P，打印得3，读取5，$!条件不满足，跳过N，执行P，打印得5
  3. cat aaa   
  4. This is 1   
  5. This is 2   
  6. This is 3   
  7. This is 4   
  8. This is 5   
  10. sed -n '$!N;P' aaa            
  11. This is 1   
  12. This is 3   
  13. This is 5

p:打印模块的行
P(大写):打印模板块的第一行。
s/re/string:用string替换正则表达式re
替换标记

  • g:全面替换
  • p:打印行
  • w:表示把行写入一个文件
  • x:表示互换模板空间和保持空间中的文本
  • y:作用在于字符转换
    示例:
  1. #将aaa文件内容大写
  2. sed 'y/his/HIS/' aaa  
  3. THIS IS 1  
  4. THIS IS 2  
  5. THIS IS 3  
  6. THIS IS 4  
  7. THIS IS 5
  9. #如果需要对某个字符串进行大小写转换，则可使用如下方法
  10. cat ddd   
  11. This is a and a is 1   
  12. This is b and b is 2   
  13. This is c and c is 3   
  15. sed 's/\b[a-z]\b/\u&/g' ddd   
  16. This is A and A is 1   
  17. This is B and B is 2   
  18. This is C and C is 3

示例:

  1. #love被标记为1，所有loveable会被替换成lovers，而且替换的行会被打印出来
  2. sed -n 's/\(love\)able/\1rs/p' example

=:打印当前行号
示例:

  1. sed '=' test.txt

r file从file中读取行

选项列表

  1. -e command, —expression=command ，允许多台编辑。
  2. -h, —help，打印帮助，并显示bug列表的地址。
  3. -n, —quiet, —silent，取消默认输出。
  4. -f, —filer=script-file，引导sed脚本文件名。
  5. -V, —version，打印版本和版权信息。

元字符集

  1. ^:锚定行的开始 如：/^sed/匹配所有以sed开头的行。
  2. $:锚定行的结束 如：/sed$/匹配所有以sed结尾的行。
  3. .:匹配一个非换行符的字符 如：/s.d/匹配s后接一个任意字符，然后是d。
  4. *:匹配零或多个字符，+匹配一到多个字符
  5. []:匹配指定范围的字符，[^]匹配不在指定范围的字符
  6. \(..\):保存的指定字符(和正则表达式不太一样的是这里的圆括号需要转意)
  7. &:保存搜索字符用来替换其他字符，如sed ‘s/love/&/‘，love这里被替换成了love。
  8. x\{m\},x\{m,\},x\{m,n\}:重复字符x字符m次，重复x字符m或以上次，重复x字符m到n次
  9. \<和\>锚定单词的开始和结束，如:/\<love/匹配包含以love开头的单词的行,/love\>/匹配包含以love结尾的单词的行。

实战

删除(d)

  1. sed '2d' example-----删除example文件的第二行。
  2. sed '2,$d' example-----删除example文件的第二行到末尾所有行。
  3. sed '$d' example-----删除example文件的最后一行。
  4. sed '/test/'d example-----删除example文件所有包含test的行

替换(s)

s命令的分隔符如果要换成’!’之类的不用’/‘的话一定要全部替换，例如:
sed -n ‘s#(test)#\1dda#p’ test.txt

  1. sed 's/test/mytest/g' example-----在整行范围内把test替换为mytest。如果没有g标记，则只有每行第一个匹配的test被替换成mytest。
  2. sed -n 's/^test/mytest/p' example-----(-n)选项和p标志一起使用表示只打印那些发生替换的行。也就是说，如果某一行开头的test被替换成mytest，就打印它。
  3. sed 's/^192.168.0.1/&localhost/' example-----&符号表示替换换字符串中被找到的部份。所有以192.168.0.1开头的行都会被替换成它自已加 localhost，变成192.168.0.1localhost
  4. sed -n 's/\(love\)able/\1rs/p' example-----love被标记为1，所有loveable会被替换成lovers，而且替换的行会被打印出来

选定行的范围：逗号(,)

  1. sed -n '/test/,/check/p' example-----(ubuntu中无效，centos可以)所有在模板test和check所确定的范围内的行都被打印。 
  2. sed -n '5,/^test/p' example-----打印从第五行开始到第一个包含以test开始的行之间的所有行。

多点编辑：(-e选项)

  1. sed -e '1,5d' -e 's/test/check/' example-----(-e)选项允许在同一行里执行多条命令。如例子所示，第一条命令删除1至5行，第二条命令用check替换test。命令的执 行顺序对结果有影响。如果两个命令都是替换命令，那么第一个替换命令将影响第二个替换命令的结果。
  2. sed --expression='s/test/check/' --expression='/love/d' example

从文件读入:r命令

  1. sed '/test/r file' example-----file里的内容被读进来，显示在与test匹配的行后面，如果匹配多行，则file的内容将显示在所有匹配行的下面。

写入文件：w命令

  1. sed -n '/test/w file' example-----在example中所有包含test的行都被写入file里

追加内容: a命令

  1. sed '/^test/a\\sdsdsdsds' test.txt----- sdsdsdsds被追加到以test开头的行后面

插入: i命令

  1. sed '/^test/i\\sdsdsd' test.txt----- sdsdsd被插入到以test开头的行前一行

下一个：n命令

  1. sed '/test/{ n; s/aa/bb/; }' example-----如果test被匹配，则移动到匹配行的下一行，替换这一行的aa，变为bb，并打印该行，然后继续

退出：q命令

  1. sed '10q' example-----打印完第10行后，退出sed

保持和获取：h命令和G命令

sed -e ‘/test/h’ -e ‘$G’ example——-在sed处理文件的时候，每一行都被保存在一个叫模式空间的临时缓冲区中，除非行被删除或者输出被取消，否则所有被处理的行都将 打印在屏幕上。接着模式空间被清空，并存入新的一行等待处理。在这个例子里，匹配test的行被找到后，将存入模式空间，h命令将其复制并存入一个称为保持空间内。第二条语句的意思是，当到达最后一行后，G命令取出保持空间的行，然后把它放回模式空间中，且追加到现在已经存在于模式空间中 的行的末尾。在这个例子中就是追加到最后一行。简单来说，任何包含test的行都被复制并追加到该文件的末尾。

保持和互换：h命令和x命令

sed -e ‘/test/h’ -e ‘/check/x’ example ——-互换模式空间和保持缓冲区的内容。也就是把包含test与check的行互换。第一个表达式将/test/匹配到的东西方在保持空间中，第二个表达式又将/check/匹配到的东西和放在保持空间中的内容互换。

脚本

Sed脚本是一个sed的命令清单，启动Sed时以-f选项引导脚本文件名。Sed对于脚本中输入的命令非常挑剔，在命令的末尾不能有任何空白或文本，如果在一行中有多个命令，要用分号分隔。以#开头的行为注释行，且不能跨行。