Linux 文本处理三剑客之 Sed

Sed 全称是：Stream EDitor，是一项Linux指令，功能同awk类似，差别在于，sed简单，对列处理的功能要差一些，awk的功能复杂，对列处理的功能比较强大。

调用sed命令有两种形式：

• sed [options] 'command' file(s)
• sed [options] -f scriptfile file(s)
• a\在当前行后面加入一行文本。
• b label分支到脚本中带有标记的地方，如果分支不存在则分支到脚本的末尾。
• c\用新的文本改变本行的文本。
• d从模板块（Pattern space）位置删除行。
• D删除模板块的第一行。
• i\在当前行上面插入文本。
• h拷贝模板块的内容到内存中的缓冲区。
• H追加模板块的内容到内存中的缓冲区
• g获得内存缓冲区的内容，并替代当前模板块中的文本。
• G获得内存缓冲区的内容，并追加到当前模板块文本的后面。
• l列表不能打印字符的清单。
• n读取下一个输入行，用下一个命令处理新的行而不是用第一个命令。
• N追加下一个输入行到模板块后面并在二者间嵌入一个新行，改变当前行号码。
• p打印模板块的行。
• P（大写）打印模板块的第一行。
• q退出Sed。
• r file从file中读行。
• t labelif分支，从最后一行开始，条件一旦满足或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾。
• T label错误分支，从最后一行开始，一旦发生错误或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾。
• w file写并追加模板块到file末尾。
• W file写并追加模板块的第一行到file末尾。
• ！表示后面的命令对所有没有被选定的行发生作用。
• s/re/string用string替换正则表达式re。
• =打印当前行号码。
• #把注释扩展到下一个换行符以前。
• 以下的是替换标记g表示行内全面替换。
• p表示打印行。
• w表示把行写入一个文件。
• x表示互换模板块中的文本和缓冲区中的文本。
• y表示把一个字符翻译为另外的字符（但是不用于正则表达式）

sed常见命令参数

• p==print 
• d：delete
• =：打印匹配行的行号
• -n 取消默认的完整输出，只要需要的  
• -e 允许多项编辑
• -i 修改文件内容
• -r 不需要转义
• 注意：& 符号在sed命令中代表上次匹配的结果

• 元字符集

  ^锚定行的开始如：/^sed/匹配所有以sed开头的行。

  $锚定行的结束 如：/sed$/匹配所有以sed结尾的行。

  .匹配一个非换行符的字符 如：/s.d/匹配s后接一个任意字符，然后是d。

  *匹配零或多个字符 如：/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。

  []匹配一个指定范围内的字符，如/[Ss]ed/匹配sed和Sed。

  [^]匹配一个不在指定范围内的字符，如：/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头，紧跟ed的行。

  \(..\）保存匹配的字符，如s/\(love\)able/\1rs，loveable被替换成lovers。

  &；保存搜索字符用来替换其他字符，如s/love/**&**/，love这成**love**。

  \<；锚定单词的开始，如：/\<love/匹配包含以love开头的单词的行。

  \>；锚定单词的结束，如/love\>/匹配包含以love结尾的单词的行。

  x\{m\}重复字符x，m次，如：/0\{5\}/匹配包含5个o的行。

  x\{m,\}重复字符x，至少m次，如：/o\{5,\}/匹配至少有5个o的行。

  x\{m,n\}重复字符x，至少m次，不多于n次，如：/o\{5,10\}/匹配5--10个o的行。

• 显示文件的某一行
• 显示 /etc/passwd 文件的第5行 sed -n '5p' /etc/passwd
• 显示文件的3~5行 sed -n '3,5p' /etc/passwd

• 过滤指定的字符串,显示正行内容  

• 显示包含"root"的行到包含"ftp"的行之间的行

• 打印 1-8 行，并显示行号

• 只打印出行号

• 只打印出匹配到的行和行号

• 常用查找和替换

• 查找用 toor 替换 /tmp/passwd 文件中的 root

sed '[email protected]@[email protected]' /tmp/passwd    #匹配分隔符可以自定， /   @  # 均可
==>sed 's#root#toor#g'  /tmp/passwd    与上同
              s==search  查找
              g==global  全局替换
              -i: implace  直接写入文件（慎用）

• sed -i '[email protected]@[email protected]' /tmp/passwd  #将 /tmp/passwd 文件中的 root 替换为 toor，并写入文件

• sed -r '[email protected][0-9][email protected] @g' /tmp/passwd  # -r 使用扩展正则表达式，不需要转义，将 /tmp/passwd 中的数字都替换为 空格

• sed -ri.bak '[email protected][0-9][email protected] @g' /tmp/passwd # i.bak 为写入文件时自动备份文件为 ：[文件名].bak

• 增加文件内容

• i  :  inset 在匹配到的行的上一行增加内容

• a :  after 在匹配到的行的下一行增加内容

• sed '2a test' /tmp/passwd    在 /tmp/passwd 中的第2行的下面添加一行

• sed '2i test' /tmp/passwd    在 /tmp/passwd 中的第2行的上面添加一行

• 添加多行 使用 \n 换行符

• sed '2i test\nzhangsan' /tmp/passwd 

• 在不同的行添加内容

• sed -e '2i test' -e '5a zhangsan' /tmp/passwd 

• 在第2行的前面和第5行的后面各添加一条信息

• 删除行

• sed '2d' /tmp/passwd  #删除第2行

• sed '2,4d' /tmp/passwd #删除2~4行

• sed -e{2,4,8}d /tmp/passwd  #删除不连续的行，注意这里没有分号 ' '

• sed -nr '/root|nologin/!p' /tmp/passwd  #删除包含 root 和 nologin 的行，！为取反

• sed '/toor/ w /tmp/test.txt' /tmp/passwd # w 将匹配到的内容，写入一个文件 加 -n 为静默模式

• find /tmp -name test.txt | xargs sed '[email protected]@[email protected]'   #和 find 命令结合使用

• 使用 Sed 获取本机的 IP 地址

• ifconfig | sed -n '2p' | sed -r 's#.*r:(.*) B.*k:(.*)#\1#g‘
• ifconfig | sed -nr 's#.*r:(.*) B.*k:(.*)#\1#p'
• (.*) 表示保留匹配的项,之后可以用\1取出第一个括号内匹配的内容，\2取出第二个括号内匹配的内容