shell三剑客之sed命令使用详解
sed是一种流编辑器，它是文本处理中非常棒的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。
sed的选项、命令、替换标记
命令格式
sed [options] ‘command’ file(s)
sed [options] -f scriptfile file(s)
选项
a\ 在当前行下面插入文本。i\ 在当前行上面插入文本。c\ 把选定的行改为新的文本。d 删除，删除选择的行。D 删除模板块的第一行。s 替换指定字符h 拷贝模板块的内容到内存中的缓冲区。H 追加模板块的内容到内存中的缓冲区。g 获得内存缓冲区的内容，并替代当前模板块中的文本。G 获得内存缓冲区的内容，并追加到当前模板块文本的后面。l 列表不能打印字符的清单。n 读取下一个输入行，用下一个命令处理新的行而不是用第一个命令。N 追加下一个输入行到模板块后面并在二者间嵌入一个新行，改变当前行号码。p 打印模板块的行。P(大写) 打印模板块的第一行。q 退出Sed。b lable 分支到脚本中带有标记的地方，如果分支不存在则分支到脚本的末尾。r file 从file中读行。t label if分支，从最后一行开始，条件一旦满足或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾。T label 错误分支，从最后一行开始，一旦发生错误或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾。w file 写并追加模板块到file末尾。 W file 写并追加模板块的第一行到file末尾。 ! 表示后面的命令对所有没有被选定的行发生作用。 = 打印当前行号码。 # 把注释扩展到下一个换行符以前。
sed元字符集
^ 匹配行开始，如：/^sed/匹配所有以sed开头的行。$ 匹配行结束，如：/sed$/匹配所有以sed结尾的行。. 匹配一个非换行符的任意字符，如：/s.d/匹配s后接一个任意字符，最后是d。* 匹配0个或多个字符，如：/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。[] 匹配一个指定范围内的字符，如/[ss]ed/匹配sed和Sed。 [^] 匹配一个不在指定范围内的字符，如：/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头，紧跟ed的行。\(..\) 匹配子串，保存匹配的字符，如s/\(love\)able/\1rs，loveable被替换成lovers。& 保存搜索字符用来替换其他字符，如s/love/**&**/，love这成**love**。\< 匹配单词的开始，如:/\<love/匹配包含以love开头的单词的行。\> 匹配单词的结束，如/love\>/匹配包含以love结尾的单词的行。x\{m\} 重复字符x，m次，如：/0\{5\}/匹配包含5个0的行。x\{m,\} 重复字符x，至少m次，如：/0\{5,\}/匹配至少有5个0的行。x\{m,n\} 重复字符x，至少m次，不多于n次，如：/0\{5,10\}/匹配5~10个0的行。
**—sed用法实例**### 替换操作：s命令
# 替换文本中的字符串$ sed 's/book/books/' files# -n选项和p命令一起使用表示只打印那些发生替换的行$ sed -n 's/book/books/'p files# 直接编辑文件选项-i，会匹配file文件中每一行的第一个book替换为books$ sed -i 's/book/books/' files
全面替换标记g
# 使用后缀 /g 标记会替换每一行中的所有匹配$ sed 's/book/books/g' files# 当需要从每一行的第N处匹配开始替换时，可以使用 /Ng$ sed -n 's/book/books/2g'p files
定界符
# 之前命令中字符 / 在sed中作为定界符使用，也可以使用任意的定界符$ sed 's#book#books#' files $ sed 's|book|books|' files$ sed 's:book:books:' files # 定界符出现在样式内部时，需要进行转义$ sed 's/\/user\/bin/#user#bin/' files
###删除操作：d命令
# 删除空白行：$ sed '/^$/d' files# 删除文件的第2行：$ sed '2d' files# 删除文件的第2行到末尾所有行：$ sed '2,$d' files# 删除文件最后一行：$ sed '$d' files# 删除文件中所有开头是test的行：$ sed '/^test/'d files
已匹配字符串标记
# 正则表达式 \w\+ 匹配每一个单词，使用 --&-- 替换它，& 对应于之前所匹配到的单词# 分别运行看看效果有什么不一样$ sed 's|AB|--&--|g' files$ sed 's|\w|--&--|g' files$ sed 's|\+|--&--|g' files$ sed 's|\w\+|--&--|g' files# 所有以book开头的行都会被替换成[自己+&符后面的字符串(包括空格)]$ sed 's|^book|& Test|g' files
组合多个表达式
# 3条命令执行结果是对等的$ sed 's/book/books/' files | sed 's/books/book/'$ sed 's/book/books/' | sed 's/books/book/' files$ sed 's/book/books/;s/books/book/' files
引用
# sed表达式可以使用单引号来引用，但是如果表达式内部包含变量字符串，就需要使用双引号$ TEST="Teh is Test ." $ sed "s/Test/$TEST/" files
选定行的范围 ,（逗号）
# 所有在模板books和Test所确定的范围内的行都被打印$ sed -n '/books/,/Test/p' files# 打印从第3行开始到第一个包含以Test开始的行之间的所有行$ sed -n '3,/^Test/p' files# 对于模板books和Test之间的行，每行的末尾用字符串LOOK BOOKS替换$ sed '/books/,/Test/s/$/ LOOK BOOKS/' files
多点编辑：e命令
# 多点编辑：删除1~2行，并替换Test字符串为check$ sed -e '1,2d' -e 's/Test/check/' files
从文件读入：r命令
# file里的内容被读进来，显示在与Test匹配的行后面，如果匹配多行，则file的内容将显示在所有匹配行的下面$ sed '/Test/r file' files
写入文件：w命令
# 在files中所有包含Test的行都被写入file里$ sed -n '/Test/w file' files
追加（行下）：a\命令
# 将 The is a Test line 追加到 以test 开头的行后面$ sed '/^Test/a\The is a Test line' files在files文件第4行之前插入The is a Test line$ sed '4a\The is a Test line' files
下一个：n命令
# 如果book被匹配，则移动到匹配行的下一行，替换这一行的Test，变为TEST，并打印该行，然后继续$ sed '/book/{ n; s/Test/TEST/g; }' files
变形：y命令
# 把1~3行内所有book转变为大写. 注意：正则表达式元字符不能使用这个命令$ sed '1,3y/book/BOOK/' files
退出：q命令
# 打印完第10行后，退出sed$ sed '4q' files