文本三剑客之sed编辑器

113 阅读4分钟

一、sed编辑器

sed是一种流编辑器,流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。

  1. sed编辑器工作流程

sed编辑器可以根据命令来处理数据流中的数据,这些命令要么从命令行中输入,要么存储在一个命令文本文件中。

sed的工作流程主要包括读取、执行和显示三个过程:

  • 读取: sed从输入流 (文件、管道、标准输入) 中读取一行内容并存储到临时的缓冲区中(又称模式空间,pattern space)
  • 执行:默认情况下,所有的sed命令都在模式空间中顺序地执行,除非指定了行的地址,否则sed命令将会在所有的行上依次执行。
  • 显示:发送修改后的内容到输出流。在发送数据后,模式空间将会被清空。在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。

在所有的文件内容都被处理完成之前,上述过程将重复执行,直至所有内容被处理完。

注意:默认情况下所有的sed命令都是在模式空间内执行的,因此输入的文件并不会发生任何变化,除非是用重定向存储输出。

  1. sed命令格式

    sed -e '格式' 文件1 文件2 ...
    sed -n -e ‘操作’ 文件1 文件2 ...
    sed -f 脚本文件 文件1 文件2 ...
    sed -i -e '操作' 文件1 文件2 ...
    sed -e ' n {
    操作1
    操作2
    ...
    } ' 文件1 文件2
    
  2. 常用选项

-e或- -expression=: 表示用指定命令来处理输入的文本文件,只有一个操作命令时可省略,一 般在执行多个操作命令使用

f或- -file=: 表示用指定的脚本文件来处理输入的文本文件。

h或- -help: 显示帮助。

-n、- -quiet或silent:禁止sed编辑器输出,但可以与p命令一起使用完成输出。

-i: 直接修改目标文本文件。

  1. 常用操作

s:替换,替换指定字符。

d:删除,删除选定的行。

a:增加,在当前行下面增加一行指定内容。

i:插入,在选定行,上面插入一行指定内容。

c: 替换,将选定行替换为指定内容。

y:字符转换,转换前后的字符长度必须相同。

p: 打印,如果同时指定行,表示打印指定行;如果不指定行,则表示打印所有内容;如果有非打印字符,则以ASCII码输出。其通常与“-n”选项一起使用

[root@localhost d3]#sed -n 'p'  abc.txt 
one
two
three
four
five

=: 打印行号。

[root@localhost d3]#sed -n '=' abc.txt 
1
2
3
4
5

l (小写L):打印数据流中的文本和不可打印的ASCII字符(比如结束符$、制表符\t)

[root@localhost d3]#sed -n 'l' abc.txt 
one$
two$
three$
four$
five$

5. 使用地址寻找

sed编辑器有2种寻址方式:
1、以数字形式表示行区间
2、用文本模式来过滤出行

sed -n '1p' abc.txt        #打印第一行
sed -n '$p' abc.txt        #打印最后一行
sed -n '1,3p' abc.txt      #打印一到三行
sed -n '3,$p' abc.txt      #打印三到最后一行
sed -n '1, +3p' abc.txt    #打印1之后的连续3行,即1-4行
sed '3q' abc.txt           #打印前3行信息后退出,q表示退出
sed -n 'p;n' abc.txt       #打印奇数行; n表示移动到下一行
sed -n 'n;p' abc.txt       #打印偶数行
sed -n '2,${n;p}' abc.txt       #从第二行开始,n移动下一行,p打印,表示打印奇数行
sed -n ' /user/p' /etc/passwd    #//搜索包含user的行进行打印,区分大小写
sed -n ' /^a/p' /etc/passwd     #搜索以a开头的行进行打印
sed -n '/bash$/p' /etc/passwd       #打印以bash结尾的行
sed -n '/ftp\|root/p' /etc/passwd   #搜索包含ftp或者root的行进行打印
sed -n '2,/nobody/p' /etc/passwd     #从第二行开始打印到包含nobody的行
sed -nr '/ro{1,}t/p' /etc/passwd    #-r表示支持正则表达式

6. 删除行

    sed 'd' abc.txt           #不指定行号,全部删除
    sed '3d' abc.txt          #删除第三行
    sed '2,4d' abc.txt        #删除2-4行
    sed '$d' abc.txt          #删除最后一行
    sed '/^$/d' abc.txt       #删除空行
    sed '/nologin$/d' /etc/passwd      #删除包含nologin字符的行
    sed '/nologin$/!d' /etc/passwd     #不删除包含nologin的行
    sed '/2/,/3/d' abc.txt
    sed '/1/,/3/d' abc.txt

7. 替换

    行范围 s/旧字符 /新字符 /替换标记
    sed -n 's/root/admin/p' /etc/passwd    #将匹配行的第一个root更改为admin
    sed -n 's/root/admin/2p' /etc/passwd   #将匹配行的第二个root更改为admin
    sed -n 's/root/admin/gp' /etc/passwd   #将匹配行的所有root更改为admin 
    sed '1,20 s/^/#/' /etc/passwd          #1-20行行首添加#号
    sed '^root/ s/$/#' /etc/passwd        #在以root开头的行,行尾添加#号
    sed -f 123.sed 123.txt                #-f以指定的脚本文件来处理输入文件
    sed '1,20w out.txt' /etc/passwd
    sed -n 's/\bin\/bash\/bin\/csh/p' /etc/passwd

8. 插入

        sed '/55/c ABC' 123.txt  #将含有55的行,替换为ABC
        sed '1,3a ABC' 123.txt   #在第一行到第三行,行下插入ABC
        sed '1i ABC' 123.txt     #在第一行,行上插入ABC
        sed '5r /etc/resolv.conf' 123.txt  #在第五行后导入该文件内容
        sed '/root/{H;d};$G' /etc/passwd	#将包含root的行剪切到末尾,H表示复制到剪切板,G表示粘贴到指定行后