shell学习之sed流编辑器（六）

王采臣
496 阅读3分钟

利用脚本来处理文本文件。

sed 可依照脚本的指令来处理、编辑文本文件。

Sed 主要用来自动编辑一个或多个文件、简化对文件的反复操作、编写转换程序等。

sed命令行的基本格式为

sed option 'script' file1 file2 ...
sed option -f scriptfile file1 file2 ...

选项含义：

--version            显示sed版本。
--help               显示帮助文档。
-n,--quiet,--silent  静默输出，默认情况下，sed程序在所有的脚本指令执行完毕后，将自动打印模式空间中的内容，这些选项可以屏蔽自动打印。
-e script            允许多个脚本指令被执行。
-f script-file, 
--file=script-file   从文件中读取脚本指令，对编写自动脚本程序来说很棒！
-i,--in-place        直接修改源文件，经过脚本指令处理后的内容将被输出至源文件（源文件被修改）慎用！
-l N, --line-length=N 该选项指定l指令可以输出的行长度，l指令用于输出非打印字符。
--posix             禁用GNU sed扩展功能。
-r, --regexp-extended  在脚本指令中使用扩展正则表达式
-s, --separate      默认情况下，sed将把命令行指定的多个文件名作为一个长的连续的输入流。而GNU sed则允许把他们当作单独的文件，这样如正则表达式则不进行跨文件匹配。
-u, --unbuffered    最低限度的缓存输入与输出。

常用的sed命令

a,append        追加
i,insert        插入
d,delete        删除
s,substrootution  替换

$ sed "2,5d" testfile # 在文件第二行到第五行删除，显示被删除，文件内容不删除

# 语法格式
/pattern/action # pattern是正则表达式，action是编辑操作

/pattern/p  打印匹配pattern的行
/pattern/d  删除匹配pattern的行
/pattern/s/pattern1/pattern2/   查找符合pattern的行，将该行第一个匹配pattern1的字符串替换为pattern2
/pattern/s/pattern1/pattern2/g  查找符合pattern的行，将该行所有匹配pattern1的字符串替换为pattern2

sed命令中使用外部变量的方法:

1.sed命令使用双引号的情况下，使用$var直接引用

echo|sed "s/^/$RANDOM.rmvb_/g"
29328.rmvb_

上面例子引用了一个环境变量$RANDOM的值

2.sed命令使用单引号的情况下，使用'"$var"'引用

类似，我们可以看到

$ echo|sed 's/^/'"$RANDOM"'.rmvb_/g'
31338.rmvb_

例子

# 假设有个文件内如如下：
123
abc
456

# p命令表示除了把文件内容打印出来之外还额外打印一遍匹配pattern的行
$ sed '/abc/p' testfile
123
abc
abc
456

# 要想只输出处理结果，应加上-n选项，这种用法相当于grep命令
$ sed -n '/abc/p' testfile
abc

# 使用d命令就不需要-n参数了，比如删除含有abc的行
# 注意，sed命令不会修改原文件，删除命令只表示某些行不打印输出，而不是从原文件中删去。
$ sed '/abc/d' testfile
123
456

# 使用查找替换命令时，可以把匹配pattern1的字符串复制到pattern2中，比如：
$ sed 's/bc/-&-/' testfile
123
a-bc-
456
pattern2中的&表示原文件的当前行中与pattern1相匹配的字符串

# pattern2中的\1表示与pattern1的第一个()括号相匹配的内容，\2表示与pattern1的第二个()括号相匹配的内容。sed默认使用Basic正则表达式规范，如果指定了-r选项则使用Extended规范，那么()括号就不必转义了。
$ sed 's/\([0-9]\)\([0-9]\)/-\1-~\2~/' testfile
-1-~2~3
abc
-4-~5~6

练习：

demo.txt文件内容如下，去掉标签
<html><head><title>Hello World</title></head>
<body>Welcome to the world of regexp!</body></html>

sea 's/<[^>]*>/ /g' demo.txt  # 替换 空格 全局

conts.txt文件内容如下，获取=号后边的内容
python_IP=192.168.0.1
Java_IP=192.168.0.1
Php_IP=192.168.0.1
RabbitMQ_IP=192.168.0.1

# 输出一下结果
sed '/^python_IP=/s/.*=//' const.txt

打印结果：
192.168.0.1
Java_IP=192.168.0.1
Php_IP=192.168.0.1
RabbitMQ_IP=192.168.0.1

# 加上!d;打印单行匹配到的数据
sed '/^python_IP=/!d;s/.*=//' const.txt
等同于
sed -n '/^python_IP=/s/.*=//p'

打印结果：
192.168.0.1

sed截取字符串出现问题：
真实案例：我用正则进行sed截取txt中的某些内容，截取出的字符长度大于实际长度1位，比如我截取的是
caichen # 本身长度为7位，实际用sed截取为8位
原因：我在windows上编辑好文本txt格式后，上传至Liunx后，默认会有换行符，如果在liunx直接vim编辑txt是没有换行符的
解决方案：
第一种：用vim在Liunx进行编辑
第二种：用dos2unix   
yum -y install dos2unix

用法：dos2unix  文本文件.txt    # 这样就会把换行符去掉

文章规划

好了各位，以上就是这篇文章的全部内容了，能看到这里人啊，都是人才。

如果这个文章写得还不错，觉得「王采臣」我有点东西的话 求点赞👍求关注❤️求分享👥 对耿男我来说真的非常有用！！！

白嫖不好，创作不易，各位的支持和认可，就是我创作的最大动力，我们下篇文章见！

王采臣 | 文  【原创】

如果本篇博客有任何错误，请批评指教，不胜感激 ！

微信公众号：

avatar
文章
阅读
粉丝