Linux命令学习:三剑客老二sed

2020年3月6日 评论 235 views 2071字阅读6分54秒

概述

sed命令是用来批量修改文本内容的,比如批量替换配置中的某个ip。
sed命令在处理时,会先读取一行,把当前处理的行存储在临时缓冲区中,处理完缓冲区中的内容后,打印到屏幕上。然后再读入下一行,执行下一个循环。不断的重复,直到文件末尾。
语法:

sed [参数] [文本或文件]

由于不加-i参数只会输出到控制台不会写入到文件中,所以以下例子默认加-i

插入

  1. 在某行前面插入一行
$ sed -i "1a insert after" file.txt
$ cat file.txt
1
insert after
2
3

其中1a表示在第1行后(after)插入
2. 在某行后面插入一行

$ sed -i "1i insert before" file.txt
$ cat file.txt
insert before
1
2
3

其中1i表示在第1行前插入

删除

$ sed -i '2,3d' file.txt
$ cat file.txt
1

删除行可以删除一行 (3d删除第三行),也可以写一个范围(2,3d删除2-3行,闭区间),$符号代表末尾
缺点是只能多次连续删除行,不能一次性删除匹配到的行,可以用正则删除(/^2/d代表删除所有内容以2开头的行)

替换行

$ sed -i '2c replace' file.txt
$ cat file.txt
1
replace
3

2c replace表示替换第2行的内容为replace
缺点是只能多次替换行,不能一次性替换全部匹配到的行,可以用正则替换(/^2/c replace代表替换所有以2开头的行为replace

仅替换匹配的字符串

为了便于演示修改文件内容为

$ cat -n config.txt
     1  name=coding3min
     2  age=0
     3  email=coding3min@foxmail.com
     4  name=coding3min
     5  age=0
     6  email=coding3min@foxmail.com

使用命令批量替换3-4行之间coding3min字符串为tom

$ sed -i '3,4s/coding3min/tom/g' config.txt
$ config.txt
name=coding3min
age=0
email=tom@foxmail.com
name=tom
age=0
email=coding3min@foxmail.com

s/coding3min/top/g代表全文匹配不限制行,去掉g代表只替换匹配到的第一个如s/coding3min/top

查找与输出

输出3-4行的内容

sed -n 3,4p config.txt
email=coding3min@foxmail.com
name=coding3min

查找所有以name开头的行

sed -n '/^name/p' config.txt
name=coding3min
name=coding3min

可以看到只要用-n参数+匹配p模式就可以sj查找并输出

自动创建备份文件

当然了,直接sed -i很容易造成替换错误,哭都没办法哭!所以需要事先用-n+p也就是上一节说的方法先校验下结果。但是每个都校验显然是不实际的。所以可以用 sed -i备份文件后缀的方式例如sed -i.bak或者sed -i.backup

$ sed -i.bak 's/coding3min/kitty/g' config.txt
$ ls
config.txt config.txt.bak
$ cat config.txt
name=kitty
age=0
email=kitty@foxmail.com
$ cat config.txt.bak
name=coding3min
age=0
email=coding3min@foxmail.com

与grep的结合使用

grep结合使用最爽的点就在可以提前校验和批量替换,提高容错率和效率,不会的赶紧Get了

sed -i 's/coding/kitty/g' `grep -rl coding *`
$cat config.txt
name=conding3min
age=0
email=conding3min@foxmail.com
$cat test/config.txt
name=conding3min
age=0
email=conding3min@foxmail.com

看明白了吗?上一节说的grep -rl递归找到匹配的文件,并把文件名输出,前后加上了 ` 反引号,就是键盘左上角数字1左边那个符号,代码提前执行。
然后再使用替换文件内容。

其他技巧

使用sed把DOS格式的文件转换为Unix格式 sed 's/.$//' filename

匹配所有包含邮箱的行,(-n 选项让sed仅仅是输出经过处理之后的那些行)

sed -n '/[A-Za-z0-9]\+\@[a-zA-Z0-9_-]\+\(\.[a-zA-Z0-9_-]\+\)/p' config.txt

email=coding3min@foxmail.com

email=coding3min@foxmail.com

去掉所有的html标签

$ cat html.txt

<b>hi!</b><span>I'm</span>

$ sed 's/<[^>]*>//g' html.txt

hi!I'm father
weinxin
公众号
在号内与我交流,回复【资源】获取技术大礼包
Linux最后更新:2020-8-31
小熊