hugo-teek is loading...

sed

最后更新于:

sed

目录

[toc]

简介

sed 是一种新型的,非交互式的编辑器。它能执行与编辑器 vi 和 ex 相同的编辑任务。sed 编辑器没有提供交互式使用方式,使用者只能在命令行输 入编辑命令、指定文件名,然后在屏幕上查看输出。 **sed 编辑器没有破坏性,它不会修改文件,除非使用 shell 重定向来保存输出结果。**默认情况 下,所有的输出行都被打印到屏幕上。

  • sed工作过程

sed 编辑器逐行处理文件(或输入),并将输出结果发送到屏幕。 sed 的命令就是在 vi和 ed/ex 编辑器中见到的那些。 sed 把当前正在处理的行保存在一个临时缓存区中,这个缓存区称为模式空间或临时缓冲。sed 处理完模式空间中的行后(即在该行上执行 sed 命令后),就把改行发送到屏幕上(除非之前有命令删除这一行或取消打印操作)。 sed 每处理完输入文件的最后一行后, sed 便结束运行。 sed 把每一行都存在临时缓存区中,对 这个副本进行编辑,所以不会修改或破坏源文件。

从上图可以看出 sed 不是破坏性的,它不会修改正在编辑的文件。

语法

1sed 命令行格式为: 
2sed [选项] ‘command’ 输入文本

选项

  • sed 操作命令
 1a\	在当前行后添加一行或多行
 2c\	用新文本修改(替换)当前行中的文本
 3d	删除行
 4i\	在当前行之前插入文本
 5
 6h	把模式空间里的内容复制到暂存缓存区
 7H	把模式空间里的内容追加到暂存缓存区
 8
 9g	取出暂存缓冲区里的内容,将其复制到模式空间,覆盖该处原有内容
10G	取出暂存缓冲区里的内容,将其复制到模式空间,追加在原有内容后面
11
12l	列出非打印字符
13p	打印行
14
15n	读入下一输入行,并从下一条命令而不是第一条命令开始处理
16q	结束或退出 sed
17r	从文件中读取输入行
18!	对所选行意外的所有行应用命令
19
20s	用一个字符串替换另一个 #常用
1n	使用安静模式,在一般情况所有的 STDIN 都会输出到屏幕上,加入-n 后只打印被 sed 特殊处理的行;😉
2e	多重编辑,且命令顺序会影响结果;
3f	指定一个 sed 脚本文件到命令行执行;
4r	sed 使用扩展正则;
5i	直接修改文档读取的内容,不在屏幕上输出 //一般是直接修改:加参数-i 😉
  • 替换标志
1g	在行内进行全局替换 😉
2p	打印行 😉
3w	将行写入文件
4x	交换暂存缓冲区与模式空间的内容
5y	将字符转换为另一字符(不能对正则表达式使用 y 命令)

插入:-i

i 命令是插入命令,类似于 a 命令,但不是在当前行后增加文本,而是在当前行前面插入新的文本,即刚读入缓存区模式的行。

  • 选项含义
1i\	在当前行之前插入文本

替换

案例:替换

1sed -i s/SELINUX=enforcing/SELINUX=disabled/ /etc/selinux/config

删除

案例:删除以某个字段所在的行

 1#先打印
 2[root@mysql ~]# sed -n '/^DROP TABLE/p' /backup/inc.sql 
 3DROP TABLE `students` /* generated by server */
 4
 5#删除
 6[root@mysql ~]# sed -i.bak '/^DROP TABLE/d' /backup/inc.sql 
 7[root@mysql ~]# ll /backup/inc.sql 
 8-rw-r--r--. 1 root root 2909 Sep 22 17:17 /backup/inc.sql
 9[root@mysql ~]# ll /backup/inc.sql.bak 
10-rw-r--r--. 1 root root 2957 Sep 22 17:12 /backup/inc.sql.bak

注释某行

案例:修改 /etc/fstab 文件,注释掉 SWAP 的自动挂载

1# 修改 /etc/fstab 文件,注释掉 SWAP 的自动挂载
2swapoff -a
3sed -ri 's/.*swap.*/#&/' /etc/fstab
4
5# 使用 free -m 确认 swap 已经关闭
6[root@master1 ~]#free -mh
7              total        used        free      shared  buff/cache   available
8Mem:           1.8G         89M        1.5G        9.5M        144M        1.5G
9Swap:            0B          0B          0B

说明:

  • -r:启用扩展正则表达式,使得在模式匹配中可以使用更多的功能和语法。
  • .*swap.*:这是一个正则表达式,表示匹配包含单词 swap 的整行。.* 意味着匹配任意字符(包括空字符)零次或多次。
  • #&:这是替换的内容。# 是一个注释符号,& 表示匹配到的整个字符串。因此,整行会被替换为以 # 开头,加上原行内容。

综上所述,这条命令的作用是:

  1. /etc/fstab 文件中查找所有包含单词 swap 的行。
  2. 将这些行的内容替换为原来的内容,并在开头添加一个 #,使其变成注释。

执行后,所有包含 swap 的行将被注释掉,这意味着在系统启动时不会处理这些行。

插入

案例

案例:sed命令给文本文件指定行前插入内容

1sed -i '1i\Your Text to Insert' filename

这会在 filename 文件的第一行之前插入指定的文本。请注意,-i 选项表示直接在文件中编辑,如果你不希望修改原始文件,可以省略 -i 选项,然后将输出重定向到一个新文件。

  • 自己测试(测试成功)
 1[root@hg-linux-test ~]# cat test.txt 
 21
 32
 43
 5[root@hg-linux-test ~]# sed -i '1i\Your Text to Insert' test.txt 
 6[root@hg-linux-test ~]# cat test.txt 
 7Your Text to Insert
 81
 92
103
11[root@hg-linux-test ~]# 

案例:编辑前同时备份文件

1#删除
2[root@mysql ~]# sed -i.bak '/^DROP TABLE/d' /backup/inc.sql 
3
4[root@mysql ~]# ll /backup/inc.sql 
5-rw-r--r--. 1 root root 2909 Sep 22 17:17 /backup/inc.sql
6[root@mysql ~]# ll /backup/inc.sql.bak 
7-rw-r--r--. 1 root root 2957 Sep 22 17:12 /backup/inc.sql.bak

说明:

  • -i.bak:表示对文件进行原地编辑,并在修改前创建一个备份文件。备份文件的扩展名为 .bak,这意味着如果原始文件是 inc.sql,那么在编辑之前会创建一个 inc.sql.bak 的备份副本。
  • d:表示删除匹配到的行。

案例:sed打印只改变的行

测试成功。

是的,sed(流编辑器)可以通过使用 -n 选项以及 p 命令来实现只打印被修改的行。下面是一个简单的示例:

1sed -n 's/pattern/replacement/p' filename

在这个例子中:

  • -n 参数告诉 sed 不要自动打印每一行。
  • s/pattern/replacement/p 表示查找匹配 pattern 的行,用 replacement 替换,然后打印结果。

这样,只有被修改的行才会被打印。请注意,如果某一行没有发生替换,那么它将不会被打印。


选项含义:

1  -n, --quiet, --silent
2                 suppress automatic printing of pattern space #`-n` 参数告诉 `sed` 不要自动打印每一行。                

测试过程:

例如,假设有一个文件 example.txt 包含以下内容:

1[root@hg-linux-test ~]# cat example.txt 
2apple
3banana
4cherry
5date
6[root@hg-linux-test ~]# 
  • 你可以使用以下 sed 命令:
1[root@hg-linux-test ~]# sed -n 's/a/X/p' example.txt
2Xpple
3bXnana
4dXte
5[root@hg-linux-test ~]# 

这将把每一行中的第一个 ‘a’ 替换为 ‘X’,并只打印被修改的行。

  • 如果你想要对文件进行原地修改,你可以使用 -i 选项,但请谨慎使用,因为这将更改源文件:
1[root@hg-linux-test ~]# sed -i -n 's/a/X/p' example.txt
2[root@hg-linux-test ~]# cat example.txt 
3Xpple
4bXnana
5dXte
6[root@hg-linux-test ~]# 
  • 如果你只是想要查看替换结果而不修改文件,可以使用 cat 命令:
1cat example.txt | sed -n 's/a/X/p'   等价于   sed -n 's/a/X/p' example.txt
2
3[root@hg-linux-test ~]# cat example.txt | sed -n 's/a/X/p'
4Xpple
5bXnana
6dXte
7[root@hg-linux-test ~]# 

这样,原始文件内容将保持不变。

  • 要全部替换内,该如何办?(加上一个g选项就好了)
1[root@hg-linux-test ~]# sed -n 's/a/XX/pg' example.txt
2XXpple
3bXXnXXnXX
4dXXte
5[root@hg-linux-test ~]# 

正则选项:-r

案例

1[root@mysql ~]# mysql -uroot -e 'show databases'|grep -Ev '^(Database|information_schema|performance_schema)$' | sed -rn 's#(.*)#mysqldump -B \1 | gzip > /backup/\1.sql.gz#p' |bash
2[root@mysql ~]# ll /backup/ -t
3total 3092
4-rw-r--r--. 1 root root 137110 Sep 23 06:56 mysql.sql.gz
5-rw-r--r--. 1 root root   1900 Sep 23 06:56 hellodb2.sql.gz
6-rw-r--r--. 1 root root   1971 Sep 23 06:56 hellodb.sql.gz
7-rw-r--r--. 1 root root    519 Sep 23 06:56 db2.sql.gz
8……

| sed -rn 's#(.*)#mysqldump -B \1 | gzip > /backup/\1.sql.gz#p'

  • 将经过过滤的数据库列表传递给 sed 命令,进行格式化处理。
  • -r 选项启用扩展正则表达式,-n 选项使 sed 只输出被处理的行。
  • s#(.*)#mysqldump -B \1 | gzip > /backup/\1.sql.gz#p
    • s#(.*)#...# 是替换命令,将匹配到的行替换为 mysqldump 命令。
    • \1 表示被匹配的数据库名称。
    • 最终输出的格式是 mysqldump -B 数据库名 | gzip > /backup/数据库名.sql.gz

案例:\s* 匹配零个或多个空白字符(如空格、制表符)

显示系统信息

 1echo -e "\tCpu          : $(lscpu | grep "Model name:" | sed 's/Model name:\s*//')"
 2
 3
 4
 5
 6sed 's/Model name:\s*//' 7
 8sed 是一个流编辑器,用于对文本进行处理和转换。
 9这里的 sed 命令执行的是替换操作:
10
11s/Model name:\s*// 是一个替换表达式:
12s 表示替换命令。
13Model name:\s* 是要匹配的模式。
14Model name: 匹配文本 Model name:。
15
16\s* 匹配零个或多个空白字符(如空格、制表符)。
17// 表示将匹配的部分替换为空(即删除匹配的部分)。
18
19经过 sed 处理后,上述示例行会变成:
20Intel(R) Core(TM) i7-8550U CPU @ 1.80GHz

image-20240729061630078

案例

1[root@mysql ~]# mysql -uroot -e 'show databases'|sed -rn '/^(Database|information_schema|performance_schema)$/!s#(.*)#mysqldump -B \1 | gzip > /backup/\1.sql.gz#p' |bash
2[root@mysql ~]# ll /backup/ -t
3total 3092
4-rw-r--r--. 1 root root 137111 Sep 23 06:58 mysql.sql.gz
5-rw-r--r--. 1 root root   1900 Sep 23 06:58 hellodb2.sql.gz
6-rw-r--r--. 1 root root   1971 Sep 23 06:58 hellodb.sql.gz
7-rw-r--r--. 1 root root    519 Sep 23 06:58 db2.sql.gz

image-20240923071622653

案例:步进

image-20240427072334378

总结

本章内容总结了 sed 命令的用法,前面部分是 sed 命令的语法,后面部分则主要以实际案例来说明 sed 的用法,最后面一点介绍了 sed 命令在生产实践中的运用。所谓学为练,练为战,希望大家能够将 sed 命令勤加练习,必将会在工作中有所用途,尤其是**频繁的分析日志文件, Awk+sed 是比 较好的组合。**最后希望本文对大家有所帮助,真正达到熟练的程度这就靠大家在工作中归纳总结了。

推荐使用微信支付
微信支付二维码
推荐使用支付宝
支付宝二维码
最新文章

文档导航