Linux三剑客-sed

sed命令使用

Posted by Jae on August 24, 2019

1.什么是sed

sed是一个流编辑器,它以行为单位处理文本,文本可以来自文件、标准输入等,sed将文本的一行存储到临时缓冲区,称为”模式空间”, 并使用sed命令对缓冲区内容进行操作,处理完成后将缓冲区内容通过终端显示,接着处理下一行,直到文件末尾,sed不会修改文本内容,除非使用-i参数或重定向存储输出。

2.参数及其含义

sed [-nefilr] [动作]

选项名 作用
-n 使用安静silent模式,一般sed的用法中,将所有stdin的数据都打印到终端,但是如果使用-n,只打印那些被sed特殊处理过的行
-e 多点编辑,可以执行多个子命令
-f 如果多个sed动作,可以将sed动作写在文件中,这样就可以使用-f filename来运行文件内的sed动作
-i 直接修改读取的内容,而不是输出到终端
-l 指定行的长度
-r 在脚本中使用扩展表达式

动作 [n1,n2] function n1 n2 不一定需要,一般代表选择进行的行数,如果我们的动作是作用在2-5行,那么就是2,5

function

function 作用
a 新增,a后面可以是字符串,这些字符串会出现在新的一行,就是目前的下一行
i 插入,i后面可以是字符串,这些字符串会出现在当前行的前一行
d 删除,d后面不跟任何字符串,表示删除某些行
c 取代,c后面可以跟字符串,这些字符串会取代n1,n2之间的行
s 替换,s可以跟正则表达式

3.常用操作

我们有一个文件myfile.txt,内容如下:

yuziyong
hemengshuai
zhangweizun
chenjunfeng
西安电子科技大学
陕西西安
中国北京
郑州
信阳

3.1 以行为单位新增或删除

将myfile.txt文件内容打印到终端,并加上行号,可以使用cat -n命令或者nl 命令,然后删除2-5行,只显示1、6-最后一行

nl myfile.txt | sed '2,5d'
     1  yuziyong
     6  陕西西安
     7  中国北京
     8  郑州
     9  信阳

将2-5行替换成一个字符串

nl myfile.txt | sed '2,5c those rows are deleted'
     1  yuziyong
those rows are deleted
     6  陕西西安
     7  中国北京
     8  郑州
     9  信阳

在第2行后面增加一个字符串

nl myfile.txt  | sed '2a add a new string'
     1  yuziyong
     2  hemengshuai
add a new string
     3  zhangweizun
     4  chenjunfeng
     5  西安电子科技大学
     6  陕西西安
     7  中国北京
     8  郑州
     9  信阳

在第2行前面增加一个字符串

 nl myfile.txt  | sed '2i add a new string'
     1  yuziyong
add a new string
     2  hemengshuai
     3  zhangweizun
     4  chenjunfeng
     5  西安电子科技大学
     6  陕西西安
     7  中国北京
     8  郑州
     9  信阳

在第2行后面增加多行字符串

nl myfile.txt  | sed '2a this is a string \
> and this is also a string'
     1  yuziyong
     2  hemengshuai
this is a string
and this is also a string
     3  zhangweizun
     4  chenjunfeng
     5  西安电子科技大学
     6  陕西西安
     7  中国北京
     8  郑州
     9  信阳

3.2 数据的搜索并显示

搜索文件中有yong的关键字,且只打印有关键字的行

 nl myfile.txt  | sed  -n '/yong/p'
     1  yuziyong

注意这里一定要加上-n,采用安静模式,否则sed会打印所有stdin,且模式匹配行会打印两次

删除包含yong关键字的行,其它行输出

nl myfile.txt | sed '/yong/d'
     2  hemengshuai
     3  zhangweizun
     4  chenjunfeng
     5  西安电子科技大学
     6  陕西西安
     7  中国北京
     8  郑州
     9  信阳

搜索包含yong的行后,将该关键字替换成Yong

nl myfile.txt  | sed -n '/yong/{s/yong/Yong/p}'
     1  yuziYong

数据搜索并替换 sed ‘s/要被替换的字符串/新的字符串/[flag]’ 这里的flag有如下几个:

flag 用法
g 全局匹配,替换文本行中所有匹配的字符串
n(数字) 替换文本行中第n个匹配的字符串
p 替换第一个匹配到的字符串,并将缓冲区输出到终端
w 替换第一个匹配到的字符串,并将改动的行输出到磁盘
缺省 替换第一个匹配到的字符串

使用sed获取主机IP

ifconfig eth0
eth0      Link encap:Ethernet  HWaddr 52:54:00:fc:fd:f3
          inet addr:192.168.1.138  Bcast:192.168.1.255  Mask:255.255.255.0
          inet6 addr: fe80::5054:ff:fefc:fdf3/64 Scope:Link
          UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1
          RX packets:889611 errors:0 dropped:0 overruns:0 frame:0
          TX packets:10523 errors:0 dropped:0 overruns:0 carrier:0
          collisions:0 txqueuelen:1000
          RX bytes:77279526 (77.2 MB)  TX bytes:1417975 (1.4 MB)

使用sed找到包含ip的行

ifconfig eth0 | sed '/inet addr/p'
inet addr:192.168.1.138  Bcast:192.168.1.255  Mask:255.255.255.0

删除ip前面的内容

ifconfig eth0 | sed -n '/inet addr/p' | sed 's/^.*addr://g'
192.168.1.138  Bcast:192.168.1.255  Mask:255.255.255.0

这里使用了正则表达式匹配addr:前面所有的字符串,并替换成空字符串 最后删除Bcast后面的内容,和上一步类似

ifconfig eth0 | sed -n '/inet addr/p' | sed 's/^.*addr://g' | sed 's/Bcast.*$//g'
192.168.1.138

完整的命令为:

ifconfiga eth 0 | sed 'inet addr/p' | sed 's/^.*addr://g' | sed 's/Bcast.*$//g'