Linux 三剑客之SED行天下
功能說(shuō)明
Sed是Strem Editor(流編輯器)縮寫(xiě),是操作、過(guò)濾和轉(zhuǎn)換文本內(nèi)容的強(qiáng)大工具。常用功能有增刪改查,過(guò)濾,取行。
[root@oldboy ~]# sed --version #→ sed軟件版本GNU sed version 4.2.1語(yǔ)法格式
sed [options] [sed-commands] [input-file] sed [選項(xiàng)] [sed命令] [輸入文件] 說(shuō)明: 1. 注意sed和后面的選項(xiàng)之間至少有一個(gè)空格。 2. 為了避免混淆,本文稱呼sed為sed軟件。sed-commands(sed命令)是sed軟件內(nèi)置的一些命令選項(xiàng),為了和前面的options(選項(xiàng))區(qū)分,故稱為sed命令。 3. sed-commands既可以是單個(gè)sed命令,也可以是多個(gè)sed命令組合。 4. input-file(輸入文件)是可選項(xiàng),sed還能夠從標(biāo)準(zhǔn)輸入如管道獲取輸入。命令執(zhí)行流程
概括流程:Sed軟件從文件或管道中讀取一行,處理一行,輸出一行;再讀取一行,再處理一行,再輸出一行……
模式空間:sed軟件內(nèi)部的一個(gè)臨時(shí)緩存,用于存放讀取到的內(nèi)容。
使用范例
1. 統(tǒng)一實(shí)驗(yàn)文本
# 創(chuàng)建包含下面內(nèi)容的文件,后面的操作都會(huì)使用這個(gè)文件。 [root@oldboy ~]# cat person.txt 101,oldboy,CEO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO2. 增刪改查
- a 追加文本到指定行后
- i 插入文本到指定行前
2.1 增
2.1.1 單行增加
[root@oldboy ~]# sed '2a 106,dandan,CSO' person.txt 101,oldboy,CEO 102,zhangyao,CTO 106,dandan,CSO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@oldboy ~]# sed '2i 106,dandan,CSO' person.txt 101,oldboy,CEO 106,dandan,CSO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO2.1.2 多行增加
[root@oldboy ~]# sed '2a 106,dandan,CSO\n107,bingbing,CCO' person.txt 101,oldboy,CEO 102,zhangyao,CTO 106,dandan,CSO #→第1種寫(xiě)法 107,bingbing,CCO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@oldboy ~]# sed '2a 106,dandan,CSO \ > 107,bingbing,CCO' person.txt 101,oldboy,CEO 102,zhangyao,CTO 106,dandan,CSO #→第2種寫(xiě)法 107,bingbing,CCO 103,Alex,COO 104,yy,CFO 105,feixue,CIO #→sed命令i的使用方法是一樣的,因此不再列出。企業(yè)案例1:優(yōu)化SSH配置(一鍵完成增加若干參數(shù))
在我們學(xué)習(xí)系統(tǒng)優(yōu)化時(shí),有一個(gè)優(yōu)化點(diǎn):更改ssh服務(wù)遠(yuǎn)程登錄的配置。主要的操作是在ssh的配置文件加入下面5行文本。(下面參數(shù)的具體含義見(jiàn)其他課程。)
Port 52113 PermitRootLogin no PermitEmptyPasswords no UseDNS no GSSAPIAuthentication no我們可以使用vi命令編輯這個(gè)文本,但這樣就比較麻煩,現(xiàn)在想一條命令增加5行文本到第13行前?
指定執(zhí)行的地址范圍
sed軟件可以對(duì)單行或多行進(jìn)行處理。如果在sed命令前面不指定地址范圍,那么默認(rèn)會(huì)匹配所有行。 用法:n1[,n2]{sed-commands} 地址用逗號(hào)分隔的,n1,n2可以用數(shù)字、正則表達(dá)式、或二者的組合表示。 例子:10{sed-commands} 對(duì)第10行操作10,20{sed-commands} 對(duì)10到20行操作,包括第10,20行10,+20{sed-commands} 對(duì)10到30(10+20)行操作,包括第10,30行1~2{sed-commands} 對(duì)1,3,5,7,……行操作10,${sed-commands} 對(duì)10到最后一行($代表最后一行)操作,包括第10行/oldboy/{sed-commands} 對(duì)匹配oldboy的行操作/oldboy/,/Alex/{sed-commands} 對(duì)匹配oldboy的行到匹配Alex的行操作/oldboy/,${sed-commands} 對(duì)匹配oldboy的行到最后一行操作/oldboy/,10{sed-commands} 對(duì)匹配oldboy的行到第10行操作,注意:如果前10行沒(méi)有匹配到oldboy,sed軟件會(huì)顯示10行以后的匹配oldboy的行,如果有。1,/Alex/{sed-commands} 對(duì)第1行到匹配Alex的行操作/oldboy/,+2{sed-commands} 對(duì)匹配oldboy的行到其后的2行操作2.2 刪
d 刪除指定的行
[root@oldboy ~]# sed 'd' person.txt [root@oldboy ~]# [root@oldboy ~]# sed '2d' person.txt 101,oldboy,CEO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@oldboy ~]# sed '2,5d' person.txt 101,oldboy,CEO [root@oldboy ~]# sed '3,$d' person.txt 101,oldboy,CEO 102,zhangyao,CTO [root@oldboy ~]# sed '1~2d' person.txt 102,zhangyao,CTO 104,yy,CFO [root@oldboy ~]# sed '1,+2d' person.txt 104,yy,CFO 105,feixue,CIO [root@oldboy ~]# sed '/zhangyao/d' person.txt 101,oldboy,CEO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@oldboy ~]# sed '/oldboy/,/Alex/d' person.txt 104,yy,CFO 105,feixue,CIO [root@oldboy ~]# sed '/oldboy/,3d' person.txt 104,yy,CFO 105,feixue,CIO企業(yè)案例2:打印文件內(nèi)容但不包含OLDBOY
[root@oldboy ~]# sed '/oldboy/d' person.txt #→刪除包含"oldboy"的行 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO2.3 改
2.3.1 按行替換
c 用新行取代舊行
[root@oldboy ~]# sed '2c 106,dandan,CSO' person.txt 101,oldboy,CEO 106,dandan,CSO 103,Alex,COO 104,yy,CFO 105,feixue,CIO2.3.2 文本替換
s:單獨(dú)使用→將每一行中第一處匹配的字符串進(jìn)行替換 ==>sed命令? g:每一行進(jìn)行全部替換 ==>sed命令s的替換標(biāo)志之一,非sed命令? -i:修改文件內(nèi)容 ==>sed軟件的選項(xiàng)
sed軟件替換模型(方框▇被替換成三角▲)
sed -i 's/▇/▲/g' oldboy.log sed -i 's#▇#▲#g' oldboy.log
觀察特點(diǎn)
企業(yè)案例3:指定行修改配置文件
指定行精確修改配置文件,這樣可以防止修改多了地方。
[root@oldboy ~]# sed '3s#0#9#' person.txt 101,oldboy,CEO 102,zhangyao,CTO 193,Alex,COO 104,yy,CFO 105,feixue,CIO2.3.3 變量替換
[root@oldboy ~]# cat test.txt #→再新建一個(gè)文本 a b a [root@oldboy ~]# x=a [root@oldboy ~]# y=b [root@oldboy ~]# echo $x $y a b [root@oldboy ~]# sed s#$x#$y#g test.txt b b b [root@oldboy ~]# sed 's#$x#$y#g' test.txt a b a [root@oldboy ~]# sed 's#'$x'#'$y'#g' test.txt b b b [root@oldboy ~]# sed "s#$x#$y#g" test.txt b b b [root@oldboy ~]# eval sed 's#$x#$y#g' test.txt b b b2.3.4 分組替換\( \)和\1的使用說(shuō)明
sed軟件的\( \)的功能可以記住正則表達(dá)式的一部分,其中,\1為第一個(gè)記住的模式即第一個(gè)小括號(hào)中的匹配內(nèi)容,\2第二記住的模式,即第二個(gè)小括號(hào)中的匹配內(nèi)容,sed最多可以記住9個(gè)。
例:echo I am oldboy teacher.如果想保留這一行的單詞oldboy,刪除剩下的部分,使用圓括號(hào)標(biāo)記想保留的部分。
[root@oldboy ~]# echo I am oldboy teacher. |sed 's#^.*am \([a-z].*\) tea.*$#\1#g' oldboy [root@oldboy ~]# echo I am oldboy teacher. |sed -r 's#^.*am ([a-z].*) tea.*$#\1#g' oldboy [root@oldboy ~]# echo I am oldboy teacher. |sed -r 's#I (.*) (.*) teacher.#\1\2#g' amoldboy命令說(shuō)明
思路:用oldboy字符替換I am oldboy teacher.
下面解釋用□代替空格
企業(yè)案例4:系統(tǒng)開(kāi)機(jī)啟動(dòng)項(xiàng)優(yōu)化
[root@oldboy ~]# chkconfig --list|grep "3:on"|grep -vE "sshd|crond|network|rsyslog|sysstat"|awk '{print $1}'|sed -r 's#^(.*)#chkconfig \1 off#g'|bash [root@oldboy ~]# chkconfig --list|grep "3:on" crond 0:off 1:off 2:on 3:on 4:on 5:on 6:off network 0:off 1:off 2:on 3:on 4:on 5:on 6:off rsyslog 0:off 1:off 2:on 3:on 4:on 5:on 6:off sshd 0:off 1:off 2:on 3:on 4:on 5:on 6:off sysstat 0:off 1:on 2:on 3:on 4:on 5:on 6:off2.3.5 特殊符號(hào)&代表被替換的內(nèi)容
[root@oldboy ~]# sed '1,3s#C#--&--#g' person.txt #→此處&等于C 101,oldboy,--C--EO #→將1到3行的C替換為--C-- 102,zhangyao,--C--TO 103,yy,--C--OO 104,feixue,CFO 105,dandan,CIO企業(yè)案例5:批量重命名文件
當(dāng)前目錄下有文件如下所示:
[root@oldboy test]# ls stu_102999_1_finished.jpg stu_102999_2_finished.jpg stu_102999_3_finished.jpg stu_102999_4_finished.jpg stu_102999_5_finished.jpg要求用sed命令重命名,效果為stu_102999_1_finished.jpg==>stu_102999_1.jpg,即刪除文件名的_finished
2.4 查
p 輸出指定內(nèi)容,但默認(rèn)會(huì)輸出2次匹配的結(jié)果,因此使用n取消默認(rèn)輸出
2.4.1 按行查詢
[root@oldboy ~]# sed '2p' person.txt 101,oldboy,CEO 102,zhangyao,CTO 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO 105,feixue,CIO [root@oldboy ~]# sed -n '2p' person.txt 102,zhangyao,CTO [root@oldboy ~]# sed -n '2,3p' person.txt 102,zhangyao,CTO 103,Alex,COO 說(shuō)明:取行就用sed,最簡(jiǎn)單 [root@oldboy ~]# sed -n '1~2p' person.txt 101,oldboy,CEO 103,Alex,COO 105,feixue,CIO [root@oldboy ~]# sed -n 'p' person.txt 101,oldboy,CEO 102,zhangyao,CTO 103,yy,COO 104,feixue,CFO 105,dandan,CIO2.4.2 按字符串查詢
[root@oldboy ~]# sed -n '/CTO/p' person.txt 102,zhangyao,CTO [root@oldboy ~]# sed -n '/CTO/,/CFO/p' person.txt 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO2.4.3 混合查詢
[root@oldboy ~]# sed -n '2,/CFO/p' person.txt 102,zhangyao,CTO 103,Alex,COO 104,yy,CFO [root@oldboy ~]# sed -n '/feixue/,2p' person.txt 105,feixue,CIO #→特殊情況,前兩行沒(méi)有匹配到feixue,就向后匹配,如果匹配到feixue就打印此行。總結(jié)
以上是生活随笔為你收集整理的Linux 三剑客之SED行天下的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 14 | 深入解析Pod对象(一):基本
- 下一篇: 33 | 关于 Linux 网络,你必须