主頁 > 作業系統 > linux命令_sed

linux命令_sed

2022-05-20 14:33:38 作業系統

sed

sed命令

sed全稱是:Stream EDitor(流編輯器, Linux sed 命令是利用腳本來處理文本檔案,sed 可依照腳本的指令來處理、編輯文本檔案,Sed 主要用來自動編輯一個或多個檔案、簡化對檔案的反復操作、撰寫轉換程式等,

當處理資料時,sed 從輸入源一次讀入一行,并將它保存到所謂的模式空間pattern space中,所有 sed 的變換都發生在模式空間,變換都是由命令列上或外部 sed 腳本檔案提供的單字母命令來描述的,大多數 sed 命令都可以由一個地址或一個地址范圍作為前導來限制它們的作用范圍,

選項 含義
-e 腳本命令 該選項會將其后跟的腳本命令添加到已有的命令中,
-f 腳本命令檔案 該選項會將其后檔案中的腳本命令添加到已有的命令中,
-n 默認情況下,sed 會在所有的腳本指定執行完畢后,會自動輸出處理后的內容,而該選項會屏蔽啟動輸出,需使用 print 命令來完成輸出,
-i 此選項會直接修改源檔案,要慎用,

示例:

  • 查看passwd檔案的第5到第8行內容

    [root@honey-master ~] sed -n '5,8 p' /etc/passwd
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    sync:x:5:0:sync:/sbin:/bin/sync
    shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
    halt:x:7:0:halt:/sbin:/sbin/halt
    
  • 查看passwd檔案中以roo開頭的行

    [root@honey-master ~] sed -n '/^roo/ p' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    
  • 忽略大小寫,對含有root字符的行列印出來

    [root@honey-master ~] sed -n '/root/I p' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    operator:x:11:0:operator:/root:/sbin/nologin
    
  • 直接查看passwd檔案

    [root@honey-master ~] sed '' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    bin:x:1:1:bin:/bin:/sbin/nologin
    daemon:x:2:2:daemon:/sbin:/sbin/nologin
    adm:x:3:4:adm:/var/adm:/sbin/nologin
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    .......
    

    此時就不要配置-n引數了,因為-n是用來取消自動列印,配合查找規則一起用的

    但 p 標記會輸出修改過的行,將二者匹配使用的效果就是只輸出被替換命令修改過的行

  • 查找passwd檔案中有/bin/bash字串的行

    [root@honey-master ~] sed -n '\%/bin/bash% p' /etc/passwd
    root:x:0:0:root:/root:/bin/bash
    postgres:x:1000:1000::/home/postgres:/bin/bash
    
flags 標記 功能
n 1~512 之間的數字,表示指定要替換的字串出現第幾次時才進行替換,例如,一行中有 3 個 A,但用戶只想替換第二個 A,這是就用到這個標記;
g 對資料中所有匹配到的內容進行替換,如果沒有 g,則只會在第一次匹配成功時做替換操作,例如,一行資料中有 3 個 A,則只會替換第一個 A;
p 會列印與替換命令中指定的模式匹配的行,此標記通常與 -n 選項一起使用,
w file 將緩沖區中的內容寫到指定的 file 檔案中;
& 用正則運算式匹配的內容進行替換;
\n 匹配第 n 個子串,該子串之前在 pattern 中用 () 指定,
\ 轉義(轉義替換部分包含:&、\ 等),
I 列印資料流中的文本和不可列印的ASCII字符(比如結束符s、制表符\t)
y 字符轉換,轉換之后的字符長度必須相同
c 將選定行內容替換成指定內容
d 洗掉,因為是洗掉啊,所以 d 后面通常不接任何咚咚;
  • 將 /data/passwd 第2~5行洗掉列印輸出

    image-20220519150618514

    image-20220519150947359

    可以看到這個洗掉列印,只是在輸出時將源檔案的2-5行過濾掉,并沒有對檔案進行任何的修改,如果我要對檔案進行修改,就要用到sed -i的命令

洗掉
  • 洗掉檔案第20行內容 sed -i '20 d' passwd

    image-20220519151308370

  • 洗掉檔案之前備份命令

    sed -i.bak '20 d' passwd
    

    image-20220519151534106

新增
  • 在檔案passwd上的第四行后面添加新字串 ‘ivanlee’

    [root@honey-master data] sed -e 4a\ivanlee passwd
    root:x:0:0:root:/root:/bin/bash
    bin:x:1:1:bin:/bin:/sbin/nologin
    daemon:x:2:2:daemon:/sbin:/sbin/nologin
    adm:x:3:4:adm:/var/adm:/sbin/nologin
    ivanlee
    lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
    sync:x:5:0:sync:/sbin:/bin/sync
    shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
    halt:x:7:0:halt:/sbin:/sbin/halt
    
  • 在檔案中的第一行前面追加一個‘ivanlee’

    [root@honey-master data] sed '1 i\huawei' passwd
    huawei
    root:x:0:0:root:/root:/bin/bash
    bin:x:1:1:bin:/bin:/sbin/nologin
    daemon:x:2:2:daemon:/sbin:/sbin/nologin
    

    上面兩個命令都對檔案沒有任何的修改,只是在列印時加了條件

  • 如果我想要在檔案第一行就插入‘huawei’

    • 第一行起始位置插入

      [root@honey-master data] sed -i '1i huawei' passwd
      [root@honey-master data] cat -n passwd
           1  huawei
           2  root:x:0:0:root:/root:/bin/bash
           3  bin:x:1:1:bin:/bin:/sbin/nologin
           4  daemon:x:2:2:daemon:/sbin:/sbin/nologin
           5  adm:x:3:4:adm:/var/adm:/sbin/nologin
           6  lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
           7  sync:x:5:0:sync:/sbin:/bin/sync
           8  shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
      
    • 第二行末尾插入

      [root@honey-master data] sed -i '2a ivanlee' passwd
      [root@honey-master data] cat -n passwd
           1  huawei
           2  root:x:0:0:root:/root:/bin/bash
           3  ivanlee
           4  bin:x:1:1:bin:/bin:/sbin/nologin
      

    ai字符的相同點就是可以單獨形成一行,但區別在于a是在一行之后,i在一行之前

  • sed -e:一次性可以執行多個命令

    [root@honey-master data] sed -e 's/huawei/vivo/g; s/ivanlee/Annnnn/g' passwd 
         1  vivo
         2  root:x:0:0:root:/root:/bin/bash
         3  Annnnn
         4  bin:x:1:1:bin:/bin:/sbin/nologin
         5  daemon:x:2:2:daemon:/sbin:/sbin/nologin
    [root@honey-master data] cat passwd 
         1  huawei
         2  root:x:0:0:root:/root:/bin/bash
         3  ivanlee
         4  bin:x:1:1:bin:/bin:/sbin/nologin
         5  daemon:x:2:2:daemon:/sbin:/sbin/nologin
    

sed腳本替換命令:

此命令的基本格式為:

[address]s/pattern/replacement/flags

其中,address 表示指定要操作的具體行,pattern 指的是需要替換的內容,replacement 指的是要替換的新內容,

關于指定具體操作行(address)的用法,這里先不做解釋,文章后續會對其做詳細介紹,

  • 指定 sed 用新文本替換第幾處模式匹配的地方:

    [root@honey-master data] sed 's/:/---/3' passwd
    huawei
    root:x:0---0:root:/root:/bin/bash
    ivanlee
    bin:x:1---1:bin:/bin:/sbin/nologin
    daemon:x:2---2:daemon:/sbin:/sbin/nologin
    
    
    [root@honey-master data] sed 's/:/---/1' passwd
    huawei
    root---x:0:0:root:/root:/bin/bash
    ivanlee
    bin---x:1:1:bin:/bin:/sbin/nologin
    daemon---x:2:2:daemon:/sbin:/sbin/nologin
    

    可以看到后面的數字代表的就是在哪個位置發生改變,使用數字 1 作為標記的結果就是,sed 編輯器只替換每行中第 1 次出現的匹配模式,

  • 如果要用新檔案替換所有匹配的字串,可以使用 g 標記:

    [root@honey-master data] sed 's/:/---/g' passwd
    huawei
    root---x---0---0---root---/root---/bin/bash
    ivanlee
    bin---x---1---1---bin---/bin---/sbin/nologin
    daemon---x---2---2---daemon---/sbin---/sbin/nologin
    
  • 使用w將會把修改后的內容存到命名的檔案里

    image-20220519154134580

  • 在使用 s 腳本命令時,替換類似檔案路徑的字串會比較麻煩,需要將路徑中的正斜線進行轉義,**sed 's//bin/bash//bin/ivansh/g' passwd **

    [root@honey-master data] cat passwd 
         1  huawei
         2  root:x:0:0:root:/root:/bin/bash
         3  ivanlee
         4  bin:x:1:1:bin:/bin:/sbin/nologin
         5  daemon:x:2:2:daemon:/sbin:/sbin/nologin
    [root@honey-master data] sed 's/\/bin\/bash/\/bin\/ivansh/g' passwd 
         1  huawei
         2  root:x:0:0:root:/root:/bin/ivansh
         3  ivanlee
         4  bin:x:1:1:bin:/bin:/sbin/nologin
         5  daemon:x:2:2:daemon:/sbin:/sbin/nologin
    
  • c 命令表示將指定行中的所有內容,替換成該選項后面的字串,

    [root@honey-master data] sed 's/\/bin\/bash/\/bin\/ivansh/g' passwd 
         1  huawei
         2  root:x:0:0:root:/root:/bin/ivansh
         3  ivanlee
         4  bin:x:1:1:bin:/bin:/sbin/nologin
         5  daemon:x:2:2:daemon:/sbin:/sbin/nologin
    [root@honey-master data] sed '3c ivanlee_changed' passwd 
         1  huawei
         2  root:x:0:0:root:/root:/bin/bash
    ivanlee_changed
         4  bin:x:1:1:bin:/bin:/sbin/nologin
         5  daemon:x:2:2:daemon:/sbin:/sbin/nologin
    
  • y 轉換命令是唯一可以處理單個字符的 sed 腳本命令

    轉換命令會對 inchars 和 outchars 值進行一對一的映射,即 inchars 中的第一個字符會被轉換為 outchars 中的第一個字符,第二個字符會被轉換成 outchars 中的第二個字符...這個映射程序會一直持續到處理完指定字符,如果 inchars 和 outchars 的長度不同,則 sed 會產生一條錯誤訊息,

    [root@honey-master data] sed 'y/12345/abcde/' passwd 
         a  huawei
         b  root:x:0:0:root:/root:/bin/bash
         c  ivanlee
         d  bin:x:a:a:bin:/bin:/sbin/nologin
         e  daemon:x:b:b:daemon:/sbin:/sbin/nologin
    [root@honey-master data] cat passwd 
         1  huawei
         2  root:x:0:0:root:/root:/bin/bash
         3  ivanlee
         4  bin:x:1:1:bin:/bin:/sbin/nologin
         5  daemon:x:2:2:daemon:/sbin:/sbin/nologin
    
  • q 命令的作用是使 sed 命令在第一次匹配任務結束后,退出 sed 程式,不再進行對后續資料的處理,

    [root@honey-master data] sed '2q' passwd 
         1  huawei
         2  root:x:0:0:root:/root:/bin/bash
    

    只是輸出了2行就是因為q命令,

sed 腳本命令的尋址方式

前面在介紹各個腳本命令時,我們一直忽略了對 address 部分的介紹,對各個腳本命令來說,address 用來表明該腳本命令作用到文本中的具體行,

默認情況下,sed 命令會作用于文本資料的所有行,如果只想將命令作用于特定行或某些行,則必須寫明 address 部分,表示的方法有以下 2 種:

  1. 以數字形式指定行區間;
  2. 用文本模式指定具體行區間,

以上兩種形式都可以使用如下這 2 種格式,分別是:

[address]腳本命令

或者

address {
  多個腳本命令
}

以上兩種形式在前面例子中都有具體實體,因此這里不再做過多贅述,

以數字形式指定行區間

當使用數字方式的行尋址時,可以用行在文本流中的行位置來參考,sed 會將文本流中的第一行編號為 1,然后繼續按順序為接下來的行分配行號,

在腳本命令中,指定的地址可以是單個行號,或是用起始行號、逗號以及結尾行號指定的一定區間范圍內的行,這里舉一個 sed 命令作用到指定行號的例子:

[root@localhost ~]#sed '2s/dog/cat/' data1.txt
The quick brown fox jumps over the lazy dog
The quick brown fox jumps over the lazy cat
The quick brown fox jumps over the lazy dog
The quick brown fox jumps over the lazy dog

可以看到,sed 只修改地址指定的第二行的文本,下面的例子中使用了行地址區間:

[root@localhost ~]# sed '2,3s/dog/cat/' data1.txt
The quick brown fox jumps over the lazy dog
The quick brown fox jumps over the lazy cat
The quick brown fox jumps over the lazy cat
The quick brown fox jumps over the lazy dog


在此基礎上,如果想將命令作用到文本中從某行開始的所有行,可以用特殊地址——美元符($):

[root@localhost ~]# sed '2,$s/dog/cat/' data1.txt
The quick brown fox jumps over the lazy dog
The quick brown fox jumps over the lazy cat
The quick brown fox jumps over the lazy cat
The quick brown fox jumps over the lazy cat

用文本模式指定行區間

sed 允許指定文本模式來過濾出命令要作用的行,格式如下:

/pattern/command

注意,必須用正斜線將要指定的 pattern 封起來,sed 會將該命令作用到包含指定文本模式的行上,

舉個例子,如果你想只修改用戶 demo 的默認 shell,可以使用 sed 命令,執行命令如下:

[root@localhost ~] grep demo /etc/passwd
demo:x:502:502::/home/Samantha:/bin/bash
[root@localhost ~] sed '/demo/s/bash/csh/' /etc/passwd
root:x:0:0:root:/root:/bin/bash
...
demo:x:502:502::/home/demo:/bin/csh
...

雖然使用固定文本模式能幫你過濾出特定的值,就跟上面這個用戶名的例子一樣,但其作用難免有限,因此,sed 允許在文本模式使用正則運算式指明作用的具體行,正則運算式允許創建高級文本模式匹配運算式來匹配各種資料,這些運算式結合了一系列通配符、特殊字符以及固定文本字符來生成能夠匹配幾乎任何形式文本的簡練模式,

本文來自博客園,作者:ivanlee717,轉載請注明原文鏈接:https://www.cnblogs.com/ivanlee717/p/16288911.html

轉載請註明出處,本文鏈接:https://www.uj5u.com/caozuo/478458.html

標籤:Linux

上一篇:群暉下 gitea+drone+harbor實作CI/CD 發布到云服務器

下一篇:認識并安裝WSL

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • CA和證書

    1、在 CentOS7 中使用 gpg 創建 RSA 非對稱密鑰對 gpg --gen-key #Centos上生成公鑰/密鑰對(存放在家目錄.gnupg/) 2、將 CentOS7 匯出的公鑰,拷貝到 CentOS8 中,在 CentOS8 中使用 CentOS7 的公鑰加密一個檔案 gpg -a ......

    uj5u.com 2020-09-10 00:09:53 more
  • Kubernetes K8S之資源控制器Job和CronJob詳解

    Kubernetes的資源控制器Job和CronJob詳解與示例 ......

    uj5u.com 2020-09-10 00:10:45 more
  • VMware下安裝CentOS

    VMware下安裝CentOS 一、軟硬體準備 1 Centos鏡像準備 1.1 CentOS鏡像下載地址 下載地址 1.2 CentOS鏡像下載程序 點擊下載地址進入如下圖的網站,選擇需要下載的版本,這里選擇的是Centos8,點擊如圖所示。 決定選擇Centos8后,選擇想要的鏡像源進行下載,此 ......

    uj5u.com 2020-09-10 00:12:10 more
  • 如何使用Grep命令查找多個字串

    如何使用Grep 命令查找多個字串 大家好,我是良許! 今天向大家介紹一個非常有用的技巧,那就是使用 grep 命令查找多個字串。 簡單介紹一下,grep 命令可以理解為是一個功能強大的命令列工具,可以用它在一個或多個輸入檔案中搜索與正則運算式相匹配的文本,然后再將每個匹配的文本用標準輸出的格式 ......

    uj5u.com 2020-09-10 00:12:28 more
  • git配置http代理

    git配置http代理 經常遇到克隆 github 慢的問題,這里記錄一下幾種配置 git 代理的方法,解決 clone github 過慢。 目錄 git配置代理 git單獨配置github代理 git配置全域代理 配置終端環境變數 git配置代理 主要使用 git config 命令 git單獨 ......

    uj5u.com 2020-09-10 00:12:33 more
  • Linux npm install 裝包時提示Error EACCES permission denied解

    npm install 裝包時提示Error EACCES permission denied解決辦法 ......

    uj5u.com 2020-09-10 00:12:53 more
  • Centos 7下安裝nginx,使用yum install nginx,提示沒有可用的軟體包

    Centos 7下安裝nginx,使用yum install nginx,提示沒有可用的軟體包。 18 (flaskApi) [root@67 flaskDemo]# yum -y install nginx 19 已加載插件:fastestmirror, langpacks 20 Loading ......

    uj5u.com 2020-09-10 00:13:13 more
  • Linux查看服務器暴力破解ssh IP

    在公網的服務器上經常遇到別人爆破你服務器的22埠,用來挖礦或者干其他嘿嘿嘿的事情~ 這種情況下正確的做法是: 修改默認ssh的22埠 使用設定密鑰登錄或者白名單ip登錄 建議服務器密碼為復雜密碼 創建普通用戶登錄服務器(root權限過大) 建立堡壘機,實作統一管理服務器 統計爆破IP [root ......

    uj5u.com 2020-09-10 00:13:17 more
  • CentOS 7系統常見快捷鍵操作方式

    Linux系統中一些常見的快捷方式,可有效提高操作效率,在某些時刻也能避免操作失誤帶來的問題。 ......

    uj5u.com 2020-09-10 00:13:31 more
  • CentOS 7作業系統目錄結構介紹

    作業系統存在著大量的資料檔案資訊,相應檔案資訊會存在于系統相應目錄中,為了更好的管理資料資訊,會將系統進行一些目錄規劃,不同目錄存放不同的資源。 ......

    uj5u.com 2020-09-10 00:13:35 more
最新发布
  • vim的常用命令

    Vim的6種基本模式 1. 普通模式在普通模式中,用的編輯器命令,比如移動游標,洗掉文本等等。這也是Vim啟動后的默認模式。這正好和許多新用戶期待的操作方式相反(大多數編輯器默認模式為插入模式)。 2. 插入模式在這個模式中,大多數按鍵都會向文本緩沖中插入文本。大多數新用戶希望文本編輯器編輯程序中一 ......

    uj5u.com 2023-04-20 08:43:21 more
  • vim的常用命令

    Vim的6種基本模式 1. 普通模式在普通模式中,用的編輯器命令,比如移動游標,洗掉文本等等。這也是Vim啟動后的默認模式。這正好和許多新用戶期待的操作方式相反(大多數編輯器默認模式為插入模式)。 2. 插入模式在這個模式中,大多數按鍵都會向文本緩沖中插入文本。大多數新用戶希望文本編輯器編輯程序中一 ......

    uj5u.com 2023-04-20 08:42:36 more
  • docker學習

    ###Docker概述 真實專案部署環境可能非常復雜,傳統發布專案一個只需要一個jar包,運行環境需要單獨部署。而通過Docker可將jar包和相關環境(如jdk,redis,Hadoop...)等打包到docker鏡像里,將鏡像發布到Docker倉庫,部署時下載發布的鏡像,直接運行發布的鏡像即可。 ......

    uj5u.com 2023-04-19 09:26:53 more
  • 設定Windows主機的瀏覽器為wls2的默認瀏覽器

    這里以Chrome為例。 1. 準備作業 wsl是可以使用Windows主機上安裝的exe程式,出于安全考慮,默認情況下改功能是無法使用。要使用的話,終端需要以管理員權限啟動。 我這里以Windows Terminal為例,介紹如何默認使用管理員權限打開終端,具體操作如下圖所示: 2. 操作 wsl ......

    uj5u.com 2023-04-19 09:25:49 more
  • docker學習

    ###Docker概述 真實專案部署環境可能非常復雜,傳統發布專案一個只需要一個jar包,運行環境需要單獨部署。而通過Docker可將jar包和相關環境(如jdk,redis,Hadoop...)等打包到docker鏡像里,將鏡像發布到Docker倉庫,部署時下載發布的鏡像,直接運行發布的鏡像即可。 ......

    uj5u.com 2023-04-19 09:19:04 more
  • Linux學習筆記

    IP地址和主機名 IP地址 ifconfig可以用來查詢本機的IP地址,如果不能使用,可以通過install net-tools安裝。 Centos系統下ens33表示主網卡;inet后表示IP地址;lo表示本地回環網卡; 127.0.0.1表示代指本機;0.0.0.0可以用于代指本機,同時在放行設 ......

    uj5u.com 2023-04-18 06:52:01 more
  • 解決linux系統的kdump服務無法啟動的問題

    問題:專案麒麟系統服務器的kdump服務無法啟動,沒有相關日志無法定位問題。 1、查看服務狀態是關閉的,重啟系統也無法啟動 systemctl status kdump 2、修改grub引數,修改“crashkernel”為“512M(有的機器數值太大太小都會導致報錯,建議從128M開始試,或者加個 ......

    uj5u.com 2023-04-12 09:59:50 more
  • 解決linux系統的kdump服務無法啟動的問題

    問題:專案麒麟系統服務器的kdump服務無法啟動,沒有相關日志無法定位問題。 1、查看服務狀態是關閉的,重啟系統也無法啟動 systemctl status kdump 2、修改grub引數,修改“crashkernel”為“512M(有的機器數值太大太小都會導致報錯,建議從128M開始試,或者加個 ......

    uj5u.com 2023-04-12 09:59:01 more
  • 你是不是暴露了?

    作者:袁首京 原創文章,轉載時請保留此宣告,并給出原文連接。 如果您是計算機相關從業人員,那么應該經歷不止一次網路安全專項檢查了,你肯定是收到過資訊系統技術檢測報告,要求你加強風險監測,確保你提供的系統服務堅實可靠了。 沒檢測到問題還好,檢測到問題的話,有些處理起來還是挺麻煩的,尤其是線上正在運行的 ......

    uj5u.com 2023-04-05 16:52:56 more
  • 細節拉滿,80 張圖帶你一步一步推演 slab 記憶體池的設計與實作

    1. 前文回顧 在之前的幾篇記憶體管理系列文章中,筆者帶大家從宏觀角度完整地梳理了一遍 Linux 記憶體分配的整個鏈路,本文的主題依然是記憶體分配,這一次我們會從微觀的角度來探秘一下 Linux 內核中用于零散小記憶體塊分配的記憶體池 —— slab 分配器。 在本小節中,筆者還是按照以往的風格先帶大家簡單 ......

    uj5u.com 2023-04-05 16:44:11 more