基礎知識 - 行編輯工具: 一行一行處理文件內容 - 全屏編輯工具:一次性將文件所有內容載入到記憶體中 sed編輯器: Stream Editor 工作原理: 逐行處理文件內容,一次讀取一行內容到模式空間處理。由此反覆,知道最後一行處理完成。 # 處理:可以是輸出到屏幕,也可以是文本的修改替換等操作 ...
基礎知識
- 行編輯工具: 一行一行處理文件內容,例如:sed
- 全屏編輯工具:一次性將文件所有內容載入到記憶體中,例如:vi、vim、nano
sed編輯器: Stream Editor
工作原理:
逐行處理文件內容,一次讀取一行內容到模式空間處理。由此反覆,知道最後一行處理完成。
# 處理:可以是輸出到屏幕,也可以是文本的修改替換等操作
# 模式空間:就是一塊記憶體空間
sed的基本用法
sed的命令格式
sed [option] 'script' [inputfile]
#script: sed自身的腳本,sed自身語法的一種腳本
#inputfile: 文件,如果不寫文件就對標準輸入的內容進行處理
sed實現自動列印功能(最基本用法)
sed '' filename
#''裡面的腳本內容不能省略
#不輸入腳本就是讀入什麼就預設列印什麼 --- sed內置了自動列印的功能
sed選項
-n:關閉sed的自動列印
-e:多點編輯(一次更改多個內容)
-r,-E:使用正則表達式
-i.bak 先把文件做個備份然後再改
-s:將多個文件視為單獨的文件
sed的腳本格式
sed腳本:由位置(地址)和指令組合而成
sed腳本的地址格式
-
空地址
-
單地址
-
地址範圍
-
步進
空地址:
表示對全文進行處理
單地址:
表示處理指定的行。
#指定的行可以通過數字直接指定,也支持正則表達式匹配。
#寫正則表達式的格式:/pattern/
地址範圍:
(n,m):表示從n行開始,到m行結束這個範圍的內容。
#地址範圍也可以使用正則表達式表示: /pat1/,/pat2/ (第一個正則表達式之後到下一個正則表達式中間的內容)
sed腳本的指令
p --- 內容列印
Ip --- 忽略大小寫輸出
d --- 把模式空間內容刪除掉,不再自動列印了
a --- 再某些行後面加內容
i --- 再某些行前面加內容
c --- 替換某一行的內容
w --- file 另存為指定文件
r --- 把一個文件內容讀到當前匹配到的行中
= --- 某一行前面添加行號
! --- 除了某一行的意思
q --- 結束或退出sed
#搜索替代
s/pattern/string/修飾符 --- 查找替換,支持使用其它分隔符
範例
#sed基本用法:自動列印
#查看某個文件的文本內容
sed '' dir.sh
#列印指定行的內容
sed -n '3p' /etc/passwd #需要使用-n關閉自動列印,因為如果使用了自動列印會輸出所有內容,-p:列印匹配到的內容
#列印出包含root的行
sed -n '/root/p' /etc/passwd
#列印從第三行到第六行的內容:
sed -n '3,6p' /etc/passwd
#列印以r開頭到以g開頭的行的中間那些行
sed -n '/^r/,/^g/p' /etc/passwd #找到了第一個滿足條件的範圍後不會停止,還會繼續往下麵找。
#列印奇數行
sed -n '1~2p' /etc/passwd #從1開始,每次步進2
sed工具的核心用法:搜索替代
#搜索替代的格式:
s/pattern/string/修飾符 #支持使用其它分隔符,可以是其它形式:s@@@,s###
s/模式/替代的字元串/修飾符
搜索替代的修飾符:
g --- 行內全局替換
p --- 顯示替換成功的行
w --- /PATH/FILE 將替換成功的行保存至文件中
I,i --- 忽略大小寫
# &符號:待變前面搜索出來的內容。 相當於一個變數,保存搜索出來的內容
正則表達式的分組(後項引用)
小括弧實現分組,後面要表示第幾個分組的內容就用 \num(第幾個小括弧裡面的內容) #分組實現把一個文件的一行切成多塊,保留其中之一
範例
#sed分組的實現 --- 分組使用的是小括弧(直接小括弧是擴展正則表達式,不加r參數用的是基本正則表達式)
echo abc123xyz | sed -r 's/(abc)(123)(xyz)/\1/' #輸出abc 值留下了第一個分組
#搜索替換和& --給前面特定的內容後面加內容
sed -nr 's/r..t/&er/gp' /etc/passwd #給搜索到的內容加上er結尾
#獲取分區利用率
#獲取指定網卡的ip地址:
ifconfig ens33 | sed -nr '2s/.*inet ([0-9.]+) .*/\1/p'
#行首一直到inet 中間空格
#一個以上的數字或點 空格 一直到結尾
ifconfig ens33 | sed -rn '2s/(.*inet )([0-9].*)(netmask.*)/\2/p'
#行首一直到inet,中間空格
#數字
#取基名和目錄名
echo "/etc/netplan/01-netcfg" | sed -nr 's#.*\/([^/]+)#\1#p' #結果為 01-netcfg
#從任意字元開始到以斜杠結尾,然後以非斜杠開頭的內容
#使用sed將selinux改為disabled
sed -r -i.bak '/^SELINUX=/s/(SELINUX=).*/\1disabled/' /etc/selinux/config
# 取文件的首碼和尾碼
echo a.b.c.tar | sed -nr 's/(.*)\.([^.]+)$/\2/p'
#將非#開頭的行加#
sed -rn 's/^[^#]/#&/p' /etc/fstab
或
#sed -rn 's/^[^#](.*)/#\1/p' /etc/fstab
#將#開頭的行刪除#
#sed -ri.bak '/^#/s/^#//' /etc/fstab
#刪除指定的行
cat /etc/passwd | sed '/tom/d' #刪除含有root的行
cat /etc/passwd | sed '4-10d' #刪除第四行到第十行的內容
sed編輯器的高級用法
相關概念
模式空間:pattern space,存放sed需要處理哪一行數據(一個緩衝區)
保持空間:Hold Space,臨時存放模式空間中的數據(一個臨時空間)
和兩個空間相關的指令
#模式空間內容-->保持空間 小寫覆蓋,大寫追加
h 模式空間的內容覆蓋到保持空間
H 模式空間的內容追加到保持空間(內容追加)
#保持空間內容--->模式空間
g 保持空間數據覆蓋模式空間
G 保持空間內容追加模式空間
#內容互換
x 兩者內容互換
#匹配到的下一行內容--->模式空間
n 匹配行的下一行覆蓋至模式空間
N 匹配行的下一行追加至模式空間
#刪除
d 清空模式空間
D 刪除模式空間第一行
sed命令使用變數
#因為sed的腳本使用單引號括起來的,單引號屬於強引用。所見即所得。
#例如:列印含有root的行
name=root
cat /etc/passwd | sed -nr "/$name/p" #如果裡面的內容本來就帶雙引號的,所以就不能再在外面使用雙引號。
解決方法;cat /etc/passwd | sed -nr '/'$name'/p' #再加一個單引號把變數括起來 把'/'和'/p'成對了,變數空出來了
#多點編輯並調用變數
#使用變數的方式修改httpd的配置文件 servername和port
cat /etc/httpd/conf/httpd.conf | sed -nr -e 's/^(Listen) 80/\1 '$port'/p' -re "/#ServerName /c ServerName= `hostname`:$port/p"
#或者:
cat /etc/httpd/conf/httpd.conf | sed -nr -e 's/^(Listen) 80/\1 '$port'/p' -re '/#ServerName /c ServerName= '$(hostname)':'$port'/p' # $(command)
#把包含ServerName的這一行替換成: ServerName: 主機名:埠
範例
#sed實現修改預設的網卡名
cat /etc/default/grub | sed -nr 's/^(GRUB_CMDLINE_LINUX=.*)"$/\1 net.ifnames=0"/p'
#列印偶數行
seq 10 | sed -n 'n;p' #n:讀取到的行的下一行
#比如首先讀取到的是第一行,因為有n,所以就以讀到的內容的下一行內容覆蓋當前讀到的內容到模式空間,所以第一次輸出2.
seq 10 | sed -n '2~2p' #使用步進的方式實現
seq 10 | sed -n '1~2!p' #!表示除了這些行,其他的都列印