LinuxShell——管道命令

来源:https://www.cnblogs.com/shamao/archive/2019/07/18/11209391.html
-Advertisement-
Play Games

LinuxShell——管道命令 摘要:本文主要學習了Shell中的管道命令。 grep命令 grep命令的作用是在文件中提取和匹配符合條件的字元串列,全稱是Global Regular Expressions Print。 基本語法 選項說明 使用舉例 sed命令 sed命令是用來處理流的編輯命令 ...


LinuxShell——管道命令

摘要:本文主要學習了Shell中的管道命令。

grep命令

grep命令的作用是在文件中提取和匹配符合條件的字元串列,全稱是Global Regular Expressions Print。

基本語法

1 [root@localhost ~]# grep [選項] 搜索內容 文件名

選項說明

1 -A n:n為數字,列出符合條件的行,併列出後續的n行。
2 -B n:n為數字,列出符合條件的行,併列出前面的n行。
3 -c:統計找到的符合條件的字元串的次數。
4 -i:忽略大小寫。
5 -n:輸出行號。
6 -v:反向査找,也就是查詢沒有關鍵字的一行。
7 --color=auto:搜索出的關鍵字用顏色顯示。

使用舉例

 1 [root@localhost ~]# cat -n file | grep "hello"
 2      4    hello
 3      6    helloword
 4 [root@localhost ~]# cat -n file | grep -c "hello"
 5 2
 6 [root@localhost ~]# cat -n file | grep -n "hello"
 7 4:     4    hello
 8 6:     6    helloword
 9 [root@localhost ~]# cat -n file | grep -n -A 3 "hello"
10 4:     4    hello
11 5-     5    ss
12 6:     6    helloword
13 7-     7    test123hhhhhhhhh
14 8-     8    ddsdfas
15 [root@localhost ~]# 

sed命令

sed命令是用來處理流的編輯命令,全稱是Stream Editor,用程式的方式來編輯文本,它使用預先設定好的編輯指令對輸入的文本進行編輯,完成之後再輸出編輯結構。

sed會一次處理一行內容。處理時,把當前處理的行存儲在臨時緩衝區中,稱為“模式空間”,接著用sed命令處理緩衝區中的內容,處理完成後,把緩衝區的內容送往屏幕。接著處理下一行,這樣不斷重覆,直到文件末尾。文件內容並沒有改變,除非你使用重定向存儲輸出。

基本語法

1 [root@localhost ~]# sed [選項] [範圍][腳本] 文件名

選項說明

1 -n:使用安靜模式。預設會將文件的所有內容都輸出到屏幕上,使用-n以後只會顯示經過處理的內容。
2 -e 腳本命令:將其後跟的腳本命令添加到已有的命令中。
3 -f 腳本文件:將其後文件中的腳本命令添加到已有的命令中。
4 -r:使命令支持擴展元字元的正則表達式,預設支持基礎元字元的正則表達式。
5 -i:直接修改文件內容。

範圍說明

範圍指的就是sed腳本命令的作用範圍,用來表明該腳本命令作用到文本中的具體行。

預設情況下,sed命令會作用於文本數據的所有行。如果只想將命令作用於特定行或某些行,則必須指明範圍,表示的方法有以下兩種種:

1)以數字形式指定行區間。

當使用數字方式的行定址時,可以用行在文本流中的行位置來引用。sed會將文本流中的第一行編號為1,然後繼續按順序為接下來的行分配行號。

1 n:單個數字表示指定第n行作為sed命令的作用範圍。
2 n1,n2:兩個數字用“,”分隔表示指定包含第n1行到第n2行的內容作為sed命令的作用範圍。
3 n,$:表示指定範圍包含n開始到結束所有內容作為sed命令的作用範圍。

2)用文本模式指定具體行區間。

sed允許指定文本模式來過濾出命令要作用的行,必須用“/”將要指定的文本封起來,sed會將該命令作用到包含指定文本模式的行上,多個內容需要被“/”封起來並且使用“,”分隔。

腳本說明

腳本命令a用來在指定行的下一行添加新增的內容:

1 [範圍]a\新內容

腳本命令i用來在指定行的上一行插入新增的內容:

1 [範圍]i\新內容

腳本命令c用來將指定範圍的內容替換為新內容:

1 [範圍]c\新內容

腳本命令s用來將指定範圍內的指定內容替換成新內容,可以搭配正則表達式使用,也被常用來刪除指定的內容:

1 [範圍]s/查詢內容/新內容/flags

其中,常用的flags標記:

1 g:對數據中所有匹配到的內容進行替換,如果沒有g,則只會在第一次匹配成功時做替換操作。2 p:會列印與替換命令中指定的模式匹配的行。此標記通常與-n選項一起使用。

腳本命令d用來刪除指定範圍的內容:

1 [範圍]d

腳本命令p用來將選取出來的內容顯示在命令行上,通常配合-n使用:

1 [範圍]p

腳本命令w用來將文本中指定範圍的內容寫入新文件中:

1 [範圍]w 新文件

腳本命令r用來將新文件的數據插入到當前文件的指定範圍:

1 [範圍]r 新文件

使用舉例

腳本命令a:

1 [root@localhost ~]# cat -n file | sed '3a\test'
2      1    ccccc
3      2    bbbbb
4      3    dd
5 test
6      4    hello
7 [root@localhost ~]#

腳本命令i:

1 [root@localhost ~]# cat -n file | sed '3i\test'
2      1    ccccc
3      2    bbbbb
4 test
5      3    dd
6      4    hello
7 [root@localhost ~]#

腳本命令c:

1 [root@localhost ~]# cat -n file | sed '3c\test'
2      1    ccccc
3      2    bbbbb
4 test
5      4    hello
6 [root@localhost ~]# 

腳本命令s:

 1 [root@localhost ~]# cat -n file | sed '2s/bb/aa/'
 2      1    ccccc
 3      2    aabbb
 4      3    dd
 5      4    hello
 6 [root@localhost ~]# cat -n file | sed '2s/bb/aa/g'
 7      1    ccccc
 8      2    aaaab
 9      3    dd
10      4    hello
11 [root@localhost ~]#

腳本命令d:

1 [root@localhost ~]# cat -n file | sed '2d'
2      1    ccccc
3      3    dd
4      4    hello
5 [root@localhost ~]# 

腳本命令p:

1 [root@localhost ~]# cat -n file | sed -n '2p'
2      2    bbbbb
3 [root@localhost ~]# 

腳本命令w:

1 [root@localhost ~]# cat -n file | sed -n '1,3w test'
2 [root@localhost ~]# cat test
3      1    ccccc
4      2    bbbbb
5      3    dd
6 [root@localhost ~]# 

腳本命令r:

 1 [root@localhost ~]# cat -n file | sed '1,2r test'
 2      1    ccccc
 3 ccccc
 4 bbbbb
 5 dd
 6      2    bbbbb
 7 ccccc
 8 bbbbb
 9 dd
10      3    dd
11      4    hello
12 [root@localhost ~]# 

awk命令

awk命令也是逐行掃描文件,尋找含有目標文本的行,如果匹配成功,則會在該行上執行用戶想要的操作,反之則不對行做任何處理。

awk命令的名字來源於此命令的設計者,他們的姓分別是Aho、Weingberger和Kernighan,awk就取自這三位大師姓的首字母。

基本語法

1 [root@localhost ~]# awk [選項] [腳本] 文件名

預設情況下,awk會將如下變數分配給它在文本行中發現的數據欄位:

1 $0:代表整個文本行。
2 $1:代表文本行中的第1個數據欄位。
3 $2:代表文本行中的第2個數據欄位。
4 $n:代表文本行中的第n個數據欄位。

前面說過,在awk中,預設的欄位分隔符是任意的空白字元(例如空格或製表符)。在文本行中,每個數據欄位都是通過欄位分隔符劃分的。awk在讀取一行文本時,會用預定義的欄位分隔符劃分每個數據欄位。

選項說明

1 -F 分隔符:指定輸入行的分隔符,預設分隔符為空格或製表符。
2 -f 腳本文件:從腳本文件中讀取命令,取代在命令行中輸入的命令。
3 -v 變數名=變數值:在執行處理過程之前,設置變數名和變數值。

腳本說明

awk的強大之處在於腳本命令,它由規則和命令兩部分組成:

1 '匹配規則 {執行命令}'

匹配規則用來指定腳本命令可以作用到文本內容中的範圍,可以使用字元串或者正則表達式指定。

整個腳本命令是用“''”括起來,而其中的執行命令部分需要用大括弧“{}”括起來。

如果沒有指定執行命令,則預設會把匹配的行輸出。如果沒有指定匹配規則,則預設匹配文本中所有的行。

使用舉例

使用數據欄位變數,輸出內容之間使用“,”分隔:

1 [root@localhost ~]# echo 'Hello Word' | awk '{print $0}'
2 Hello Word
3 [root@localhost ~]# echo 'Hello Word' | awk '{print $1, $1$2}'
4 Hello HelloWord
5 [root@localhost ~]# 

執行多條命令,只要在命令之間使用“;”分隔或者使用回車鍵分隔即可:

1 [root@localhost ~]# echo 'Hello Word' | awk '{$2="Hello"; print $0}'
2 Hello Hello
3 [root@localhost ~]# echo 'Hello Word' | awk '{$2="Hello"
4 > print $0}'
5 Hello Hello
6 [root@localhost ~]# 

使用匹配規則指定範圍,“/字元串/”表示匹配含有指定字元串或者正則表達式的行,“$0~/字元串/”用來限制符合匹配規則的數據欄位:

1 [root@localhost ~]# awk '$0~/^T.*o/' file
2 Two lines of test text.
3 Three lines of test text.
4 [root@localhost ~]# awk '$1~/Two/' file
5 Two lines of test text.
6 [root@localhost ~]# 

使用邏輯運算符,匹配規則允許使用邏輯運算符(>、<、>=、<=、==、!=)進行匹配:

1 [root@localhost ~]# awk '$1=="Two" {print $0}' file
2 Two lines of test text.
3 [root@localhost ~]# 

BEGIN會強制在命令執行前執行BEGIN後面指定的腳本命令:

1 [root@localhost ~]# awk 'BEGIN {print "Begin Read File ..."} {print $0}' file
2 Begin Read File ...
3 One line of test text.
4 Two lines of test text.
5 Three lines of test text.
6 [root@localhost ~]#

END會強制在命令執行前執行END後面指定的腳本命令:

1 [root@localhost ~]# awk 'END {print "End Read File ..."} {print $0}' file
2 One line of test text.
3 Two lines of test text.
4 Three lines of test text.
5 End Read File ...
6 [root@localhost ~]# 

從文件中讀取命令,指定分隔符,設定變數:

1 [root@localhost ~]# cat script
2 BEGIN {FS=":"} {print $1 " -> " v}
3 [root@localhost ~]# awk -v v=var -f script file
4 One -> var
5 Two -> var
6 Three -> var
7 [root@localhost ~]# 

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • .NET Core CSharp 初級篇 1 1 本節內容是對於C 基礎類型的存儲方式以及C 基礎類型的理論介紹 基礎數據類型介紹 例如以下這句話:“張三是一名程式員,今年15歲重50.3kg,他的代號是‘A’,他家的經緯度是(N30,E134)。”,這句話就是一個字元串,使用雙引號括起來。而15則 ...
  • 受 F 中的管道運算符和 C 中的 LINQ 語法,管道式編程為 C 提供了更加靈活性的功能性編程。通過使用 擴展函數 可以將多個功能連接起來構建成一個管道。 前言 在 C 編程中,管道式編程(Pipeline Style programming)其實存在已久,最明顯的就是我們經常使用的 LINQ。 ...
  • 管道符、重定向與環境變數&vim編輯器 輸入輸出重定向 標準輸入重定向(STDIN,文件描述符為0):預設從鍵盤輸入,也可從其他文件或命令中輸入。 標準輸出重定向(STDOUT,文件描述符為1):預設輸出到屏幕。 錯誤輸出重定向(STDERR,文件描述符為2):預設輸出到屏幕。 輸入輸出重定向 標準 ...
  • 必須掌握的Linux命令 系統狀態檢測命令 1.ifconfig命令 ifconfig命令用於獲取網卡配置與網路狀態等信息,格式為“ifconfig [網路設備] [參數]”。 使用ifconfig命令來查看本機當前的網卡配置與網路狀態等信息時,其實主要查看的就是網卡名稱、inet參數後面的IP地址 ...
  • 部署虛擬環境安裝linux系統以及一些常用命令 工具: VmwareWorkStation 12.0——虛擬機軟體(必需) RedHatEnterpriseLinux [RHEL]7.0——紅帽操作系統(必需) vmware虛擬機提供的3種可選的網路模式 橋接模式:相當於在物理主機與虛擬機網卡之間架 ...
  • 認識linux 開源共用精神 低風險 高品質 低成本 更透明 開源軟體的特點 使用自由、修改自由、傳播自由、收費自由以及創建衍生品的自由 常見的開源許可協議 GNU GPL(GNU General Public License,GNU通用公共許可證):只要軟體中包含了遵循GPL協議的產品或代碼,該軟 ...
  • LinuxShell——認識Shell腳本 摘要:本文主要介紹了Shell腳本的一些基本知識。 什麼是Shell腳本 shell腳本是利用shell的功能所寫的一個程式,這個程式是使用純文本文件,將一些shell的語法與指令寫在裡面,然後用正規表示法,管道命令以及數據流重導向等功能,達到所想要的處理 ...
  • [toc] RAID&LVM有關磁碟的故障 RAID 好處:1.更多的容量 ​ 2.得到更多的冗餘 ​ 3.得到更高的性能 RAID的運行方式 軟raid(瞭解) 硬raid(視屏) https://www.bilibili.com/video/av46656120?from=search&seid ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...