Linux常用基本命令:三劍客命令之-awk基礎用法

来源:https://www.cnblogs.com/ghostwu/archive/2018/05/23/9069947.html
-Advertisement-
Play Games

awk是一個超級強大的文本格式化處理工具,他與grep, sed命令被成為linux 三劍客命令 三劍客命令的特點: grep:只要用來匹配和查找文本 sed: 編輯匹配到文本 awk: 格式化文本,可以對複雜文本進行處理 awk語法格式:awk [options] 'program' file1 ...


awk是一個超級強大的文本格式化處理工具,他與grep, sed命令被成為linux 三劍客命令

三劍客命令的特點:

grep:只要用來匹配和查找文本

sed: 編輯匹配到文本

awk: 格式化文本,可以對複雜文本進行處理

 

awk語法格式:awk [options] 'program' file1 file2 ... 

其中,program包含兩部分:'pattern{action}',最常用的兩個action就是print和printf,如果學過c語言,你就知道,他們專門由於格式化字元串, awk把處理過的格式文本,用他們輸出

 

1,不使用任何選項,模式和action, awk就相當於輸出整個文件,awk的工作方式是:逐行掃描. 預設情況下 掃描行的時候,用空格分割列,輸出的時候也是空格

使用print這個動作,列印文件所有的內容.

ghostwu@dev:~/linux/sed$ cat ghostwu.txt 
this is ghostwu
how are you
fine thank you
bye bye
ghostwu@dev:~/linux/sed$ awk '{print}' ghostwu.txt 
this is ghostwu
how are you
fine thank you
bye bye

2,把ls -l 的結果通過管道交給awk逐行掃描處理,$1列印每一行的第一列,$3:每一行的第三列,$9就是第9列了...

ghostwu@dev:~/linux/sed$ ls -l
total 4
-rw-rw-r-- 1 ghostwu ghostwu 51 5月  21 23:23 ghostwu.txt
ghostwu@dev:~/linux/sed$ ls -l | awk '{print $1}'
total
-rw-rw-r--
ghostwu@dev:~/linux/sed$ ls -l | awk '{print $3}'

ghostwu
ghostwu@dev:~/linux/sed$ ls -l | awk '{print $9}'

ghostwu.txt
ghostwu@dev:~/linux/sed$ cat ghostwu.txt 
this is ghostwu
how are you
fine thank you
bye bye
ghostwu@dev:~/linux/sed$ awk '{print $3}' ghostwu.txt 
ghostwu
you
you

3,$0表示整行,$NF表示當前行分割後的最後一列,他們都是內置變數

ghostwu@dev:~/linux/sed$ awk '{print $0}' ghostwu.txt 
this is ghostwu
how are you
fine thank you
bye bye
ghostwu@dev:~/linux/sed$ awk '{print $NF}' ghostwu.txt 
ghostwu
you
you
bye

4,一次列出多列,使用逗號隔開要輸出的列

ghostwu@dev:~/linux/sed$ cat ghostwu.txt 
this is ghostwu
how are you
fine thank you
bye bye
ghostwu@dev:~/linux/sed$ awk '{print $1, $3}' ghostwu.txt 
this ghostwu
how you
fine you
bye 

文件最後一行,沒有第三列,所以沒有輸出任何東西

5,也可以加上自定義的列

ghostwu@dev:~/linux/awk$ ls
ghostwu.txt
ghostwu@dev:~/linux/awk$ awk '{print "name:" $1, "age:" $2, "sex:" $3}' ghostwu.txt 
name:ghostwu age:20 sex:man
name:zhangsan age:22 sex:woman
name:lisi age:23 sex:woman
ghostwu@dev:~/linux/awk$ cat ghostwu.txt 
ghostwu 20 man
zhangsan 22 woman
lisi 23 woman

6,數字前面有美元符號的,是awk的內置變數,不能加引號,否則會把他們當做字元串原樣輸出

ghostwu@dev:~/linux/awk$ awk '{print "$1"}' ghostwu.txt 
$1
$1
$1
ghostwu@dev:~/linux/awk$ awk '{print $1}' ghostwu.txt 
ghostwu
zhangsan
lisi
ghostwu@dev:~/linux/awk$ awk '{print "first-cloumn:"$1}' ghostwu.txt 
first-cloumn:ghostwu
first-cloumn:zhangsan
first-cloumn:lisi

7,以下兩種寫法,都表示輸出整行

ghostwu@dev:~/linux/awk$ awk '{print $0}' ghostwu.txt 
ghostwu 20 man
zhangsan 22 woman
lisi 23 woman
ghostwu@dev:~/linux/awk$ awk '{print}' ghostwu.txt 
ghostwu 20 man
zhangsan 22 woman
lisi 23 woman

8,BEGIN模式,在AWK掃描行之前,執行

在掃描行之前,列印aa,bb

ghostwu@dev:~/linux/awk$ awk 'BEGIN{print "aa", "bb"}' ghostwu.txt 
aa bb

如果勝省略文件,BEGIN模式依然會執行

ghostwu@dev:~/linux/awk$ awk 'BEGIN{print "aa", "bb"}'
aa bb

BEGIN有什麼用?我們可以在掃描文件的行之前,為每個列都加上表頭信息

ghostwu@dev:~/linux/awk$ cat ghostwu.txt 
ghostwu 20 man
zhangsan 22 woman
lisi 23 woman
ghostwu@dev:~/linux/awk$ awk 'BEGIN{print "name", "age", "sex"} {print $1, $2, $3}' ghostwu.txt 
name age sex
ghostwu 20 man
zhangsan 22 woman
lisi 23 woman

9,掃描每一行,在每一行的後面加上自定義的列

ghostwu@dev:~/linux/awk$ awk 'BEGIN{print "name", "age", "sex"} {print $1, $2, $3} {print "展昭", 20, "man"}' ghostwu.txt 
name age sex
ghostwu 20 man
展昭 20 man
zhangsan 22 woman
展昭 20 man
lisi 23 woman
展昭 20 man

10, 掃描完所有的行,在加上自己自定義的列信息,可以用END模式

ghostwu@dev:~/linux/awk$ awk 'BEGIN{print "name", "age", "sex"} {print $1, $2, $3} END{print "展昭", 20, "man"}' ghostwu.txt 
name age sex
ghostwu 20 man
zhangsan 22 woman
lisi 23 woman
展昭 20 man

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 最近在做一個關於生成word文檔的功能,期間出現了幾個問題,也不算棘手,但是對於第一次使用office組件的人來說,就比較麻煩了,也不知道為何出現這個錯誤,其中本問題解決費的時間較多,特此記錄,以後方便查閱。 先將問題的場景大體介紹一下: 1、客戶端及服務端安裝的辦公軟體為wps; 2、已存在使用M ...
  • 現在新建的WTS模板,預設最低版本是16299了,目標版本是17134 17134到來之前,就感覺到會這樣,不過終究還是來了。 不支持15063的原因是導航菜單Windows.UI.Xaml.Controls.NavigationView變了,替代了之前的HamburgerMenu,加入了流暢元素。 ...
  • 在這之前打算用Apache的Log4Net,但是發現其AdoNetAppender方法已經不存在了,無法使用配置文件直接輸出到資料庫了,因此我便改用了NLog框架。 一、對項目添加NLog 通過Nuget安裝NLog NLog.Extensions.Logging、NLog.Web.AspNetCo ...
  • 在涉及老項目數據遷移的時候,資料庫結構已經完全發生變化,而且需要對老數據進行特殊欄位的處理,而且數據量較大,使用Navicat導出單表之後,一個表數據大概在100多萬的樣子,直接導出SQL執行根本行不通,執行到一般就GG。 之後嘗試使用LINQ PAD直接操作兩個資料庫進行數據遷移,搜索一番,得知L ...
  • 要瞭解程式的運行原理,就要先知道程式的進入點及生命周期。以往ASP.NET MVC的啟動方式,是繼承 HttpApplication 作為網站開始的進入點,而ASP.NET Core 改變了網站的啟動方式,變得比較像是 Console Application。 本篇將介紹ASP.NET Core 的 ...
  • 參考自:https://www.experts-exchange.com/questions/27924642/VB-NET-2008-Radio-Button-Double-Click.html ...
  • (一) 安裝環境 VMware® Workstation 12 Pro,安裝到物理機的話還需要做個U盤啟動盤 (二) 下載 https://www.centos.org/download/ 如果不清楚要用哪個ISO文件,下載DVD ISO就行了,這個類型的鏡像文件允許你自己選擇需要安裝的軟體,eve ...
  • 輸入分隔符,英文原文為field separator,此處簡稱為FS,預設是空白字元(即空格),awk預設以空白字元為分隔符對每一行進行分割。 輸出分割符,英文原文為output field separator,此處簡稱為OFS,awk將每行分割後,輸出在屏幕上的時候,awk預設的輸出分割符也是空格 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...