Linux:文件解壓、複製和移動的若幹坑

来源:https://www.cnblogs.com/orion-orion/archive/2022/04/20/16172070.html
-Advertisement-
Play Games

Linux下進行文件的解壓、複製、移動應該是最常見的操作了。尤其是我們在項目中使用大量的數據集文件(比如機器學習)時。然而使用這些命令時一不留神就會掉進坑裡,這篇文章我們就來細數用Shell進行文件操作的這些坑。壓縮傳參順序是壓縮後的文件在前,壓縮前的文件在後,很容易搞錯。使用mv語句時也要格外小心... ...


Linux下進行文件的解壓、複製、移動應該是最常見的操作了。尤其是我們在項目中使用大量的數據集文件(比如機器學習)時。然而使用這些命令時一不留神就會掉進坑裡,這篇文章我們就來細數用Shell進行文件操作的這些坑。

將文件單個地進行壓縮與解壓

Linux下壓縮文件的常見擴展名包括.gz.tar.tar.gz, .zip等。這些壓縮格式都能夠跨平臺(Windows/Mac/Linux)使用。下麵我們以.zip文件為例子來講解。我們已知一個文本文件壓縮包test.zip,想把它解壓,很簡單,運行unzip命令即可:

orion-orion@MacBook-Pro Learn-Linux % unzip test.zip 
Archive:  test.zip
  inflating: test.txt                

如果我們想要將test.txt重新壓縮呢?你可能情不自禁會執行zip test.txt ,然後我們發現提示:

orion-orion@MacBook-Pro Learn-Linux % zip test.txt   
        zip warning: missing end signature--probably not a zip file (did you
        zip warning: remember to use binary mode when you transferred it?)
        zip warning: (if you are trying to read a damaged archive try -F)

zip error: Zip file structure invalid (test.txt)

其實是傳參數傳錯了,導致zip誤把test.txt當成壓縮後的文件名了,這當然不是合法的。我們看zip的參數構成:

zip [-options] [-b path] [-t mmddyyyy] [-n suffixes] [zipfile list] [-xi list]

[-b path] 是壓縮後的.zip文件的路徑,zipfile list是待壓縮的文件列表。於是,我們這樣寫即可成功壓縮:

orion-orion@MacBook-Pro Learn-Linux % zip test2.zip test.txt
  adding: test.txt (stored 0%)

當然,zip也支持將多個文件壓縮:

orion-orion@MacBook-Pro Learn-Linux % zip test3.zip test.txt test2.txt 
  adding: test.txt (stored 0%)
  adding: test2.txt (stored 0%)

此時我們發現再解壓test3.zip會發現重新得到了兩個原始文件:

orion-orion@MacBook-Pro Learn-Linux % unzip test3.zip
Archive:  test3.zip
 extracting: test.txt                
 extracting: test2.txt     

zip也支持對目錄壓縮,如我們嘗試壓縮test目錄:

orion-orion@MacBook-Pro Learn-Linux % zip test4.zip test
  adding: test/ (stored 0%)

此時再解壓test4.zip則會重新生成test目錄:

orion-orion@MacBook-Pro Learn-Linux % unzip test4.zip 
Archive:  test4.zip
   creating: test/

不過,zip是將輸入的文件列表分別進行壓縮的操作,即是對目錄來進行壓縮也是對目錄內的所有文件one-by-one的操作。那我們需要將很多文件先打包成一個文件,然後再壓縮呢?此時就要用到tar了。

tar:打包命令

很多人誤解tar是個壓縮命令,其實壓縮命令是gzipxz以及我們上文提到的zip這些。tar是個打包命令,只不過附帶壓縮與解壓的功能。tar的選項多如牛毛,為了減輕大家的記憶負擔,我們只介紹下麵兩個選項:

-c: 建立打包文件(可搭配-v將過程中打包的文件可視化);

-x:解包或解壓縮的功能(可搭配-C在特定目錄解壓);

(其實還有表示通過gzip進行壓縮/解壓縮的-z,通過bzip2的支持進行壓縮/解壓縮的-j,通過xz的支持進行壓縮解壓縮的-J等,但我們這裡統一用.zip示範,就省去這些參數了)

那麼,我們只需要記住下麵的命令即可:

壓縮: tar -cv -f filename.zip 要被壓縮的文件或目錄名稱

解壓縮:tar -xv -f filename.zip -C 欲解壓的目錄(這個目錄必須已經存在)

註意,壓縮傳參順序是壓縮後的.zip文件在前,壓縮前的文件在後,別搞錯了。(讓人聯想到gcc編譯器,不過gcc傳參時規定是-o output_file.out的形式來指定輸出的可執行文件,就迴避了這個順序問題)

比如,我們要將test文件夾(該文件夾下有一個test.txt文件)壓縮,可以運行如下命令:

orion-orion@MacBook-Pro Learn-Linux % tar -cv -f test4.zip test    
a test
a test/test.txt

然後將其解壓到當前目錄,可運行如下命令:

orion-orion@MacBook-Pro Learn-Linux % tar -xv -f test4.zip -C .    
x test/
x test/test.txt

對多個文件壓縮:

orion-orion@MacBook-Pro Learn-Linux % tar -cv -f test3.zip test.txt test2.txt  
a test.txt
a test2.txt

然後將其解壓到當前目錄:

orion-orion@MacBook-Pro Learn-Linux % tar -xv -f test3.zip -C .
x test.txt
x test2.txt

由上面所說,zip/unziptar都是壓縮什麼解壓出來就是什麼,原來是目錄就是目錄,原來沒目錄不會幫你自動生成一個目錄,但Linux或Mac系統的可視化壓縮工具就不一樣了(在Mac中被稱為「歸檔實用工具」)。Mac中對目錄壓縮時壓縮命令和tar命令是等效的,比如我們想用Mac自帶的壓縮工具壓縮test文件夾:

NLP多任務學習

會生成對應的歸檔文件:

NLP多任務學習

再解壓會得到同樣的文件夾(會自動幫我們重命名),不會幫我們生成多餘的目錄: NLP多任務學習

然而,如果我們嘗試用Mac自帶的壓縮工具壓縮多個文件: NLP多任務學習

它會自動幫我們生成一個名為歸檔.zip的文件:

NLP多任務學習

然後,如果此時我們嘗試對歸檔.zip文件進行解壓,會發現系統會自動幫我們生成一個名為歸檔 的文件夾:

NLP多任務學習

這個文件夾內部才是我們需要的文件:

NLP多任務學習

這在對大量文件操作時需要額外註意,否則會白白開銷你一次拷貝文件的時間!

文件拷貝

我們緊接上面的情景。假設我們當前的目錄為項目目錄,而我們手滑使用了系統自帶的可視化解壓工具生成了一個多餘的目錄。我們接下來要把系統生成的多餘的歸檔文件夾里的文件拷貝到當前目錄,那麼我們可以使用帶r參數的cp命令:

orion-orion@MacBook-Pro Learn-Linux % cp -r 歸檔/ . 
orion-orion@MacBook-Pro Learn-Linux % ls
test.txt        test2.txt       歸檔

這裡-r參數表示遞歸複製命令,用於目錄的遞歸複製。註意命令中的歸檔/表示歸檔目錄下的所有文件,意思和歸檔/*相同:

orion-orion@MacBook-Pro Learn-Linux % cp -r 歸檔/* . 
orion-orion@MacBook-Pro Learn-Linux % ls
test.txt        test2.txt       歸檔

選項參數-r寫成-R是等效的:

orion-orion@MacBook-Pro Learn-Linux % cp -R 歸檔/* . 
orion-orion@MacBook-Pro Learn-Linux % ls
test.txt        test2.txt       歸檔

但如果直接傳入參數歸檔,則表示將這個目錄整個地複製:

orion-orion@MacBook-Pro Learn-Linux % cp -r 歸檔 .   
cp: ./歸檔 and 歸檔 are identical (not copied).

同一個目錄下不可能有兩個相同名稱的子目錄,這當然就會出錯,當然我們可以將其複製到另外一個目錄里:

orion-orion@MacBook-Pro Learn-Linux % cp -r 歸檔 /tmp 
orion-orion@MacBook-Pro Learn-Linux % ls /tmp |grep 歸檔
歸檔

你可能要問,加r和不加r有啥區別?如果不加r,則預設是跳過目錄的,也就是說只能copy文件:

orion-orion@MacBook-Pro Learn-Linux % cp  歸檔/ .  
cp: 歸檔/ is a directory (not copied).
orion-orion@MacBook-Pro Learn-Linux % cp  歸檔 /tmp 
cp: 歸檔 is a directory (not copied).

文件移動

我們還是緊接著上面的場景。假定我們已經將歸檔文件夾中的test.txttest2.txt成功拷貝到當前項目目錄了。現在我們有了個新的需求:我們在項目目錄中建了一個data子目錄,現在需要將項目目錄中的test.txttest2.txt移動到data子目錄中。這就需要如下命令:

orion-orion@MacBook-Pro Learn-Linux % mv test2.txt test.txt data
orion-orion@MacBook-Pro Learn-Linux % ls data
test.txt        test2.txt

註意,如果有多個源文件或目錄,則最後一個目標文件(也就是這裡的data)一定是目錄。當我們只移動一個文件時,就有潛在的二義性。這裡因為data目錄本身存在,我們移動test.txtdata目錄還能正常執行:

orion-orion@MacBook-Pro Learn-Linux % mv test.txt data 
orion-orion@MacBook-Pro Learn-Linux % ls data
test.txt

但是如果data目錄不存在,就會將mv解釋為重命名的意思,比如如果我們將data目錄刪除再執行:

orion-orion@MacBook-Pro Learn-Linux % mv test.txt data

此時就等效於把test.txt更名為data文件:

orion-orion@MacBook-Pro Learn-Linux % ls -l|grep data
-rw-r--r--  1 orion-orion  staff    0  4 20 22:01 data

可以看出,第一個字母是-,也就意味著data是普通文件,不是目錄(是目錄的話第一個字母是d)。

因此,使用mv語句時要格外小心,因為它既有移動到目錄的作用,也有重命名的作用,一不註意就可能出錯!

引用

數學是符號的藝術,音樂是上界的語言。
您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Pillow 圖片處理模塊 Pillow是Python第三方庫,Python2中有一個叫PIL(Python Imaging Library)的標準庫,但不支持Python3,所以一些志願者在PIL的基礎上創建了Pillow,支持Python3。Pillow支持動態圖像編輯。 安裝Pillow pi ...
  • 背景 外媒The Register報道,甲骨文稽查企業用戶,近期開始將把過去看管較鬆散的Java授權加入。 甲骨文針對標準版Java(Java SE)有2種商業授權。2019年4月甲骨文宣佈Java SE用戶需要付費訂閱,才能取得授權及更新,包括Java SE 7、8或11、12。但到同年9月該公司 ...
  • 一個比特(bit)可以是0,或者是1,8個比特(bit),組成一個位元組(byte)。全為0時代表數字0,全為1時代表數字255。 一個位元組可以表示256個數字,兩個位元組可以表示65536個數字。 更多的位元組,可以有更多的組合,就可以表示更大的數值範圍。 整數可以這麼存,那字元呢?一堆二進位的0和1, ...
  • 前言 本文將記錄學習下如何通過 Python 腳本實現 WIFI 密碼的暴力破解,從而實現免費蹭網。 無圖形界面 先來看看沒有圖形界面版的爆破腳本。 WIFI爆破 Python學習交流Q群:906715085#### import pywifi from pywifi import const im ...
  • 1.為什麼要用const const本質上其實不僅僅是對變數的一個限定符,更是對程式員的一個限定符,它提醒了程式員,通過const限定的變數的值是不應該被更改的,並且當編譯器得知變數或者表達式的求值結果是恆定的時候,編譯器也可以在編譯期大展拳腳,為我們做出一些編譯期優化,進而提高我們的程式在運行時的 ...
  • 介紹 Dapr簡化了雲原生開發,讓開發可以把焦點放在應用的業務邏輯上,從而讓代碼簡單、可移植,那作為一個.Net開發者,我們也希望項目可以快速用上dapr,那究竟應該如何做呢? Dapr提出了Sidecar(邊車)的概念,在啟動項目時再額外啟動一個Sidecar, 通過Sidecar可以解決進程間通 ...
  • 很多.net項目在開發的時候,.net core還沒有出現或者還麽有成熟,如今.netcore3.1已經出現,其技術風險已經比較低,今天對項目如何遷移到.net core做一個簡單的梳理,瑾做參考。 ...
  • 為什麼選擇LiteDB 之前做uwp的時候有做過一個植物圖鑒,當時圖片使用的是線上圖片,所以圖片很多也並沒有什麼體驗上的差別,但是直到有一天別人的網站掛掉了,圖片訪問不到了,當時想訪問不到也沒啥,反正圖片都被我爬到本地了,於是就把圖片統統放在Assets目錄里,把url改了下就啟動了。 可是事實很尷 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...