本文目錄: 1.8.1 匿名管道"|" 1.8.2 重定向 1.8.2.1 重定向基礎 1.8.2.2 cat和重定向配合 1.8.2.3 tee雙重定向 1.8.2.4 <<和<<< 1.8.1 匿名管道"|" 管道符號意如其名,類似管道一樣將管道入口的數據通過管道傳遞給管道出口。 管道是為瞭解決 ...
本文目錄:
1.8.1 匿名管道"|"
管道符號意如其名,類似管道一樣將管道入口的數據通過管道傳遞給管道出口。
管道是為瞭解決進程間通信問題而存在,它可以讓兩個進程之間的數據進行傳遞,將一個進程的輸出數據傳遞給另一個進程作為其輸入數據。管道左邊是數據給予方,管道右邊是數據接收方。
例如echo "abcd" | passwd --stdin username,表示將進程echo的輸出結果"abcd"作為進程passwd的輸入數據。
基本的管道符號及其用法很容易理解。現在的疑問是,對於ps aux | grep "ssh" ,為什麼在結果里會有grep進程出現?
[root@xuexi ~]# ps aux | grep ssh root 1211 0.0 0.1 82544 3600 ? Ss Jul26 0:00 /usr/sbin/sshd -D root 25236 0.0 0.2 145552 5524 ? Ss 05:28 0:00 sshd: root@pts/0 root 25720 0.1 0.2 145416 5524 ? Ss 06:15 0:00 sshd: root@pts/1 root 25770 0.0 0.0 112648 948 pts/1 S+ 06:15 0:00 grep --color=auto ssh
按一般想法,先執行了ps,得到輸出後將輸出數據傳遞給grep,這時候grep還沒運行而ps已經運行完畢了,為什麼還能統計到grep進程的信息呢?原因是管道實現的是進程間通信,兩個進程之間存在交叉,在運行ps進程後開始收集進程信息,grep也已經開始並處於等待接收數據狀態,當ps收集到任何數據後都將輸出放入記憶體由管道傳遞給grep進行篩選。
管道其本質是數據傳遞,管道左邊的輸出數據放入記憶體,由管道右邊的進程讀取。假如記憶體不足以完全存放輸出數據,則管道左邊的進程將一直等待,直到管道右邊取出記憶體中一部分的數據以讓管道左邊的進程繼續輸出,而管道右邊的進程在管道左邊的進程啟動後也立刻啟動了,但是它一直處於等待狀態,等待接收管道傳遞來的數據。
也就是說,管道左右兩邊的進程運行幾乎是沒有先後順序的。
那麼ps aux | grep "ssh"如何避免結果中出現grep自身的進程呢?方法有二:
方法一:ps aux | grep "ssh" | grep -v "grep"
方法二:ps aux | grep "ss[h]"
[root@xuexi ~]# ps aux | grep ss[h] root 1211 0.0 0.1 82544 3600 ? Ss Jul26 0:00 /usr/sbin/sshd -D root 25236 0.0 0.2 145552 5524 ? Ss 05:28 0:00 sshd: root@pts/0 root 25720 0.0 0.2 145416 5524 ? Ss 06:15 0:00 sshd: root@pts/1
方法一是應用grep的"-v"特性,方法二是應用正則表達式的特性。
在使用匿名管道的過程中,可能已經發現管道兩邊的進程是同屬一個進程組的,也就是說管道左方的數據只能傳遞給管道右方的進程,其他任何進程都沒法讀取此數據。但除了匿名管道,還有命名管道,命名管道是將一個進程的數據存儲到一個管道文件(fifo)中,其他進程可以讀取該管道文件來讀取其中的數據,也就是說不再限制數據讀取方。關於命名管道,請參閱Linux/unix操作系統內核或編程類的書籍,一般都會有詳細的介紹。
1.8.2 重定向
1.8.2.1 重定向基礎
最常見的標準輸入(stdin)、標準輸出(stdout)和標準錯誤輸出(stderr)的文件描述符分別是0、1和2,其中0、1、2也可以認為是它們的數字代號。對於輸出信息,可以認為是列印在屏幕上的信息,而沒給出錯誤的就是標準輸出,給出錯誤提示的是標準錯誤輸出,當然這樣說明有失偏頗,但是易於理解。還可以自定義自己的描述符,實現高級重定向,在以後的文章中可能會介紹一下它們的用法。
標準輸入 = /dev/stdin = 代號0 = <或<<符號。
標準輸出 = /dev/stdout = 代號1 = >或>>符號。
標準錯誤輸出 = /dev/stderr = 代號2 = 使用2>或2>>符號。
<、>、2>實現的是覆蓋功能,>>、2>>實現的是追加的功能,但是<<不是追加功能,而是表示此處生成文檔(here document),在後面cat和重定向配合的內容里有說明。此外,還有<<<,它表示此處字元串(here string),也見下文。
有時候,使用"-"也表示/dev/stdin。如:
[root@xuexi ~]# cat /etc/fstab | cat -
腳本中常見2>&1和&>的符號,它們都表示將stdout和stderr都重定向到同一個地方去,即重定向所有輸出內容。如最常見的"&> /dev/null"。
將stdout或stderr丟到/dev/null表示丟棄輸出信息,反過來,將/dev/null重定向到某個文件則表示清空文件。
[root@xuexi ~]# cat /dev/null > ab.sh
除此,還有以下幾種方法快速清空文件
[root@xuexi ~]# > ab.sh [root@xuexi ~]# : > ab.sh # 或"true >ab.sh",其實它們都等價於">ab.sh" [root@xuexi ~]# echo '' > ab.sh [root@xuexi ~]# truncate -s 0 ab.sh # truncate命令用於收縮和擴展文件大小 [root@xuexi ~]# dd if=/dev/null of=ab.sh
最後最重要的一點:在有重定向符號的語句中,命令執行之前已經將文件截斷了。所以如果正在編輯一個文件並將編輯的結果重定向回這個文件將出現異常,因為截斷後就沒有合適的內容用於編輯。一個簡單的示例如下:
[root@xuexi ~]# head a.log > a.log
有些時候直接使用">"覆蓋輸出是比較危險的。可以使用set -C來設置如果輸出重定向文件已經存在則不覆蓋。使用set +C來取消set -C的效果。如果在設置了set -C時仍然想強制覆蓋,可以使用“>|”代替“>”來重定向輸出。同理錯誤輸出也有此特性。
[root@xuexi tmp]# set -C [root@xuexi tmp]# cat flip >ttt.txt -bash: ttt.txt: cannot overwrite existing file [root@xuexi tmp]# cat flip >| ttt.txt [root@xuexi tmp]# set +C
1.8.2.2 cat和重定向配合
配合cat使用可以分行輸入內容到文件中。
[root@xuexi tmp]# cat <<eof>log.txt # 覆蓋的方式輸入到log.txt > this is stdin character > eof
也可以使用下麵的方法。
[root@xuexi tmp]# cat >log1.txt <<eof > this is stdin character first! > eof
一方面,eof部分都必須使用"<<eof",它表示here document,此後輸入的內容都作為一個document輸入給cat。既然是document,那就肯定有document結束符標記document到此結束,結束符使用的是here document後的字元,例如此處為eof。其實不使用eof,使用其他字元也是一樣的,但document的結束符也必須要隨之改變。如:
[root@xuexi ~]# cat <<abcx > 123 > 345 > abcx 123 345
另一方面,>log1.txt表示將document的內容覆蓋到log1.txt文件中,如果是要追加,則使用>>log1.txt。所以,追加的方式如下:
[root@xuexi tmp]# cat >>log1.txt <<eof > this is stdin character first! > eof
或
[root@xuexi tmp]# cat <<eof>>log1.txt > this is stdin character first! > eof
1.8.2.3 tee雙重定向
可以使用tee雙重定向。一般情況下,重定向要麼將信息輸入到文件中,要麼輸出到屏幕上,但是既想輸出到屏幕又想輸出到文件就比較麻煩。使用tee的雙重定向功能可以實現該想法。如圖。
tee [-a] file
選項說明:
-a:預設是將輸出覆蓋到文件中,使用該選項將變為追加行為。
file:除了輸出到標準輸出中,還將輸出到file中。如果file為"-",則表示再輸入一次到標準輸出中。
例如下麵的代碼,將a開頭的文件內容全部保存到b.log,同時把副本交給後面的的cat,使用這個cat又將內容保存到了x.log。其中"-"代表前面的stdin。
[root@xuexi tmp]# cat a* | tee b.log | cat - >x.log
還可以直接輸出到屏幕:
[root@xuexi tmp]# cat a* | tee b.log | cat
tee預設會使用覆蓋的方式保存到文件,可以使用-a選項來追加到文件。如:
[root@xuexi tmp]# cat a* | tee -a b.log | cat
現在就可以在使用cat和重定向創建文件或寫入內容到文件的同時又可以在屏幕上顯示一份。
[root@xuexi tmp]# cat <<eof | tee ttt.txt > x y > z 1 > eof x y z 1
1.8.2.4 <<和<<<
在bash中,<<和<<<是特殊重定向符號。<<表示的是here document,<<<表示的是here string。
here document在上文已經解釋過了,對於here string,表示將<<<後的字元串作為輸入數據。
例如:
passwd --stdin user <<< password_value
等價於:
echo password_value | passwd --stdin user
回到系列文章大綱:http://www.cnblogs.com/f-ck-need-u/p/7048359.html