深入linux中重定向及管道詳解
一,重定向
1.1 重定向符號
> 輸出重定向到一個文件或設備 覆蓋原來的文件
>! 輸出重定向到一個文件或設備 強制覆蓋原來的文件
>> 輸出重定向到一個文件或設備 追加原來的文件
< 輸入重定向到一個程序
1.2標准錯誤重定向符號
2> 將一個標准錯誤輸出重定向到一個文件或設備 覆蓋原來的文件 b-shell
2>> 將一個標准錯誤輸出重定向到一個文件或設備 追加到原來的文件
2>&1 將一個標准錯誤輸出重定向到標准輸出 注釋:1 可能就是代表 標准輸出
>& 將一個標准錯誤輸出重定向到一個文件或設備 覆蓋原來的文件 c-shell
|& 將一個標准錯誤 管道 輸送 到另一個命令作為輸入
1.3命令重導向示例
在 bash 命令執行的過程中,主要有三種輸出入的狀況,分別是:
1. 標准輸入;代碼為 0 ;或稱為 stdin ;使用的方式為 <
2. 標准輸出:代碼為 1 ;或稱為 stdout;使用的方式為 1>
3. 錯誤輸出:代碼為 2 ;或稱為 stderr;使用的方式為 2>
例子:
C代碼
[test @test test]# ls -al > list.txt
#將顯示的結果輸出到 list.txt 文件中,若該文件以存在則予以取代!
[test @test test]# ls -al >> list.txt
#將顯示的結果累加到 list.txt 文件中,該文件為累加的,舊數據保留!
[test @test test]# ls -al 1> list.txt 2> list.err
#將顯示的數據,正確的輸出到 list.txt 錯誤的數據輸出到 list.err
[test @test test]# ls -al 1> list.txt 2> &1
#將顯示的數據,不論正確或錯誤均輸出到 list.txt 當中!錯誤與正確文件輸出到同一個文件中,則必須以上面的方法來寫!不能寫成其它格式!
[test @test test]# ls -al 1> list.txt 2> /dev/null
#將顯示的數據,正確的輸出到 list.txt 錯誤的數據則予以丟棄! /dev/null ,可以說成是黑洞裝置。為空,即不保存。
1.4為何要使用命令輸出重導向
當屏幕輸出的信息很重要,而且我們需要將他存下來的時候;
背景執行中的程序,不希望他干擾屏幕正常的輸出結果時;
一些系統的例行命令(例如寫在 /etc/crontab 中的文件)的執行結果,希望他可以存下來時;
一些執行命令,我們已經知道他可能的錯誤訊息,所以想以『 2> /dev/null 』將他丟掉時;
錯誤訊息與正確訊息需要分別輸出時。
二,管線命令 ( pipe )
就如同前面所說的, bash 命令執行的時候有輸出的數據會出現,那麼如果這群數據必需要經過幾道手續之後才能得到我們所想要的格式,應該如何來設定?這就牽涉到管線命令的問題了( pipe ),管線命令使用的是『 | 』。
例子:簡單的管線命令
假設我們要讀取 last 這個指令中,那個 root 登入的『次數』應該怎麼作?
那麼我所進行的步驟是:
1. 執行 last ,將所有這個月的所有人登入數據取出來;
2. 使用 grep 將上面的輸出數據(stdout)當中的 root 撷取出來,其它的不要;
3. 使用 wc 這個可以計算行數的指令將上一步的數據計算行數!
由於 last 的輸出是一行代表一次登入,所以只要計算幾行就代表登入幾次的意思,經由上面三個步驟,將 last 數據逐步的篩選,就可以得到我們的數據了!整個命令可以寫成如下: [test @test bin]# last | grep root | wc -l
這個管線命令『 | 』僅能處理經由前面一個指令傳來的正確信息,也就是standard output ( STDOUT ) 的信息,對於 stdandard error 並沒有直接處理的能力。
2.1基本的管線命令指令介紹
cut
語法:[root @test /root ]# cut -d "分隔字符" [-cf] fields
參數說明:
-d :後面接的是用來分隔的字符,預設是『空格符』
-c :後面接的是『第幾個字符』
-f :後面接的是第幾個區塊?
范例:
C代碼
[root @test /root]# cat /etc/passwd | cut -d ":" -f 1
#將 passwd 這個文件裡面,每一行裡頭的 : 用來作為分隔號,而列出第一個區塊!也就是姓名所在啦!
[root @test /root]# last | cut -c1-20
#將 last 之後的數據,每一行的 1-20 個字符取出來!
sort
語法:[root @test /root ]# sort [-t 分隔符] [(+起始)(-結束)] [-nru]
參數說明:
-t 分隔符:使用分隔符來隔開不同區間,預設是 tab
+start -end:由第 start 區間排序到 end 區間
-n :使用『純數字』排序(否則就會以文字型態來排序)
-r :反向排序
-u :相同出現的一行,只列出一次!
范例:
C代碼
[root @test /root]# cat /etc/passwd | sort #將列出來的個人賬號排序!
[root @test /root]# cat /etc/passwd | sort -t: +2n #將個人賬號中,以使用者 ID 來排序(以 : 來分隔,第三個為 ID ,但第一個代號為 0 之故)
[root @test /root]# cat /etc/passwd | sort -t: +2nr #反相排序啰!
wc
語法:[root @test /root ]# wc [-lmw]
參數說明:
-l :多少行
-m :多少字符
-w :多少字
范例:
C代碼
[root @test /root]# cat /etc/passwd | wc -l #這個文件裡頭有多少行?
[root @test /root]# cat /etc/passwd | wc -w #這個文件裡頭有多少字!?
uniq
這個指令用來將『重復的行刪除掉只顯示一個』
語法:[root @test /root ]# uniq
范例:
C代碼
[root @test /root]# last | cut -d" " -f1 | sort | uniq
tee
命令重定向到文件的同時將數據顯示在屏幕上
語法:[root @test /root ]# last | tee last.list | cut -d " " -f1
范例:
C代碼
[root @test /root]# last | tee last.list | cut -d " " -f1
tr
語法:[root @test /root ]# tr [-ds] SET1
參數說明:
-d :刪除 SET1 這個字符串
-s :取代掉重復的字符!
范例:
C代碼
[root @test /root]# last | tr '[a-z]' '[A-Z]' #<==將小寫改成大寫
[root @test /root]# cat /etc/passwd | tr -d : #<== : 這個符號在 /etc/passwd 中不見了!
[root @test /root]# cat /home/test/dostxt | tr -d '\r' > dostxt-noM
split
語法:[root @test /root ]# split [-bl] 輸入文件 輸出文件前導字符
參數說明:
-b :以文件 size 來分
-l :以行數來分
范例:[root @test /root]# split -l 5 /etc/passwd test <==會產生 testaa, testab, testac... 等等的文件
說明:在 Linux 底下就簡單的多了!你要將文件分割的話,那麼就使用 -b size 來將一個分割的文件限制其大小,如果是行數的話,那麼就使用 -l line 來分割!
管線命令在 bash 的連續的處理程序中是相當重要的!另外,在 log file 的分析當中也是相當重要的一環。
管道輸送到一個命令的標准輸入可以使用標准輸入參數”-“ 進行更仔細的控制.如cat命令的示例
例子:
C代碼
sort mylist | more
sort mylist | cat –n | lpr
pwd | cat – mylist | lpr