Linux輸入輸出錯誤重定向
Linux重定向是指修改原來默認的一些東西,對原來系統命令的默認執行方式進行改變,比如說簡單的我不想看到在顯示器的輸出而是希望輸出到某一文件中就可以通過Linux重定向來進行這項工作。
Linux默認輸入是鍵盤,輸出是顯示器。你可以用重定向來改變這些設置。比如用wc命令的時候本來是要手動輸入一篇文字來計算字符數的,用了重定向后可以直接把一個已經寫好的文件用‘<’指向這條命令,就直接可以統計這個文件的字符數等了。輸出也是一樣,你可以把屏幕輸出重定向到一個文件里,再到文件里去看結果。重定向操作符可以用來將命令輸入和輸出數據流從默認位置重定向到其他位置,其輸入或輸出數據流的位置稱為句柄;常見的句柄有三種,當然句柄可以自行擴展,一般的OS都提供類似的功能。句柄 句柄代號 句柄描述
STDIN 0 鍵盤輸入
STDOUT 1 輸出信息到提示符窗口
STDERR 2 輸出錯誤信息到提示符窗口
默認的 < 重定向輸入操作符是 0,而默認的 > 重定向輸出操作符是 1。鍵入 < 或 > 操作符之后,必須指定數據的讀寫位置,可以是文件名或其他現有的句柄。
要指定重定向到現有句柄,請使用與 & 字符,后面接要重定向的句柄號(即 &句柄號)。
例如,下面的命令可以將句柄 2(即 STDERR)重定向到句柄 1(即 STDOUT):2>&1
下表列出了可用于重定向輸入和輸出數據流的操作符:
Linux重定向操作符 | 功能描述 |
> | 將命令輸出寫入文件或設備,而不是命令提示符或句柄 |
< | 從文件而不是從鍵盤或句柄讀入命令輸入 |
>> | 將命令輸出添加到文件末尾而不刪除文件中已有的信息 |
>& | 將一個句柄的輸出寫入到另一個句柄的輸入中 |
<& | 從一個句柄讀取輸入并將其寫入到另一個句柄輸出中 |
| | 從一個命令中讀取輸出并將其寫入另一個命令的輸入中;也稱為管道操作符 |
現在我們回過頭來看看上面的那條語句mysh > mylog.txt 2>&1就可明白:
> mylog.txt意思是將標準輸出重定向到mylog.txt,等價于mysh 1> mylog.txt;
2 >& 1 意思是將錯誤輸出重定向到句柄1標準輸出;綜合起來就是mysh命令執行過程中產生的標準輸出和錯誤輸出都會被重定向到mylog.txt中;
重定向的功能十分強大,有興趣的可以去嘗試各種不同的組合,看看前后位置變下會有什么結果?
某些時候我們可能并不希望記錄什么標準輸出或者是錯誤輸出,那可以用mysh >null 2>null或者mysh >/dev/null 2>/dev/null;
I/O重定向詳解
1、 基本概念(這是理解后面的知識的前提,請務必理解)
- a、 I/O重定向通常與 FD有關,shell的FD通常為10個,即 0~9;
- b、 常用FD有3個,為0(stdin,標準輸入)、1(stdout,標準輸出)、2(stderr,標準錯誤輸出),默認與keyboard、monitor、monitor有關;
- c、 用 < 來改變讀進的數據信道(stdin),使之從指定的檔案讀進;
- d、 用 > 來改變送出的數據信道(stdout, stderr),使之輸出到指定的檔案;
- e、 0 是 < 的默認值,因此 < 與 0<是一樣的;同理,> 與 1> 是一樣的;
- f、 在IO重定向 中,stdout 與 stderr 的管道會先準備好,才會從 stdin 讀進資料;
- g、 管道“|”(pipe line):上一個命令的 stdout 接到下一個命令的 stdin;
- h、 tee 命令是在不影響原本 I/O 的情況下,將 stdout 復制一份到檔案去;
- i、 bash(ksh)執行命令的過程:分析命令-變量求值-命令替代(“和$)-重定向-通配符展開-確定路徑-執行命令;
- j、 將 command group 置于 sub-shell 去執行,也稱 nested sub-shell,它有一點非常重要的特性是:繼承父shell的Standard input, output, and error plus any other open file descriptors。
- k、 exec 命令:常用來替代當前 shell 并重新啟動一個 shell,換句話說,并沒有啟動子 shell。使用這一命令時任何現有環境都將會被清除。exec 在對文件描述符進行操作的時候,也只有在這時,exec 不會覆蓋你當前的 shell 環境。
2、 基本IO
- cmd > file 把 stdout 重定向到 file 文件中;
- cmd >> file 把 stdout 重定向到 file 文件中(追加);
- cmd 1> fiel 把 stdout 重定向到 file 文件中;
- cmd > file 2>&1 把 stdout 和 stderr 一起重定向到 file 文件中;
- cmd 2> file 把 stderr 重定向到 file 文件中;
- cmd 2>> file 把 stderr 重定向到 file 文件中(追加);
- cmd >> file 2>&1 把 stderr 和 stderr 一起重定向到 file 文件中(追加);
- cmd < file >file2 cmd 命令以 file 文件作為 stdin,以 file2 文件作為 stdout;
- cat <>file 以讀寫的方式打開 file;
- cmd < file cmd 命令以 file 文件作為 stdin;
- cmd << delimiter Here document,從 stdin 中讀入,直至遇到 delimiter 分界符。
3、 進階IO
- >&n 使用系統調用 dup (2) 復制文件描述符 n 并把結果用作標準輸出;
- <&n 標準輸入復制自文件描述符 n;
- <&- 關閉標準輸入(鍵盤);
- >&- 關閉標準輸出;
- n<&- 表示將 n 號輸入關閉;
- n>&- 表示將 n 號輸出關閉;
上述所有形式都可以前導一個數字,此時建立的文件描述符由這個數字指定而不是缺省的 0 或 1。如:
… 2>file 運行一個命令并把錯誤輸出(文件描述符 2)定向到 file。
… 2>&1 運行一個命令并把它的標準輸出和輸出合并。(嚴格的說是通過復制文件描述符 1 來建立文件描述符 2 ,但效果通常是合并了兩個流。)
我們對 2>&1詳細說明一下 :2>&1 也就是 FD2=FD1 ,這里并不是說FD2 的值 等于FD1的值,因為 > 是改變送出的數據信道,也就是說把 FD2 的 “數據輸出通道” 改為 FD1 的 “數據輸出通道”。如果僅僅這樣,這個改變好像沒有什么作用,因為 FD2 的默認輸出和 FD1的默認輸出本來都是 monitor,一樣的!但是,當 FD1 是其他文件,甚至是其他 FD 時,這個就具有特殊的用途了。請大家務必理解這一點。
exec 0exec 1>outfilename # 打開文件outfilename作為stdout。
exec 2>errfilename # 打開文件 errfilename作為 stderr。
exec 0<&- # 關閉 FD0。
exec 1>&- # 關閉 FD1。
exec 5>&- # 關閉 FD5。
這樣就完成了Linux重定向的學習。
原文出自【比特網】,轉載請保留原文鏈接:http://soft.chinabyte.com/os/451/11757951.shtml
1重定向
1.1 重定向符號
> 輸出重定向到一個文件或設備 覆蓋原來的文件
> ! 輸出重定向到一個文件或設備 強制覆蓋原來的文件
>> 輸出重定向到一個文件或設備 追加原來的文件
< 輸入重定向到一個程序
1.2標準錯誤重定向符號
2> 將一個標準錯誤輸出重定向到一個文件或設備 覆蓋原來的文件 b-shell
2>> 將一個標準錯誤輸出重定向到一個文件或設備 追加到原來的文件
2>&1 將一個標準錯誤輸出重定向到標準輸出 注釋:1 可能就是代表 標準輸出
>& 將一個標準錯誤輸出重定向到一個文件或設備 覆蓋原來的文件 c-shell
|& 將一個標準錯誤 管道 輸送 到另一個命令作為輸入
1.3命令重導向示例
在 bash 命令執行的過程中,主要有三種輸出入的狀況,分別是:
- 1. 標準輸入;代碼為 0 ;或稱為 stdin ;使用的方式為 <<BR>
- 2. 標準輸出:代碼為 1 ;或稱為 stdout;使用的方式為 1>
- 3. 錯誤輸出:代碼為 2 ;或稱為 stderr;使用的方式為 2>
- [test @test test]# ls -al > list.txt
將顯示的結果輸出到 list.txt 文件中,若該文件以存在則予以取代!
- [test @test test]# ls -al >> list.txt
將顯示的結果累加到 list.txt 文件中,該文件為累加的,舊數據保留!
- [test @test test]# ls -al 1> list.txt 2> list.err
將顯示的數據,正確的輸出到 list.txt 錯誤的數據輸出到 list.err
- [test @test test]# ls -al 1> list.txt 2> &1
將顯示的數據,不論正確或錯誤均輸出到 list.txt 當中!錯誤與正確文件輸出到同一個文件中,則必須以上面的方法來寫!不能寫成其它格式!
- [test @test test]# ls -al 1> list.txt 2> /dev/null
將顯示的數據,正確的輸出到 list.txt 錯誤的數據則予以丟棄! /dev/null ,可以說成是黑洞裝置。為空,即不保存。
1.4為何要使用命令輸出重導向
• 當屏幕輸出的信息很重要,而且我們需要將他存下來的時候;
• 背景執行中的程序,不希望他干擾屏幕正常的輸出結果時;
• 一些系統的例行命令(例如寫在 /etc/crontab 中的文件)的執行結果,希望他可以存下來時;
• 一些執行命令,我們已經知道他可能的錯誤訊息,所以想以『 2> /dev/null 』將他丟掉時;
• 錯誤訊息與正確訊息需要分別輸出時。
2 管線命令 ( pipe )
就如同前面所說的, bash 命令執行的時候有輸出的數據會出現,那么如果這群數據必需要經過幾道手續之后才能得到我們所想要的格式,應該如何來設定?這就牽涉到管線命令的問題了( pipe ),管線命令使用的是『 | 』。
例子:簡單的管線命令
假設我們要讀取 last 這個指令中,那個 root 登入的『次數』應該怎么作?
那么我所進行的步驟是:
- 1. 執行 last ,將所有這個月的所有人登入數據取出來;
- 2. 使用 grep 將上面的輸出數據(stdout)當中的 root 擷取出來,其它的不要;
- 3. 使用 wc 這個可以計算行數的指令將上一步的數據計算行數!
由于 last 的輸出是一行代表一次登入,所以只要計算幾行就代表登入幾次的意思,經由上面三個步驟,將 last 數據逐步的篩選,就可以得到我們的數據了!整個命令可以寫成如下:
- [test @test bin]# last | grep root | wc -l
這個管線命令『 | 』僅能處理經由前面一個指令傳來的正確信息,也就是standard output ( STDOUT ) 的信息,對于 stdandard error 并沒有直接處理的能力。
2.1基本的管線命令指令介紹
• cut
語法:[root @test /root ]# cut -d “分隔字符” [-cf] fields
參數說明:
-d :后面接的是用來分隔的字符,預設是『空格符』
-c :后面接的是『第幾個字符』
-f :后面接的是第幾個區塊?
范例:[root @test /root]# cat /etc/passwd | cut -d “:” -f 1
將 passwd 這個文件里面,每一行里頭的 : 用來作為分隔號,而列出第一個區塊!也就是姓名所在啦!
[root @test /root]# last | cut -c1-20
將 last 之后的數據,每一行的 1-20 個字符取出來!
• sort
語法:[root @test /root ]# sort [-t 分隔符] [(+起始)(-結束)] [-nru]
參數說明:
-t 分隔符:使用分隔符來隔開不同區間,預設是 tab
+start -end:由第 start 區間排序到 end 區間
-n :使用『純數字』排序(否則就會以文字型態來排序)
-r :反向排序
-u :相同出現的一行,只列出一次!
范例:
- [root @test /root]# cat /etc/passwd | sort將列出來的個人賬號排序!
- [root @test /root]# cat /etc/passwd | sort -t: +2n將個人賬號中,以使用者 ID 來排序(以 : 來分隔,第三個為 ID ,但第一個代號為 0 之故)
- [root @test /root]# cat /etc/passwd | sort -t: +2nr反相排序啰!
• wc
語法:[root @test /root ]# wc [-lmw]
參數說明:
-l :多少行
-m :多少字符
-w :多少字
范例:
- [root @test /root]# cat /etc/passwd | wc -l這個文件里頭有多少行?
- [root @test /root]# cat /etc/passwd | wc -w這個文件里頭有多少字!?
• uniq這個指令用來將『重復的行刪除掉只顯示一個』
語法:[root @test /root ]# uniq
范例:
- [root @test /root]# last | cut -d” ” -f1 | sort | uniq
• tee命令重定向到文件的同時將數據顯示在屏幕上
語法:[root @test /root ]# last | tee last.list | cut -d ” ” -f1
范例:
- [root @test /root]# last | tee last.list | cut -d ” ” -f1
• tr
語法:[root @test /root ]# tr [-ds] SET1
參數說明:
-d :刪除 SET1 這個字符串
-s :取代掉重復的字符!
范例:
- [root @test /root]# last | tr ‘[a-z]‘ ‘[A-Z]‘ <==將小寫改成大寫
- [root @test /root]# cat /etc/passwd | tr -d : <== : 這個符號在 /etc/passwd 中不見了!
- [root @test /root]# cat /home/test/dostxt | tr -d ‘\r’ > dostxt-noM
• split
語法:[root @test /root ]# split [-bl] 輸入文件 輸出文件前導字符
參數說明:
-b :以文件 size 來分
-l :以行數來分
范例:
- [root @test /root]# split -l 5 /etc/passwd test <==會產生 testaa, testab, testac… 等等的文件
說明:在 Linux 底下就簡單的多了!你要將文件分割的話,那么就使用 -b size 來將一個分割的文件限制其大小,如果是行數的話,那么就使用 -l line 來分割!
管線命令在 bash 的連續的處理程序中是相當重要的!另外,在 log file 的分析當中也是相當重要的一環。
管道輸送到一個命令的標準輸入可以使用標準輸入參數”-“ 進行更仔細的控制.如cat命令的示例