Sed命令筆記

Tag:linux sed 正則 替換

DOS/Windows和Linux/Unix的文件換行回車格式不同，基於 DOS/Windows 的文本文件在每一行末尾有一個 CR（回車）和 LF（換行），而 UNIX 文本只有一個換行。 
1）把Dos/Windows下的文件移至Linux/Unix系統

雖然很多程序不在乎 DOS/Windows 格式的 CR/LF 文本文件，但是有幾個程序卻在乎 -- 最著名的是 bash，只要一遇到回車，它就會出問題。以下 sed 調用將把 DOS/Windows 格式的文本轉換成可信賴的 UNIX 格式：

$ sed -e 's/.$//' mydos.txt > myunix.txt

把每行的最后一個字符替換成空

$ sed -e 's/.$/abc/' mydos.txt > myunix.txt

把每行的最后一個字符替換成abc

該腳本的工作原理很簡單：替代規則表達式與一行的最末字符匹配，而該字符恰好就是回車。我們用空字符替換它，從而將其從輸出中徹底刪除。如果使用該腳本並注意到已經刪除了輸出中每行的最末字符，那么，您就指定了已經是 UNIX 格式的文本文件。也就沒必要那樣做了！

2）把Linux/UNIX 文本移至 Windows 系統，使用以下腳本執行必需的格式轉換:

$ sed -e 's/$/\r/' myunix.txt > mydos.txt

在每行的末尾添加\r

$ sed -e 's/123$/345/' myunix.txt > mydos.txt

每行以123結尾的行，把123替換成345

在該腳本中，'$' 規則表達式將與行的末尾匹配，而 '/r' 告訴 sed 在其之前插入一個回車。在換行之前插入回車，立即，每一行就以 CR/LF 結束。請注意，僅當使用 GNU sed 3.02.80 或以后的版本時，才會用 CR 替換 '\r'。

=====================================================================

DOS文件格式如何轉換成UNIX文件格式

dos格式文件傳輸到unix系統時,會在每行的結尾多一個^M,當然也有可能看不到,但是在vi的時候,會在下面顯示此文件的格式,比如 "dos.txt" [dos] 120L, 2532C 字樣,表示是一個[dos]格式文件,如果是MAC系統的,會顯示[MAC],因為文件格式的原因有時會導致我們的unix程序,或者shell程序出現錯誤,那么需要把這些dos文件格式轉換成unix格式,方法是 
vi  dos.txt        
    :set fileformat=unix 
    :w                 
這樣文件就轉換成unix格式文件了, 一般在windows機器上編寫好了文件傳到unix下就可能會出現這樣的情況. 
用命令:set ff? 
可以看到dos或unix的字樣. 
用:set ff=unix把它強制為unix格式    
也可以用sed 這樣的工具來做: 
sed 's/^M//' filename > tmp_filename 
其中^M是同時Ctrl+V+M按出來的，表示回車。

dos,unix格式處理的差別：DOS是回車+換行,而在UNIX下,只有回車,無換行!

sed -e 's/a/A/' t.txt > t1.txt  將t.txt中每行的第一個a轉成A

sed -e 's/a/A/g' t.txt > t1.txt  將t.txt中每行的所有a轉成A

3）如何把windows和UNIX格式混合的文件，變得都是unix格式的

sed -e 's/\r//g' window.txt  > unix.txt