Prayer

1.去掉所有行的空格
sed   -i ’s/ //g’ df.txt
2.去掉所有行的空格
sed   -e ’s/ //g’ df.txt   >cwm.txt

3.將每一行拖尾的“空白字符”（空格，制表符）刪除
sed ’s/ *$//’   df.txt >cwm.txt

4.將每一行中的前導和拖尾的空白字符刪除
sed ’s/^ *//;s/ *$//’   df.txt >cwm.txt

5.去掉空行
sed ’/^$/d’ df.txt   >cwm.txt
sed -e ’/^$/d’ df.txt   >cwm.txt
sed -i ’/^$/d’ df.txt  
這三個是等價的 但第三個會改動原文件

6.去掉windows下的回車符 （注意^M 在linux 下寫法 按^M 是回車換行符,輸入方法是按住CTRL+v,松開v,按m)
sed   -i ’s/^M//g’   df.txt  

7.去掉windows下的回車符 （注意^M 在linux 下寫法 按^M 是回車換行符,輸入方法是按住CTRL+v,松開v,按m)
sed   -e ’s/^M//g’   df.txt   >cwm.txt



也等價于
dos2unix df.txt   >cwm.txt  


----------------------------------------------------------------------------------------------
******怎么去掉文件中行尾的回車符號^M******
sed ’s/^M//g w newfilename’ oldfilename
其中：
s   表示Searchg 表示搜索全文,缺省是搜索第一個^M 是回車換行符,輸入方法是按住CTRL+v,松開v,按m  
w   表示寫到新文件中.


例子1
86103113234778,
86103145878770,
86103116778768,
86103111879708,
sed ’s/^86//;s/,$//’ user.txt     #去掉開頭的86 及尾部的,號
例子2
103113234778
103145878770
103116778768
103111879708
sed -e ’s/^/86/’ user.txt    #每行行首加上86
86103113234778
86103145878770
86103116778768
86103111879708

*********************************************************
http://www.idcnews.net/html/edu/20080425/300682.html

1． sed 命令簡介
Sed(a stream editor)是流線型、非交互式編輯器。他允許您執行和vi編輯器里相同的編輯任務。Sed 程式不是和編輯器交互式工作的，而是讓您在命令行里敲入編輯的命令，給文檔命名，然后在屏幕上查看命令輸出結果。
2． sed 怎樣工作
sed 編輯器按一次處理一行的方式來處理文檔，并把輸出送到屏幕上。
3． sed 能夠用尋址的方式來決定想要編輯哪一行。
4． sed 命令和選項
選項     功能
a＼    在當前行上添加一個文本行或多個文本行
c＼    用新聞本改變（取代）當前行里的文本
d    刪除行
i＼    在當前行之前插入文本
h    把模式空間內容復制到一個固定緩存
H    把模式空間內容添加到一個固定緩存
g    得到固定緩存里任何的并復制到模式緩存，重寫其內容
G    得到固定緩存的內容并復制到模式緩存，添加到里面
I    列出不打印的字符
p    打印行
n    讀下一輸入行，并開始用下一個命令處理換行符，而不是用第一個命令
q    結束或退出sed
r    從一個文檔讀如行
！    把命令應用到除了選出的行以外的其他任何行
s    把一個字串替換成另一個替換標志
g    在一行上進行全局替換
p    打印行
w    把行寫到一個文檔中
x    用模式空間的內容交換固定緩存的內容
y    把一個字符轉換成另一個（不能和整則表達式元字符一起使用）
5、 sed元字符
基本上，grep和vi使用的元字符都能夠用在sed中，&是特例：
   & ：保存搜索串以便能夠記在替換串里
e.g.： s/love/**&**/
    &號代表搜索串。串love將被星號包圍的自身所替代；即love變成**love**

6 sed實例
   1> 打印：p命令
    sed ’/north/p’ datafile
   默認輸出任何行，找到north的行重復打印
    sed ?n ’/north/p’ datafile
   禁止默認輸出，只打印找到north的行
   2> 刪除：d命令
    sed ’3d’ datafile
   刪除第三行，其余行輸出到屏幕
    sed ’3,$d’ datafile
   從第3行到最后一行都刪除，將剩余部分輸出到屏幕
    sed ’/north/d’ datafile
   將含有north的行刪除，其余輸出到屏幕
   3> 替換：s命令
    sed ’s/west/north/g’ datafile
   解釋：找到datafile中的任何west并替換成north，將替換后的內容輸出到屏幕。
    sed ’s/[0-9][0-9]$/&.5/’ datafile
   解釋：在替代串里的&字符代表在搜索串中真正找到的。
         每個以兩個數字結尾的行都被他自己取代，且要在后面加上.5
    sed -n ’s/Hemenway/Jones/gp’ datafile
   解釋：任何的Hemenway所在的位置都用Jones來取代，而且只有改變的行被打印。
         -n和p命令選項相結合來禁止默認輸出。g代表全局替換
    sed -n ’s/＼(Mar＼)got/＼1ianne/p’ datafile
   解釋：模式Mar被封裝在括弧里且在一個專用寄存器里存為標記1。
         在替換串里他將被引用做＼1。然后用Marianne替代Margot。
    sed ’s#3#88#g’ datafile
   解釋：s命令后面的字符是搜索串和替換串之間的分界符。
         默認的分界符是個正斜杠，但也能夠改變（只有使用s命令時）。
         無論s命令后面跟什么字符，他都是新的串分界符。
         當搜索包含一個正斜杠的模式，如路徑或生日時，這種技巧可能有用
   4> 被選中的行的范圍：逗號
    sed -n ’/west/,/east/p’ datafile
         打印在west和east之間的模式范圍內任何行。假如west出現在east之后，
         則打印從west到下一個east或到文檔末尾的行，無論哪種情況先出現都能夠。
    sed ’/west/,/east/s/$/**VACA**/’ datafile
   解釋：對于在模式west到east范圍內的行，行末尾將用**VACA**來取代。
   5> 多次編輯 -e 選項
    sed -e ’1,3d’ -e ’s/Hemenway/Jones/’ datafile
      -e選項允許多次編輯。不同的編輯順序可能導致不同的結果。
      例如，假如兩個命令都執行了替換，第一次替換可能影響第二次替換。
   6> 從文檔中讀?。簉命令
    sed ’/Suan/r newfile’ datafile
   解釋：r命令從newfile中讀取內容，將內容輸出到Suan的后面。
         假如datafile中Suan出現的次數不只一次，則分別放到Suan的后面。
   7> 寫入文檔：w命令
    sed -n ’/north/w newfile’ datafile
   解釋：w命令把指定的行寫入到一個文檔。
         本例中任何的包含north的行寫入到newfile中。
         等同于sed -n ’/north/p’ datafile >newfile
   8> 添加：a命令
    $ sed ’/north/a＼
   > ---->THE NORTH SALES DISTRICT HAS MOVEDTHE NORTH SALES DISTRICT HAS MOVED 插入：i命令
$ sed ’/north/i＼
   > ---->THE NORTH SALES DISTRICT HAS MOVEDTHE NORTH SALES DISTRICT HAS MOVED下一個：n命令
    $ sed ’/eastern/{n;s/AM/Archie/;}’ datafile

    eastern EA TB Savage 4.4 .84 5 20
    northeast NE Archie Main Jr. 5.1 .94 3 13
    ……
   解釋：假如在某一行里模式eastern被匹配，n命令使sed區的下一行，
          用該行代換模式空間，用Archie替換AM，打印并繼續。
   11>變換：y 命令
sed ’1,3y/abcdefghijklmnopqrst/ABCDEFGHIJKLMNOPQRST/’ datafile
   解釋：將對應字母進行轉換。
   12>退出：q 命令
sed ’5q’ datafile
   解釋：在打印了5行之后，用q命令退出sed程式。
   13>保存和取得：h和G命令
$ sed -e ’/southeast/h’ -e ’$G’ datafile
   解釋：當sed 處理文檔時，每行都存在模式空間(pattern space)的臨時緩存中。除非行被禁止打印或刪除,否則行將在處理完后被打印到屏幕，然后請模式空間并把下一輸入行保存在那里等待處理。在這個例子中， 在找到模式之后，把他放在模式空間里，而且h命令復制他并把他存到另一個叫做保存緩存(holding buffer)中。第二個sed指令里，當讀入最后一行($)時,G命令告訴sed從包存緩存中取得該行并放回模式空間緩存，添加到當前存在那里的行中。 本例子就是最后一行。
$ sed -e ’/WE/{h;d;}’ -e ’/CT/G’ datafile
   解釋：第一個命令h將找到了WE的行放到保存緩存中，然后刪除該行；第二個命令/CT/G就是在找到了CT的行的后面加入保存緩存的內容。

14>G和g的區分
   G命令在符合的條件行后面添加保存緩存中的內容；g命令用保存緩存中
15>sed 命令的花括號{}的作用
   花括號{}中能夠放入多個命令，每個命令后面要用分號;。
16>保存和交換：h 和 x命令。
   $ sed -e ’/Patricia/h’ -e ’/Margot/x’ datafile
   解釋：x命令將找到的行用保存緩存中的內容替換。
7． 用sed來編寫命令表
sed 命令表(script)是文檔里的一個sed命令列表。用-f選項來引用一個命令表文檔。編輯sed命令表有特別需要：命令末尾不能有任何尾隨的空白符或文本。假如命令不是自成一行，就必須用分號結束。