Sed簡明教程

順手介紹一下正則表達式的一些最基本的東西：

• ^ 表示一行的開頭。如：/^#/ 以#開頭的匹配。
• $ 表示一行的結尾。如：/}$/ 以}結尾的匹配。
• \< 表示詞首。 如 \
• \> 表示詞尾。 如 abc\> 表示以 abc 結尾的詞。
• . 表示任何單個字符。
• * 表示某個字符出現了0次或多次。
• [ ] 字符集合。 如：[abc]表示匹配a或b或c，還有[a-zA-Z]表示匹配所有的26個字符。如果其中有^表示反，如[^a]表示非a的字符
</ul>

正規則表達式是一些很牛的事，比如我們要去掉某html中的tags：

html.txt

1 </td>

This is what I meant. Understand? </div> </td> </tr> </tbody> </table> </div> </div> 看看我們的sed命令 1 2 3 4 5 6 7 8 </td> # 如果你這樣搞的話，就會有問題 $sed's/<.*>//g'html.txt  Understand? # 要解決上面的那個問題，就得像下面這樣。 # 其中的'[^>]' 指定了除了>的字符重復0次或多次。 $sed's/<[^>]*>//g'html.txt This is what I meant. Understand? </div> </td> </tr> </tbody> </table> </div> </div> 我們再來看看指定需要替換的內容： 1 2 3 4 5 6 7 8 9 </td> $sed"3s/my/your/g"pets.txt This is mycat   mycat's name is betty This is your dog   my dog's name is frank This is my fish   my fish's name is george This is my goat   my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 下面的命令只替換第3到第6行的文本。 1 2 3 4 5 6 7 8 9 </td> $sed"3,6s/my/your/g"pets.txt This is mycat   mycat's name is betty This is your dog   your dog's name is frank This is your fish   your fish's name is george This is my goat   my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 1 2 3 4 5 </td> $catmy.txt This is mycat, mycat's name is betty This is my dog, my dog's name is frank This is my fish, my fish's name is george This is my goat, my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 只替換每一行的第一個s： 1 2 3 4 5 </td> $sed's/s/S/1'my.txt ThiS is mycat, mycat's name is betty ThiS is my dog, my dog's name is frank ThiS is my fish, my fish's name is george ThiS is my goat, my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 只替換每一行的第二個s： 1 2 3 4 5 </td> $sed's/s/S/2'my.txt This iS mycat, mycat's name is betty This iS my dog, my dog's name is frank This iS my fish, my fish's name is george This iS my goat, my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 只替換第一行的第3個以后的s： 1 2 3 4 5 </td> $sed's/s/S/3g'my.txt This is mycat, mycat'S name iS betty This is my dog, my dog'S name iS frank This is my fiSh, my fiSh'S name iS george This is my goat, my goat'S name iS adam </div> </td> </tr> </tbody> </table> </div> </div> 多個匹配 如果我們需要一次替換多個模式，可參看下面的示例：（第一個模式把第一行到第三行的my替換成your，第二個則把第3行以后的This替換成了That） 1 2 3 4 5 </td> $sed'1,3s/my/your/g; 3,$s/This/That/g'my.txt This is yourcat, yourcat's name is betty This is your dog, your dog's name is frank That is your fish, your fish's name is george That is my goat, my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 上面的命令等價于：（注：下面使用的是sed的-e命令行參數） 1 </td> sed-e'1,3s/my/your/g'-e'3,$s/This/That/g'my.txt </div> </td> </tr> </tbody> </table> </div> </div> 我們可以使用&來當做被匹配的變量，然后可以在基本左右加點東西。如下所示： 1 2 3 4 5 </td> $sed's/my/[&]/g'my.txt This is [my]cat, [my]cat's name is betty This is [my] dog, [my] dog's name is frank This is [my] fish, [my] fish's name is george This is [my] goat, [my] goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 圓括號匹配 使用圓括號匹配的示例：（圓括號括起來的正則表達式所匹配的字符串會可以當成變量來使用，sed中使用的是\1,\2…） 1 2 3 4 5 </td> $sed's/This is my \([^,]*\),.*is \(.*\)/\1:\2/g'my.txt cat:betty dog:frank fish:george goat:adam </div> </td> </tr> </tbody> </table> </div> </div> 上面這個例子中的正則表達式有點復雜，解開如下（去掉轉義字符）： 正則為：This is my ([^,]*),.*is (.*) 匹配為：This is my (cat),……….is (betty) 然后：\1就是cat，\2就是betty sed的命令 讓我們回到最一開始的例子pets.txt，讓我們來看幾個命令： N命令 先來看N命令 —— 把下一行的內容納入當成緩沖區做匹配。 下面的的示例會把原文本中的偶數行納入奇數行匹配，而s只匹配并替換一次，所以，就成了下面的結果： sesese色 1 2 3 4 5 6 7 8 9 </td> $sed'N;s/my/your/'pets.txt This is yourcat   mycat's name is betty This is your dog   my dog's name is frank This is your fish   my fish's name is george This is your goat   my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 也就是說，原來的文件成了： 1 2 3 4 </td> This is mycat\n  mycat's name is betty This is my dog\n  my dog's name is frank This is my fish\n  my fish's name is george This is my goat\n  my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 這樣一來，下面的例子你就明白了， 1 2 3 4 5 </td> $sed'N;s/\n/,/'pets.txt This is mycat,  mycat's name is betty This is my dog,  my dog's name is frank This is my fish,  my fish's name is george This is my goat,  my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> a命令和i命令 a命令就是append， i命令就是insert，它們是用來添加行的。如： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 </td> # 其中的1i表明，其要在第1行前插入一行（insert） $sed"1 i This is my monkey, my monkey's name is wukong"my.txt This is my monkey, my monkey's name is wukong This is mycat, mycat's name is betty This is my dog, my dog's name is frank This is my fish, my fish's name is george This is my goat, my goat's name is adam # 其中的1a表明，其要在最后一行后追加一行（append） $sed"$ a This is my monkey, my monkey's name is wukong"my.txt This is mycat, mycat's name is betty This is my monkey, my monkey's name is wukong This is my dog, my dog's name is frank This is my fish, my fish's name is george This is my goat, my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 我們可以運用匹配來添加文本： 1 2 3 4 5 6 7 </td> # 注意其中的/fish/a，這意思是匹配到/fish/后就追加一行 $sed"/fish/a This is my monkey, my monkey's name is wukong"my.txt This is mycat, mycat's name is betty This is my dog, my dog's name is frank This is my fish, my fish's name is george This is my monkey, my monkey's name is wukong This is my goat, my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 下面這個例子是對每一行都挺插入： 1 2 3 4 5 6 7 8 9 </td> $sed"/my/a ----"my.txt This is mycat, mycat's name is betty ---- This is my dog, my dog's name is frank ---- This is my fish, my fish's name is george ---- This is my goat, my goat's name is adam ---- </div> </td> </tr> </tbody> </table> </div> </div> c命令 c 命令是替換匹配行 1 2 3 4 5 6 7 8 9 10 11 </td> $sed"2 c This is my monkey, my monkey's name is wukong"my.txt This is mycat, mycat's name is betty This is my monkey, my monkey's name is wukong This is my fish, my fish's name is george This is my goat, my goat's name is adam $sed"/fish/c This is my monkey, my monkey's name is wukong"my.txt This is mycat, mycat's name is betty This is my dog, my dog's name is frank This is my monkey, my monkey's name is wukong This is my goat, my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> d命令 刪除匹配行 1 2 3 4 5 6 7 8 9 10 11 12 </td> $sed'/fish/d'my.txt This is mycat, mycat's name is betty This is my dog, my dog's name is frank This is my goat, my goat's name is adam $sed'2d'my.txt This is mycat, mycat's name is betty This is my fish, my fish's name is george This is my goat, my goat's name is adam $sed'2,$d'my.txt This is mycat, mycat's name is betty </div> </td> </tr> </tbody> </table> </div> </div> p命令 打印命令 你可以把這個命令當成grep式的命令 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 </td> # 匹配fish并輸出，可以看到fish的那一行被打了兩遍， # 這是因為sed處理時會把處理的信息輸出 $sed'/fish/p'my.txt This is mycat, mycat's name is betty This is my dog, my dog's name is frank This is my fish, my fish's name is george This is my fish, my fish's name is george This is my goat, my goat's name is adam # 使用n參數就好了 $sed-n'/fish/p'my.txt This is my fish, my fish's name is george # 從一個模式到另一個模式 $sed-n'/dog/,/fish/p'my.txt This is my dog, my dog's name is frank This is my fish, my fish's name is george #從第一行打印到匹配fish成功的那一行 $sed-n'1,/fish/p'my.txt This is mycat, mycat's name is betty This is my dog, my dog's name is frank This is my fish, my fish's name is george </div> </td> </tr> </tbody> </table> </div> </div> 幾個知識點 好了，下面我們要介紹四個sed的基本知識點： Pattern Space 第零個是關于-n參數的，大家也許沒看懂，沒關系，我們來看一下sed處理文本的偽代碼，并了解一下Pattern Space的概念： 1 2 3 4 5 6 7 8 9 10 11 12 </td> foreach line in file {     //放入把行Pattern_Space     Pattern_Space <= line;     // 對每個pattern space執行sed命令     Pattern_Space <= EXEC(sed_cmd, Pattern_Space);     // 如果沒有指定 -n 則輸出處理后的Pattern_Space     if(sed option hasn't"-n")  {        print Pattern_Space     } } </div> </td> </tr> </tbody> </table> </div> </div> Address 第一個是關于address，幾乎上述所有的命令都是這樣的（注：其中的!表示匹配成功后是否執行命令） [address[,address]][!]{cmd} address可以是一個數字，也可以是一個模式，你可以通過逗號要分隔兩個address 表示兩個address的區間，參執行命令cmd，偽代碼如下： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 </td> boolbexec =false foreach line in file {     if( match(address1) ){         bexec =true;     }     if( bexec ==true) {         EXEC(sed_cmd);     }     if( match (address2) ) {         bexec =false;     } } </div> </td> </tr> </tbody> </table> </div> </div> 關于address可以使用相對位置，如： 1 2 3 4 5 6 7 8 9 10 </td> # 其中的+3表示后面連續3行 $sed'/dog/,+3s/^/# /g'pets.txt This is mycat   mycat's name is betty # This is my dog #   my dog's name is frank # This is my fish #   my fish's name is george This is my goat   my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> 命令打包 第二個是cmd可以是多個，它們可以用分號分開，可以用大括號括起來作為嵌套命令。下面是幾個例子： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 </td> $catpets.txt This is mycat   mycat's name is betty This is my dog   my dog's name is frank This is my fish   my fish's name is george This is my goat   my goat's name is adam # 對3行到第6行，執行命令/This/d $sed'3,6 {/This/d}'pets.txt This is mycat   mycat's name is betty   my dog's name is frank   my fish's name is george This is my goat   my goat's name is adam # 對3行到第6行，匹配/This/成功后，再匹配/fish/，成功后執行d命令 $sed'3,6 {/This/{/fish/d}}'pets.txt This is mycat   mycat's name is betty This is my dog   my dog's name is frank   my fish's name is george This is my goat   my goat's name is adam # 從第一行到最后一行，如果匹配到This，則刪除之；如果前面有空格，則去除空格 $sed'1,${/This/d;s/^ *//g}'pets.txt mycat's name is betty my dog's name is frank my fish's name is george my goat's name is adam </div> </td> </tr> </tbody> </table> </div> </div> Hold Space 第三個我們再來看一下 Hold Space 接下來，我們需要了解一下Hold Space的概念，我們先來看四個命令： g： 將hold space中的內容拷貝到pattern space中，原來pattern space里的內容清除 G： 將hold space中的內容append到pattern space\n后 h： 將pattern space中的內容拷貝到hold space中，原來的hold space里的內容被清除 H： 將pattern space中的內容append到hold space\n后 x： 交換pattern space和hold space的內容 這些命令有什么用？我們來看兩個示例吧，用到的示例文件是： 1 2 3 4 </td> $catt.txt one two three </div> </td> </tr> </tbody> </table> </div> </div> 第一個示例： 1 2 3 4 5 6 7 8 9 </td> $sed'H;g't.txt one one two one two three </div> </td> </tr> </tbody> </table> </div> </div> 是不是有點沒看懂，我作個圖你就看懂了。 第二個示例，反序了一個文件的行： 1 2 3 4 </td> $sed'1!G;h;$!d't.txt three two one </div> </td> </tr> </tbody> </table> </div> </div> 其中的 ’1!G;h;$!d’ 可拆解為三個命令 1!G —— 只有第一行不執行G命令，將hold space中的內容append回到pattern space h —— 第一行都執行h命令，將pattern space中的內容拷貝到hold space中 $!d —— 除了最后一行不執行d命令，其它行都執行d命令，刪除當前行 </ul> 這個執行序列很難理解，做個圖如下大家就明白了： 就先說這么多吧，希望對大家有用。 http://sed.sourceforge.net/sed1line_zh-CN.html 來自：http://coolshell.cn/articles/9104.html  本文由用戶 jopen 自行上傳分享，僅供網友學習交流。所有權歸原作者，若您的權利被侵害，請聯系管理員。  轉載本站原創文章，請注明出處，并保留原始鏈接、圖片水印。  本站是一個以用戶分享為主的開源技術平臺，歡迎各類分享！  本文地址：http://www.baiduhome.net/lib/view/open1383872160024.html Sed 相關經驗 Sed簡明教程 Git簡明教程 Fabric簡明教程 Vim 簡明教程 ANT簡明教程 相關資訊 用 Google App Engine 開發 Go 語言應用的簡明教程 簡明 Vim 練級攻略 簡明解釋算法中的大O符號 如何利用多核CPU來加速你的Linux命令 — awk, sed, bzip2, grep, wc等 awk & sed ，一個老派系統管理員的基本素養 相關文檔  sed 簡明教程  JNDI 簡明教程  UML 簡明教程  SVN (簡明教程)  MATLAB 7 簡明教程  JBPM 教程  Enterprise Architect 教程 EA教程  TCL 教程(中文)  WCF教程 C#