Shell編程—【07】Linux的sed流編輯器 sed命令

介紹

  • sed(Stream Editor), 流編輯器。 對標準輸出或者文件逐行進行處理。

語法格式

  • 標準輸出處理
sed [選項]... {腳本} [文件]...
  • 文件處理
stdout | sed [選項]... {腳本}

文件

  • 下面命令將在含有file文件內容如下的目錄下進行。
i love python
lovelove python
loooove
I LOVE PYTHON
I LOVE pYtHoN
py.*

sed的選項使用案例

無參數直接使用p(打印)命令

sed "p" file
i love python
i love python
lovelove python
lovelove python
loooove
loooove
I LOVE PYTHON
I LOVE PYTHON
I LOVE pYtHoN
I LOVE pYtHoN
py.*
py.*

-n 取消自動打印模式空

  • 可能大家會有點蒙是什么意思,這句話是centOS7中世界輸入sed給的提示。
  • 首先解釋一下,使用sed命令時,會先自動打印原來的文本,再輸出匹配文本處理結果。
  • -n大家可以簡單理解不輸出原文本,只輸出結果。
  • 示例:
sed -n "p" file
i love python
lovelove python
loooove
I LOVE PYTHON
I LOVE pYtHoN
py.*
  • 打印匹配項
sed -n "/python/p" file
i love python
lovelove python

-e 腳本, 添加“腳本”到程序的運行列表

  • 就是在逐行處理的時候匹配有多種情況,只有一個不用寫-e
  • 如 匹配大寫的和小寫的
sed -n -e '/python/p' -e '/PYTHON/p' file
i love python
lovelove python
I LOVE PYTHON

-r 使用拓展正則表達式

sed -nr "/python|PYTHON/p" file
sed -nE "/python|PYTHON/p" file
# 兩種都可以
i love python
lovelove python
I LOVE PYTHON

-f 腳本文件, 添加“腳本文件”到程序的運行列表

-i 操作源文件

sed -i 's/love/like/g' file
# s是替換 love變成like  g是每行的所有匹配字符,
# 如果不加g 則會匹配到第一個符合的字符替換了就結束當前行的替換
  • 沒有輸出

sed常用的Pattern用法

匹配某行

sed -n "5p" file
I LOVE pYtHoN

從某行開始匹配到某行

sed -n '2,5p' file
lovelove python
loooove
I LOVE PYTHON
I LOVE pYtHoN

從某行開始匹配 并設置一個偏移行數

sed -n '2,+2p' file
  • 處理的行數是從基數開始 偏移量+1 行
lovelove python
loooove
I LOVE PYTHON

處理正則表達式所在的行

sed -n '/^I LOVE/p' file
I LOVE PYTHON
I LOVE pYtHoN

從匹配條件1到的行數開始到 條件2的行 結束

sed -n "/lovelove/,/py\.\*/p" file
lovelove python
loooove
I LOVE PYTHON
I LOVE pYtHoN
py.*

從某行開始到 匹配條件2的行 結束

sed -n "4,/pYtHoN/p" file
I LOVE PYTHON
I LOVE pYtHoN

從匹配條件1到的行數開始到 某行 結束

sed -n "/pYtHoN/, 6s/LOVE/love/gp" file
I love pYtHoN

注意: 如果是行數范圍處理,結束條件如果文件中沒有那么就會一直處理到最后一行

sed -n "3,/abc/p" file
loooove
I LOVE PYTHON
I LOVE pYtHoN
py.*

sed中的編輯命令

p 打印 print

a 行后追加append

sed '/loooove/a bbbbbbbbbb' file
i love python
lovelove python
loooove
bbbbbbbbbb
I LOVE PYTHON
I LOVE pYtHoN
py.*

i 行前追加

sed '/loooove/i aaaaaaaaa' file
i love python
lovelove python
aaaaaaaaa
loooove
I LOVE PYTHON
I LOVE pYtHoN
py.*

r 外部文件讀入,行后追加

  • list文件
1 line
2 line
sed '/lovelove/r list' file 
i love python
lovelove python
1 line
2 line
loooove
I LOVE PYTHON
I LOVE pYtHoN
py.*

w 匹配行寫入外部文件

sed -n '/I LOVE/w aaa' file  && cat aaa```
  • 注意aaa可以不存在 如果以存在 里面的內容會被清除
I LOVE PYTHON
I LOVE pYtHoN

d 刪除

sed '1,3d' file
  • 執行打印 并不修改源文件 修改源文件需要-i
I LOVE PYTHON
I LOVE pYtHoN
py.*

s/old/new 替換行內第一個old

s/old/new/2 替換行第二個

s/old/new/g 替換行內所有old

s/old/new/2g 替換第二個及后面所有的

s/old/new/ig 替換行內所有的old,忽略大小寫

  • 替換命令演示
sed 's/o/AA/i2g' file
i love pythAAn
lovelAAve pythAAn
loAAAAAAve
I LOVE PYTHAAN
I LOVE pYtHAAN
py.*
sed 's/py/&OOO/ig' file
  • & 符號是匹配的內容的引用
i love pyOOOthon
lovelove pyOOOthon
loooove
I LOVE PYOOOTHON
I LOVE pYOOOtHoN
pyOOO.*

sed的應用

  • 處理一個Mysql的配置文件my.conf文本,輸入文章有幾個段(以 [ ] 為段),每個段有幾個配置,
#!/bin/bash
#

FILE_NAME=./my.cnf

function get_all_segments
{
    echo "`sed -n '/\[.*\]/p' $FILE_NAME  | sed -e 's/\[//g' -e 's/\]//g'`"
}

function count_items_in_segment
{
    items=`sed -n '/\['$1'\]/,/\[.*\]/p' $FILE_NAME | grep -v "^#" | grep -v "^$" | grep -v "\[.*\]"`
    
    index=0
    for item in $items
    do
        index=`expr $index + 1`
    done

    echo $index

}

number=0

for segment in `get_all_segments`
do
    number=`expr $number + 1`
    items_count=`count_items_in_segment $segment`
    echo "$number: $segment  $items_count"
done
  • 文本my.conf
# this is read by the standalone daemon and embedded servers
[client]
port=3306
socket=/tmp/mysql.socket

#ThisSegmentForserver
[server]
innodb_buffer_pool_size=91750M
innodb_buffer_pool_instances=8
innodb_buffer_pool_load_at_startup=1
innodb_buffer_pool_dump_at_shutdown=1
innodb_data_file_path=ibdata1:1G:autoextend
innodb_flush_log_at_trx_commit=1
innodb_log_buffer_size=32M
innodb_log_file_size=2G
innodb_log_files_in_group=2
innodb_max_undo_log_size=4G
innodb_undo_directory=undolog
innodb_undo_tablespaces=95

#thisisonlyforthemysqldstandalonedaemon
[mysqld]
port=3306
socket=/tmp/mysql.sock
basedir=/usr/local/mysql
datadir=/data/mysql
pid-file=/data/mysql/mysql.pid
user=mysql
bind-address=0.0.0.0
sort_buffer_size=16M
join_buffer_size=16M
thread_cache_size=3000
interactive_timeout=600
wait_timeout=600

#ThisSegmentFormysqld_safe
[mysqld_safe]
log-error=/var/log/mariadb/mariadb.log
pid-file=/var/run/mariadb/mariadb.pid
max_connections=1000
open_files_limit=65535
thread_stack=512K
external-locking=FALSE
max_allowed_packet=32M

#thisisonlyforembeddedserver
[embedded]
gtid_mode=on
enforce_gtid_consistency=1
log_slave_updates
slave-rows-search-algorithms='INDEX_SCAN,HASH_SCAN'
binlog_format=row
binlog_checksum=1
relay_log_recovery=1
relay-log-purge=1


#usethisgroupforoptionsthatolderserversdon'tunderstand
[mysqld-5.5]
key_buffer_size=32M
read_buffer_size=8M
read_rnd_buffer_size=16M
bulk_insert_buffer_size=64M
myisam_sort_buffer_size=128M
myisam_max_sort_file_size=10G
myisam_repair_threads=1
lock_wait_timeout=3600
explicit_defaults_for_timestamp=1
innodb_file_per_table=1

?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,837評論 6 531
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,196評論 3 414
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事?!?“怎么了?”我有些...
    開封第一講書人閱讀 175,688評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,654評論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,456評論 6 406
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 54,955評論 1 321
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,044評論 3 440
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,195評論 0 287
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,725評論 1 333
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,608評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,802評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,318評論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,048評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,422評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,673評論 1 281
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,424評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,762評論 2 372

推薦閱讀更多精彩內容