sedはとても便利なツールです。
よく使うコマンドやアドレシング・否定の指定方法など、ちょっとしたテクニックも知っておくと便利です。

よく使うsedコマンド
置換や削除はよく使います。その他にも、特定の行だけの処理・パターンを除外した処理などできます。
hello.sh(サンプルとして使います)
#! /bin/bash for i in `seq 1 ${1}`; do echo "${i} hello! 123" done
置換
置換を行う際はs
コマンドを使います。更に、複数実行する場合は-e
オプションを使います。マッチしたパターン全て(または指定部位)に処理を適用したい場合は、g
フラグ(または数字
)を使います。
コマンドで確認
$ echo "hello world!" | sed 's/hello/HELLO/' # 文字列を指定 HELLO world! $ echo "hello world!" | sed 's/\W/-/g' # 文字列クラス(\W)を指定(全体) hello-world- $ echo "hello world!" | sed 's/\W/-/2' # パターンマッチの2番目だけを処理 hello world-
削除
行の削除を行う際はd
コマンドを使います。アドレスやパターンと一緒に指定します。
コマンドで確認
$ sh hello.sh 3 | sed -e '1d' -e '$d' # 先頭行&末尾行の削除 2 hello! 123 $ sh hello.sh 3 | sed '/^[13]/d' # 先頭が「1 or 3」の行削除 2 hello! 123
特定の行だけに作用する
sedの処理は行単位ですが、アドレシングを指定して特定の行だけに作用させることができます。置換s
や削除d
コマンドの前に、開始行番号
,終了行番号
を書くと対応した範囲にだけコマンドを適用することができます。尚、開始や終了は、それぞれ省略することができます。行番号の代わりに、パターン(/pattern/s/...
)を指定するとパターンに合致した行だけに、コマンドを適用することができます。また、置換した行だけ表示させる場合は、パターンスペースを自動表示を抑制する-n
オプションと表示に関するp
フラグを組み合わせると良いです。
コマンドで確認
$ sh hello.sh 3 | sed '1,3s/hello/HELLO/' # 1〜3行目 1 HELLO! 123 2 HELLO! 123 3 HELLO! 123 $ sh hello.sh 3 | sed '/^[13]/s/hello/HELLO/' # 先頭が「1 or 3」の行 1 HELLO! 123 2 hello! 123 3 HELLO! 123 $ sh hello.sh 3 | sed -n '2s/hello/HELLO/p' # 置換した行だけ表示 2 HELLO! 123
条件からの除外
パターンで表現するには、否定の方法も知っておくと簡単にできる場合があります。否定は、置換コマンドs
や削除コマンドd
の前に、!
を指定します。例えば、アドレシングを用いた場合に範囲を指定するのは容易ですが、飛び飛びで指定する場合は面倒です。除外したいパターンが明確な場合に、役に立つかもしれません。
コマンドで確認
$ sh hello.sh 3 | sed -n '2!s/hello/HELLO/p' # 2行目以外(否定) 1 HELLO! 123 3 HELLO! 123 $ sh hello.sh 5 | sed -n '/^[24]/!s/hello/HELLO/p' # 先頭「2 or 4」以外(否定) 1 HELLO! 123 3 HELLO! 123 5 HELLO! 123

関連記事

sed スペース 空白文字の整理・空白行の削除
sed で、スペース・タブ、空行に関する処理をまとめました。これらは、フィールドやレコードのセパレータとして使われるので、使いこなせるようになるとデータ解析の前処理が楽になります。スペース・タブ(空白文字)の処理複数のスペースを1つにする1...

SED 便利な使い方 ファイル読み込み・ファイル書き出し
sedのファイル読込みコマンド(r)・ファイル書き込みのコマンド(w)が便利です。指定の位置に外部ファイルからデータを読み込んだり、パターンにマッチした部分を一括で複数のファイルに分割するなどの便利な処理を行うことができます。知っていれば、...

sed コマンド 行指定の置換・削除(アドレッシング)
sedコマンドの処理は行単位です。何も指定しなければすべての行が対象になりますが、アドレシングを指定することで特定の行だけに作用させることができます。とにかく早く問題解決したい人はこちら>>直接、データ解析相談sed コマンド 行指定の方法...

sed コマンド 削除(行番号とパターン)
sedで行の削除を行う際はdコマンドを使います。アドレスやパターンと一緒に指定します。アドレスの指定は、dコマンドの直前に行番号を指定します。ちなみに、末尾は$で表現可能です。パターンの指定は、行の特徴を正規表現で指定します。とにかく早く問...

sed コマンド 置換(全体と部分指定)
sedで置換を行う際はsコマンドを使います。マッチしたパターン全てに置換処理を適用したい場合は、gフラグを指定します。一方、部分的に置換処理を適用したい場合は数字を指定します。とにかく早く問題解決したい人はこちら>>直接、データ解析相談se...

sed コマンド スクリプトファイルの実行 スクリプトの書き方
sedはテキスト編集ツールとして有名なツールの1つです。フィルタリングや置換処理を行うときに使います。とにかく早く問題解決したい人はこちら>>直接、データ解析相談sedの書き方コマンドライン中で簡単なフィルタリングを行ったり、コマンドをまと...

sed コマンド 単純な置換
sed で単純な文字列置換を行います。sed の置換コマンド「s」を使います。複数のコマンドを並べて、連続で置換処理を行うことができます。とにかく早く問題解決したい人はこちら>>直接、データ解析相談sed の書き方(置換)sed 's/置換...

正規表現 メタキャラクタ 検索・置換 前編
sed や awk、grep、その他のプログラム処理で文字列を扱うときに、よく用いられる「正規表現」についてまとめます。とにかく早く問題解決したい人はこちら>>直接、データ解析相談正規表現とは正規表現とは、文字列集合を特殊文字(メタキャラク...

正規表現 メタキャラクタ 検索・置換 後編
sed や awk、grep、その他のプログラム処理で文字列を扱うときに、よく用いられる「正規表現」についてまとめます。とにかく早く問題解決したい人はこちら>>直接、データ解析相談正規表現とは正規表現とは、文字列集合を特殊文字(メタキャラク...