CSVなどから必要なカラムの抜き出し (cut)

大量のログや処理データ（CSV）などから必要なフィールドだけを取り出したい場合に使えるのがcutコマンド。CSVファイルなどで特定のフィールドだけにデータを削ると容量の削減が出来たり、シンプルにその後の処理ができたりする場合もあります。 ログファイルをgrepしてWARNログだけ取得して、cutで時刻とパラメータだけ取得なんて使い方が出来たりします。実際にgrep、cut、sed、sort ぐらいでできるログ解析ってのも結構ありますでからね。

cutコマンドの簡単な使い方を説明します。

以下はCSVファイルの変わりにカンマ(,)区切りのデータをパイプでつないでいますがファイルに対する操作ももちろんできます。

-fでフィールドを指定して、-dでディバイダ（区切り文字）を指定します。 -fはカンマ区切りでフィールド指定もできるし、N-MでNからMまで、N-でN以降のカラムをすべて、-MでM番目までのカラムを全てといった指定も可能。 -f の代わりに-bにするとバイトでの指定、同じく-fの代わりに-cにすると文字（character）単位での指定になる。

3番目と4番目のフィールドを取り出し。

$ echo '1,2,3,4,5' | cut -f 3,4 -d ','
3,4

3番目までのフィールドを取り出し。

$ echo '1,2,3,4,5' | cut -f -3 -d ','
1,2,3

3番目以降のフィールドを取り出し。

$ echo '1,2,3,4,5' | cut -f 3- -d ','
3,4,5

• HowTo
• ハードディスクを乱数で完全に消去する (shred)
• 乱数ファイルの作成 (dd)
• 置換・行や文字の削除などの文字列操作 (sed)
• 文字列・数字のソート操作 (sort)
• CSVなどから必要なカラムの抜き出し (cut)
• 日数、月数を指定してdateを実行する (date)
• フォーマットを指定して日時を取得する (date)
• UNIXタイムスタンプと時刻の変換 (ruby)
• ユニークなファイルを作成する (mktemp)
• 読みやすいパスワードを自動生成する (pwgen)
• プログラムの実行時間を測定する (time)
• shellスクリプトからパスワードを変更する (chpasswd)
• フルパス文字列からディレクトリ文字列だけを抜き出す (dirname)
• フルパス文字列からファイル名や部分だけを抜き出す (basename)
• grepで文字列の一致する部分だけを抜き出す (grep)