テキスト処理

nlコマンドでテキストファイルの各行に番号を付与する方法を説明します

joinコマンドで2つのソート済みファイルをキーフィールドで結合し、関連データを統合する方法を説明します

commコマンドで2つのソート済みファイルを比較し、共通部分や違いを抽出する方法を説明します

splitコマンドで大きなファイルを複数の小さいファイルに分割する方法を説明します

pasteコマンドで複数のファイルの行を横方向に結合する方法を説明します

はじめに こんにちは！今回はheadコマンドについて解説します。 headはファイルの先頭行を表示するコマンドです。ログファイルの最初の内容を確認したり、大きなファイルの構造を把握したり、毎日使う超基本的なコマンドですね。 「ファイルの最初だけ見る」って感じです。tailと対になるコマンドで、どちらもよく使います。 headコマンドとは headは、ファイルの先頭の行を表示する外部コマンドです。デフォルトでは最初の10行を表示します。 大きなファイル（ログファイルやデータファイル）の中身を確認する時に便利。全部読み込む必要がなく、サッと先頭だけ見られます。複数ファイルにも対応しており、それぞれのファイル名とともに内容が表示されます。 基本構文 1 head [オプション] ファイル名 ファイルの先頭行を表示します。デフォルトでは最初の10行が表示されます。 主なオプション オプション 説明 -n NUM 最初のNUM行を表示（デフォルト: 10） -n +NUM NUM行目以降を全て表示 -c NUM 最初のNUMバイトを表示 -q ファイル名ヘッダを表示しない（quiet） -v 常にファイル名ヘッダを表示（verbose） 使用例 例1: 基本的な使い方（先頭10行） 1 head /etc/passwd 実行結果: 1 2 3 4 5 6 7 8 9 10 root:x:0:0:root:/root:/bin/bash daemon:x:1:1:daemon:/usr/sbin:/usr/sbin/nologin bin:x:2:2:bin:/bin:/usr/sbin/nologin sys:x:3:3:sys:/sys:/usr/sbin/nologin sync:x:4:65534:sync:/bin:/bin/sync games:x:5:60:games:/usr/games:/usr/sbin/nologin man:x:6:12:man:/usr/share/man:/usr/sbin/nologin lp:x:7:4:lp:/var/spool/lpd:/usr/sbin/nologin mail:x:8:8:mail:/var/mail:/usr/sbin/nologin news:x:9:9:news:/var/spool/news:/usr/sbin/nologin デフォルトで最初の10行を表示します。 例2: 指定した行数を表示 1 head -n 5 /etc/passwd 実行結果: ...

はじめに こんにちは！今回はwcコマンドについて解説します。 wcはファイルの行数・単語数・文字数をカウントするコマンドです。ログファイルのサイズを確認したり、テキストデータの統計情報を調べたり、毎日使う超基本的なコマンドですね。 「ファイルの大きさを数える」って感じです。便利で使用頻度は高いですよ。 wcコマンドとは wcは、ファイルの行数・単語数・文字数（バイト数）を表示する外部コマンドです。“word count"の略ですね。 行数、単語数、バイト数などを一度に表示できます。複数ファイルに対応しており、合計も自動的に計算されます。パイプで標準入力から読み込むこともでき、他のコマンドとの組み合わせで非常に強力です。 基本構文 1 wc [オプション] ファイル名 ファイルの行数・単語数・文字数をカウント。デフォルトでは「行数 単語数 文字数 ファイル名」の順に表示されます。 主なオプション オプション 説明 -l 行数のみ表示（lines） -w 単語数のみ表示（words） -c バイト数のみ表示（bytes） -m 文字数のみ表示（chars） -L 最長行の長さを表示 --files0-from FILE ファイルリストをNUL区切りで読み込む 使用例 例1: 基本的な使い方（全てカウント） 1 wc /etc/passwd 実行結果: 1 41 102 2342 /etc/passwd 行数: 41、単語数: 102、文字数: 2342。デフォルトで全て表示されます。 例2: 行数のみ表示 1 wc -l /etc/passwd 実行結果: 1 41 /etc/passwd ファイルの行数が41行であることが分かります。最も使用頻度の高いオプション。 例3: 単語数のみ表示 1 wc -w file.txt 実行結果: ...

はじめに こんにちは！今回はxargsコマンドについて解説します。 xargsは標準入力から引数を構築して、別のコマンドに渡すコマンドです。findやgrepの結果を他のコマンドで処理したり、大量のファイルを一括操作したり、日々の運用を効率化する強力なコマンドですね。 「パイプの後ろでファイル名を受け取る」って感じです。実は複雑に見えますが、慣れると超便利ですよ。 xargsコマンドとは xargsは、標準入力から読み込んだ行をコマンドの引数に変換して実行する外部コマンドです。 通常のパイプ（|）は標準入力としてテキストを受け渡しますが、xargsはそれをコマンドの引数に変換します。find、grep、echoなどの結果をファイル名として他のコマンドに渡したい場合に非常に便利。大量のファイル操作を効率的に行えます。 基本構文 1 xargs [オプション] コマンド 標準入力から引数を読み込んで、指定したコマンドに渡します。デフォルトでは標準入力の各行が引数になります。 主なオプション オプション 説明 -I {} 占有文字列（デフォルト: スペース区切り） -n NUM 1回に渡す引数の最大個数 -d DELIM 区切り文字を指定（デフォルト: スペース/改行） -0 NUL文字で区切られた入力を処理 -p 実行前に確認を取る（prompt） -r 標準入力が空の場合は実行しない -t 実行するコマンドを表示 --no-run-if-empty 入力がない場合は実行しない 使用例 例1: findの結果をrmで削除 1 find . -name "*.tmp" | xargs rm 実行結果: 1 （マッチしたすべての.tmpファイルが削除される） 最も一般的な使い方。findで見つけたファイルをrmで一括削除。 例2: 確認付きで削除（-p オプション） 1 find . -name "*.tmp" | xargs -p rm 実行結果: 1 rm file1.tmp file2.tmp ? -pで実行前に確認。危険な操作の時に便利。 ...

はじめに こんにちは！今回はtailコマンドについて解説します。 tailはファイルの末尾を表示するコマンドです。ログファイルの最新情報を確認するときに、めっちゃよく使います。 「ファイルの最後の部分を見たい」ってときに便利。ログ監視の基本コマンドですね。 tailコマンドとは tailは、ファイルの最後の行を表示する外部コマンドです。デフォルトでは最後の10行を表示します。 アプリケーションやシステムのログファイルは容量が大きいことが多いので、tailで最新のログだけを確認します。-fオプションでリアルタイム監視も可能な、便利なコマンドです。 基本構文 1 tail [オプション] ファイル デフォルトではファイルの最後の10行を表示します。 主なオプション オプション 説明 -n 行数 表示する行数を指定（デフォルト10） -f ファイルを監視（追記されたら表示） -F -fと同様（削除・回転されたファイルも追跡） -c バイト 最後のバイト数を表示 -q ファイル名を表示しない --pid=PID プロセスが終了したら監視を中止 使用例 例1: 基本的なtail 1 tail /var/log/syslog 実行結果: 1 2 3 Jan 3 10:15:22 server kernel: [12345.678901] Out of memory: Kill process Jan 3 10:15:23 server kernel: [12345.679001] Killed process 5678 (python) （最後の10行が表示される） ログファイルの最後の10行を表示。 例2: 表示行数を指定 1 tail -n 20 /var/log/syslog 実行結果: ...

はじめに こんにちは！今回はlessコマンドについて解説します。 lessはテキストファイルを1ページずつ表示するコマンドです。ログファイルの確認、設定ファイルの閲覧、長いテキストの読み込みなど、毎日使う超基本的なコマンド。 「catより便利」って感じですね。ファイルが大きくても、サクサク閲覧できます。 lessコマンドとは lessは、テキストファイルをページング表示する外部コマンドです。ファイル全体をメモリに読み込まず、必要な部分だけを表示するため、大きなファイルでも軽快に動作します。 moreの改良版で、より多くの機能を提供。検索、ジャンプ、複数ファイルの閲覧など、ファイル確認時の最強の味方ですね。 基本構文 1 less [オプション] ファイル名 標準入力からのデータも受け取れます。 主なオプション オプション 説明 -N 行番号を表示 -S 長い行を切り詰め -i 検索で大文字・小文字を区別しない -x NUM タブを NUM スペースで表示 +NUM NUM行目から表示開始 +/パターン パターンが見つかった行から表示 使用例 例1: ファイルを表示 1 less /etc/passwd 実行結果: 1 （ファイル内容が1ページずつ表示される） ファイルを表示してスペースキーで次ページへ。 例2: 行番号付きで表示 1 less -N /var/log/syslog 実行結果: 1 2 1 Jan 3 10:00:00 ubuntu kernel: ... 2 Jan 3 10:00:01 ubuntu kernel: ... 行番号があると便利ですね。 ...