利用ガイド

オンラインLinux テキストツール — grep · awk · sed

貼り付けたログを grep で絞り、awk で列を抽出し、sed で置換、sort・uniq で重複を集計します。対応オプションでパイプを使います。

使い方

ログやテキストを「元のテキスト」に貼り付けます。この入力欄は複数行に対応します。
1行の「コマンド」欄に grep 'ERROR' などを入力します。grep 'ERROR' | sort | uniq -c のようにパイプで接続できます。
実行ボタンまたはコマンド欄の Ctrl+Enter（Mac は ⌘+Enter）で実行します。編集だけでは自動実行しません。実行中は停止できます。
結果を確認し、拡大表示やコピーで出力全体を利用します。元の入力は変更されません。
元のテキストやコマンドを変更したら再実行してください。それまでは以前の結果のコピー・拡大表示は無効です。各リセットは該当入力を消してフォーカスを戻します。

入力と結果の例

重複するエラーログを集計

入力例

元のテキスト:
ERROR host api
INFO host web
ERROR host api
ERROR host worker

コマンド:
grep 'ERROR' | sort | uniq -c

結果例

      2 ERROR host api
      1 ERROR host worker

背景知識

標準入力・出力とパイプ: 標準入力はコマンドが読むデータ、標準出力は結果です。パイプ(|)は前の結果を次の入力に渡します。grep が選んだ行だけを awk に渡すため、順序によって結果が変わります。
grep：行を検索: 条件に一致する行を選択します。既定は正規表現で、-F は文字列そのまま、-E は拡張正規表現です。grep -E 'ERROR|WARN' の引用符内の | は「または」を意味します。
awk：フィールド・条件・集計: 行をフィールドに分け、条件で選択し、合計などを計算します。既定は空白区切りで、$1 は最初、$3 は3番目、$0 は行全体です。-F で区切りを変え、END で最終集計を出力できます。
sed：置換・行削除: s/検索/置換/g は行内の一致箇所をすべて置換し、/条件/d は一致行を出力から除外します。sed '/DEBUG/d' は DEBUG 行を削除します。
sort・uniq：並べ替え・重複集計: sort -n は数値順、-r は逆順です。uniq は隣接する同じ行をまとめるため、全体の重複を数えるには先に sort を使います。uniq -c は件数を付け、sort -nr は件数の大きい順に並べます。
cut・tr：抽出・文字変換: cut は位置や区切り文字で抽出します。cut -d ',' -f 1 は最初のフィールドです。tr は文字を変換・削除し、tr a-z A-Z は ASCII 英字を大文字にします。
head・tail・wc：一部表示・件数: head -n 3 は先頭3行、tail -n 3 は末尾3行です。wc -l は改行数、-w は単語数、-c はバイト数です。末尾に改行がないと wc -l は見た目の行数より少なくなる場合があります。
引用符と正規表現: 空白やパイプを含む検索式・プログラムは引用符で囲みます。awk は awk '{print $1, $3}' のように単一引用符を使います。引用符内の | はコマンドを区切りません。. や * には正規表現の特別な意味があります。

注意事項

コマンド見出し横の対応コマンド・オプションボタンはページ移動せず説明を開きます。閉じる・Esc・外側クリックで閉じられます。詳細な対応範囲はこのガイドで確認できます。BusyBox 1.38.0を使用しGNU/Linuxとは動作が異なる場合があります。ツールページでは、ポップアップボタンの横にも対応コマンドとパイプ接続を表示します。ポップアップ内の使用ガイドリンクは、ホームでは現在の言語のツールガイドへ移動し、ツールページでは下の対応オプションの説明へ移動します。
貼り付けた内容が最初のコマンドの標準入力です。ファイル名は省略してください。PC・サーバーのファイルアクセス、シェル変数・コマンド置換、リダイレクト(>, <)、条件実行(&&, ||)は未対応で、| 接続のみ使えます。
awk の system()・getline・ファイル出力・プログラム内のコマンド接続、sed -i は未対応です。tr の [:space:] などの文字クラス、sort -k、wc -m、長いオプションも使えません。
C ロケール・バイト単位の処理です。非 ASCII の並べ替え、単語区切り、cut・tr の複数バイト文字処理は GNU UTF-8 環境と異なる場合があります。CSV 例はフィールド内にカンマ・引用符がない単純な形式向けです。
上限は元の UTF-8 テキスト1 MB、コマンド10,000文字、20段階、各段階の標準・エラー出力合計2 MB、実行開始から10秒です。上限に達したら入力や出力を減らしてください。
文法・実行エラーは失敗した段階を表示し、それ以降は実行しません。grep が一致を見つけない場合は正常な空の結果です。
入力・結果はページのメモリのみで処理し、保存・外部送信しません。実行時にこのサイトからエンジンを読み込み、別の Worker で処理します。再読み込み・移動で内容が消えるため、必要な結果は先にコピーしてください。
grep: -E 拡張正規表現, -F 文字列そのまま, -i 大文字小文字を無視, -v 一致を除外, -n 行番号, -c 件数, -o 一致部分, -w 単語全体, -x 行全体, -q 出力なし, -s エラー出力なし, -e 検索式, -m 最大一致数.
awk: -F フィールド区切り, -v 変数指定. sed: -n 既定出力なし, -E/-r 拡張正規表現, -e プログラム.
sort: -n 数値順, -r 逆順, -u 重複削除. uniq: -c 件数, -d 重複行のみ, -u 固有行のみ.
cut: -b バイト, -c 文字位置, -f フィールド, -d 区切り文字, -s 区切りのない行を除外. tr: -d 削除, -s 繰り返しを縮約, -c 集合を反転.
head/tail: -n 行数. wc: -l 改行数, -w 単語数, -c バイト数.

よくある質問

このオンラインツールはどんな作業に使えますか？

貼り付けたログを grep で絞り、awk で列を抽出し、sed で置換、sort・uniq で重複を集計します。対応オプションでパイプを使います。

ターミナルのコマンドをそのまま使えますか？

対応範囲内のコマンド・オプションのみ使えます。grep ERROR app.log は grep ERROR にし、ファイル内容を元の入力に貼り付けます。完全なシェルや GNU/Linux 環境ではありません。

sed は元のテキストを変更しますか？

削除・置換は出力だけに反映します。入力や PC・サーバーのファイルは変更せず、新しいファイルも書きません。結果をコピーして利用します。

編集しても結果が変わらないのはなぜですか？

手動実行なのでボタンまたは Ctrl+Enter で再実行してください。以前の結果は残りますが、再実行まではコピー・拡大できません。

一致がない場合や時間がかかる場合は？

grep の不一致は空の結果です。長い処理は停止するか10秒制限で終了します。条件を絞り、データを減らして再実行してください。

uniq -c で同じ値が何度も出るのはなぜですか？

uniq は隣接した同じ行だけをまとめます。sort | uniq -c で全体の重複を数え、sort -nr で件数の大きい順にできます。

Baro Workはログイン不要のツール集です。入力と結果をサイトサーバーやブラウザーに保存しません。翻訳・DNSの外部送信は各説明をご確認ください。

ホームですべてのツールを使う →