パイプとリダイレクトをマスターしよう

コマンド1 | コマンド2 | コマンド3

# ファイル一覧を行数カウント
ls | wc -l

# ログからエラーを抽出して行数をカウント
cat app.log | grep "ERROR" | wc -l

# プロセス一覧から特定のプロセスを検索
ps aux | grep "node"

# ファイル一覧をソートして表示
ls -la | sort -k5 -rn | head -10

# アクセスログの解析：IPアドレス別のアクセス数 Top 10
cat access.log | awk '{print $1}' | sort | uniq -c | sort -rn | head -10

# 処理の流れ:
# 1. cat access.log      → ログ全体を出力
# 2. awk '{print $1}'    → 1列目（IPアドレス）を抽出
# 3. sort                → アルファベット順にソート
# 4. uniq -c             → 連続する重複をカウント
# 5. sort -rn            → カウント数で降順ソート
# 6. head -10            → 上位10件を表示

# 標準出力をファイルに書き込み（上書き）
ls -la > file_list.txt

# 標準出力をファイルに追記
echo "new entry" >> log.txt

# 標準エラー出力をファイルに書き込み
find / -name "*.conf" 2> errors.txt

# 標準出力と標準エラー出力を別々のファイルに
command > output.txt 2> errors.txt

# 標準出力と標準エラー出力を同じファイルに
command > all.txt 2>&1
# または（bash 4+）
command &> all.txt

# ファイルを標準入力として渡す
sort < names.txt

# ヒアドキュメント（複数行をコマンドに渡す）
cat << 'EOF'
1行目
2行目
3行目
EOF

# ヒアストリング（1行をコマンドに渡す）
grep "pattern" <<< "search in this string"

# エラー出力を捨てる（正常出力だけ見たい）
find / -name "*.log" 2>/dev/null

# すべての出力を捨てる（実行だけしたい）
command > /dev/null 2>&1

# コマンドの成否だけ確認
if grep -q "pattern" file.txt 2>/dev/null; then
    echo "found"
fi

# コンパイル成功したらテスト実行
make && make test

# ディレクトリ作成してから移動
mkdir -p project && cd project

# 複数の前提条件
npm install && npm run build && npm run deploy

# ディレクトリがなければ作成
cd project || mkdir project

# コマンドが失敗した場合のフォールバック
which python3 || which python

# エラーメッセージを表示
rm important_file || echo "削除に失敗しました"

# 順番に実行（前のコマンドの結果に関係なく）
echo "start"; sleep 2; echo "done"

# クリーンアップ処理
cd /tmp; rm -f *.tmp; echo "cleaned"

# プロジェクトのセットアップ
mkdir -p my-project && cd my-project && git init || echo "セットアップに失敗"

# ビルドパイプライン
npm run lint && npm run test && npm run build || echo "ビルド失敗"

# 今日のエラーログをステータスコード別に集計
grep "$(date +%Y-%m-%d)" access.log \
  | awk '{print $9}' \
  | sort \
  | uniq -c \
  | sort -rn

# 1GB以上のファイルを検出
find / -type f -size +1G 2>/dev/null \
  | xargs -I {} du -sh {} \
  | sort -rh

# プロジェクト内のJavaScriptファイルの行数Top 10
find src/ -name "*.js" \
  | xargs wc -l \
  | sort -rn \
  | head -10

# 各著者のコミット数を集計
git log --format='%an' \
  | sort \
  | uniq -c \
  | sort -rn

# 途中結果を step1.txt, step2.txt に保存しつつ最終結果も得る
cat data.txt \
  | sort | tee step1_sorted.txt \
  | uniq -c | tee step2_counted.txt \
  | sort -rn | head -5

# まず1段階目を確認
cat data.txt | awk '{print $1}'

# OKなら次を追加
cat data.txt | awk '{print $1}' | sort

# さらに追加
cat data.txt | awk '{print $1}' | sort | uniq -c

# 完成
cat data.txt | awk '{print $1}' | sort | uniq -c | sort -rn | head -10