はじめに
基本のファイルコマンド
ls -la が隠しファイルを含むすべてのファイルを示します。cd ~ がホームへ、cd - が前のディレクトリへ切り替えます。mkdir -p が必要に応じて親ディレクトリを作ります。空でないディレクトリには rm -r が必要です。
# list files
ls -la # long format, all files
ls -lh # human-readable sizes
ls -lt # sort by modification time
# current directory
pwd
# change directory
cd /home/user
cd .. # go up one level
cd ~ # go home
cd - # go to previous directory
# create/remove directories
mkdir newdir
mkdir -p path/to/dir # create parents
rmdir emptydir
rm -r nonempty # remove recursivelyヘルプの使い方
man が主要なドキュメントシステムです。セクション:1=コマンド、2=システムコール、3=ライブラリ、4=デバイス、5=ファイル形式、8=管理。man -k(または apropos)が説明を検索します。--help が簡潔な要約を与えます。tldr が実用的な例を提供し、別途インストールします(npm install -g tldr)。
# manual pages
man ls # full documentation
man 5 crontab # section 5 (file formats)
man -k password # search by keyword (apropos)
# info pages (GNU tools, more detailed)
info coreutils
info ls
# quick help flags
command --help
ls --help
git --help
# tldr: community cheat sheets (install separately)
tldr tar
tldr find
# whatis: one-line description
whatis ls
# where is the binary / source / man page
whereis python3コマンド履歴とショートカット
!! が最後のコマンドを繰り返します(sudo !! が定番の「sudo を忘れた」解決策)。!N が履歴の N 番目のコマンドを実行し、!$ が最後の引数です。Ctrl+R が対話的な逆順検索です — もう一度押すとより古い一致を探します。履歴は ~/.bash_history に保存され、HISTSIZE がメモリ内のサイズ、HISTFILESIZE がファイルを制御します。
# history expansion
history # show command history
!! # repeat last command
sudo !! # repeat last command as root
!42 # run command #42 from history
!ls # run last command starting with ls
!$ # last argument of last command
!!:gs/old/new/ # substitute in last command
# search history (interactive)
# Ctrl+R then type to search backward
# clear history
history -c # clear current session
# edit ~/.bashrc HISTSIZE and HISTFILESIZE
# save and reload history
history -a # append to history file
history -r # reload from fileファイルの種類と識別
file がファイルのマジックバイトを検査し、本当の種類を判定します — 拡張子よりはるかに信頼できます。ls -F が種類の印を追記します(* 実行可能、/ ディレクトリ、@ シンボリックリンク、= ソケット)。stat が、3 つのタイムスタンプすべてを含む完全な inode のメタデータを示します:Access(atime)、Modify(mtime、コンテンツ)、Change(ctime、メタデータ)。
# identify file type by content (not extension)
file document.pdf # PDF document
file image.png # PNG image data
file script.sh # ASCII text executable
file /bin/ls # ELF 64-bit LSB executable
# file with multiple files
file *.txt
# show MIME type
file --mime-type video.mp4 # video/mp4
# ls -F shows type indicator
ls -F
# file* (executable)
# dir/ (directory)
# link@ (symlink)
# socket= (socket)
# stat: detailed file info
stat file.txt
# Size, Blocks, IO Block, Device, Inode, Links,
# Access/Modify/Change/Birth timesターミナルのナビゲーションショートカット
これらの Readline ショートカットは bash とほとんどのシェルで機能します。Ctrl+A/E が行の先頭/末尾へ跳び、Ctrl+W/U/K がテキストを削除します — Ctrl+Y が貼り戻します(kill ring)。Ctrl+R が履歴を検索し、Ctrl+L が画面を消去します。Ctrl+S が出力を凍結します(よくある「フリーズしたターミナル」の原因 — Ctrl+Q で再開)。これらを覚えれば、コマンドライン編集が劇的に速くなります。
# cursor movement
Ctrl+A # move to beginning of line
Ctrl+E # move to end of line
Ctrl+B # move back one char
Ctrl+F # move forward one char
# editing
Ctrl+D # delete char under cursor (or EOF/exit)
Ctrl+H # delete char before cursor (backspace)
Ctrl+W # delete word before cursor
Ctrl+U # delete from cursor to beginning
Ctrl+K # delete from cursor to end
Ctrl+Y # paste (yank) deleted text back
# job control
Ctrl+C # send SIGINT (interrupt)
Ctrl+Z # suspend (send SIGTSTP)
Ctrl+D # end of input / exit shell
# screen
Ctrl+L # clear screen (same as clear)
Ctrl+S # stop output (freeze)
Ctrl+Q # resume output
# Alt shortcuts
Alt+B / Alt+F # move back/forward by word
Alt+Backspace # delete word backward環境変数
環境変数は、export されると子プロセスに継承されます。$PATH がシェルがコマンドを探す場所を決めます — コロンで区切られた順にディレクトリが検索されます。~/.bashrc は対話的な非ログインシェルで source され、~/.profile や ~/.bash_profile はログインシェルでです。変更を適用するため、編集後は必ずファイルを source しましょう。展開なしで単一の変数を確認するには printenv VAR を使いましょう。
# view all environment variables
env
printenv
# view specific variable
echo $HOME
echo $PATH
echo $USER
# set a variable (current shell only)
MYVAR="hello"
echo $MYVAR
# export to child processes
export PATH="$PATH:/opt/bin"
export EDITOR=nano
# set and export in one step
export MYVAR="hello"
# unset a variable
unset MYVAR
# common variables
# $HOME user home directory
# $PATH command search path
# $USER current username
# $SHELL current shell path
# $PWD current working directory
# $OLDPWD previous directory
# $PS1 prompt string
# persistent: add to ~/.bashrc or ~/.profile
echo 'export EDITOR=vim' >> ~/.bashrc
source ~/.bashrcファイル操作
ファイルのコピー(cp)
cp がファイルをコピーします。ディレクトリには -r(または -R)が必要です。-i が上書き前に確認します(データ損失を避けるため推奨)。-p がメタデータを保持し、-a はアーカイブモードです(シンボリックリンクを含めすべて保持 — バックアップに理想的)。-u はソースが新しいときだけ更新します。上書きが危険なスクリプトでは必ず -i を使いましょう。
# copy a file
cp source.txt dest.txt
# copy to a directory
cp file.txt /backup/
# copy multiple files to a directory
cp file1.txt file2.txt /backup/
# copy directories recursively
cp -r src_dir/ dest_dir/
# interactive (prompt before overwrite)
cp -i file.txt /backup/
# preserve attributes (timestamps, permissions, ownership)
cp -p file.txt /backup/
cp -a src_dir/ dest_dir/ # archive mode (-rdp)
# only copy if source is newer
cp -u file.txt /backup/
# verbose (show what is being copied)
cp -v file.txt /backup/
# force overwrite
cp -f file.txt /backup/移動と名前変更(mv)
mv は移動と名前変更の両方です — データをコピーせずディレクトリエントリを更新します(同じファイルシステム上では即時)。-i が上書き前に確認します。mv -n が既存ファイルの上書きを防ぎます。rename コマンド(Debian/Ubuntu では Perl ベース)が正規表現で一括改名します — mv のループよりはるかに強力です。注意:rename の構文はディストリビューションによって異なりま す(util-linux 版と Perl 版)。
# rename a file
mv oldname.txt newname.txt
# move file to another directory
mv file.txt /target/dir/
# move multiple files
mv file1.txt file2.txt /target/dir/
# interactive (prompt before overwrite)
mv -i file.txt /target/
# force overwrite
mv -f file.txt /target/
# no overwrite (don't replace existing)
mv -n file.txt /target/
# move only if newer
mv -u file.txt /target/
# verbose
mv -v olddir/ newdir/
# rename batch with rename command
rename 's/\.txt$/.md/' *.txt
rename .JPG .jpg *.JPGファイルの削除(rm)
rm はファイルを恒久的に削除します(ゴミ箱はありません)。ディレクトリには -r が必要です。-rf は危険です — 確認なしで再帰的に削除するため、パスを必ず再確認しましょう。$VAR が空かもしれないとき、rm -rf / や rm -rf $VAR/ を実行してはいけません。復元可能な削除には trash-cli を検討しましょう。find -delete がパターンベースの削除にはより安全です — -delete なしで先にテストできるためです。
# remove a file
rm file.txt
# remove multiple files
rm file1.txt file2.txt
# interactive (prompt for each file)
rm -i file.txt
# force (ignore nonexistent, no prompt)
rm -f file.txt
# remove directory recursively
rm -r directory/
rm -rf directory/ # force + recursive (DANGEROUS)
# verbose
rm -v *.tmp
# remove files matching pattern
find . -name "*.bak" -delete
find . -name "*.log" -mtime +30 -delete
# safer alternative: trash-cli
trash-put file.txt
trash-list
trash-restoreファイルの作成(touch)
touch が空のファイルを作るか、既存ファイルのタイムスタンプを更新します。オプションなしだと、atime と mtime の両方を現在時刻に設定します。-t が特定のタイムスタンプを設定し、-r が参照ファイルからタイムスタンプをコピーします。コンテンツ付きのファイルを作るには、リダイレクト(>)か here-document を使いましょう。touch は、プレースホルダーファイルの作成や、make のターゲット再構築の強制によく使われます。
# create an empty file
touch newfile.txt
# create multiple empty files
touch file1.txt file2.txt file3.txt
# update access and modification time to now
touch existing.txt
# set specific time (YYYYMMDDHHMM format)
touch -t 202401011200 file.txt # Jan 1, 2024 12:00
# set only access time
touch -a file.txt
# set only modification time
touch -m file.txt
# use time from another file
touch -r reference.txt target.txt
# create file with content
echo "content" > file.txt
cat > file.txt << 'EOF'
line 1
line 2
EOFハードリンクとシンボリックリンク(ln)
ハードリンクは同じ inode(データ)を共有します — すべてのリンクが取り除かれるまで、1 つを削除してもデータは削除されません。ファイルシステムをまたげず、ディレクトリにもリンクできません。シンボリックリンクはパスの参照です — ターゲットが移動・削除されると壊れますが、ファイルシステムをまたぎディレクトリへもリンクできます。シンボリックリンクには ln -s(最も一般的)を使いましょう。readlink -f が実ファイルまでのチェーン全体を解決します。
# hard link (same inode, same filesystem only)
ln original.txt hardlink.txt
# symbolic link (symlink, path reference)
ln -s /path/to/target symlink_name
ln -s original.txt softlink.txt
# force recreate a symlink
ln -sf /new/target symlink_name
# symbolic link to a directory
ln -s /var/log /home/user/logs
# view link target
readlink symlink
readlink -f symlink # canonical absolute path
ls -l symlink # show what it points to
# find broken symlinks
find . -type l ! -exec test -e {} \; -print
# count hard links to a file
ls -li file.txt # 2nd column is link count
# remove a symlink
rm symlink_name
unlink symlink_nameファイルのメタデータ(stat、basename、dirname)
stat が完全な inode のメタデータを示します。basename と dirname がパスを分解します — ファイルリストを処理するスクリプトには不可欠です。realpath が相対パスとシンボリックリンクを絶対的な正規パスへ解決します。stat -c がカスタムの出力形式を可能にします(%n=名前、%s=サイズ、%y=mtime、%a=8 進の権限)— スクリプトで有用です。これらの道具が、パス操作のための壊れやすいパラメータ展開を置き換えます。
# stat: full file information
stat file.txt
# Size: 1024 Blocks: 8 IO Block: 4096
# Device: 801h/2049d Inode: 1234567
# Links: 1
# Access: (0644/-rw-r--r--) Uid: 1000 Gid: 1000
# Access/Modify/Change: 2024-01-01 12:00:00
# custom format
stat -c '%n %s bytes' file.txt
stat -c '%y' file.txt # modification time
# basename: extract filename from path
basename /var/log/syslog # syslog
basename /var/log/syslog.log .log # syslog
# dirname: extract directory from path
dirname /var/log/syslog # /var/log
# realpath: resolve to absolute path
realpath ../file.txt
realpath -s symlink # physical path (no symlink resolution)
# file size only
stat -c %s file.txt # bytes
du -h file.txt | cut -f1 # human-readableディレクトリ操作
ディレクトリの作成(mkdir)
mkdir -p が必要に応じて親ディレクトリを作り、ディレクトリが既に存在してもエラーにしません — 冪等なスクリプトには不可欠です。-m が権限を直接設定します(umask を上書き)。ブレース展開({a,b,c})と mkdir -p の組み合わせで、1 コマンドで複雑なディレクトリツリーが作れます。プロジェクト構造のスキャフォールディングの定番パターンです。
# create a single directory
mkdir newdir
# create nested directories
mkdir -p path/to/deep/dir
# create multiple directories
mkdir dir1 dir2 dir3
# create with specific permissions
mkdir -m 755 publicdir
mkdir -m 700 privatedir
# verbose output
mkdir -v newdir
# create parent dirs with permissions
mkdir -p -m 755 /opt/myapp/{bin,lib,etc}
# create a directory tree at once
mkdir -p project/{src,tests,docs}
mkdir -p project/src/{main,utils}
mkdir -p project/{src/{main,utils},tests,docs}ディレクトリの削除(rmdir、rm)
rmdir は空のディレクトリだけを削除します — 安全ですが限定的です。rm -r が空でないディレクトリを再帰的に削除します。rm -rf は最終手段です:必ず先にパスを確認しましょう。find -empty -delete のパターンが、データの入ったディレクトリに触れずに、空のディレクトリだけを削除します。スクリプトでは、うっかり / を削除しないよう、rm -rf の前に変数が空でないことを必ず確認しましょう。
# remove an empty directory
rmdir emptydir
# remove directory with contents
rm -r directory/
# force remove (no prompt)
rm -rf directory/
# remove empty directories recursively (find)
find . -type d -empty -delete
find . -type d -empty -exec rmdir {} \;
# remove directory with confirmation
rm -ri directory/
# safe removal pattern in scripts
DIR="/tmp/mydir"
if [ -n "$DIR" ] && [ -d "$DIR" ]; then
rm -rf "$DIR"
fi
# move to trash instead
trash-put directory/ディレクトリの一覧とツリー
ls -d */ がディレクトリだけを一覧します。tree が視覚的な階層を提供します — -L が深さを制限し、-I がパターンを除外します(node_modules/.git の除外に極めて有用)。大きなディレクトリツリーの素早い概観には、tree -d -L 2 を組み合わせましょう。ls -1(数字の 1)が 1 行 1 ファイルで一覧します — wc -l へのパイプでのカウントに有用です。
# list directory contents
ls -la # all files, long format
ls -lh # human-readable sizes
ls -lt # sort by time (newest first)
ls -lS # sort by size (largest first)
ls -lr # reverse order
ls -R # recursive listing
ls -d */ # list only directories
# tree view (install separately: apt install tree)
tree # show directory tree
tree -L 2 # limit depth to 2
tree -d # directories only
tree -a # include hidden files
tree -h # show file sizes
tree --dirsfirst # dirs before files
tree -I 'node_modules|.git' # ignore patterns
tree -H . -o tree.html # output as HTML
# count files in directory
ls -1 | wc -l
find . -maxdepth 1 -type f | wc -lディレクトリのサイズ(du)
du がディスク使用量を測ります。-s(summary)が合計だけを示し、-h が人間可読にします。du -sh */ が直下のサブディレクトリのサイズを与えます。sort -rh が人間可読のサイズで逆順にソートします(大きいものが先)。--exclude がパターンをスキップします。apparent-size とデフォルトの違い:apparent は論理的なファイルサイズを示し、デフォルトは実際に割り当てられたディスクブロックを示します(ブロックサイズにより大きくなり得ます)。
# size of current directory (total)
du -sh .
# size of specific directories
du -sh /var/log /tmp /home
# size of all subdirectories
du -sh */
# sort directories by size (largest first)
du -sh * | sort -rh
# find the 10 largest directories
du -sh * | sort -rh | head -10
# include hidden files/dirs
du -sh .[!.]*
# maximum depth
du -h --max-depth=1
du -h -d 1 # short form
# apparent size vs disk usage
du -sh --apparent-size file # logical size
du -sh file # actual disk blocks
# exclude directories
du -sh --exclude='*.log' .
du -sh --exclude=node_modules .ディレクトリスタック(pushd、popd)
pushd/popd がディレクトリのスタックを管理します — pushd が現在のディレクトリを保存して新しい場所へ移動し、popd が保存した場所へ戻ります。dirs がスタックを示します。これは cd -(2 つのディレクトリ間だけを切り替える)より強力です。複数のディレクトリ間を移動して戻る必要のあるスクリプトに有用です。+N 構文が位置による回転や削除を行います。
# push directory onto stack and cd into it
pushd /var/log
# pushes current dir, then cd to /var/log
# push another
pushd /tmp
# stack: /tmp /var/log /home/user
# pop back to previous directory
popd
# returns to /var/log
# list the directory stack
dirs
dirs -v # verbose (numbered)
dirs -c # clear the stack
# navigate by index
pushd +2 # rotate to 3rd entry
popd +1 # remove 2nd entry
# practical: save current dir, work, return
pushd /etc
cp config.conf ~/backup/
popd # back to where we were
# alternative: use cd - for simple toggle
cd /var/log
cd - # back to previous directoryファイルの閲覧
cat と tac
cat がファイル全体を stdout へ出力します — 小さなファイルには良いですが、大きなものには less/head を使いましょう。cat -n が行番号を付け、cat -A が隠れた文字(タブ、行末)を明らかにします — 書式問題のデバッグに有用です。tac が行の順序を逆にします(逆さの cat)。cat はファイルの連結や入力のリダイレクトにも使われます。大きなファイルを対話的に見るには、代わりに less を。
# display entire file
cat file.txt
# concatenate multiple files
cat file1.txt file2.txt > combined.txt
# display with line numbers
cat -n file.txt
# display with non-printing characters
cat -A file.txt # show tabs as ^I, line ends as $
cat -v file.txt # show non-printing chars
cat -e file.txt # show line ends as $
cat -t file.txt # show tabs as ^I
# append to a file
cat >> file.txt << 'EOF'
appended line
EOF
# tac: reverse line order
tac file.txt # last line first
# create file from stdin
cat > newfile.txt
# type content, Ctrl+D to endless ページャ
less が標準のページャです — 後方へのナビゲーションが可能なため、more よりはるかに優れています。キーバインドは vim 風です(j/k/g/G)。/ が前方を、? が後方を検索します。F で「フォローモード」(tail -f のように)に入り、ログを監視できます。lesspipe が設定されていれば、less は圧縮ファイルを自動的に扱います。v で現在のファイルが $EDITOR で開かれ、手早く編集できます。
# view a file
less file.txt
# view command output
dmesg | less
ls -la /etc | less
# navigation inside less:
# space / f forward one page
# b backward one page
# j / k down / up one line
# g go to beginning
# G go to end
# /pattern search forward
# ?pattern search backward
# n next match
# N previous match
# v open in editor ($EDITOR)
# F follow mode (like tail -f)
# q quit
# useful flags
less -N file.txt # show line numbers
less -S file.txt # chop long lines
less -i file.txt # case-insensitive search
less +/pattern file.txt # open at first match
# view compressed files
less file.gz # auto-decompresses (if lesspipe installed)head と tail
head がファイルの先頭を、tail が末尾を示します。リアルタイムでのログファイルの監視には、tail -f が不可欠です。tail -F(大文字)が、ファイルを開き直すことでローテーション(ログの改名/切り詰め)を扱います。head -n -N が最後の N 行以外のすべてを示します。大きなファイルでは、head/tail は即時です(ファイル全体を読みません)。
# first 10 lines (default)
head file.txt
# last 10 lines (default)
tail file.txt
# first N lines
head -n 20 file.txt
head -20 file.txt
# last N lines
tail -n 20 file.txt
tail -20 file.txt
# all but last N lines
head -n -5 file.txt # all except last 5 lines
# first N bytes
head -c 100 file.txt
tail -c 100 file.txt
# follow a log file (live updates)
tail -f /var/log/syslog
# follow with retry (handles log rotation)
tail -F /var/log/app.log
# show last 5 lines, then follow
tail -n 5 -f app.log
# multiple files
tail -n 5 file1.txt file2.txt特定の行の閲覧
sed -n 'Np' が特定の行番号を表示します。NR(レコード番号)を使う awk が、範囲と条件にはより柔軟です。(head; tail) のトリックが大きなファイルの両端を示します。nl と cat -n が行番号を付けます。hexdump/xxd がバイナリファイルを 16 進で表示します — 非テキストファイルの検査、ファイル形式のデバッグ、データの復旧に不可欠です。
# show line N (e.g., line 10)
sed -n '10p' file.txt
# show lines M to N
sed -n '10,20p' file.txt
awk 'NR>=10 && NR<=20' file.txt
# show first and last N lines
(head -5; echo "..."; tail -5) < file.txt
# show lines matching pattern
sed -n '/pattern/p' file.txt
awk '/pattern/' file.txt
# show every Nth line
awk 'NR % 3 == 0' file.txt # every 3rd line
sed -n '0~3p' file.txt # every 3rd line (GNU)
# number lines
nl file.txt
cat -n file.txt
grep -n "" file.txt
# show file in hex
hexdump -C file.bin
xxd file.bin
od -A x -t x1z file.bin単語と行のカウント(wc)
wc(word count)が、行(-l)、単語(-w)、バイト(-c)、文字(-m、エンコーディングを尊重)、最長行の長さ(-L)を報告します。複数ファイルが与えられると、ファイルごとのカウントと合計を示します。grep | wc -l のパターンが一致行を数えます — しかし grep -c の方が効率的です(パイプなし)。ファイル数のカウントには ls -1 | wc -l が手軽ですが、再帰的なカウントには find がより正確です。
# count lines, words, and bytes
wc file.txt
# 10 50 300 file.txt
# lines words bytes
# count lines only
wc -l file.txt
# count words only
wc -w file.txt
# count characters only
wc -m file.txt
# count bytes only
wc -c file.txt
# count the longest line length
wc -L file.txt
# count files in a directory
ls -1 | wc -l
find . -type f | wc -l
# count total lines in multiple files
wc -l *.py
# count matching lines (grep + wc)
grep "error" log.txt | wc -l
# count unique lines
sort file.txt | uniq | wc -lファイル検索
名前とタイプでの find
find が最も強力なファイル検索ツールです。-name が glob パターンでファイル名に一致し、-iname は大文字小文字を区別しません。-type がファイル種類でフィルタします(f=ファイル、d=ディレクトリ、l=シンボリックリンク)。-maxdepth が再帰を制限します(パフォーマンスに重要)。-not と -prune がパスを除外します。\( -name A -o -name B \) が OR で条件をグループ化します。シェルの glob 展開を防ぐため、パターンは必ず引用符で囲みましょう。
# search by name (case-sensitive)
find / -name "config.txt"
find . -name "*.py"
# case-insensitive name search
find . -iname "*.JPG"
# find by type
find . -type f -name "*.txt" # regular files
find . -type d -name "node_modules" # directories
find . -type l # symlinks
find . -type b # block devices
find . -type c # character devices
# find by path pattern
find . -path "*/src/*.test.js"
# find using regex (full path)
find . -regex ".*\.\(py\|js\)$"
# multiple name patterns
find . \( -name "*.py" -o -name "*.js" \)
# limit search depth
find . -maxdepth 2 -name "*.txt"
# exclude directories
find . -name "*.py" -not -path "*/venv/*"
find . -name "*.py" -prune -path "*/venv/*"時間とサイズでの find
時間ベースの検索:-mtime(日)、-mmin(分)です。-(未満)と +(より大きい)が値に接頭辞として付きます。-atime がアクセス時刻で、-ctime がメタデータ変更時刻です。サイズの接尾辞:c(バイト)、k(KB)、M(MB)、G(GB)。-perm 644 は完全一致で、-perm -u+x はユーザーの実行ビットを持つファイルに一致し、/4000 は任意の SUID ファイルに一致します。SUID ファイルの検出はセキュリティ監査の手法です。
# modified within last N days
find . -mtime -7 # < 7 days ago
find . -mtime +30 # > 30 days ago
find . -mtime 7 # exactly 7 days ago
# modified within N minutes
find . -mmin -60 # last 60 minutes
# accessed time (-atime / -amin)
find /var/log -atime -1 # accessed in last 24h
# changed (metadata) time
find . -ctime -1
# by size
find . -size +100M # larger than 100MB
find . -size -1k # smaller than 1KB
find . -size 10M # exactly 10MB
# empty files and directories
find . -empty -type f
find . -empty -type d
# by permissions
find . -perm 644 # exactly 644
find . -perm -u+x # has user execute
find / -perm /4000 2>/dev/null # SUID files (security audit)
# combine: large files modified recently
find /var/log -size +10M -mtime -7find の -exec と -delete
-exec が各結果に対しコマンドを実行します。{} がファイル名のプレースホルダーで、\; がファイルごとに 1 回コマンドを実行し、+ がファイルをバッチします(より効率的で、プロセス生成が少ない)。-delete はアトミックであるため、-exec rm より安全です。-delete を加える前に必ず -print でテストしましょう。-ok がファイルごとに確認を求めます。dirs-755-files-644 のパターンが、Web サーバーの権限の標準構成です。
# execute a command on each result (one per file)
find . -name "*.log" -exec ls -lh {} \;
# execute with + (batch, more efficient)
find . -name "*.log" -exec ls -lh {} +
# delete matched files
find /tmp -name "*.tmp" -type f -delete
# safer: delete with confirmation
find . -name "*.bak" -ok rm {} \;
# find and grep
find . -name "*.py" -exec grep "TODO" {} +
# find and chmod
find . -type d -exec chmod 755 {} \;
find . -type f -exec chmod 644 {} \;
# find and compress old logs
find /var/log -name "*.log" -mtime +30 -exec gzip {} \;
# find and move
find . -name "*.jpg" -exec mv {} /photos/ \;
# print then delete (verification)
find . -name "*.tmp" -print -deletelocate と which
locate が事前構築されたデータベース(updatedb が更新、通常は cron 経由)を検索します — find よりはるかに速いが古いことがあります。更新するには sudo updatedb を実行しましょう。which が $PATH の実行ファイルを見つけ、whereis はソースと man ページも見つけます。type がシェルがコマンドをどう解決するか示します(エイリアス、組み込み、ファイル)— シェルの組み込みには which より正確です。POSIX 移植可能な方法は command -v です。
# locate: fast file search using a pre-built database
locate config.txt
locate "*.conf"
locate -i readme # case-insensitive
locate -r "^/usr.*\.py$" # regex
locate -n 10 "*.log" # limit to 10 results
locate -c "*.py" # count matches only
# update the database (run as root)
sudo updatedb
# which: find a command's binary location
which python3 # /usr/bin/python3
which -a python3 # all matches in PATH
# whereis: binary, source, and man page
whereis python3
# python3: /usr/bin/python3 /usr/lib/python3 /usr/share/man/man1/python3.1.gz
# type: show how a command is resolved
type ls # ls is aliased to 'ls --color=auto'
type cd # cd is a shell builtin
type python3 # python3 is /usr/bin/python3
# find command in PATH
command -v python3find の実用レシピ
これらのレシピが find の実世界での力を示します。-printf がカスタムの出力整形を可能にします(%s=サイズ、%p=パス)。-newermt が日付文字列での変更時刻の一致に対応し、-newer が参照ファイルとの比較をします。壊れたシンボリックリンクの検出は、-exec 内の test -e を使います。拡張子別のファイル数のレシピが、find、sed、sort、uniq を組み合わせた、コードベースの素早い分析の定番パイプラインです。
# find the 10 largest files
find . -type f -exec ls -lhS {} + | head -10
find . -type f -printf '%s %p\n' | sort -rn | head -10
# find recently modified files (last 24h)
find /etc -mtime -1 -type f
# find files owned by a specific user
find /home -user alice -type f
find / -group developers -type f 2>/dev/null
# find files modified between two times
find . -newermt "2024-01-01" ! -newermt "2024-06-01"
# find files newer than a reference file
find . -newer reference.txt
# find and list with details
find . -name "*.conf" -exec ls -la {} \;
# find all broken symlinks
find . -type l ! -exec test -e {} \; -print
# find files with specific permissions
find /www -type f -perm 644 -exec chmod 664 {} \;
# count files by extension
find . -type f | sed 's/.*\.//' | sort | uniq -c | sort -rnテキスト検索(grep)
基本の grep パターン
grep がパターンに一致する行を見つけます。-i が大文字小文字を無視し、-w が完全な単語に一致し、-v が反転し、-c が数え、-n が行番号を付け、-l がファイル名を列挙し、-h がファイル名を抑制し、-o が一致部分だけを示します。デフォルトの grep は基本正規表現(BRE)を使います。-E で拡張正規表現(よりきれいな構文)を、-F で固定文字列(より速く、正規表現なし)を使いましょう。
# basic search (literal string)
grep "error" logfile.txt
# case-insensitive
grep -i "error" logfile.txt
# whole word match (avoids matching 'errors')
grep -w "error" log.txt
# invert match (lines NOT matching)
grep -v "debug" log.txt
# count matching lines
grep -c "error" log.txt
# show line numbers
grep -n "error" log.txt
# multiple files (shows filename:line)
grep "error" *.log
# suppress filename prefix
grep -h "error" *.log
# only show filenames with matches
grep -l "error" *.log
# only show matched portion
grep -o "https?://[^ ]+" urls.txt正規表現を使う grep
grep -E(または egrep)が拡張正規表現を使い、+、?、|、() がバックスラッシュなしで機能します。^ と $ が行の先頭/末尾にアンカーし、[] が文字クラスを定義し、{} が繰り返しを指定します。-P が Perl 互換正規表現(PCRE)を有効にし、\d、\w、\b、先読み・後読みが使えます — 強力 ですが GNU 固有です。-F はパターンを固定文字列として扱います(正規表現の解釈なし)— リテラル検索にはより速いです。
# extended regex (-E or egrep)
grep -E "error|warning|fatal" log.txt
# anchors
grep -E "^ERROR:" log.txt # lines starting with ERROR:
grep -E "completed$" log.txt # lines ending with completed
# character classes
grep -E "[0-9]{4}-[0-9]{2}-[0-9]{2}" dates.txt
grep -E "[A-Z][a-z]+" names.txt
# quantifiers
grep -E "ab+c" file.txt # one or more b
grep -E "ab*c" file.txt # zero or more b
grep -E "ab?c" file.txt # zero or one b
# alternation and grouping
grep -E "(cat|dog) food" file.txt
# PCRE (-P, GNU grep only)
grep -P "\d{3}-\d{4}" phones.txt
grep -P "(?<=foo)bar" file.txt # lookbehind
# fixed string (no regex, faster for literals)
grep -F "literal$string" file.txtgrep のコンテキストと出力
コンテキストのフラグ(-B、-A、-C)が周囲の行を示します — ログエントリの理解に不可欠です。--color が一致をハイライトします。-r が再帰的に検索し(シンボリックリンクを除外)、-R はシンボリックリンクを追います。--include/--exclude/--exclude-dir が検索対象のファイルをフィルタします — node_modules と .git は必ず除外しましょう。-a がバイナリファイルをテキストとして扱わせ、-I はスキップします。-rn が再帰と行番号を組み合わせます。
# show context lines
grep -B 2 "error" log.txt # 2 lines Before
grep -A 3 "error" log.txt # 3 lines After
grep -C 2 "error" log.txt # 2 lines Context (both)
# color highlight
grep --color=auto "error" log.txt
# recursive search
grep -r "TODO" ./src/
grep -R "TODO" ./src/ # follows symlinks
# include/exclude file patterns
grep -r --include="*.py" "import" .
grep -r --exclude="*.test.js" "TODO" .
grep -r --exclude-dir=node_modules "TODO" .
# binary files
grep -a "pattern" binary_file # treat as text
grep -I "pattern" . # skip binary files
# output only the match
grep -oE "[0-9.]+" data.txt
# line numbers in recursive search
grep -rn "function" src/パイプラインでの grep
[n]ginx のトリックが、grep が自分のプロセスに一致するのを防ぎます:括弧により、パターンがプロセスリスト内のリテラルの 'grep' 文字列に一致しなくなります。zgrep が圧縮ファイルを検索し、pgrep が特殊化されたプロセスの検索器です。grep -rl がパターンを含むファイルを列挙し、xargs grep へのパイプで、それらのファイルの中から別のパターンを検索できます — よくあるコード考古学の手法です。
# search command output
ps aux | grep nginx
ps aux | grep "[n]ginx" # trick: prevents matching grep itself
# search compressed logs
zcat log.gz | grep "error"
zgrep "error" log.gz # direct search
# chain multiple greps
cat log.txt | grep "error" | grep -v "timeout"
# extract and filter
grep -oE "[0-9.]+" response.txt | sort -n | uniq
# find processes (better than ps | grep)
pgrep -f "node server.js"
pgrep -fl "node" # full command line
# search history
history | grep "git rebase"
# find files containing pattern, then search more
grep -rl "config" . | xargs grep "database"
# count errors per hour
grep "ERROR" log.txt | grep -oE "[0-9]{2}:" | sort | uniq -c
# search and show filename + line
grep -rn "TODO" src/ | head -20grep の終了ステータスとスクリプティング
grep の終了ステータスがスクリプティングに理想的です:0(一致あり)、1(一致なし)、2(エラー)。-q(quiet)が純粋な条件チェックのために出力を抑制します。set -e のスクリプトでは、grep が 1(一致なし)を返すとスクリプトが終了するため、これを防ぐには '|| true' を使いましょう。カウントの返却は grep -c です。このスクリプティング能力により、grep がログ監視、検証、CI/CD チェックの積み木になります。
# grep exit codes: 0=match, 1=no match, 2=error
if grep -q "error" /var/log/syslog; then
echo "Errors found!"
# send alert, trigger recovery
fi
# silent check (-q), no output
grep -q "^$" file.txt && echo "has blank lines"
# count and branch
errors=$(grep -c "ERROR" log.txt)
if [ "$errors" -gt 10 ]; then
echo "Too many errors: $errors"
fi
# use in while loop
grep "pattern" file.txt | while read -r line; do
echo "Found: $line"
done
# grep with set -e (prevents exit on no-match)
set -e
grep "missing" file.txt || true
# validate input with grep
if echo "$input" | grep -qE "^[0-9]+$"; then
echo "valid number"
firipgrep(rg)— モダンな代替
ripgrep(rg)が、コード検索のための grep のモダンで高速な代替です。デフォルトで再帰的で、.gitignore を尊重し、大幅に速いです。-t/-T がファイルタイプでフィルタし(組み込みのタイプ定義)、-g が glob パターンを使います。grep と違い、rg はデフォルトで隠しファイルと gitignore されたファイルをスキップします — 上書きするには --hidden と --no-ignore を。インストールは:cargo install ripgrep か apt install ripgrep。
# basic search (recursive by default)
rg "pattern" # searches current dir
rg "pattern" src/ # search specific dir
# case-insensitive
rg -i "error"
# whole word
rg -w "error"
# show context
rg -C 3 "pattern" # 3 lines context
rg -B 2 -A 2 "pattern" # before and after
# file type filter
rg "TODO" -t py # Python files only
rg "TODO" -t py -t js # Python and JavaScript
rg "TODO" -T md # exclude Markdown
# glob patterns
rg "pattern" -g "*.py"
rg "pattern" -g "!tests/*" # exclude tests
# fixed string (no regex)
rg -F "literal$string"
# list files with matches
rg -l "pattern"
# count matches
rg -c "pattern"
# search hidden files
rg --hidden "pattern"
# multiline search
rg -U "start.*end" # dot matches newlinesテキスト処理
sed — ストリームエディタ
sed がテキストストリームを非対話的に編集します。s が置換し(g で全体)、d が削除し、p が表示します。-i がその場で編集します(必ず -i なしで先にテストするか、バックアップのために -i.bak を使う)。区切り文字は任意の文字にできます — スラッシュのエスケープを避けるため、パスには | や # を使いましょう。-E がよりきれいなキャプチャグループ構文の拡張正規表現を有効にします。sed は行ごとに処理します。
# substitute (replace first occurrence per line)
sed 's/old/new/' file.txt
# substitute all occurrences (global)
sed 's/old/new/g' file.txt
# case-insensitive (GNU sed)
sed 's/old/new/gi' file.txt
# in-place editing
sed -i 's/old/new/g' file.txt
sed -i.bak 's/old/new/g' file.txt # keep backup
# delete lines
sed '/^#/d' file.txt # delete comment lines
sed '/^$/d' file.txt # delete blank lines
sed '5d' file.txt # delete line 5
sed '5,10d' file.txt # delete lines 5-10
# print specific lines
sed -n '10,20p' file.txt # lines 10-20
sed -n '/pattern/p' file.txt # matching lines
# different delimiter for paths
sed 's|/usr/local|/opt|g' paths.txt
# extended regex with capture groups
sed -E 's/([0-9]{4})-([0-9]{2})-([0-9]{2})/\3\/\2\/\1/' dates.txt
# multiple commands
sed -e 's/a/A/g' -e 's/b/B/g' file.txtawk — 列処理
awk は列データのためのミニプログラミング言語です。$1、$2... がフィールドで、$0 が行全体、$NF が最後のフィールドです。-F が入力の区切りを設定し、OFS が出力を設定します。BEGIN が処理の前に、END が後に実行されます。NR がレコード(行)番号で、NF がフィールド数です。awk は CSV/TSV 処理、ログ分析、レポートに理想的です — cut よりはるかに強力です。
# print columns (default separator: whitespace)
awk '{print $1}' file.txt # first column
awk '{print $1, $3}' file.txt # columns 1 and 3
awk '{print $NF}' file.txt # last column
awk -F: '{print $1}' /etc/passwd # split on :
# filter and print
awk '$3 > 100' file.txt # col 3 > 100
awk '$1 == "ERROR" {print $2}' log # col 2 of ERROR lines
awk 'NR == 5' file.txt # 5th line only
awk 'NR >= 10 && NR <= 20' file.txt # lines 10-20
# BEGIN and END blocks (sum, average)
awk '{sum += $1} END {print sum}' nums.txt
awk '{sum += $2; count++} END {print sum/count}' data.txt
# field separator and output
awk -F, 'BEGIN {OFS="|"} {print $1, $2}' csv.txt
# count lines matching pattern
awk '/error/ {count++} END {print count}' log
# built-in variables: NR (row), NF (fields), FS, OFS
awk '{print NR, NF, $0}' file.txtcut と paste
cut がフィールド(-d 区切り付きの -f)か文字位置(-c)を取り出します。速いが限定的です — 引用符に対応しないため、引用符付きのカンマを含む CSV は壊れます。paste がファイルを横に並べてマージし、join が共通のソート済みフィールドでファイルを結合します(SQL の JOIN のように)。expand/unexpand がタブとスペースを相互変換します。複雑な CSV 処理には、awk か csvkit のような専用ツールを使いましょう。
# cut: extract fields by delimiter
cut -d: -f1 /etc/passwd # field 1, delimiter :
cut -d, -f2,3 data.csv # fields 2 and 3
# cut: extract character positions
cut -c1-5 file.txt # characters 1-5
cut -c1- file.txt # from char 1 to end
# cut: extract bytes (for multibyte)
cut -b1-10 file.txt
# paste: merge files line by line
paste file1.txt file2.txt # tab-separated
paste -d',' file1.txt file2.txt # comma-separated
# paste: serial (all lines of file1, then file2)
paste -s file1.txt # lines into one line
paste -s -d',' file1.txt file2.txt
# join: combine on a common field
join -t, -1 1 -2 1 file1.csv file2.csv
# expand/unexpand tabs
expand file.txt # tabs to spaces
unexpand -a file.txt # spaces to tabssort と uniq
sort が行を並べ替えます(-n 数値、-r 逆順、-h 人間可読、-k フィールド、-t 区切り)。uniq は「隣接する」重複だけを取り除きます — 必ず先に sort を通しましょう。uniq -c が数え、sort -rn が出現頻度の順位を与えます。comm が 2 つの「ソート済み」ファイルを比較します:-12 が共通を、-23 が 1 つ目だけに、-13 が 2 つ目だけにあるものを示します。sort | uniq -c | sort -rn のパターンが、定番の出現頻度分析パイプラインです。
# sort lines
sort file.txt # alphabetical
sort -n nums.txt # numeric
sort -rn nums.txt # reverse numeric
sort -h sizes.txt # human-readable (1K, 2M, 3G)
sort -R file.txt # random order
sort -u file.txt # sort + unique
# sort by field
sort -t: -k3 -n /etc/passwd # by 3rd field, numeric
sort -t, -k2 data.csv # by 2nd field
# sort by multiple keys
sort -k1,1 -k2n file.txt # key1 alpha, key2 numeric
# uniq: filter adjacent duplicates
sort file.txt | uniq # unique lines
sort file.txt | uniq -c # count occurrences
sort file.txt | uniq -d # only duplicates
sort file.txt | uniq -u # only unique lines
# top 10 most frequent lines
sort file.txt | uniq -c | sort -rn | head -10
# compare two sorted files
comm -12 <(sort a.txt) <(sort b.txt) # common lines
comm -23 <(sort a.txt) <(sort b.txt) # only in a
comm -13 <(sort a.txt) <(sort b.txt) # only in btr — 文字の変換
tr が文字を変換・削除します(正規表現ではなく — 文字の集合だけです)。-d が削除し、-s が繰り返しを詰め、-c が補集合(集合の反転)です。大文字小文字の変換、区切りの交換、データの清掃に最適です。tr ',' '\n' が CSV を 1 行 1 値へ変換し、tr -cd '0-9' が数字だけを取り出します。注意:tr は文字列ではなく文字で動くため、複数文字のパターンを置換できません — それには sed を。
# translate characters
echo "Hello" | tr 'a-z' 'A-Z' # HELLO (uppercase)
echo "Hello" | tr 'A-Z' 'a-z' # hello (lowercase)
# swap characters
echo "abc" | tr 'abc' 'bca' # bca
# delete characters
echo "hello" | tr -d 'l' # heo
echo "Hello World" | tr -d ' ' # HelloWorld
# squeeze repeated characters
echo "aaabbbccc" | tr -s 'abc' # abc
tr -s ' ' < file.txt # squeeze repeated spaces
# complement (delete everything except)
echo "Hello123" | tr -cd '0-9' # 123 (keep digits only)
echo "Hello123" | tr -cd 'A-Za-z' # Hello
# convert delimiter
echo "a,b,c" | tr ',' '\n' # a\nb\nc (one per line)
echo "a,b,c" | tr ',' '\t' # tab-separated
# ROT13 cipher
echo "Hello" | tr 'A-Za-z' 'N-ZA-Mn-za-m'
# remove non-printable characters
tr -cd '\11\12\15\40-\176' < file.txttee と column
tee が出力をファイルと stdout の両方へ分けます — パイプライン内でのロギングに不可欠です。sudo tee が、パイプライン全体を root で実行せずに、root を要求するファイルへ書き込めます。column -t がテキストをきれいな列へ整列させます(CSV の表示に最適)。-s が入力の区切りを、-o が出力の区切りを指定します。fmt と fold がテキストを再フローします — fmt が段落を結合し、fold が幅でハードラップします。
# tee: write to file AND stdout
echo "hello" | tee file.txt
echo "hello" | tee -a file.txt # append
# tee to multiple files
echo "data" | tee f1.txt f2.txt f3.txt
# tee in a pipeline (log while transforming)
ls -la | tee output.txt | grep ".py"
# tee with sudo (write to privileged file)
echo "config" | sudo tee /etc/myapp.conf
# column: format as aligned columns
column -t file.txt
echo -e "a b c\n1 2 3" | column -t
# column with custom delimiter
column -t -s, data.csv
column -t -s: /etc/passwd
# column with specific separator for output
column -t -o " | " file.txt
# fmt: reformat paragraph width
fmt -w 60 file.txt
# fold: wrap lines at width
fold -w 80 file.txt
fold -w 80 -s file.txt # break at spaces only権限と所有権
権限の表示
権限は 3 つのトリプレットです:所有者、グループ、その他。各位置が r(4)、w(2)、x(1) です。つまり 755 = rwxr-xr-x、644 = rw-r--r--。ディレクトリでは、x が「アクセスできる」(cd で入れる)を、r が「一覧できる」を、w が「ファイルを作成・削除できる」を意味します。8 進の権限の表示は stat -c '%a' です。ls -l の最初の文字がファイルの種類です(- ファイル、d ディレクトリ、l シンボリックリンク、b ブロック、c キャラクタ)。
# view file permissions
ls -l file.txt
# -rw-r--r-- 1 user group 1024 Jan 1 10:00 file.txt
# ^^^ ^^^ ^^^
# owner group others
# rwx r-x r-x = 755
# permission breakdown:
# - = regular file, d = directory, l = symlink
# r = read (4), w = write (2), x = execute (1)
# view all files in directory
ls -la
# view permissions recursively
ls -lR /var/www
# view in octal format
stat -c '%a %n' file.txt # 644 file.txt
stat -c '%a %n' *
# check current umask
umask # e.g., 0022
# directory permissions:
# r = list contents
# w = create/delete files
# x = access (cd into) directorychmod — 数値モード
数値(8 進)記法:各桁が所有者、グループ、その他を表します。r=4、w=2、x=1 — 合計しましょう。ディレクトリと実行ファイルには 755(rwxr-xr-x)、通常のファイルには 644(rw-r--r--)、プライベートなファイルには 600(rw-------)。Web サーバーの標準は、dirs=755、files=644 です。find ベースの再帰パターンが、ディレクトリとファイルへ異なる権限を適用します — chmod -R ではこれができません。
# numeric (octal) notation
chmod 755 script.sh # rwxr-xr-x
chmod 644 file.txt # rw-r--r--
chmod 600 secrets.txt # rw------- (private)
chmod 777 publicdir/ # rwxrwxrwx (DANGEROUS)
chmod 700 ~/.ssh # rwx------ (for SSH)
# common patterns
chmod 755 directory/ # dirs: owner full, others read+execute
chmod 644 file.txt # files: owner read+write, others read
chmod 600 config.env # sensitive files: owner only
chmod 666 shared.txt # everyone read+write (no execute)
chmod 444 readonly.txt # everyone read only
# recursive
chmod -R 755 project/
chmod -R 644 *.txt # won't work; use find
# recursive: dirs 755, files 644 (common web server setup)
find . -type d -exec chmod 755 {} \;
find . -type f -exec chmod 644 {} \;
# permission reference:
# 7=rwx 6=rw 5=rx 4=r 3=wx 2=w 1=x 0=nonechmod — シンボリックモード
シンボリック記法は漸進的な変更に読みやすいです:u/g/o/a(誰に)、+/-/=(何をするか)、r/w/x/X(何を)。X(大文字)は、実行ビットを既に持つディレクトリかファイルにだけ実行を設定します — 再帰的な chmod に最適です。--reference が他のファイルから権限をコピーします。ディレクトリのスティッキービット(+t)は、ファイルの所有者だけが自分のファイルを削除できることを意味します(/tmp で使用)。
# symbolic notation
chmod u+x script.sh # add execute for user
chmod g-w file.txt # remove write for group
chmod o+r file.txt # add read for others
chmod a+x script.sh # add execute for all (a=all)
# combined changes
chmod u+x,g-w,o=r file.txt # user +x, group -w, others = read only
chmod ug+x file.txt # add execute for user and group
chmod a=r file.txt # set everyone to read only
# copy permissions from reference
chmod --reference=template.txt file.txt
# recursive
chmod -R u+rwX,go+rX . # X = execute only for dirs/executables
# symbolic targets:
# u = user (owner)
# g = group
# o = others
# a = all (default)
# operators: + (add), - (remove), = (set exactly)
# permissions: r, w, x, X (execute if dir or already exec), s (SUID/SGID), t (sticky)
# set sticky bit on directory
chmod +t /tmp/shared
chmod 1777 /tmp/sharedchown と chgrp
chown が所有権を変更します(root か sudo が必要)。形式:owner:group — グループだけ変えるならグループを省き、グループだけ変えるなら所有者を(コロンと共に)省きましょう。-R がディレクトリへ再帰します。chgrp が chown :group のショートカットです。--from は、現在の所有者が一致するときだけ変更します(条件付き)。Web サーバーの標準は chown -R www-data:www-data です。シンボリックリンクには必ず -h を付け、ターゲットではなくリンクを変更しましょう。
# change owner
chown alice file.txt
chown alice file1.txt file2.txt
# change owner and group
chown alice:developers file.txt
chown alice:developers project/
# recursive
chown -R alice:developers project/
# change group only
chgrp developers file.txt
chown :developers file.txt # alternative
# verbose
chown -v alice file.txt
# reference (copy ownership from another file)
chown --reference=reference.txt file.txt
# change ownership only if currently owned by specific user
chown --from=bob alice file.txt
# symbolic links (by default, changes the link target)
chown -h alice symlink # change the link itself
# common patterns
chown -R www-data:www-data /var/www
chown root:root /etc/sudoers
# view ownership
ls -l file.txt # shows owner and group
stat -c '%U:%G' file.txt # just owner:groupumask
umask が、新しく作られるファイルとディレクトリのデフォルト権限を設定します。マスクです — ビットがデフォルト(ファイルは 666、ディレクトリは 777)から取り除かれます。よくある値:022(標準、ファイル 644/ディレクトリ 755)、077(プライベート、ファイル 600/ディレクトリ 700)、002(グループ共有、ファイル 664/ディレクトリ 775)。永続化には ~/.bashrc か /etc/profile に設定しましょう。注意:umask は権限を「追加」できず、取り除くだけです。
# view current umask
umask # e.g., 0022
umask -S # symbolic: u=rwx,g=rx,o=rx
# set umask
umask 022 # new files: 644, dirs: 755
umask 077 # new files: 600, dirs: 700 (private)
umask 002 # new files: 664, dirs: 775 (group-writable)
# how umask works:
# default file perms: 666 (rw-rw-rw-)
# default dir perms: 777 (rwxrwxrwx)
# umask is SUBTRACTED (mask removed)
# umask 022: file = 666-022 = 644, dir = 777-022 = 755
# umask 077: file = 666-077 = 600, dir = 777-077 = 700
# set permanently: add to ~/.bashrc
echo 'umask 022' >> ~/.bashrc
# for security-sensitive environments
umask 077 # only owner can access new files
# for shared group work
umask 002 # group members can write new files
# umask does not affect execute bit on files
# (files are created without execute by default)特殊権限(SUID、SGID、Sticky)
SUID(4xxx):プログラムがファイル所有者の権限で動きます — passwd が、root として /etc/shadow を変更するのにこれが必要です。SGID(2xxx):実行ファイルではグループの権限で動き、ディレクトリでは新しいファイルがディレクトリのグループを継承します(共有プロジェクトに有用)。スティッキービット(1xxx):ディレクトリでは、ファイルの所有者(またはディレクトリの所有者/root)だけがファイルを削除できます — /tmp で使用。SUID/SGID ファイルは権限昇格の経路になるため、定期的に監査しましょう。
# SUID (Set User ID): runs as file owner
chmod u+s /usr/bin/passwd # 4755 -> rwsr-xr-x
chmod 4755 myprogram
# SGID (Set Group ID): runs as group owner
chmod g+s /shared/dir # dirs: new files inherit group
chmod 2755 /shared/project
# Sticky bit: only file owner can delete
chmod +t /tmp # 1777 -> rwxrwxrwt
chmod 1777 /shared/upload
# view special permissions
ls -l /usr/bin/sudo
# -rwsr-xr-x (s in user position = SUID)
ls -ld /tmp
# drwxrwxrwt (t in others position = sticky)
# find SUID files (security audit)
find / -perm -4000 -type f 2>/dev/null
# find SGID files
find / -perm -2000 -type f 2>/dev/null
# find sticky directories
find / -perm -1000 -type d 2>/dev/null
# numeric special bits:
# 1 = sticky, 2 = SGID, 4 = SUID
# chmod 4755 = SUID + 755
# chmod 2755 = SGID + 755
# chmod 1777 = sticky + 777
# uppercase S/T means execute bit is NOT set (usually an error)
# rws = SUID + execute, rwS = SUID without executeユーザーとグループ
ユーザーの管理
useradd がユーザーを作ります(低レベル。Debian では adduser がより親切なラッパーです)。-m がホームディレクトリを作り、-s がシェルを設定し、-c がフルネームを設定し、-G が補助グループへ加えます。既存を取り除かずにグループへ追加するのは usermod -aG です(-G には必ず -a を付ける)。ホームディレクトリの削除は userdel -r、パスワードの設定は passwd です。/etc/passwd がユーザー情報を、/etc/shadow がパスワードのハッシュを保存します。
# add a new user
sudo useradd -m -s /bin/bash alice
# -m: create home directory
# -s: specify login shell
# add user with full options
sudo useradd -m -s /bin/bash -c "Alice Smith" -G sudo,docker alice
# set password
sudo passwd alice
# delete a user
sudo userdel alice
sudo userdel -r alice # remove home directory too
# modify user
sudo usermod -aG docker alice # append to group (-a = append)
sudo usermod -s /bin/zsh alice # change shell
sudo usermod -L alice # lock account
sudo usermod -U alice # unlock account
sudo usermod -l newname oldname # rename user
# view user info
id alice # uid, gid, groups
finger alice # detailed info (if installed)
# change login shell
chsh -s /bin/zsh
# list all users
cat /etc/passwd | cut -d: -f1
getent passwd | cut -d: -f1グループの管理
グループが、共有アクセスのためにユーザーを整理します。groupadd/groupdel/groupmod がグループを管理します。ユーザーを追加する標準的な方法が usermod -aG(グループへ追加)です — -a がなければ「すべての」補助グループを置き換えてしまいます。代替ツールは gpasswd です。/etc/group がグループの定義を保存します。newgrp が、別の主グループで新しいシェルを始めます(グループ所有であるべきファイルを作るときに有用)。
# create a group
sudo groupadd developers
# create group with specific GID
sudo groupadd -g 2000 developers
# delete a group
sudo groupdel developers
# modify group
sudo groupmod -n devs developers # rename
sudo groupmod -g 2001 developers # change GID
# add user to group
sudo usermod -aG docker alice # append to group
sudo gpasswd -a alice developers # alternative
# remove user from group
sudo gpasswd -d alice developers
sudo deluser alice developers # Debian/Ubuntu
# list groups
cat /etc/group | cut -d: -f1
getent group
# view groups for a user
groups alice
id alice
# set group administrator
sudo gpasswd -A alice developers
# temporarily switch primary group
newgrp developers # new shell with group as primary
# view group members
getent group developers # lists members
grep developers /etc/groupパスワードの管理
passwd がパスワードを変更します。-l がアカウントをロックし(ハッシュに ! を加える)、-u が解除します。-e が次回ログインでのパスワード変更を強制します。chage がパスワードの老化ポリシーを管理します:-M(最大日数)、-m(最小日数)、-W(警告日数)、-E(有効期限)。パスワードのハッシュは /etc/shadow(root のみ読める)に保存され、/etc/passwd にはありません。良いパスワードポリシーには、複雑性の要件と共に定期的な変更が要ります。
# change your own password
passwd
# change another user's password (requires root)
sudo passwd alice
# set password interactively
sudo passwd alice
# Enter new password: ******
# Retype new password: ******
# lock/unlock a password
sudo passwd -l alice # lock (prepends !)
sudo passwd -u alice # unlock
# force password change on next login
sudo passwd -e alice
sudo chage -d 0 alice
# set password aging policy
sudo chage -M 90 alice # max 90 days
sudo chage -m 7 alice # min 7 days between changes
sudo chage -W 7 alice # warn 7 days before expiry
sudo chage -E 2025-12-31 alice # expire on date
# view password aging info
chage -l alice
# password quality: /etc/login.defs
# PASS_MAX_DAYS 90
# PASS_MIN_DAYS 7
# PASS_MIN_LEN 12
# PASS_WARN_AGE 7
# check password hash in /etc/shadow
sudo grep alice /etc/shadowユーザー情報コマンド
whoami が現在のユーザー名を示し、id が uid/gid/グループを示します。who がログイン中の全ユーザーを列挙し、w が実行中のものも加えます。last が /var/log/wtmp からのログイン履歴を示し、lastb は /var/log/btmp からの失敗した試行を示します。getent passwd がユーザーデータベース(設定されていれば LDAP も含む)をクエリします。これらのコマンドは、システム管理とユーザー活動の監査に不可欠です。
# who am I
whoami # current username
id # uid, gid, groups
echo $USER # from environment
# who is logged in
who # all logged-in users
w # detailed (what they're doing)
users # just usernames
# last logins
last # recent logins
last -n 10 # last 10 logins
last alice # alice's logins
last reboot # reboot history
# failed login attempts
lastb # bad login attempts (requires root)
# user account info
finger alice # detailed info (if installed)
getent passwd alice # /etc/passwd entry
# group membership
groups # your groups
groups alice # alice's groups
id alice # uid, gid, all groups
# check if user exists
id alice && echo "exists" || echo "not found"
getent passwd alice
# list all users with home directories
getent passwd | awk -F: '{print $1, $6}'su と sudo
su がユーザーを切り替え(ターゲットユーザーのパスワードが必要)、sudo が root としてコマンドを実行します(自分のパスワードが必要)。su - がログインシェルを始めます(ターゲットユーザーのプロファイルをロード)。監査のため sudo が推奨です:コマンドが /var/log/auth.log に記録されます。visudo が安全に /etc/sudoers を編集します(保存前に構文を検証)。NOPASSWD のルールは便利ですがセキュリティを下げます。最後のコマンドを root として繰り返す sudo !! が — 定番の「sudo を忘れた」解決策です。
# switch to root
su # needs root password
su - # login shell (loads root's profile)
# switch to another user
su - alice # login as alice
su alice # as alice, keep current env
# run a single command as root
sudo command
sudo apt update
# run a command as another user
sudo -u alice command
sudo -u www-data php script.php
# edit a file as root
sudo vim /etc/fstab
sudoedit /etc/fstab # safer alternative
# sudo with environment
sudo -E command # preserve environment variables
# list sudo privileges
sudo -l # what can I run?
sudo -l -U alice # what can alice run?
# sudo configuration
sudo visudo # edit /etc/sudoers safely
# /etc/sudoers.d/ for individual rules
# alice ALL=(ALL) NOPASSWD: /usr/bin/systemctl restart nginx
# run previous command as root
sudo !! # classic fix for forgetting sudo
# sudo timeout: 5 min by default
sudo -v # extend timeout
sudo -k # kill timeout (require password next time)プロセス管理
ps — プロセスの一覧
ps がプロセスのスナップショットを示します。aux(BSD)と -ef(System V)が 2 つのよくあるスタイルです。'ps aux | grep' のパターンは遍在しています(grep への一致を避けるには [n]ginx のトリックを)。親子関係の表示は pstree です。メモリ使用量でのソートは --sort=-%mem です(リソースを消す犯人の発見)。主要な状態:R=実行中、S=スリープ、D=中断不可のスリープ、Z=ゾンビ、T=停止中。リアルタイムの監視には top か htop を使いましょう。
# list processes (BSD style)
ps aux # all processes, full format
ps aux | grep nginx # find specific process
# list processes (System V style)
ps -ef # all processes
ps -ef | grep python
# list processes in a tree
ps auxf # forest/tree view
pstree # dedicated tree tool
pstree -p # with PIDs
# show specific user's processes
ps -u alice
# show process by PID
ps -p 1234
ps -p 1234 -o pid,ppid,cmd
# custom output format
ps -eo pid,ppid,user,%mem,%cpu,cmd --sort=-%mem | head
# show threads
ps -eLf | grep java # show threads (LWP)
# ps output columns:
# PID process ID
# PPID parent process ID
# USER owner
# %CPU CPU usage
# %MEM memory usage
# VSZ virtual memory size (KB)
# RSS resident set size (KB)
# STAT process state (R=running, S=sleeping, Z=zombie)
# START start time
# TIME CPU time
# CMD commandtop と htop
top が組み込みのリアルタイムプロセスモニタです。主要なコマンド:M(メモリでソート)、P(CPU でソート)、k(kill)、q(終了)。-b(batch)モードがスクリプティング用にテキストを出力します。htop が優れた代替です(色付き、スクロール可能、マウス対応、ツリービュー)— インストールは apt install htop。包括的なシステム概観は glances です。何がリソースを消しているかの発見には、%CPU か %MEM でソートした top/htop が頼みの綱です。
# real-time process monitor
top
# top interactive commands:
# P sort by CPU usage
# M sort by memory usage
# N sort by PID
# T sort by running time
# k kill a process (enter PID)
# r renice (change priority)
# 1 show per-CPU stats
# u filter by user
# H show threads
# c toggle full command path
# W write settings to ~/.toprc
# q quit
# run top with specific sorting
top -o %MEM # sort by memory
top -o %CPU # sort by CPU
# batch mode (for scripts)
top -b -n 1 # one snapshot
top -b -n 1 | head -20 # top 20 processes
# monitor specific user
top -u alice
# htop: better interactive viewer (install separately)
htop # colorized, mouse support
htop -p 1234 # monitor specific PID
# glance: alternative system monitor
glances # needs installationkill と killall
kill が PID でシグナルを送り、killall/pkill が名前で送ります。まず必ず SIGTERM(デフォルト)を試しましょう — 優雅な後始末ができます。SIGKILL(-9)は強制的で即時です。プロセスが捕捉できないため、リソースが悪い状態に残ることがあります。最終手段として使いましょう。フルのコマンドラインの一致は pkill -f です。シグナルの一覧は kill -l です。「kill; sleep; kill -9」のパターンが、強制する前にプロセスに後始末の機会を与えます。
# send signal to a process by PID
kill 12345 # SIGTERM (graceful, default)
kill -15 12345 # SIGTERM explicitly
kill -9 12345 # SIGKILL (force, cannot be caught)
kill -HUP 12345 # SIGHUP (reload config)
# kill by name
killall nginx # kill all nginx processes
pkill -f "python app.py" # match full command line
pkill -u alice # kill all of alice's processes
# common signals
kill -l # list all signals
# SIGTERM (15) - graceful termination (default)
# SIGKILL (9) - force kill (cannot be caught)
# SIGINT (2) - interrupt (Ctrl+C)
# SIGHUP (1) - hangup (often reload config)
# SIGSTOP (19) - pause (cannot be caught)
# SIGCONT (18) - resume
# SIGUSR1/USR2 - user-defined signals
# graceful then forceful
kill 12345; sleep 2; kill -9 12345 2>/dev/null
# kill background job
kill %1 # kill job 1
# find and kill by port
fuser -k 8080/tcp # kill process using port 8080
kill $(lsof -t -i:8080) # alternativeバックグラウンドジョブとジョブ制御
& を付けるとバックグラウンドで実行されます。アクティブなジョブの一覧は jobs で、前面と背面の間の移動は fg/bg です。Ctrl+Z が前面のジョブを一時停止させます。wait がバックグラウンドジョブの完了を待ちます。nohup と disown の両方が、ターミナルを閉じてもプロセスが死なないようにします — 新しいコマンドには nohup、既に実行中のものには disown です。永続的な作業には、代わりに tmux や screen を使いましょう。
# run in background (append &)
sleep 100 &
# [1] 12345 (job 1, PID 12345)
# list jobs
jobs
jobs -l # with PIDs
# bring to foreground / send to background
fg # foreground the current job
fg %1 # foreground job 1
bg %2 # background job 2
# Ctrl+Z: suspend foreground job, then resume in background
# Ctrl+Z sends SIGTSTP
bg # resume in background
# wait for background jobs
wait # wait for all
wait $! # wait for last background job
wait 12345 # wait for specific PID
# disown: detach from shell (survives logout)
long_task &
disown %1
# nohup: run immune to hangups (survives logout)
nohup ./script.sh > output.log 2>&1 &
# run at lower priority
nice -n 10 ./backup.sh &
# parallel execution
cmd1 & cmd2 & cmd3 &
wait # wait for all to finishnice と renice — プロセスの優先度
nice の値は -20(最高優先度)から 19(最低)の範囲です。通常のユーザーは優先度を下げること(正の値)しかできず、root は上げられます(負の値)。デフォルトは 0 です。nice が優先度付きでプロセスを始め、renice が実行中のプロセスを変えます。I/O 集中のタスクでは、ionice がディスク I/O の優先度を制御します(クラス:1=リアルタイム、2=ベストエフォート、3=アイドル)。CPU 使用量の絞り込みは cpulimit です — 干渉すべきでないバックグラウンドタスクに有用です。
# nice: start a process with adjusted priority
nice ./script.sh # default: +10 (lower priority)
nice -n 10 ./backup.sh # priority 10 (lower)
nice -n -5 ./critical.sh # higher priority (needs root)
# renice: change priority of running process
renice 5 -p 12345 # PID 12345 to priority 5
renice 10 -u alice # all of alice's processes
renice -5 -p 12345 # higher priority (needs root)
# view priorities
ps -l # NI column shows nice value
top # NI column
# nice values:
# -20 highest priority (most favorable)
# 0 default
# 19 lowest priority (least favorable)
# only root can set negative (higher) priority
# practical: run CPU-intensive task at low priority
nice -n 19 make -j4 &
# ionice: I/O priority
ionice -c 3 ./backup.sh # idle I/O priority
ionice -c 2 -n 7 ./backup.sh # best-effort, low
# cpulimit: limit CPU usage (install separately)
cpulimit -p 12345 -l 50 # limit to 50% CPU/proc ファイルシステム
/proc は、カーネルとプロセスの情報を公開する仮想ファイルシステムです(ディスク保存なし)。プロセスごとのデータは /proc/PID/ にあり、ハードウェアは /proc/cpuinfo と /proc/meminfo が示します。/proc/sys/ が調整可能なカーネルパラメータを含みます(sysctl と等価)。/proc/sys/ への書き込みがカーネル設定を即座に変えます(永続化には sysctl を使いましょう)。現在マウントされているファイルシステムは /proc/mounts が示します。これが、ユーザー空間とカーネルの間の主要なインターフェースです。
# /proc: virtual filesystem with kernel/process info
# process info by PID
cat /proc/1234/status # process status
cat /proc/1234/cmdline # command line (null-separated)
ls -l /proc/1234/fd/ # open file descriptors
cat /proc/1234/environ # environment variables (null-separated)
# system info
cat /proc/cpuinfo # CPU information
cat /proc/meminfo # memory information
cat /proc/version # kernel version
cat /proc/uptime # uptime in seconds
cat /proc/loadavg # load average
# network info
cat /proc/net/tcp # TCP connections
cat /proc/net/dev # network interface stats
# kernel settings
ls /proc/sys/ # sysctl parameters
cat /proc/sys/net/ipv4/ip_forward
echo 1 > /proc/sys/net/ipv4/ip_forward # enable IP forwarding
# mount info
cat /proc/mounts # mounted filesystems
cat /proc/filesystems # supported filesystem types
# view process memory maps
cat /proc/1234/maps # memory mappings
pmap 1234 # formatted versionシステム情報
uname と hostname
uname がカーネル情報を示します(すべては -a)。hostname がシステム名を表示・設定します — 永続化は hostnamectl set-hostname です。ディストリビューションの識別の標準的な方法が /etc/os-release です(モダンな Linux すべてで機能します)。詳細な CPU アーキテクチャ情報は lscpu、BIOS/SMBIOS データの読み取りは dmidecode です。これらのコマンドが、システム管理タスクで何を扱っているか理解するための最初のステップです。
# kernel and system info
uname # kernel name: Linux
uname -a # all info
uname -r # kernel release: 5.15.0-91-generic
uname -m # machine hardware: x86_64
uname -n # network node (hostname)
uname -p # processor type
uname -o # operating system: GNU/Linux
# hostname
hostname # current hostname
hostname -f # fully qualified domain name
hostname -I # all IP addresses
# set hostname (persistent)
sudo hostnamectl set-hostname myserver
# distribution info
cat /etc/os-release # distro name and version
lsb_release -a # Ubuntu/Debian specific
cat /etc/debian_version # Debian version
# kernel version
cat /proc/version
dmesg | grep "Linux version"
# system architecture
arch # e.g., x86_64
dpkg --print-architecture # Debian/Ubuntu
# BIOS/hardware info
sudo dmidecode -t system # system info
sudo dmidecode -t bios # BIOS info
lshw # hardware list
lscpu # CPU detailsdf — ディスクの空き容量
df がファイルシステムのディスク容量を報告します。-h(人間可読)は不可欠です。-T がファイルシステムのタイプ(ext4、xfs、btrfs、tmpfs、nfs)を示し、-i が inode の使用量を示します — 空き容量があっても inode が尽きるとファイルを作れません(多くの小さなファイルでよくあります)。ファイルシステムタイプの除外は -x です(tmpfs のような仮想ファイルシステムのフィルタに有用)。ディスクが満杯のときは、まず df -h を確認し、次に du で容量を消すディレクトリを見つけましょう。
# show disk space for all filesystems
df # all mounted filesystems
df -h # human-readable (K, M, G)
df -H # SI units (KB, MB, GB)
# specific filesystem
df -h /home # space for /home
df -h /dev/sda1 # specific device
# filesystem type
df -T # show type (ext4, xfs, tmpfs, etc.)
df -Th # human-readable + type
# exclude specific types
df -x tmpfs -x devtmpfs # exclude virtual filesystems
# inodes (file count limit)
df -i # inode usage
df -ih # human-readable inode usage
# local filesystems only
df -l
# show total
df -h --total
# find the filesystem using the most space
df -h | sort -rh -k5 | head
# real-time: watch disk space
watch -n 5 df -hdu — ディスク使用量
du がディスク使用量を測ります。-s(summary)が合計だけを示し、-h が人間可読です。直下のサブディレクトリのサイズは du -sh */、人間可読値でのソートは sort -rh です。論理的なファイルサイズと実際のディスクブロックの対比は --apparent-size が示し、パターンのスキップは --exclude です。ディスク容量を消しているものの発見のワークフロー:df -h(どのファイルシステムが満杯か)→ du -sh *(どのディレクトリか)→ find(どのファイルか)。
# size of current directory
du -sh .
# size of specific directories
du -sh /var/log /tmp /home
# size of all immediate subdirectories
du -sh */
du -sh * | sort -rh # sorted largest first
# top 10 largest directories
du -sh * | sort -rh | head -10
# maximum depth
du -h -d 1 # depth 1 only
du -h --max-depth=2
# include hidden files
du -sh .[!.]*
# apparent size (logical, not disk blocks)
du -sh --apparent-size file
# exclude patterns
du -sh --exclude='*.log' .
du -sh --exclude=node_modules .
# total of multiple directories
du -sh /var/log /var/lib /tmp | tail -1
# find largest files (not just directories)
find / -type f -exec ls -lhS {} + 2>/dev/null | head -10
find . -type f -printf '%s %p\n' | sort -rn | head -10
# sort all subdirectories by size
du -sh ./*/* | sort -rh | head -20free — メモリ使用量
free がメモリ使用量を示します。最も意味があるのは「available」の列です — スワッピングなしで新しいアプリを起動できるメモリ量を推定します。Linux は意図的に空き RAM をディスク読み取りを速くするためのキャッシュ(buff/cache)に使います。これは要求次第で取り戻されるため、free が低いのは正常です。スワップの使用量は監視すべきです — 活発なスワッピング(vmstat の si/so)を伴う高いスワップ使用量が、メモリ圧迫を示します。
# show memory usage
free # in KB
free -h # human-readable
free -m # in MB
free -g # in GB
# continuous update
free -h -s 1 # update every 1 second
watch -n 1 free -h # alternative
# output:
# total used free shared buff/cache available
# Mem: 16G 4G 2G 0.5G 10G 11G
# Swap: 8G 0G 8G
# detailed memory info
cat /proc/meminfo
# key fields:
# total total RAM
# used used by applications
# free completely free
# buff/cache kernel buffers and page cache
# available estimate of memory available for new apps
# IMPORTANT: Linux uses free RAM for cache
# 'available' is more meaningful than 'free'
# Cache is reclaimed on demand, so don't panic if 'free' is low
# swap info
swapon --show # show swap devices
cat /proc/swaps
# clear cache (requires root, use with caution)
sudo sysctl vm.drop_caches=3 # free pagecache, dentries, inodes
# process memory usage
ps aux --sort=-%mem | head -10 # top memory consumersuptime とシステム負荷
uptime がシステムの稼働時間と負荷平均(1/5/15 分の平均)を示します。負荷平均が CPU を待つプロセスの平均数を表すため — 一般に CPU コア数を下回るべきです。リアルタイムの CPU、メモリ、I/O の統計は vmstat が示します — 「r」の列(実行可能なプロセス)と「si/so」(スワップの入/出)が主要な指標です。詳細な I/O と履歴データは、sysstat パッケージの iostat と sar が提供します。
# system uptime and load average
uptime
# 10:30:00 up 5 days, 3:21, 2 users, load average: 0.50, 0.35, 0.25
# load average: 1min, 5min, 15min
# = average number of processes waiting for CPU
# rule of thumb: should be < number of CPU cores
# check CPU count
nproc # number of CPU cores
lscpu | grep "^CPU(s):"
# detailed load and context switches
cat /proc/loadavg
# 0.50 0.35 0.25 2/500 12345
# vmstat: system stats over time
vmstat 1 5 # every 1 second, 5 times
# procs --memory-- ---swap-- -----io---- -system-- ------cpu-----
# r b swpd free buff cache si so bi bo in cs us sy id wa
# iostat: I/O statistics (needs sysstat package)
iostat 1 # every 1 second
iostat -x 1 # extended stats
# mpstat: per-CPU statistics
mpstat -P ALL 1
# sar: historical system activity
sar -u # CPU usage history
sar -r # memory usage history
# who is logged in
who
w # with what they're doingネットワーキング
ping と traceroute
ping が ICMP echo を使い到達可能性をテストし、レイテンシを測ります。-c が回数を制限します(なければ永遠に動きます)。宛先までの各ホップは traceroute が示します — 接続がどこで失敗するかの診断に有用です。traceroute と継続的な ping を組み合わせた mtr が(断続的な問題の診断に優れています)、DNS レコードのクエリは dig が行います(nslookup より詳細)。データを送らず TCP ポートが開いているかのテストは nc(netcat)-z です。
# test connectivity
ping google.com
ping -c 4 google.com # 4 packets then stop
ping -i 0.5 google.com # 0.5s interval
ping -W 2 google.com # 2s timeout per packet
# ping with timestamp
ping -D google.com # unix timestamps
# check if host is reachable
ping -c 1 -W 1 host && echo "up" || echo "down"
# trace network path
traceroute google.com
traceroute -n google.com # no DNS resolution (faster)
mtr google.com # traceroute + ping (continuous)
# trace with TCP (bypasses ICMP blocking)
tcptraceroute google.com 443
# DNS lookup
dig example.com
dig +short example.com # just the IP
dig MX example.com # mail records
dig NS example.com # name servers
dig @8.8.8.8 example.com # specific DNS server
# alternative DNS tools
nslookup example.com
host example.com
host -t MX example.com
# check open ports
nc -zv google.com 443 # check if port 443 is open
nc -zv google.com 80 443 22 # check multiple portsnetstat と ss
ss が netstat のモダンな代替です — より速く詳細です。プロセス名付きの listen 中の TCP ポートは -tlnp が示します(-p には root が必要)。ポートを使っているものの発見:ss -tlnp | grep :PORT か lsof -i :PORT。ifconfig/route の置き換えは ip(iproute2 パッケージ)です。重要:DNS 解決を防ぐ -n(はるかに速い)。アクティブな接続は「state established」を確認しましょう。netstat は非推奨ですが依然広く利用可能です。
# ss: modern socket statistics (replaces netstat)
ss -tlnp # listening TCP ports + process
ss -tunap # all TCP/UDP connections
ss -s # socket summary
# netstat: classic network statistics
netstat -tlnp # listening TCP ports
netstat -tunap # all connections
netstat -rn # routing table
netstat -i # interface statistics
# common ss/netstat flags:
# -t TCP
# -u UDP
# -l listening sockets only
# -n numeric (no DNS resolution, faster)
# -a all sockets
# -p show process using socket (needs root)
# -r routing table
# find what's listening on a port
ss -tlnp | grep :80
lsof -i :8080 # alternative
# check established connections
ss -tn state established
# show all connections to a specific host
ss -tn dst google.com
# view network interfaces
ip addr # modern
ip a # short form
ifconfig # legacy
# view routing table
ip route # modern
route -n # legacy
# view interface statistics
ip -s link
ifconfig eth0curl — HTTP クライアント
curl がコマンドラインの不可欠な HTTP クライアントです。-X がメソッドを設定し、-d が POST データを送り、-H がヘッダーを設定し、-L がリダイレクトを追い、-O がリモートのファイル名で保存し、-s が静かにします(スクリプティング用)、-w '%{http_code}' がステータスコードだけを取り出します。JSON API には、-H 'Content-Type: application/json' と -d を組み合わせましょう。Basic 認証は -u です。REST API のテストには、curl が普遍的な標準です。
# basic GET request
curl https://api.example.com/data
# save to file
curl -O https://example.com/file.zip # save with remote filename
curl -o file.zip https://example.com/file.zip # custom name
# follow redirects
curl -L https://short.url/abc
# HTTP methods
curl -X POST https://api.example.com/users
curl -X PUT -d '{"name":"Alice"}' https://api.example.com/users/1
curl -X DELETE https://api.example.com/users/1
# send data
curl -d "name=Alice&age=30" https://api.example.com/form
curl -H "Content-Type: application/json" \
-d '{"name":"Alice"}' https://api.example.com/users
# headers
curl -H "Authorization: Bearer TOKEN" \
-H "Accept: application/json" \
https://api.example.com/data
# verbose / headers only
curl -v https://example.com # verbose
curl -I https://example.com # headers only
# authentication
curl -u user:pass https://api.example.com # basic auth
curl --netrc-file ~/.netrc https://... # netrc
# download with progress bar
curl --progress-bar -O https://example.com/largefile.iso
# get HTTP status code only
curl -s -o /dev/null -w "%{http_code}" https://example.com
# retry on failure
curl --retry 3 --retry-delay 5 https://example.com
# pass query parameters
curl "https://api.example.com/search?q=linux&page=2"wget — ファイルのダウンロード
wget がファイルを非対話的にダウンロードします。-c が中断されたダウンロードを再開し(大きなファイルには不可欠)、-m が Web サイトをミラーし(リンク変換には -k)、-r が再帰し(深さは -l)、-i が URL をファイルから読みます。再帰/ミラーのダウンロードと再開には wget が curl より優れています — curl の再開は -C - です。帯域の絞り込みは --limit-rate です。wget がリダイレクトと Cookie を自動的に扱います。
# download a file
wget https://example.com/file.zip
# download with custom name
wget -O myfile.zip https://example.com/file.zip
# download in background
wget -b https://example.com/largefile.iso
# resume interrupted download
wget -c https://example.com/largefile.iso
# mirror a website
wget -m https://example.com
wget -m -k -K -E https://example.com # convert links for local viewing
# recursive download (limited depth)
wget -r -l 2 https://example.com
# download all files of a type
wget -r -A pdf https://example.com/documents/
# continue and retry
wget -t 5 --waitretry=10 https://example.com/file.zip
# quiet mode (no output)
wget -q https://example.com/file.zip
# download from a list of URLs
wget -i urls.txt
# authentication
wget --user=user --password=pass https://example.com/protected
# set user agent
wget --user-agent="Mozilla/5.0" https://example.com
# limit download speed
wget --limit-rate=200k https://example.com/file.zip
# ignore certificate errors
wget --no-check-certificate https://example.com/file.zipip と ifconfig
ip(iproute2 から)が ifconfig/route のモダンな置き換えです。アドレスは ip a、レイヤ 2 は ip link、ルーティングテーブルは ip route が示します。ip での変更は一時的です(再起動で失われる)— 永続化には、/etc/netplan/(Ubuntu)、/etc/network/interfaces(Debian)を編集するか、nmcli(NetworkManager)を使いましょう。ifconfig は非推奨ですが依然広く使われています。無線には iw/iwconfig を。
# view network interfaces (modern)
ip addr show # all interfaces
ip a # short form
ip a show eth0 # specific interface
# view link status
ip link show
ip -s link show eth0 # with statistics
# bring interface up/down
sudo ip link set eth0 up
sudo ip link set eth0 down
# assign IP address
sudo ip addr add 192.168.1.100/24 dev eth0
sudo ip addr del 192.168.1.100/24 dev eth0
# routing table
ip route show
ip route # short form
sudo ip route add default via 192.168.1.1
# view ARP table
ip neigh # neighbors (ARP)
arp -a # legacy
# DNS configuration
cat /etc/resolv.conf
# ifconfig (legacy, still common)
ifconfig # all interfaces
ifconfig eth0 # specific interface
sudo ifconfig eth0 192.168.1.100 netmask 255.255.255.0 up
# change MAC address
sudo ip link set dev eth0 address 00:11:22:33:44:55
# view wireless info
iwconfig # wireless interfaces
iw list # wireless capabilities
# network manager (desktop)
nmcli device status
nmcli connection showDNS ルックアップ(dig、nslookup)
dig が最も強力な DNS ルックアップツールです。簡潔な出力は +short です。よくあるレコードタイプ:A(IPv4)、AAAA(IPv6)、MX(メール)、NS(ネームサーバー)、TXT(テキスト/SPF)、CNAME(別名)。特定の DNS サーバーへのクエリは @server、逆引きは -x、ルートサーバーからの完全な解決パスは +trace が示します。より簡単な代替は host です。DNS 伝播の確認は、複数のサーバー間で結果を比較しましょう。
# dig: detailed DNS lookup
dig example.com
dig +short example.com # just the IP address
dig example.com A # A record (IPv4)
dig example.com AAAA # AAAA record (IPv6)
dig example.com MX # mail exchange
dig example.com NS # name servers
dig example.com TXT # TXT records (SPF, etc.)
dig example.com SOA # start of authority
# query specific DNS server
dig @8.8.8.8 example.com
dig @1.1.1.1 example.com MX
# reverse DNS lookup
dig -x 1.2.3.4
dig -x 8.8.8.8 +short
# trace DNS resolution path
dig +trace example.com
# JSON output (for scripting)
dig +json example.com
# nslookup: simpler alternative
nslookup example.com
nslookup example.com 8.8.8.8 # use specific server
# host: concise output
host example.com # IP address
host -t MX example.com # mail records
host -t NS example.com # name servers
host 8.8.8.8 # reverse lookup
# check DNS propagation
# compare results from multiple servers
for dns in 8.8.8.8 1.1.1.1 9.9.9.9; do
echo "=== $dns ==="
dig @$dns example.com +short
done
# flush DNS cache
sudo systemd-resolve --flush-caches # systemd
sudo resolvectl flush-caches # newer systemdパッケージ管理
apt(Debian/Ubuntu)
apt が dpkg/apt-get(Debian/Ubuntu)の使いやすいフロントエンドです。install/upgrade の前には必ず apt update を実行し、パッケージリストを更新しましょう。upgrade はパッケージを維持し、full-upgrade は依存を解決するためパッケージを取り除くことがあります。設定ファイルの除去は purge、孤立した依存の清掃は autoremove です。どのパッケージがファイルを所有するかは dpkg -S が見つけます。パッケージのアップグレード防止は apt-mark hold です(バージョンの固定に有用)。
# update package list
sudo apt update
# upgrade installed packages
sudo apt upgrade # upgrade without removing
sudo apt full-upgrade # upgrade, may remove packages
sudo apt dist-upgrade # alias for full-upgrade
# install packages
sudo apt install nginx
sudo apt install nginx=1.18* # specific version
sudo apt install -y nginx # no prompt
# remove packages
sudo apt remove nginx # remove but keep config
sudo apt purge nginx # remove including config
sudo apt autoremove # remove unused dependencies
sudo apt clean # clean downloaded packages
# search for packages
apt search nginx
apt-cache search web server
# show package info
apt show nginx
apt-cache policy nginx # available versions
# list installed packages
apt list --installed
dpkg -l | grep nginx
# list files installed by a package
dpkg -L nginx
dpkg -S /usr/bin/curl # which package owns a file
# add PPA (Ubuntu)
sudo add-apt-repository ppa:deadsnakes/ppa
sudo apt update
# hold package (prevent upgrade)
sudo apt-mark hold nginx
sudo apt-mark unhold nginxdnf/yum(RHEL/Fedora/CentOS)
モダンな Fedora/RHEL/CentOS 8+ では、dnf が yum を置き換えます。コマンドは似ています。どのパッケージがファイルを提供するかは dnf provides(または yum provides)が見つけます — 欠けている依存の発見に不可欠です。インストール済みパッケージのファイル一覧は rpm -ql、ファイルの所有者は rpm -qf が見つけます。RHEL/CentOS への追加パッケージは EPEL が提供します。パッケージグループのインストールは dnf groupinstall です(Development Tools など)。多くのシステムでは、yum が dnf へのシンボリックリンクとして依然機能します。
# dnf: modern Fedora/RHEL/CentOS
sudo dnf install nginx
sudo dnf update # update all packages
sudo dnf upgrade # same as update
sudo dnf remove nginx
# search
dnf search nginx
dnf list available # all available packages
dnf list installed # installed packages
# package info
dnf info nginx
dnf provides /usr/bin/curl # which package provides a file
# clean cache
sudo dnf clean all
# group install
dnf groupinstall "Development Tools"
dnf group list
# yum: older CentOS/RHEL (still available)
sudo yum install nginx
sudo yum update
sudo yum remove nginx
yum search nginx
yum provides /usr/bin/curl
# enable EPEL repository (Extra Packages for Enterprise Linux)
sudo dnf install epel-release
# list dependencies
dnf repoquery --requires nginx
dnf repoquery --deplist nginx
# downgrade a package
sudo dnf downgrade nginx
# view package files
rpm -ql nginx # files installed by package
rpm -qi nginx # package info
rpm -qf /usr/bin/curl # which package owns filepacman(Arch Linux)
pacman が Arch Linux のパッケージマネージャです。不可欠なシステム更新コマンドが -Syu です(必ずシステム全体を更新し、部分的には決して)。-S がインストールし、-R が削除し、-Q がローカルをクエリします。未使用の依存と共に削除は -Rs、設定も取り除くのは -Rns です。Arch はローリングリリースです — 部分的なアップグレードはサポートされず、システムを壊し得ます。コミュニティのパッケージは、yay/paru のようなヘルパー経由で AUR(Arch User Repository)が提供します。
# update system
sudo pacman -Syu # sync repos + upgrade all
# ALWAYS update the full system on Arch
# install packages
sudo pacman -S nginx
sudo pacman -S --needed nginx # don't reinstall if up to date
# remove packages
sudo pacman -R nginx # remove package only
sudo pacman -Rs nginx # remove + unused deps
sudo pacman -Rns nginx # remove + deps + config
# search packages
pacman -Ss nginx # search repos
pacman -Qs nginx # search installed
# package info
pacman -Si nginx # info from repos
pacman -Qi nginx # info from installed
pacman -Ql nginx # list files
pacman -Qo /usr/bin/curl # which package owns file
# list orphaned packages
pacman -Qdt
# clean cache
sudo pacman -Sc # clean old packages
sudo pacman -Scc # clean all cache
# query local database
pacman -Q # all installed packages
pacman -Qe # explicitly installed
pacman -Qm # foreign (AUR) packages
# AUR (Arch User Repository)
# install yay or paru for AUR support
yay -S package-name # install from AUR
# downgrade a package
sudo pacman -U /var/cache/pacman/pkg/package-1.0-1.x86_64.pkg.tar.zstパッケージの検索
キーワード(apt/dnf search)やファイル(apt-file/dnf provides/pacman -F)によるパッケージの検索は、「command not found」が出たときに不可欠です。「どのパッケージがこのファイルを所有するか」のクエリ(dpkg -S / rpm -qf / pacman -Qo)が、何がインストールされているかの理解に非常に有用です。apt-file(Debian)と pacman -F(Arch)が、まだインストールされていないパッケージのファイルデータベースを検索します — 必要なヘッダーやライブラリを提供するパッケージの発見に有用です。
# Debian/Ubuntu
apt search keyword
apt-cache search keyword
apt list --installed | grep keyword
# RHEL/Fedora
dnf search keyword
yum search keyword
# Arch
pacman -Ss keyword
# search by file name/path
# Debian: apt-file (separate package)
sudo apt install apt-file
sudo apt-file update
apt-file find /usr/bin/curl
apt-file search curl.h
# RHEL/Fedora
dnf provides /usr/bin/curl
dnf provides *curl.h
yum whatprovides /usr/bin/curl
# Arch
pacman -F /usr/bin/curl
pacman -Fy # update file database first
# check if package is installed
dpkg -l | grep nginx # Debian
rpm -q nginx # RHEL
pacman -Q nginx # Arch
# list files installed by a package
dpkg -L nginx # Debian
rpm -ql nginx # RHEL
pacman -Ql nginx # Arch
# find which package owns a file
dpkg -S /usr/bin/curl # Debian
rpm -qf /usr/bin/curl # RHEL
pacman -Qo /usr/bin/curl # Arch
# show package dependencies
apt-cache depends nginx # Debian
dnf repoquery --requires nginx # RHEL
pacman -Si nginx # Archリポジトリの管理
リポジトリがパッケージのソースです。Debian/Ubuntu では、PPA(Personal Package Archives)がサードパーティのソフトウェアを提供します — パッケージを検証するため、常に署名鍵を加えましょう。カスタムリポジトリのファイルは /etc/apt/sources.list.d/ に置きます。RHEL/Fedora では、リポジトリの管理は dnf config-manager が行い、RHEL には EPEL が不可欠です。Arch では /etc/pacman.conf を編集します。悪意あるパッケージのインストールを防ぐため、GPG 鍵を必ず検証しましょう。設定されたリポジトリの表示は apt policy と dnf repolist です。
# Debian/Ubuntu: add repository
sudo add-apt-repository ppa:deadsnakes/ppa
sudo add-apt-repository "deb https://packages.example.com/ubuntu jammy main"
# remove repository
sudo add-apt-repository --remove ppa:deadsnakes/ppa
# add repository manually
echo "deb https://packages.example.com/ubuntu jammy main" | \
sudo tee /etc/apt/sources.list.d/example.list
# add signing key (Debian)
wget -qO- https://example.com/key.gpg | \
sudo gpg --dearmor -o /etc/apt/trusted.gpg.d/example.gpg
# list repositories
apt policy # show configured repos
grep -r "" /etc/apt/sources.list.d/
# RHEL/Fedora: enable repository
sudo dnf config-manager --add-repo https://example.com/repo.repo
sudo dnf install epel-release # enable EPEL
sudo dnf repolist # list enabled repos
sudo dnf repolist all # list all repos
# enable/disable a repo
sudo dnf config-manager --set-enabled epel
sudo dnf config-manager --set-disabled epel
# Arch: edit /etc/pacman.conf
# [custom]
# Server = https://example.com/$repo/os/$arch
# verify package integrity
dpkg --verify # Debian
rpm -Va # RHELサービス管理(systemd)
サービスの制御
systemctl が systemd のサービスを管理します。start/stop/restart が基本の操作です。reload が、完全な再起動なしで設定を再読み込みさせるシグナルを送ります(優雅)。現在の状態と最近のログは status が示します。mask が、サービスが(手動でさえ)開始されることを完全に防ぎます — disable より強いです。スクリプトで有用なのは is-active と is-enabled です(アクティブ/有効なら 0 を返します)。
# start/stop/restart services
sudo systemctl start nginx
sudo systemctl stop nginx
sudo systemctl restart nginx
sudo systemctl reload nginx # reload config without restart
# try-restart (only if running)
sudo systemctl try-restart nginx
# reload or restart (reload if possible, otherwise restart)
sudo systemctl reload-or-restart nginx
# send signal to service
sudo systemctl kill nginx
sudo systemctl kill -s HUP nginx
# check service status
sudo systemctl status nginx
systemctl is-active nginx # active/inactive
systemctl is-enabled nginx # enabled/disabled
systemctl is-failed nginx # failed/running
# show service logs (recent)
sudo systemctl status nginx
# mask a service (prevent from starting)
sudo systemctl mask nginx
sudo systemctl unmask nginx
# reset failed state
sudo systemctl reset-failed
# emergency: reboot/poweroff
sudo systemctl reboot
sudo systemctl poweroff
sudo systemctl halt
sudo systemctl suspendサービスの状態と詳細
systemctl status が包括的なビューを与えます:状態、PID、メモリ/CPU の使用量、最近のログ。ユニットファイル(上書きも含む)の表示は systemctl cat、元のファイルを修正せずに drop-in の上書きファイルを作るのは systemctl edit です — ベンダー提供のサービスのカスタマイズに安全です。ユニットファイル編集後は、変更を systemd に伝えるため daemon-reload を実行しましょう。サービスが何を要求するかは list-dependencies が示します。
# detailed status
systemctl status nginx
# Shows: loaded state, active state, recent log entries, cgroup info
# just the active state
systemctl is-active nginx # "active" or "inactive"
# is it enabled at boot?
systemctl is-enabled nginx # "enabled" or "disabled"
# check if service failed
systemctl is-failed nginx
# list dependencies
systemctl list-dependencies nginx
# show service file
systemctl cat nginx
systemctl cat nginx.service
# show service properties
systemctl show nginx
systemctl show -p ExecStart nginx
# view service file location
systemctl show -p FragmentPath nginx
# edit service file (override)
sudo systemctl edit nginx # creates override file
sudo systemctl edit --full nginx # edit full unit file
# reload systemd after editing unit files
sudo systemctl daemon-reload
# list sockets
systemctl list-sockets
# check all failed services
systemctl --failedサービスの enable/disable
enable が起動時にサービスが始まるようにします(シンボリックリンクを作る)ため、disable がシンボリックリンクを取り除きます。enable/disable と start/stop の組み合わせは --now です。利用可能なすべてのサービス(インストールされているが動いていないかもしれない)の一覧は list-unit-files、ロード/アクティブなものの一覧は list-units です。デフォルトターゲット(multi-user = テキストモード、graphical = GUI)が従来のランレベルを置き換えます。状態でのフィルタは --state= です。
# enable service to start at boot
sudo systemctl enable nginx
# enable and start in one command
sudo systemctl enable --now nginx
# disable (don't start at boot)
sudo systemctl disable nginx
# disable and stop in one command
sudo systemctl disable --now nginx
# re-enable (apply symlink changes)
sudo systemctl reenable nginx
# check if enabled
systemctl is-enabled nginx
# list enabled services
systemctl list-unit-files --state=enabled
# list all service unit files
systemctl list-unit-files --type=service
# list running services
systemctl list-units --type=service --state=running
# list all loaded services
systemctl list-units --type=service
# list services by state
systemctl list-units --type=service --state=failed
systemctl list-units --type=service --state=exited
# default boot target
systemctl get-default # usually graphical.target or multi-user.target
# change boot target
sudo systemctl set-default multi-user.target # text mode (runlevel 3)
sudo systemctl set-default graphical.target # GUI mode (runlevel 5)サービスの一覧とフィルタ
現在メモリにロードされているものの一覧は list-units、ディスクにインストールされているものの一覧は list-unit-files が示します。ユニットタイプ(service、socket、timer、mount、target)でのフィルタは --type、状態(running、exited、failed、enabled、disabled)でのフィルタは --state です。タイマー(systemd timers)が、cron ジョブの systemd ネイティブな代替です — 依存ベースのスケジューリングに対応し、list-timers で見えます。あるユニットに依存するものの表示は --reverse です。
# list all active units
systemctl list-units
# list only services
systemctl list-units --type=service
# list by state
systemctl list-units --type=service --state=running
systemctl list-units --type=service --state=exited
systemctl list-units --type=service --state=failed
# list all unit files (installed)
systemctl list-unit-files --type=service
# list by state (unit files)
systemctl list-unit-files --state=enabled
systemctl list-unit-files --state=disabled
systemctl list-unit-files --state=masked
# list by target (runlevel)
systemctl list-units --type=target
# list sockets
systemctl list-units --type=socket
systemctl list-sockets
# list timers (replaces cron for many tasks)
systemctl list-timers
systemctl list-timers --all
# list mounts
systemctl list-units --type=mount
# show all units (including inactive)
systemctl list-units --all
# show specific unit type
systemctl list-units --type=service --all
# count services by state
systemctl list-units --type=service --no-legend | wc -l
systemctl list-units --type=service --state=running --no-legend | wc -l
# find services that depend on a unit
systemctl list-dependencies --reverse nginxjournalctl — システムログ
journalctl が systemd のジャーナル(構造化ロギング)をクエリします。リアルタイムの追跡は -f、ユニット(サービス)でのフィルタは -u、起動でのフィルタは -b(-b -1 = 前回の起動)です。柔軟な時間式は --since/--until、優先度でのフィルタは -p(emerg から debug)です。ジャーナルは再起動をまたいで持続します(/var/log/journal/ に保存)。ディスク使用量の制御は --vacuum-time と --vacuum-size です。systemd のシステムでは、journalctl が /var/log/messages を置き換えます。
# view all logs (newest last)
journalctl
# follow logs (like tail -f)
journalctl -f
# today's logs
journalctl --since today
journalctl -u nginx --since today
# specific time range
journalctl --since "2024-01-01" --until "2024-01-02"
journalctl --since "1 hour ago"
journalctl --since "30 min ago"
# logs for a specific service
journalctl -u nginx
journalctl -u nginx -f # follow
journalctl -u nginx --since "1 hour ago"
# logs for current boot
journalctl -b # current boot
journalctl -b -1 # previous boot
journalctl --list-boots # list all boots
# filter by priority
journalctl -p err # errors only
journalctl -p warning # warnings and above
# 0=emerg, 1=alert, 2=crit, 3=err, 4=warning, 5=notice, 6=info, 7=debug
# filter by process
journalctl _PID=1234
journalctl _UID=1000
# show kernel messages only
journalctl -k
# output format
journalctl -o json # JSON format
journalctl -o short-iso # ISO timestamps
journalctl --no-pager # no pager (for scripts)
# clear old logs
sudo journalctl --vacuum-time=7d # keep last 7 days
sudo journalctl --vacuum-size=100M # keep 100MB maxスケジュールタスク(Cron)
crontab の基本
自分のスケジュールタスクの編集は crontab -e です。形式は:分 時 日 月 曜日 コマンドです。* が「毎回」を意味し、*/N が「N ごと」を意味します。cron は最小限の環境で動くため、コマンドとスクリプトには必ず絶対パスを使いましょう。スクリプトは PATH を明示的に設定すべきです。出力はユーザーへメールされます(crontab で MAILTO を設定)か、ログファイルへリダイレクトします。システム全体のタスクは /etc/crontab か /etc/cron.*/ ディレクトリへ。
# edit your crontab
crontab -e
# list your crontab entries
crontab -l
# remove all crontab entries
crontab -r
# edit another user's crontab (requires root)
sudo crontab -u alice -e
sudo crontab -u alice -l
# crontab entry format:
# minute hour day-of-month month day-of-week command
# 0-59 0-23 1-31 1-12 0-6 (0=Sunday)
#
# * * * * * command to execute
# | | | | |
# | | | | +----- day of week (0-7) (0 or 7 is Sunday)
# | | | +------- month (1-12)
# | | +--------- day of month (1-31)
# | +----------- hour (0-23)
# +------------- minute (0-59)
# examples:
# run every day at 2:30 AM
30 2 * * * /home/user/backup.sh
# run every Monday at 9 AM
0 9 * * 1 /home/user/weekly-report.sh
# run every 15 minutes
*/15 * * * * /home/user/check.sh
# run at reboot
@reboot /home/user/startup.sh
# system-wide cron: /etc/crontab
# adds a user column:
# minute hour day month week USER command
*/30 * * * * root /usr/local/bin/check.sh
# cron directories (run all scripts inside)
/etc/cron.daily/ # daily
/etc/cron.hourly/ # hourly
/etc/cron.weekly/ # weekly
/etc/cron.monthly/ # monthlyCron のスケジュール構文
cron は 5 つのフィールドを使います:分(0〜59)、時(0〜23)、日(1〜31)、月(1〜12)、曜日(0〜7、0 と 7 が日曜)。* が毎回を意味し、*/N が N ごとを意味し、カンマが値を区切り、ダッシュが範囲を定義します。曜日と日付の両方が指定されたときは AND ではなく OR です。月末のトリックは、明日が 1 日か確認します。本物のタスクをデプロイする前に、簡単な echo で cron のスケジュールを必ずテストしましょう。
# every minute
* * * * * command
# every 5 minutes
*/5 * * * * command
# every hour at minute 0
0 * * * * command
# every day at midnight
0 0 * * * command
# every day at 2:30 AM
30 2 * * * command
# every Monday at 8 AM
0 8 * * 1 command
# every weekday (Mon-Fri) at 9 AM
0 9 * * 1-5 command
# every weekend (Sat and Sun) at 10 AM
0 10 * * 0,6 command
# every month on the 1st at midnight
0 0 1 * * command
# every quarter (Jan, Apr, Jul, Oct) on the 1st
0 0 1 1,4,7,10 * command
# every 15 minutes during business hours
*/15 9-17 * * 1-5 command
# twice a day (midnight and noon)
0 0,12 * * * command
# every 2 hours
0 */2 * * * command
# last day of month (tricky — use date check)
0 0 28-31 * * [ "$(date +%d -d tomorrow)" = "01" ] && /script.sh
# run on specific date (Jan 1 at midnight)
0 0 1 1 * command特殊な Cron 文字列
特殊な文字列(@daily、@weekly など)が、よくあるスケジュールの省略形です — 5 フィールド形式より読みやすいです。システム起動時に 1 回だけ実行するのは @reboot です。MAILTO が出力のメール送信先を制御します — 無効にするには空に設定しましょう。cron は最小限の環境(限られた PATH、シェルのプロファイルなし)を使うため、PATH を必ず明示的に設定するか絶対パスを使いましょう。出力のリダイレクトは不可欠です — なければ、出力がメールされるか失われます。
# predefined special strings (GNU cron)
@reboot command # run once at startup
@yearly command # once a year: 0 0 1 1 *
@annually command # same as @yearly
@monthly command # once a month: 0 0 1 * *
@weekly command # once a week: 0 0 * * 0
@daily command # once a day: 0 0 * * *
@midnight command # same as @daily
@hourly command # once an hour: 0 * * * *
# examples
@reboot /home/user/startup.sh
@daily /home/user/backup.sh >> /var/log/backup.log 2>&1
@hourly /usr/local/bin/health-check.sh
# set MAILTO for email notifications
MAILTO="[email protected]"
@daily /home/user/report.sh
# disable email (discard output)
MAILTO=""
@daily /home/user/cleanup.sh > /dev/null 2>&1
# environment variables in crontab
PATH=/usr/local/bin:/usr/bin:/bin
SHELL=/bin/bash
HOME=/home/user
@daily /home/user/script.sh
# redirect output to log
@daily /home/user/script.sh >> /home/user/cron.log 2>&1
# log with timestamp
@daily echo "$(date): starting" >> /home/user/cron.log; /home/user/script.sh >> /home/user/cron.log 2>&1
# check cron service is running
systemctl status cron
systemctl status crondanacron
anacron は、常に電源が入っているとは限らないマシン(ノート PC、デスクトップ)向けに設計されています。cron と違い、システム起動時に実行されなかったジョブを実行します。粒度は日次/週次/月次だけをサポートします。すべてのジョブが一度に始まるのを防ぐため、delay フィールドがランダムな待ちを加えます。モダンな代替は systemd タイマーです — cron 風のスケジューリングに対応し、実行されなかったジョブも実行でき(Persistent=true)、journalctl とのロギング統合もあります。
# anacron: run periodic jobs even if system was off
# /etc/anacrontab format:
# period delay job-id command
# 1 5 daily /home/user/daily.sh
# 7 10 weekly /home/user/weekly.sh
# 30 15 monthly /home/user/monthly.sh
# view anacron config
cat /etc/anacrontab
# anacron directories (system-wide)
ls /etc/cron.daily/
ls /etc/cron.weekly/
ls /etc/cron.monthly/
# run anacron manually
sudo anacron -d # run jobs in foreground with debug
sudo anacron -f # force run all jobs
sudo anacron -u # update timestamps only (don't run)
# run a specific job
sudo anacron -j daily # run the 'daily' job
# check when jobs last ran
ls -l /var/spool/anacron/
# difference between cron and anacron:
# cron:
# - requires system to be running at scheduled time
# - minimum resolution: 1 minute
# - per-user crontabs
#
# anacron:
# - catches up missed jobs after downtime
# - minimum resolution: 1 day
# - system-wide only (runs as root)
# - good for laptops/desktops that aren't always on
# systemd timers: modern alternative to cron
systemctl list-timers
sudo systemctl enable --now mytask.timerat — 1 回限りのスケジュールタスク
at が 1 回限りのコマンドをスケジュールします(cron の繰り返しスケジュールとは違い)。時刻は絶対(10:30 AM、midnight)でも相対(now + 30 minutes)でも構いません。保留中のジョブの一覧は atq、削除は atrm です。システム負荷が 0.8 未満のとき(設定可能)に動くのが batch です。at のジョブはユーザーの環境で動きます。atd サービスが必要です。リマインダー、遅延タスク、ログインし続けずにシャットダウンをスケジュールするのに有用です。
# schedule a command for later
echo "backup.sh" | at midnight
echo "shutdown -h now" | at 2am tomorrow
# interactive scheduling
at 2:30 PM
at> /home/user/report.sh
at> Ctrl+D # press Ctrl+D to submit
# schedule relative to now
at now + 30 minutes
at> echo "30 min passed" > /tmp/notice.txt
at> Ctrl+D
at now + 2 hours
at now + 1 day
at now + 1 week
# schedule for a specific time
at 10:30 AM
at 10:30 AM tomorrow
at 10:30 AM 2025-12-25
at 10:30 AM Dec 25
# list pending jobs
atq
at -l
# view a specific job
at -c 5 # show job #5
# remove a job
atrm 5 # remove job #5
at -d 5 # alternative
# batch: run when load is low
batch
at> /home/user/heavy-computation.sh
at> Ctrl+D
# enable atd service
sudo systemctl enable --now atd
# check atd is running
systemctl status atdアーカイブと圧縮
tar — 作成と展開
tar がファイルを単一のアーカイブへまとめます(デフォルトでは圧縮しません)。フラグは覚えやすいです:c=作成、x=展開(eXtract)、t=一覧、f=ファイル、v=詳細。展開先ディレクトリの指定は -C、パターンのスキップは --exclude です。tar はファイルの権限、所有権、タイムスタンプを保持します。信頼できないソースから展開する前に、内容のプレビューは必ず tar -tf で。-f フラグの後にファイル名が続く必要があります。
# create a tar archive (no compression)
tar -cf archive.tar file1.txt file2.txt
tar -cf archive.tar directory/
# extract a tar archive
tar -xf archive.tar
tar -xf archive.tar -C /target/dir/ # extract to specific directory
# list contents without extracting
tar -tf archive.tar
tar -tvf archive.tar # verbose (with details)
# verbose create/extract
tar -cvf archive.tar dir/ # show files being added
tar -xvf archive.tar # show files being extracted
# append files to existing archive
tar -rf archive.tar newfile.txt
# extract specific files
tar -xf archive.tar path/to/file.txt
tar -xf archive.tar "file*.txt"
# exclude files
tar -cf archive.tar dir/ --exclude="*.log"
tar -cf archive.tar dir/ --exclude="node_modules"
# common flags:
# c = create
# x = extract
# t = list
# f = file (specify archive name)
# v = verbose
# r = append
# u = update (only newer files)
# C = change to directory
# preserve permissions (default for root)
tar -cpf archive.tar dir/ # p = preserve permissions
# show what would be done (dry run)
tar -tf archive.tar | head -10圧縮付きの tar
tar はフラグ経由で複数の圧縮アルゴリズムをサポートします:z(gzip)、j(bzip2)、J(xz)、--zstd(zstd)。gzip が標準です(速く、どこでも)。bzip2 はよりよく圧縮しますが遅く、xz が最良の比率ですが最も遅く、zstd がモダンです(最速、良好な比率)。モダンな tar は展開時に圧縮を自動検出するため、どの形式でも -xf が機能します。圧縮レベル(1〜9)が速度とサイズをトレードします。バックアップには、xz か zstd が推奨です。
# tar + gzip (most common, .tar.gz or .tgz)
tar -czf archive.tar.gz dir/ # create
tar -xzf archive.tar.gz # extract
tar -tzf archive.tar.gz # list
# tar + bzip2 (better compression, slower)
tar -cjf archive.tar.bz2 dir/ # create
tar -xjf archive.tar.bz2 # extract
tar -tjf archive.tar.bz2 # list
# tar + xz (best compression, slowest)
tar -cJf archive.tar.xz dir/ # create
tar -xJf archive.tar.xz # extract
tar -tJf archive.tar.xz # list
# tar + zstd (fast + good ratio, modern)
tar --zstd -cf archive.tar.zst dir/ # create
tar --zstd -xf archive.tar.zst # extract
# specify compression level (1-9, default 6)
GZIP=-9 tar -czf archive.tar.gz dir/ # max gzip compression
XZ_OPT=-9e tar -cJf archive.tar.xz dir/ # max xz compression
# compression comparison:
# gzip: fast, medium compression (.tar.gz)
# bzip2: medium, good compression (.tar.bz2)
# xz: slow, best compression (.tar.xz)
# zstd: fastest, good compression (.tar.zst)
# extract: tar auto-detects compression
tar -xf archive.tar.gz # works without -z flag
tar -xf archive.tar.xz # works without -J flag
# compress to stdout (for piping)
tar -cz dir/ | ssh user@host "cat > backup.tar.gz"zip と unzip
zip が Windows で一般的で、広くサポートされています。ディレクトリの再帰は -r、パスワードによる暗号化は -e(対話的に確認します)、パターンの除外は -x、複数パートへの分割は -s です(大きなファイルに有用)。一覧は unzip -l、ディレクトリへの展開は -d、整合性のテストは -t です。tar+gzip と違い、zip は各ファイルを個別に圧縮するため、アーカイブ内のファイルへのランダムアクセスが可能です。クロスプラットフォームの共有には、zip が最も安全な選択です。
# create a zip archive
zip archive.zip file1.txt file2.txt
# zip a directory recursively
zip -r archive.zip directory/
# zip with password (encryption)
zip -e -r archive.zip directory/
zip -P password archive.zip file.txt # password on command line (insecure)
# zip with specific compression level (0-9)
zip -9 -r archive.zip directory/ # maximum compression
# zip excluding files
zip -r archive.zip dir/ -x "*.log" -x "*/node_modules/*"
# split archive into parts
zip -s 100m archive.zip largefile.iso # 100MB parts
# update/add files to existing zip
zip archive.zip newfile.txt
# list contents
unzip -l archive.zip
unzip -v archive.zip # verbose with details
# extract
unzip archive.zip
unzip archive.zip -d /target/dir/
# extract specific files
unzip archive.zip file1.txt
# test archive integrity
unzip -t archive.zip
# extract to stdout
unzip -p archive.zip file.txt
# zipinfo: detailed listing
zipinfo archive.zip
zipinfo -1 archive.zip # just filenamesgzip と gunzip
gzip が単一のファイルを圧縮します(アーカイブではなく — 複数ファイルには tar を使いましょう)。元のファイルを .gz へ置き換えます。残すには -k を使いましょう。stdout への出力は -c です(パイプに有用)。展開せずに圧縮ファイルを読むのは zcat/zless です。gzip は一度に 1 ファイルしか扱えないため、ディレクトリには tar + gzip が標準です。レベル 9 が最小のファイルですが時間がかかり、レベル 1 が最速です。
# compress a single file (replaces original)
gzip file.txt # creates file.txt.gz, removes file.txt
# keep the original file
gzip -k file.txt # keep original
gzip -c file.txt > file.txt.gz # alternative (to stdout)
# set compression level (1-9, default 6)
gzip -1 file.txt # fastest, least compression
gzip -9 file.txt # slowest, best compression
# decompress
gunzip file.txt.gz # creates file.txt, removes .gz
gzip -d file.txt.gz # same as gunzip
gunzip -c file.txt.gz > file.txt # keep original
gunzip -k file.txt.gz # keep original (GNU)
# compress multiple files (each gets its own .gz)
gzip file1.txt file2.txt file3.txt
# recursive (compress all files in directory)
gzip -r directory/
# test integrity
gzip -t file.txt.gz
# list compression info
gzip -l file.txt.gz
# compressed uncompressed ratio uncompressed_name
# 1234 5678 78.3% file.txt
# zcat: view compressed file without extracting
zcat file.txt.gz
zcat file.txt.gz | grep "error"
# zless: pager for compressed files
zless file.txt.gz
# concatenate and decompress
cat file1.txt.gz file2.txt.gz | gunzip > combined.txt
# compress stdin
echo "data" | gzip > data.gz
tar -cf - dir/ | gzip > archive.tar.gzxz と bzip2
bzip2 が gzip よりよく圧縮しますが遅いです。xz(LZMA)が最良の圧縮比率を提供しますが最も遅いです — アーカイブに理想的です。モダンな選択は zstd です:良好な比率で最速の展開です。lz4 は極めて速いですが比率が低いです。ソフトウェアの配布には、xz が推奨です(ダウンロードが最小)。リアルタイムの圧縮には、zstd か lz4 を。展開せずに圧縮ファイルを読む bzcat/xzcat/zcat が — ログ分析に有用です。
# bzip2: better compression than gzip
bzip2 file.txt # compress (replaces original)
bzip2 -k file.txt # keep original
bunzip2 file.txt.bz2 # decompress
bzip2 -d file.txt.bz2 # same as bunzip2
# bzip2 compression level (1-9, default 9)
bzip2 -9 file.txt
# bzcat: view bzip2-compressed file
bzcat file.txt.bz2 | grep "pattern"
# xz: best compression ratio
xz file.txt # compress (replaces original)
xz -k file.txt # keep original
xz -d file.txt.xz # decompress
unxz file.txt.xz # same as xz -d
# xz compression level (0-9, default 6)
xz -9 file.txt # maximum compression
# xz with extreme compression (very slow)
xz -9e file.txt
# xzcat: view xz-compressed file
xzcat file.txt.xz
# zstd: fast modern compressor
zstd file.txt # compress
zstd -d file.txt.zst # decompress
zstd -19 file.txt # max compression
zstd -k file.txt # keep original
# lz4: extremely fast
lz4 file.txt # compress
lz4 -d file.txt.lz4 # decompress
# compare compression ratios
ls -lh file.txt file.txt.gz file.txt.bz2 file.txt.xz
# benchmark compression
time gzip -9 file.txt
time xz -9 file.txtSSH とリモートアクセス
SSH 接続
ssh がリモートマシンへ安全に接続します。非デフォルトポートの指定は -p、秘密鍵の選択は -i です。パスワードなしの認証のため公開鍵をインストールするのが ssh-copy-id です(パスワードよりはるかに安全)。接続問題(鍵の交渉、認証のステップ)の診断には -v が役立ちます。リモート GUI アプリのための X11 転送は -X です。頻繁な接続のため、~/.ssh/config でエイリアスを設定しましょう。
# basic connection
ssh user@hostname
ssh [email protected]
ssh [email protected]
# specify port (default 22)
ssh -p 2222 user@host
# use a specific private key
ssh -i ~/.ssh/id_ed25519 user@host
# run a single command and exit
ssh user@host "uname -a"
ssh user@host "ls -la /var/log"
# verbose (debug connection issues)
ssh -v user@host
ssh -vv user@host # more verbose
ssh -vvv user@host # most verbose
# forward X11 (GUI applications)
ssh -X user@host
ssh -Y user@host # trusted X11 forwarding
# compression (slow connections)
ssh -C user@host
# keep alive
ssh -o ServerAliveInterval=60 user@host
# force SSH version
ssh -1 user@host # SSH protocol 1 (insecure, avoid)
ssh -2 user@host # SSH protocol 2 (default, secure)
# copy SSH key to remote (passwordless login)
ssh-copy-id user@host
ssh-copy-id -i ~/.ssh/id_ed25519.pub user@host
ssh-copy-id -p 2222 user@host
# test connection without running commands
ssh -T user@hostSSH 鍵の管理
Ed25519 の鍵が推奨です(RSA より小さく速く安全)。秘密鍵は chmod 600 でなければ SSH が拒否します。ssh-agent がパスフレーズをメモリへキャッシュし、セッションごとに 1 回タイプすれば済みます。ロードされた鍵の一覧は ssh-add -l です。known_hosts からホストを取り除くのは ssh-keygen -R です(サーバーの再インストール後に有用)。中間者攻撃を防ぐため、ホストの指紋は必ず帯域外で検証しましょう。秘密鍵の共有やコミットは決してしないこと。
# generate an SSH key pair (Ed25519, recommended)
ssh-keygen -t ed25519 -C "[email protected]"
# generate RSA key (4096 bits, if Ed25519 not supported)
ssh-keygen -t rsa -b 4096 -C "[email protected]"
# generate with custom filename
ssh-keygen -t ed25519 -f ~/.ssh/id_server -C "server key"
# generate without passphrase (automated scripts)
ssh-keygen -t ed25519 -N "" -f ~/.ssh/deploy_key
# copy public key to remote server
ssh-copy-id user@host
# view public key
cat ~/.ssh/id_ed25519.pub
# view fingerprint
ssh-keygen -l -f ~/.ssh/id_ed25519.pub
# key files:
# ~/.ssh/id_ed25519 private key (keep secret! chmod 600)
# ~/.ssh/id_ed25519.pub public key (can share)
# authorized_keys on remote server
# add your public key to: ~/.ssh/authorized_keys
cat ~/.ssh/id_ed25519.pub | ssh user@host "mkdir -p ~/.ssh && cat >> ~/.ssh/authorized_keys"
# SSH agent (manages keys in memory)
eval "$(ssh-agent -s)" # start agent
ssh-add ~/.ssh/id_ed25519 # add key to agent
ssh-add -l # list loaded keys
ssh-add -D # remove all keys from agent
# remove or change a key passphrase
ssh-keygen -p -f ~/.ssh/id_ed25519
# verify host key fingerprint (avoid MITM)
ssh-keygen -l -f /etc/ssh/ssh_host_ed25519_key.pub
# known_hosts management
ssh-keygen -R 192.168.1.100 # remove a host entry
ssh-keygen -F 192.168.1.100 # find a host entry
# key permissions (critical!)
chmod 700 ~/.ssh
chmod 600 ~/.ssh/id_ed25519
chmod 644 ~/.ssh/id_ed25519.pubSCP — セキュアコピー
scp が SSH を使い暗号化されたファイル転送を行います。ディレクトリは -r、ポートは -P(大文字!)です(ssh は小文字の -p)。大きい、または頻繁な転送には、scp より rsync を推奨します — rsync が中断された転送を再開し、差分だけを送ります。新しい OpenSSH では、scp は sftp への置き換えが進んでいますが、素早いコピーには依然広く利用可能で簡単です。
# copy local file to remote
scp file.txt user@host:/path/to/dest/
scp file.txt user@host:~/ # home directory
# copy remote file to local
scp user@host:/var/log/syslog ./
scp -r user@host:/var/log /tmp/ # recursive (directory)
# copy between two remote hosts
scp user1@host1:/file user2@host2:/dest
# specify port
scp -P 2222 file.txt user@host:/dest
# preserve attributes (timestamps, perms)
scp -p file.txt user@host:/dest
# compress during transfer
scp -C bigfile.tar user@host:/dest
# limit bandwidth (KB/s)
scp -l 1000 file user@host:/dest # ~1 MB/sSSH の設定ファイル
~/.ssh/config で、ホストのエイリアスを作れます — 多くのフラグを持つ長い ssh コマンドを避けられます。'ssh dev' だけで、正しい設定すべてで接続します。ワイルドカード(*.internal)が一致するホストに適用されます。このファイルは chmod 600 でなければなりません。IdentitiesOnly yes により、SSH が ~/.ssh のすべての鍵を試すのを防ぎます(「too many authentication failures」の原因になり得ます)。これが、最大の SSH の品質改善です。
# ~/.ssh/config - simplify connections
Host dev
HostName dev.example.com
User alice
Port 2222
IdentityFile ~/.ssh/id_dev
Host prod
HostName prod.example.com
User deploy
IdentityFile ~/.ssh/id_deploy
ServerAliveInterval 60
# wildcard: all hosts in a domain
Host *.internal
User admin
ForwardAgent yes
# use: ssh dev (instead of ssh -p 2222 [email protected])
# scp file prod:/tmp/
# common useful options
Host *
ServerAliveInterval 60 # keep connection alive
ServerAliveCountMax 3 # disconnect after 3 missed
AddKeysToAgent yes # auto-add keys to agent
IdentitiesOnly yes # only use specified keysポート転送とトンネル
ポート転送が、SSH の暗号化されたチャネルを通してトラフィックをトンネルします。-L(ローカル)が自分のマシン上でリモートサービスを公開し、-R(リモート)がその逆です(NAT 内のマシンに届くのに有用)。SOCKS プロキシの作成は -D です。シェルなしでバックグラウンド実行は -fN です。踏み台ホストを経由するモダンな方法が ProxyJump(-J)です — ネストした SSH よりはるかにきれいです。内部サービスへの安全なアクセスには不可欠です。
# local forward: access remote service locally
# local:8080 -> remote:80
ssh -L 8080:localhost:80 user@host
# then open http://localhost:8080 in browser
# local forward to a third host via jump server
ssh -L 8080:internal.db:3306 user@jumphost
# remote forward: expose local service to remote
# remote:8080 -> local:80
ssh -R 8080:localhost:80 user@host
# dynamic forward (SOCKS proxy)
ssh -D 1080 user@host
# then configure browser to use SOCKS5 proxy at localhost:1080
# run in background (no command, no terminal)
ssh -fN -L 8080:localhost:80 user@host
# jump host / proxy jump (OpenSSH 7.3+)
ssh -J user@jumphost [email protected]
# or in ~/.ssh/config:
# Host internal
# ProxyJump jumphost
# forward ports in config file
Host db
HostName db.internal
LocalForward 3306 localhost:3306ディスク管理
ブロックデバイスの一覧
ディスクとパーティションの一覧のモダンな方法が lsblk です(閲覧のための fdisk -l を置き換えます)。ファイルシステムのディスク容量は df が示します(-h が人間可読、inode は -i — inode が満杯なら、空き容量があってもファイルが作れません)。ディレクトリのサイズは du が測り、「sort -rh | head」のパターンが容量を消す犯人を見つけます。再帰の深さの制限には du を --max-depth 付きで実行しましょう。
# list block devices (modern, recommended)
lsblk # tree view
lsblk -f # with filesystem info
lsblk -o NAME,SIZE,TYPE,FSTYPE,MOUNTPOINT
lsblk -d # don't print partitions
# old way: list disks and partitions
sudo fdisk -l
sudo fdisk -l /dev/sda # specific disk
# view partition table
sudo parted -l
sudo parted /dev/sda print
# filesystem disk space
df -h # human-readable
df -hT # with filesystem type
df -i # inode usage
df -h / # specific mount
# directory space usage
du -sh /path # summary
du -sh /* # top-level dirs
du -h --max-depth=1 /var # one level deep
du -ah /var | sort -rh | head -10 # 10 largestマウントとアンマウント
mount がファイルシステムを取り付け、umount が取り外します。「target is busy」のときは、使用が終わったときに取り外すため -l(lazy)を使いましょう。起動時にマウントするものを /etc/fstab が定義します — 再起動の前に、編集後は必ず 'mount -a' でテストしましょう!/dev/sdX(再起動で変わり得ます)より UUID= の形式が信頼できます。mount よりきれいなビューを findmnt が与えます。
# mount a filesystem
sudo mount /dev/sdb1 /mnt/data
sudo mount -t ext4 /dev/sdb1 /mnt/data
# mount with options
sudo mount -o ro /dev/sdb1 /mnt/data # read-only
sudo mount -o noexec /dev/sdb1 /mnt/data # no executables
sudo mount -o uid=1000,gid=1000 /dev/sdb1 /mnt # set owner
# mount an ISO image
sudo mount -o loop ubuntu.iso /mnt/iso
# unmount
sudo umount /mnt/data
sudo umount /dev/sdb1
# lazy unmount (busy filesystem)
sudo umount -l /mnt/data
# force unmount
sudo umount -f /mnt/data
# list mounted filesystems
mount | column -t
findmnt # cleaner tree view
# /etc/fstab - persistent mounts
# <device> <mount> <type> <options> <dump> <pass>
# /dev/sdb1 /data ext4 defaults 0 2パーティションの作成とフォーマット
2TB を超えるディスクには GPT(gpt ラベル)を、レガシーのデフォルトは MBR(msdos)です。安全な Linux のデフォルトは ext4 で、RHEL/CentOS では XFS が一般的です。スナップショットと圧縮を提供するのは Btrfs です。mkfs の前にはデバイス名を ALWAYS で再確認しましょう — すべてのデータが破壊されます!ファイルシステムの検査・修復は fsck です(安全のためアンマウントされたファイルシステムで実行)。fdisk と違い、parted は非対話的でスクリプト化可能です。
# interactive partition editor
sudo fdisk /dev/sdb
# m = help, n = new, p = print, d = delete, w = write, q = quit
# GPT partitioning (for disks > 2TB)
sudo parted /dev/sdb mklabel gpt
sudo parted /dev/sdb mkpart primary ext4 0% 100%
# MBR partitioning
sudo parted /dev/sdb mklabel msdos
sudo parted /dev/sdb mkpart primary ext4 1MiB 100%
# format filesystem
sudo mkfs.ext4 /dev/sdb1 # ext4 (Linux default)
sudo mkfs.xfs /dev/sdb1 # XFS (RHEL default)
sudo mkfs.btrfs /dev/sdb1 # Btrfs
sudo mkfs.ntfs /dev/sdb1 # NTFS (Windows)
sudo mkfs.vfat /dev/sdb1 # FAT32
# label a filesystem
sudo e2label /dev/sdb1 mydata # ext4
sudo xfs_admin -L mydata /dev/sdb1 # xfs
# check filesystem for errors
sudo fsck /dev/sdb1
sudo fsck -y /dev/sdb1 # auto-repair論理ボリューム管理(LVM)
LVM が物理ディスクを柔軟な論理ボリュームへ抽象化します。主要な利点:ボリュームをリサイズでき、複数のディスクにまたがれます。階層は PV(物理)→ VG(ボリュームグループ、プール)→ LV(論理ボリューム、フォーマット/マウントするもの)です。ext4 のリサイズはオンラインで可能(resize2fs)で、XFS も(xfs_growfs、拡大のみ)。一貫したバックアップを可能にするのがスナップショットです。RHEL/Fedora の標準が LVM です。
# LVM layers: PV -> VG -> LV
# physical volume (disk/partition)
sudo pvcreate /dev/sdb /dev/sdc
sudo pvdisplay
sudo pvs # summary
# volume group (pool of PVs)
sudo vgcreate myvg /dev/sdb /dev/sdc
sudo vgdisplay
sudo vgs
# logical volume (carved from VG)
sudo lvcreate -L 50G -n mylv myvg
sudo lvcreate -l 100%FREE -n mylv myvg # use all space
sudo lvdisplay
sudo lvs
# use the LV (path: /dev/<vg>/<lv>)
sudo mkfs.ext4 /dev/myvg/mylv
sudo mount /dev/myvg/mylv /mnt/data
# resize LV (ext4)
sudo lvextend -L +10G /dev/myvg/mylv
sudo resize2fs /dev/myvg/mylv # grow filesystem
# resize LV (xfs)
sudo lvextend -L +10G /dev/myvg/mylv
sudo xfs_growfs /mnt/data
# snapshot (point-in-time copy)
sudo lvcreate -L 5G -s -n mysnap /dev/myvg/mylvスワップとメモリ
スワップが、ディスクスペースで物理メモリを拡張します。スワップファイル(fallocate/mkswap で作る)が、スワップパーティションより簡単で、モダンなカーネルでは同等の性能です。カーネルがどれほど積極的にスワップするかは swappiness(0〜100)が制御します — 低い値がより多くを RAM に保ちます(データベースに良い)。手軽なメモリの要約は free -h で、詳細な内訳は /proc/meminfo です。進行中のメモリ/CPU/IO の統計は vmstat 1 が示します。
# show swap usage
swapon --show
free -h
# create a swap file (modern method)
sudo fallocate -l 4G /swapfile
sudo chmod 600 /swapfile
sudo mkswap /swapfile
sudo swapon /swapfile
# make permanent (add to /etc/fstab)
echo '/swapfile none swap sw 0 0' | sudo tee -a /etc/fstab
# remove swap file
sudo swapoff /swapfile
sudo rm /swapfile
# adjust swappiness (0-100, lower = less swap use)
cat /proc/sys/vm/swappiness # default 60
sudo sysctl vm.swappiness=10 # runtime
# permanent: add to /etc/sysctl.conf
# memory info
free -h # summary
cat /proc/meminfo # detailed
vmstat 1 # continuousパイプとリダイレクト
標準ストリームとリダイレクト
すべてのプロセスには 3 つのストリームがあります:stdin(0)、stdout(1)、stderr(2)。stdout のリダイレクトは >(追記は >>)で、stderr は 2> です。stderr を stdout の宛先へ統合するのが 2>&1 で す(順序が重要 — 最後に置く)。>file 2>&1 の Bash ショートカットが &> です。複数行の入力の供給は here-doc(<<EOF)で、区切りを引用符で囲む('EOF')と変数展開が無効になります。出力の破棄のためのブラックホールが /dev/null です。
# three standard streams:
# stdin (0) - input
# stdout (1) - normal output
# stderr (2) - error output
# redirect stdout to file (overwrite)
echo "hello" > file.txt
# append stdout to file
echo "world" >> file.txt
# redirect stderr to file
ls /nonexistent 2> errors.log
# redirect both stdout and stderr
ls / /nonexistent > all.log 2>&1
ls / /nonexistent &> all.log # bash shortcut
# discard output (send to /dev/null)
command > /dev/null 2>&1
# redirect stdin from file
sort < unsorted.txt
wc -l < file.txt
# here-string (feed string to stdin)
grep "error" <<< "some error text"
# here-document (multi-line input)
cat << EOF
Line one
Line two with $HOME expanded
EOF
# quoted here-doc (no expansion)
cat << 'EOF'
$HOME stays literal
EOFパイプとパイプライン
パイプ(|)が、あるコマンドの stdout を別のコマンドの stdin へ結び、強力なパイプラインを構築します。tee が出力をファイルと stdout の両方へ分けます(見ながらロギングに最適)。あるコマンドの出力を一時ファイルとして扱うのが、プロセス置換 <(cmd) です — ファイル引数を期待する diff や comm のようなコマンドには不可欠です。デフォルトでは、パイプラインの終了ステータスが最後のコマンドのものであり、どの段階も失敗したら失敗させるのが set -o pipefail です。
# pipe: connect stdout to stdin
command1 | command2
# count files
ls | wc -l
# find and kill
ps aux | grep nginx | grep -v grep
# filter and sort
cat access.log | grep "404" | sort | uniq -c | sort -rn | head
# chain transformations
cat data.csv | cut -d, -f2 | sort | uniq -c | sort -rn
# tee: write to file AND stdout
command | tee output.log
command | tee -a output.log # append
# pipe stderr too
command 2>&1 | grep error
# pipefail: catch failures in pipeline
set -o pipefail # pipeline fails if any command fails
# process substitution (command as file)
diff <(ls dir1) <(ls dir2)
comm <(sort file1) <(sort file2)
while read line; do echo "$line"; done < <(grep pattern file)xargs と並列実行
xargs が stdin をコマンドの引数へ変換します — find の出力を rm、cp、grep のようなコマンドへパイプするのに不可欠です。スペースや改行を含むファイル名を扱うには、find -print0 には ALWAYS で -0 を付けましょう。引数をコマンドの任意の場所に置けるのは -I {} で、N コマンドの並列実行は -P N です。より強力な代替が GNU parallel です(プログレスバー、リモート実行、リトライ)。テストなしに 'xargs rm' を実行してはいけません — プレビューは -t、確認は -p を。
# xargs: build arguments from stdin
echo "a b c" | xargs mkdir
# one argument per line
find . -name "*.bak" | xargs rm
# handle spaces in filenames (null-delimited)
find . -name "*.log" -print0 | xargs -0 rm
# limit arguments per command
find . -name "*.txt" | xargs -n 1 cp -t /dest/
# show commands before running
find . -name "*.bak" | xargs -t rm
# prompt before each command
find . -name "*.bak" | xargs -p rm
# replace string with argument
find . -name "*.jpg" | xargs -I {} convert {} {}.png
# parallel execution (GNU parallel is more powerful)
find . -name "*.png" | xargs -P 4 -I {} convert {} {}.jpg # 4 parallel
# GNU parallel (if installed)
parallel -j 4 convert {} {.}.jpg ::: *.png
parallel gzip ::: *.logコマンド置換とグループ化
$() がコマンドの出力を取り込みます(バッククォートより推奨 — きれいにネストでき、エスケープが不要です)。現在のシェルでコマンドをグループ化するのが { } です(スペースと最後の ; に注意)。サブシェルで実行するのが ( ) です(cd のような変更は親に影響しません)。短絡演算子が && と || です — 「A && B || C」が三項を模倣しますが、B が失敗し得るならバグを生みます。簡潔な 1 行のために使えますが、堅牢なスクリプトには if/else を推奨します。
# command substitution: use output as argument
files=$(ls *.txt)
today=$(date +%Y-%m-%d)
echo "Today is $today"
# backtick form (legacy, avoid)
files=`ls *.txt`
# arithmetic expansion
result=$(( 5 * 3 ))
count=$(( count + 1 ))
# group commands with { } (runs in current shell)
{ cd /tmp; ls; pwd; } > output.txt
# subshell with ( ) (runs in child process)
(cd /tmp && make clean && make) # doesn't change your cwd
# sequential execution
cmd1 ; cmd2 # run cmd2 regardless of cmd1
cmd1 && cmd2 # run cmd2 only if cmd1 succeeds
cmd1 || cmd2 # run cmd2 only if cmd1 fails
# background
cmd & # run in background
cmd1 & cmd2 & # both in parallel
# conditional pipeline
grep -q "error" log.txt && echo "found" || echo "not found"有用なパイプラインパターン
これらのパターンが、パイプ、リダイレクト、テキストツールを強力な 1 行に組み合わせます。普遍的な出現頻度分析器が「sort | uniq -c | sort -rn | head」のパターンです。標準のログ分析ツールキットが awk + sort + uniq です。ソートされた入力を join/comm へ供給するのが、プロセス置換 <(sort ...) です。tr のパターンの特殊文字は必ず引用符で囲みましょう。これらのパイプラインが、複雑な問題を解決するために小さな道具を組み合わせる Unix の哲学を体現しています。
# top 10 largest files
du -ah . | sort -rh | head -10
# find most frequent log entries
cat access.log | awk '{print $1}' | sort | uniq -c | sort -rn | head
# extract and count HTTP status codes
awk '{print $9}' access.log | sort | uniq -c | sort -rn
# find files modified in last 24h, grouped by size
find . -mtime -1 -type f -exec du -h {} + | sort -rh
# unique IPs that hit /admin
grep "/admin" access.log | awk '{print $1}' | sort -u
# word frequency in a text file
tr -s ' ' '\n' < file.txt | sort | uniq -c | sort -rn | head
# join CSV files on first field
join -t, <(sort -t, -k1 file1.csv) <(sort -t, -k1 file2.csv)
# parallel downloads
cat urls.txt | xargs -n 1 -P 4 wget -q
# find which process uses the most memory
ps aux | sort -nk 4 | tail -5
# count lines matching pattern across files
grep -c "ERROR" *.log | awk -F: '{sum+=$2} END {print sum}'関連する Linux スニペット
Copy-paste ready code for common tasks.
File Operations
Copy, move, link, and search files efficiently.
Permissions & Ownership
Manage read/write/execute bits with chmod and chown.
Process Management
List, signal, and monitor running processes.
Networking
Inspect interfaces, ports, connections, and DNS.
Package Management
Install, update, and search packages on Debian and RHEL.
Text Processing
Filter, transform, and summarize text streams.
Disk Usage
Inspect filesystems, large directories, and inodes.
Users & Groups
Create users, manage groups, and grant sudo access.
Was this helpful?