ログが肥大化してディスクを圧迫している(logrotate)
ディスク使用率の警告が来たので調べてみると、/var/log が数十GBになっていた。運用監視でよく出会うこのトラブルは、多くの場合、ログのローテーションが働いていないことが原因です。
どんな症状か
ディスク使用率の監視で警告が出る、df -hで/や/varの使用率が高い、アプリケーションのログが1ファイルで数GBになっている、といった症状です。放っておくと、ディスクが満杯になって書き込みができなくなり、サービスが止まります(「ディスクの空き容量がない」)。
原因を切り分ける
ステップ1:どのログが大きいかを調べる
$ sudo du -sh /var/log/* 2>/dev/null | sort -rh | head -n 5
12G /var/log/app
1.8G /var/log/journal
48K /var/log/nginx
40K /var/log/auth.log
24K /var/log/syslog
$ ls -lh /var/log/app
-rw-r--r-- 1 app app 12G Nov 16 10:12 app.log
サイズの大きい順に並べ、どのディレクトリ・ファイルが原因かを特定します。この例では、アプリケーションのログapp.logが1ファイルで12GBになっており、古いログ(app.log.1や.gz)がありません。つまり、ローテーションが一度も行われていないことが分かります。
ステップ2:logrotateの設定があるか確認する
$ ls /etc/logrotate.d/
apt dpkg nginx rsyslog ufw
$ cat /etc/logrotate.d/nginx
/var/log/nginx/*.log {
daily
missingok
rotate 14
compress
delaycompress
notifempty
create 0640 www-data adm
...
}
パッケージで入れたソフトウェアは設定ファイルが用意されていますが、自分で導入したアプリケーションは、設定を書かない限りローテーションされません。この例では、/var/log/appの設定がありません。
ステップ3:設定の動きを、何も変更せずに確かめる
$ sudo logrotate -d /etc/logrotate.d/nginx
rotating pattern: /var/log/nginx/*.log after 1 days (14 rotations)
empty log files are not rotated, old logs are removed
considering log /var/log/nginx/access.log
log does not need rotating (log has been rotated at 2026-11-16 00:00, which is less than a day ago)
-d(デバッグ)を付けると、実際には何も変更せずに、設定の読み込み結果と動きを表示します。設定ファイルの書き間違いや、対象のパスが一致していないことも、ここで分かります。
ステップ4:logrotate自体が定期的に動いているか確認する
$ systemctl list-timers logrotate.timer --no-pager
$ sudo cat /var/lib/logrotate/status | head
Ubuntuではlogrotate.timer(環境によってはcronの/etc/cron.daily/logrotate)で、1日1回実行されます。/var/lib/logrotate/statusには、ファイルごとに最後にローテーションした日時が記録されています。
解決方法
- すぐに空きを作りたい場合:
書き込み中のログをrmで削除すると、プロセスがファイルを開いたままのため、容量が解放されません。sudo truncate -s 0 /var/log/app/app.logのように、中身だけを空にします。
必要であれば、先にgzip -c app.log > app.log.old.gzで退避します。 - ローテーションの設定が無い場合:
/etc/logrotate.d/appを作成し、sudo logrotate -dで確認してから、sudo logrotate -fで一度実行します。 - journaldのログが大きい場合:
sudo journalctl --vacuum-size=500Mで古いログを削除し、/etc/systemd/journald.confのSystemMaxUse=で上限を決めます。
/etc/logrotate.d/app(例)
/var/log/app/*.log {
daily
rotate 14
compress
delaycompress
missingok
notifempty
copytruncate
}
copytruncateは、ログをコピーしてから元のファイルを空にする設定です。アプリケーションにログファイルを開き直させる仕組み(postrotateでのシグナル送信など)が無い場合に使います。
再発を防ぐために
新しいアプリケーションを導入したら、ログの出力先とローテーションの設定をセットで手順書に書くようにしましょう。ディスクの監視は、使用率だけでなく増え方(1日あたりの増加量)も見ておくと、満杯になる前に気付けます。
ログの仕組みは中級「システムログと時刻管理」で扱っています。
この記事の内容を練習できる課題
同じような状況を、ブラウザの練習用ターミナルで再現して試せます。本番のサーバーで慌てないよう、手順を一度なぞっておきましょう。
- ログファイルを手動でローテーションする(運用保守)
- ログファイルを空にしてディスクを解放する(運用保守)
- logrotateの設定を、何も変更せずに確認する(運用保守)
- ディスク使用率のアラートから、容量を使っているファイルを突き止める(運用監視)
- 圧縮された古いログを、展開せずに調べる(中級)
- 複数のログファイルをまとめて圧縮する(上級)
ほかの課題は、練習問題の一覧から選べます。