メモリ不足・スワップの使用量が増えている

監視ツールで「メモリ使用率が高い」と通知が来た、サーバーの動きが急に遅くなった。メモリ不足を疑う場面では、まず「本当に足りないのか」を正しく見極めることが大切です。

どんな症状か

サーバーの応答が極端に遅くなる、プロセスが突然終了する、監視ツールでメモリ使用率やスワップ使用量の警告が出る、といった症状です。ただし、Linuxは空いているメモリをファイルのキャッシュに積極的に使うため、「freeの値が小さい=メモリ不足」とは限りません。

原因を切り分ける

ステップ1:free -h を正しく読む

$ free -h
               total        used        free      shared  buff/cache   available
Mem:           3.8Gi       798Mi       1.1Gi       1.2Mi       1.9Gi       2.9Gi
Swap:          2.0Gi          0B       2.0Gi

注目するのはavailableです。これは、新しいプログラムがスワップを使わずに使えるメモリの見積もりで、buff/cacheのうち手放せる分も含まれます。freeが小さくてもavailableに余裕があれば、メモリ不足ではありません。availableが全体の1割を切り、Swapのusedが増え続けている場合は、本当に不足しています。

ステップ2:メモリを多く使っているプロセスを特定する

$ ps aux --sort=-%mem | head -5
USER         PID %CPU %MEM    VSZ   RSS TTY      STAT START   TIME COMMAND
user        4821 97.8 12.4 797104 496690 ?        R    07:53 183:53 hung_process
root         722  0.0  0.8 1544624 31232 ?        Ssl  Nov13   0:03 /usr/lib/snapd/snapd

RSSが、そのプロセスが実際に使っている物理メモリ(KiB単位)です。VSZは予約しているだけの領域も含むため、大きくても問題とは限りません。topでShift+Mを押すと、メモリ使用量の順に並べ替えて、増え方をリアルタイムで確認できます。

ステップ3:スワップの出入りを確認する

$ vmstat 1 5

si(スワップから読み込み)とso(スワップへ書き出し)の列が、毎秒0より大きい値で続いている場合は、メモリが足りずに頻繁にスワップしている状態(スラッシング)です。スワップの使用量が多くても、si・soが0なら、使われていないデータが退避されているだけで、性能への影響は小さいといえます。

ステップ4:OOM Killerが動いていないか確認する

$ sudo journalctl -k | grep -i -E 'out of memory|oom'
$ sudo dmesg -T | grep -i oom

メモリが尽きると、カーネルのOOM Killerが、メモリを多く使っているプロセスを強制終了します。Out of memory: Killed process 4821 (java)のような記録があれば、プロセスが突然消えた原因はこれです。詳しくは「Killedと表示されてプロセスが終了する原因と対処法」を参照してください。

解決方法

  • 特定のプロセスが使いすぎている場合:
    アプリケーションのメモリ設定(Javaのヒープサイズ、データベースのバッファサイズなど)を見直します。
    時間とともに増え続ける場合は、メモリリークを疑い、開発元に報告します。
  • 全体として足りない場合:
    メモリを増設する(クラウドならインスタンスタイプを変更する)か、同じサーバーで動かすサービスを減らします。
  • 一時的にしのぐ場合:
    スワップを追加すると、OOM Killerによる強制終了は起きにくくなりますが、性能は落ちます。
    根本的な対処までのつなぎと考えます。

再発を防ぐために

監視では「使用率」ではなくavailableの値やスワップの出入りでしきい値を決めると、キャッシュによる誤報を減らせます。sar -rでメモリの使用量の推移を記録しておくと、いつから増え始めたかを後から確認できます。

関連する章:
負荷の調べ方全般は「サーバーが重い・応答が遅い」、リソースの監視は上級「キャパシティプランニングとリソース監視」で扱っています。

この記事の内容を練習できる課題

同じような状況を、ブラウザの練習用ターミナルで再現して試せます。本番のサーバーで慌てないよう、手順を一度なぞっておきましょう。

ほかの課題は、練習問題の一覧から選べます。